タグ

関連タグで絞り込む (1)

タグの絞り込みを解除

glueに関するtgkのブックマーク (1)

  • 月18万円!AWS Glueの開発エンドポイントで破産しないために - Qiita

    Glueの開発エンドポイントとは AWS Glueはデータレイクやビッグデータ系の複数の機能を持ったサービスですが、その主な機能の一つに、サーバレスのSparkとして使えるETLジョブ機能があります。 AWS Glueの開発エンドポイントはこのETLジョブの開発を行うための仕組みです。 GlueのETLジョブはサーバーレスで実行されるSparkなので、ETLスクリプトを投入すればジョブを実行はしてくれるのですが、OSにログオンしたり、デバッグをしながら開発することができません。 開発エンドポイントがあると、Jupyter NotebookやZeppelinでGlueの管理しているSparkにアクセスしてインタラクティブにコードを実行しながら、開発を進めることができます。 図の引用元: https://www.slideshare.net/AmazonWebServicesJapan/aws

    月18万円!AWS Glueの開発エンドポイントで破産しないために - Qiita
    tgk
    tgk 2020/11/17
    「Glueの開発エンドポイントに接続する方法としてデフォルトではSageMakerが利用されます」「SageMakerを使わずに、既存のEC2インスタンスからGlueの開発エンドポイントに接続する方法もあります」
  • 1