エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
SnowflakeにEmbulkでデータをETL(AWS S3編) | ブログ一覧 | DATUM STUDIO株式会社
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
SnowflakeにEmbulkでデータをETL(AWS S3編) | ブログ一覧 | DATUM STUDIO株式会社
はいさーい!ちゅらデータでPHP書いているaipaです。 みなさまEmbulkというOSSはご存知でしょうか。小さ... はいさーい!ちゅらデータでPHP書いているaipaです。 みなさまEmbulkというOSSはご存知でしょうか。小さいデータから巨大なデータまでいろんなデータソースへバルク処理してくれるぱっとみシンプルだけど知れば知るほど多機能なすごいやつです。 今回はEmbulkを使って、AWS S3からSnowflakeへデータを保存するまでの手順を紹介します。Embulkはデータソースごとにpluginが用意されており、OSSで用意されたinとoutのpluginを組み合わせることでETLを簡単に実現することができます。 S3に対応したinput plugin「embulk-input-s3」はすでに知らていると思いますが、なんと!snowflakeに対応したplugin、「embulk-output-snowflake」があります! これなら簡単に試すことが出来ますね!! そんな風に考えてた時期が僕