Embulkを使ってJSONデータをGoogle BigQueryに投入する

Embulkのアウトプット・プラグインであるembulk-output-bigqueryを使って、JSONデータをGoogle BigQueryに投入します。 JSONのサンプルデータを用意。 # emacs /tmp/json_sample.json { "first_name":"John", "last_name":"Lennon", "age":20 } { "first_name":"Paul", "last_name":"Maccartney", "age":22 } Google BigQueryのスキーマファイルを用意。 # emacs /tmp/schema.json [ {"name":"first_name","mode":"REQUIRED","type":"STRING"}, {"name":"last_name","mode":"REQUIRED","type"

[sonots]

embulk-output-bigquery v0.3.x で非互換な変更が入っています。具体的には formatter, encoders が消えています。

[shibacow]

便利だ。

[takeshiyako]

Embulkを触ってみました。#Embulk