BigQueryで時を遡って過去のテーブルを再構成する - ZOZO TECH BLOG

はじめに こんにちは、データシステム部データ基盤ブロックSREの纐纈です。 本記事では、過去に遡ってBigQueryのデータを参照する方法（以下、タイムトラベルと呼びます）をご紹介します。また、この機能はBigQueryが提供している、変更または削除されたデータにアクセスするタイムトラベルとは異なることをご了承ください。 開発背景 この機能は過去データを日次スナップショットより細かい粒度で見たい、また障害対応時に障害発生前などピンポイントで時間指定して参照したいという要望を受け、開発することになりました。 さらに、BigQueryからこの機能を作るのに役立ちそうなテーブル関数という機能がリリースされたのもきっかけとなりました。 cloud.google.com テーブル関数とは、事前にパラメータを使って定義したクエリをエイリアスのようにテーブルとして保存して、そのテーブルに対して関数を実行

[sashiharajp]

BigQueryのテーブル関数機能を使ったタイムトラベル

[pascal256]

後で読む

[efcl]

Table関数で日付指定

[a-know]

すごい

[masutaka26]

テーブル関数自体を知らなかった。こんなゴッツい機能を作るくらいには、課題がゴッツかったということか。

[sonots]

これスゴいと思うんですよ

[tumo300-500]

ゴツい