気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
techblog.tver.co.jpエントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
記事へのコメント1件
- 注目コメント
- 新着コメント
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
いまの話題をアプリでチェック！
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
GCP版Dataformで冪等性を担保する設計ポイント3つ - TVer Tech Blog
データエンジニアの遠藤です。 TVer Advent Calendar 2023の24日目の記事になります。 はじめに 本年（2... データエンジニアの遠藤です。 TVer Advent Calendar 2023の24日目の記事になります。 はじめに 本年（2023年）、Google Cloudのビッグデータ基盤として展開されるBigQueryでは、データガバナンスツールであるDataformがGA（Generally Avaialble）になりました。 cloud.google.com このDataformの登場により、BigQuery上でデータを利活用しやすいように変換する（データマートを生成する）システムの構築が容易になりました。 本記事では、Dataform上において、定常実行やリトライ実行を容易にするために、冪等性が担保される設計のテクニックを3点紹介します。（Dataformの基本的な使い方については触れませんのでご注意ください） 1. SQLX内のクエリに変数を用いる DataformはSQLXと呼ばれる
ブックマークしたユーザー
すべてのユーザーの
詳細を表示します
詳細を表示します
techblog.tver.co.jp
techblog.tver.co.jp
techblog.tver.co.jp
techblog.tver.co.jp
getnews.jp
biz-journal.jp
anond.hatelabo.jp
smart-flash.jp
zenn.dev/yasuna
jbpress.ismedia.jp
www.tak-dcxi.com
humble-dirigible-66c.notion.site
deepredrose.hatenablog.com
www.nikkansports.com
jp.reuters.com
www5.targma.jp
nordot.app
2024/03/08 リンク