エントリーの編集
エントリーの編集は全ユーザーに共通の機能です。
必ずガイドラインを一読の上ご利用ください。
【2章】実践的データ基盤への処方箋を現場で活かすために|zono
記事へのコメント0件
- 注目コメント
- 新着コメント
このエントリーにコメントしてみましょう。
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
- バナー広告なし
- ミュート機能あり
- ダークモード搭載
関連記事
【2章】実践的データ基盤への処方箋を現場で活かすために|zono
概要「 データ基盤システムの作り方」 第2章ではデータ基盤を開発するために具体的な概念やツールが記載... 概要「 データ基盤システムの作り方」 第2章ではデータ基盤を開発するために具体的な概念やツールが記載されています。この第2章は最も重要な内容になっているので、時間がない方はこの章だけでも読むことをオススメします。 データ収集方法 データフォーマット データ取得時の注意点 ツールの選定方法 などが記載されています。この記事では、本の内容に加えて現場の罠に引っかかった私の経験談も交えて行きます。 第1章は、以下の記事に書いています。 データ基盤の全体像と分散処理の必要性を理解するデータ基盤には基本的な構造構成が存在します。 それが下記の画像のようになります。 引用:実践的データ基盤への処方箋必ずしもこの形になるわけでは無いですが、基本的にはデータレイク、データウェアハウス、データマートの3層構造になります。 この3層構造になる理由は、主にコスト面が考えられますが、分散処理ソフトウェアが簡単に利