ブックマーク / note.com/mercari_data (1)

  • BigQuery や Google Workspace のログを使って分析環境を管理する|Mercari Analytics Blog

    BI Product チームの野です。 メルカリでは Google BigQuery 監査ログと Google Workspace ログイベントを BigQuery にエクスポートして、データ分析環境の管理に活用しています。アクセス履歴を詳細に調べられる BigQuery 監査ログは、分析環境のコスト最適化やテーブルの変更時の影響範囲調査などの管理業務にとても便利です。 BigQuery の利用が増えてくると、過剰に高頻度なクエリジョブや、使われずに放置されたテーブルなどにかかる無駄なコストも増大していきます。これらの使われていないジョブやテーブルを抽出し削減することで、BigQuery の計算やデータの保管にかかるコストを削減することができます。 メルカリでは、BigQuery 監査ログ、Google Workspace ログイベントを活用して、分析環境の管理業務に役立てていますので、

    BigQuery や Google Workspace のログを使って分析環境を管理する|Mercari Analytics Blog
    tnktshyk
    tnktshyk 2023/09/06
  • 1