タグ

athenaに関するkkotyyのブックマーク (2)

  • S3オブジェクトレベルのログ記録+監視方法 - Qiita

    こんにちは。みやがわです。 こちらは Fusic Advent Calendar 2019 - Qiita 4日目の記事です。 昨日の記事は、@gorogoroyasu による リアルタイムで顔にモザイクをかける - Fusic Tech Blog でした。 機械学習に興味アリの方、是非ごらんあれ。 さて、日はタイトルの通り「AWS S3に対するログ記録+監視方法」について書いてみました。 (自分のようなAWS触りたてホヤホヤな方向けです。) 記事で出来るようになること S3の操作ログを、オブジェクト単位で記録することができます。 どのIAMユーザーがどのオブジェクトをどう操作したのかを記録して、一覧画面で確認できます。 使うサービス IAM (アカウント管理) S3 (ストレージ) CloudTrail (リソースのモニタリング) Amazon Athena (ログ分析)

    S3オブジェクトレベルのログ記録+監視方法 - Qiita
  • Amazon AthenaをBigQueryと比較してみた

    こんにちは、データ分析部の阿部です。 作業中音楽は聞かない派ですが、ホワイトノイズを聞いていると集中できるという噂を聞いたことがあるので少し気になっています。 今回は、re:Invent2016で発表されたばかりのAthenaを紹介します。 Athenaとは データの準備 テーブル作成 速度測定 まとめ Athenaとは 日、AWSのre:Invent中で、RedshiftやEMRに続くビッグデータサービスとして、Athenaというサービスがリリースされました。 Athenaは、S3上のデータ(CSV, JSON, その他フラットファイル)に対して、インタラクティブにSQLを実行することができます。 RedshiftやEMRに比べて、クラスタの構築や運用を必要とせず、シンプルにクエリを実行できるというメリットがあります。 課金形態も、クエリ&読み込んだデータ量に応じて課金という点で、Go

    Amazon AthenaをBigQueryと比較してみた
  • 1