takemのブックマーク - はてなブックマーク

cookpad storeTV の広告配信を支えるリアルタイムログ集計基盤 - クックパッド開発者ブログ

こんにちは。メディアプロダクト開発部の我妻謙樹（id:kenju）です。サーバーサイドエンジニアとして、広告配信システムの開発・運用を担当しています。今回は、cookpad storeTV （以下略：storeTV ）の広告商品における、リアルタイムログ集計基盤の紹介をします。 storeTV における広告開発 storeTV とは？ storeTV は、スーパーで料理動画を流すサービスで、店頭に独自の Android 端末を設置し、その売り場に適したレシピ動画を再生するサービスです。より詳しいサービス概要にについては、弊社メンバーの Cookpad TechConf 2018 における以下の発表スライドを御覧ください。 storeTV における広告商品の概要 storeTV では、imp 保証型の広告商品を提供予定です。imp 保証型の広告商品とは、例えば「週に N 回広告を表示す

takem 2018/10/18

リンク

S3に保存したログファイルをストリーム処理するサーバーレスアプリケーションの紹介 - クックパッド開発者ブログ

インフラストラクチャー部セキュリティグループの水谷(@m_mizutani)です。クックパッドでは現在セキュリティ監視の高度化に取り組んでおり、その一環としてセキュリティ関連のログ収集およびその分析に力を入れています。ログ収集の部分では可用性などの観点からAWSのオブジェクトストレージサービスであるS3に一部のサービスやサーバのログをまず保存し、後から保存されたファイルを読み込んで分析などに利用しています。分析のためにS3に保存したファイルを前処理する方法としてAWS Glueなどを用いたバッチ処理がありますが、到着したログをなるべくストリームデータのように扱いたい場合もあります。特にセキュリティ関連のログでは以下のようなユースケースで利用しています。アラートの検出: ログを検査してその中から危険度の高いと考えられるログを探し出し、アラートとして発報します。アラートの具体的な例としては

takem 2018/05/03

リンク

良い感じにログを収集するライブラリ、Puree-Swiftをリリースしました - クックパッド開発者ブログ

こんにちは。技術部モバイル基盤グループの三木(@giginet)です。クックパッドでは、Pureeと呼ばれるiOS/Android/ReactNative向けのログ収集ライブラリを公開しています。モバイルアプリのログ収集ライブラリ「Puree」をリリースしました - クックパッド開発者ブログログ収集ライブラリ Puree の iOS 版をリリースしました - クックパッド開発者ブログ最近、以前開発されていたPureeをpure Swiftで書き換え、OSSとして公開しました。この記事では、新しくなったPureeをご紹介します。概要クックパッドでは全社的にAmazon Redshiftを中心としたデータ活用基盤を構築しています。クックパッドのデータ活用基盤 - クックパッド開発者ブログこの仕組みを使い、公開している多くのモバイルアプリからも、1つのログ基盤にさまざまなログを