AWS ECS on Fargate + FireLens で大きなログが扱いやすくなった話 | BLOG - DeNA Engineering

はじめに コンテナオーケストレーションサービスの一つである AWS ECS on Fargate (以下 ECS on Fargate) では、FireLens を利用することで、コンテナが出力するログを簡単に任意のログ基盤へ送信できます。 しかし、FireLens を通じてコンテナのログをルーティングする場合、16 KB 以上のログは分割された状態でログルーティング用のコンテナに到達します。構造化ログを実現するためにアプリケーションが JSON などの形式でログを出力している場合、ログを分割される前の状態に復元する必要があります。 この記事では、FireLens とは何かをおさらいした上で、上記の問題の背景を解説します。また、この問題の解決策についてこれまで知られてきた方法と、最近の ECS on Fargate のアップデートにより利用できるようになった方法を解説します。それにより、読

[toritori0318]

全然知らんかった / “Docker Docker 1.13 からは Docker ロガーがログを 16KB ごとに分割して送信するように変更されました”

[yigarashi]

力作。とても丁寧でわかりやすい

[jsoizo]

めちゃくちゃわかりやすかった

[wata88]

16KB分割のやつ、いい感じにできるようになったのか

[hatakazu93]

技術