構造化ログのフォーマット logfmt vs JSON lines - methaneのブログ

構造化ログのプラクティスをあちこちで調べていたら、logfmtを推奨する記事を見つけたので調べてみました。 先に結論を言うと、JSON linesを使っておくのが良さそうです。 logfmt について logfmtとはスペース区切りで key=value を並べたフォーマットです。文字列にはクォートとエスケープによってスペースや改行を含められます。 at=info method=GET path=/ host=mutelight.org fwd="124.133.52.161" dyno=web.2 connect=4ms service=8ms status=200 bytes=1653 (logfmt から引用) あちこちで logfmt のリファレンスとして紹介されているのはこの記事です。 https://brandur.org/logfmt 発明されたのはどこか分かりませんが、流行

[nikkie-ftnext]

「先に結論を言うと、JSON linesを使っておくのが良さそうです。」

[Windymelt]

ログとしてなら、ファーストチョイスはJSON Linesでいいと思う。コンポーネント間の通信だったり速度的な要件があるのであればCBORを使うのも手だと思う（MessagePackと違って無限リストを表現できるので）

[dot96gal]

“造化ログを外部サービスに送る前提で使う場合は、最初からJSONを使っておいた方が良いと思います。”

[misshiki]

“logfmtとはスペース区切りで key=value を並べたフォーマットです。文字列にはクォートとエスケープによってスペースや改行を含められます。”

[gfx]

"logfmtには信頼できる仕様がないため、あちこちのシリアライザとパーサーに互換性があるか信頼できません"

[u_tis]

ltsv...？

[xlc]

皆何のためにログを出しているのだろう？

[mumei-0]

“先に結論を言うと、JSON linesを使っておくのが良さそうです。”

[wata_d]

一世を風靡した(?)LTSVは使われていないのだろうかと思ったけどコメント欄には結構出ていますね

[strawberryhunter]

1行のJSONは見ずらいし、容量が増えるのでやめた。grepすると表っぽく見えるように準固定長にしてる。機械処理するなら何らかのフォーマットにしたがう必要はあると思うが、JSONは悩ましい。

[pmakino]

LTSVと似てる?

[NetPenguin]

それなりに使われている？のに、明確な仕様が無いって、CSVみたいだなw

[kazeburo]

ltsvだな

[Fluss_kawa]

別にjsonでいいけどなんか、jsonパーサー使うと重くなりそうでltsvの方が好み

[zentarou]

やっぱNDJSONっしょ

[sonots]

> 先に結論を言うと、JSON linesを使っておくのが良さそうです。

[hasiduki]

ltsvだよね！！！！！！

[bopperjp]

LTSV との違いがわかんねー。

[peketamin]

“先に結論を言うと、JSON linesを使っておくのが良さそうです。”