ログをLTSVやJSONで保存した場合のサイズ比較 - stanaka's blog

テクノロジーカテゴリーの変更を依頼記事元:

blog.stanaka.org

26 usersがブックマークコメント

コメント

4

記事へのコメント4件

注目コメント
新着コメント

オーナーコメントを固定しています

オーナー stanaka #ltsv でサイズを気にしているTweetがあったのでJSONも含めて比較しておきました。結論とすれば圧縮すれば誤差の範囲じゃないかと思います。

2013/02/12 リンク

オーナーコメントを固定しています

オーナー stanaka #ltsv でサイズを気にしているTweetがあったのでJSONも含めて比較しておきました。結論とすれば圧縮すれば誤差の範囲じゃないかと思います。

2013/02/12 リンク

kimutansk 既に、Combine Log Formatを使う理由は昔がそうだったから、以外にないんですかねぇ・・・

2013/02/16 リンク

tagomoris stanaka++

2013/02/15 リンク

daema 圧縮したら変わんない // ログをLTSVやJSONで保存した場合のサイズ比較

2013/02/14 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

ログをLTSVやJSONで保存した場合のサイズ比較 - stanaka's blog

追記(2/17) 変換スクリプトを見せてほしい、という要望があったので、 https://gist.github.com/stanaka... 追記(2/17) 変換スクリプトを見せてほしい、という要望があったので、 https://gist.github.com/stanaka/4967403 に上げておきました。ltsvを読み込んでオプションで指定したフォーマット(デフォルト JSON)に変更します。追記ここまで LTSVの盛り上りも収束してきていますが、サイズに関する懸念があがっていたので、確認してみました。手近にあったアクセスログ 186万件ほどを対象に、 ssv .. Combined Log Formatの拡張で、ラベルなし (レスポンス時間とか10個ぐらいのフィールドを拡張しています) json .. ラベルあり ltsv .. ラベルありの3パターンで試してみました。まずは行数を確認しておきます。 % wc -l access_log.json 1861706 access_log.json未圧縮だと、 a

ブックマークしたユーザー

quodius2016/06/01
tacke2016/05/04
yass2013/03/01
mitsu19862013/03/01
ftnk2013/02/17
Watson2013/02/17
UDONCHAN2013/02/17
kadoppe2013/02/17
InoHiro2013/02/16
kimutansk2013/02/16
lEDfm4UE2013/02/16
tell-k2013/02/15
equinox792013/02/15
dai_yamashita2013/02/15
tagomoris2013/02/15
issm2013/02/15
daema2013/02/14
retdaisuke2013/02/14

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

設定を変更しましたx