Kibana向けFluentd設定例①アクセスログ可視化 - ほわいとぼーど

どちらかというとFluentdの設定の話なのですが、 Kibana上でデータを扱うことも考慮して、くらいの感じで。 アクセスログの可視化はよくあるやつなので細かい所は飛ばします。 1段目：ログ収集先からの転送設定 <source> type tail path /path/to/apache_access.log format /(?<message>.*)/ pos_file /var/log/td-agent/apache_access.pos tag apache.access.HOSTNAME </source> <match **> type forward flush_interval 1s <server> host FORWARD_HOST </server> </match>以前の記事ではin_tailにパースを書いていましたが、 パラメータが増減するのに毎回対応したり、

[snaflot]

“Kibanaで表示する内容を考えた結果、 fluent-plugin-record-reformerで途中で加工するのが便利っていう話です。”

[nntsugu]

Splunkにぶっ込む場合もこれでいいよね感ある。