More than 5 years have passed since last update.

fluentd -> elasticsearchにlogstash形式でつっこむとき、indexを固定する方法

Last updated at 2014-05-21Posted at 2014-05-21

問題点

fluentdからlogstash形式でelasticsearchに突っ込むとindexが毎日生成される。

tarr_index.2014.05.21

apacheのログだとか、大量のものを毎日別indexに入れたいとかだったら、問題ないと思うが、特定のdirectoryの容量の増加傾向をトラッキングしたいみたいな感じで、一日一回du -sをしてjsonで出すみたいなのだと、毎日indexがわかれるのは辛い。

tarr_index.2014.05.21の日付部分をなくしたい。

いろいろ調査しても、よくわからなかった。index_nameってやつつければいいのかなと思ったけど違った。

結局、ここに書いてあったやり方で、
2014年1月12日 => logstash-2014.W02
logstash_dateformat %Y
これを付け加えて、一年間は同じindexを使うように設定した。

誰かtarr_index.2014.05.21 -> tarr_indexのやり方知ってたら教えて下さい。