Elastic Stack 5.0.0 rc-1（Elasticsearch+Kibana+Logstash without Beats） #Elasticsearch

ここ最近はエンハンス作業ばかりで、全然モダンなアーキテクチャに触れてこなかった原始人ですが、新規にアーキテクチャを構築する機会がきましたので、流行りのロギングスタイルを体験したいと思います。

Elastic Stack

ロギングサーバなんてほんとに考えたことなかった（原始人）。
Elastic Stackのロギングを体験しましょう。

Elastic StackはElasticsearch+Kibana+Logstash+Beats(MetricBeat、WinlogBeatなど特化したモニタリングパッケージの総称？)で構成されますが、初めてなのでミニマムにいきました。

次のパッケージを使います。

Elasticsearch 5.0.0-rc1
Kibana 5.0.0-rc1
Logstash 5.0.0-rc1

C:\dev\elastic\elasticsearch-5.0.0-rc1
C:\dev\elastic\kibana-5.0.0-rc1-windows-x86
C:\dev\elastic\logstash-5.0.0-rc1

ちなみにOSはWin7 Pro 64bit。全部ローカルホストで行っています。

Elasticsearch

おもむろにダブルクリック

C:\dev\elastic\elasticsearch-5.0.0-rc1\bin\elasticsearch.bat

動いてるっぽい！

Kibana

さりげなくダブルクリック

C:\dev\elastic\kibana-5.0.0-rc1-windows-x86\bin\kibana.bat

http://localhost:5601/をたたくと・・・

でた！
なんか怒られてるけどよくわからん

Logstash

ダブルクリックしちゃうぞ

C:\dev\elastic\logstash-5.0.0-rc1\bin\logstash.bat

コマンドプロンプトがﾁｭﾝｯって落ちたので、調べたオプションでたたく。

bin\logstash -e 'input { stdin { } } output { stdout {} }'

https://www.elastic.co/guide/en/logstash/current/first-event.html

エラーらしきものはでてるけど、とりあえず

Successfully started Logstash API endpoint {:port=>9600}

と出たので動いてる？

Hello Worldと入力してEnter。

レスポンス2016-10-18T07:15:17.175Z FUK064 Hello Worldが返ってきた！

Logstash=>Elasticsearch

ここから！
https://www.elastic.co/guide/en/logstash/current/advanced-pipeline.html#configuring-file-input

Logstashのパイプラインを定義するファイルを書いてみた。
ファイルの置き場所は関係ないかも？

logstash-5.0.0-rc1\config\first-pipeline.conf

input {
  stdin {}
}
output {
  elasticsearch {
    hosts => ["localhost:9200"]
  }
}

ここから！
https://www.elastic.co/guide/en/logstash/current/advanced-pipeline.html#testing-initial-pipeline

設定ファイルがテストできるらしい

bin\logstash -f config\first-pipeline.conf --config.test_and_exit

v2.x以前はオプションが--configtestみたいだけど、v5.xは変わってるっぽい。
bin\logstash --helpで確認できます。

さっきと同じようなエラーが出てるけど、Configuration OKって書いてるからきっといいんだろう！

実行してみる。

bin\logstash -f config\first-pipeline.conf

Hello Logstashと打ってみた。

Elasticsearchのログをみると

増えてますねぇ！

[2016-10-18T16:49:55,135][INFO ][o.e.c.m.MetaDataCreateIndexService] [plCY4gH] [logstash-2016.10.18] creating index, cause [auto(bulk api)], templates [logstash], shards [5]/[1], mappings [_default_]
[2016-10-18T16:49:57,963][INFO ][o.e.c.m.MetaDataMappingService] [plCY4gH] [logstash-2016.10.18/ICgetCtwSg2fOMmDWk8YxA] create_mapping [logs]