fluentdをmacにインストールしてとりあえず使ってみる

gem install fluentd --no-ri --no-rdoc

# $ echo <json> | fluent-cat <tag>
<source>
    type forward
</source>

# http通信
<source>
    type http
    port 8888
</source>

# ファイル
# 例ではapacheのaccess-log
<source>
    type all
    format apache
    path /var/log/httpd-access.log
    tag apache.access
</source>

# デバッグ出力
<source>
    type debug_agent
    port24230
</source>

## tagがapache.accessのときpathにファイル出力
<match apache.access>
    type file
    path /var/log/fluent/access
</match>

## tagがdebug.** (**はワイルドカード??)のとき標準出力
<match debug.**>
    type stdout
</match>

## tagがsystem.**のとき他のサーバに転送
<match system.**>
    type forward
    host 192.168.0.11
    <secondary>
        host 192.168.0.12
    </secondary>
</match>

## tagがmyapp.**のとき他サーバのファイルに保存andファイルに保存(出力先複数)
<match myapp.**>
    type copy
    <store>
        type forward
        host 192.168.0.13
        buffer_type file
        buffer_path /var/log/fluent/myapp-forward
        retry_limit 50
        flush_interval 10s
    </store>
    <store>
        type file
        path /var/log/fluent/myapp
    </store>
</match>

## tagがfluent.**のとく何もしない
<match fluent.**>
    type null
</type>

## マッチしなかったもの(else的な)はgzip圧縮してファイル出力
<match **>
    type file
    path /var/log/fluent/else
    compress gz
</match>

include config.d/*.conf
include http://pokopoko.com/fluent.conf

echo '{"hoge":"fuga"}' | fluent-cat debug.forward

2013-03-20 11:06:03 +0900 debug.forward: {"hoge":"fuga"}

curl http://localhost:8888/debug.http -F 'json={"foo":"bar"}'

2013-03-20 11:07:44 +0900 debug.http: {"foo":"bar"}