Shift-JISログファイルを文字化けさせずにNewRelicへ連携する。

概要

• Shif-JISのログファイルを単純に収集すると、NewRelic上では文字化けしてしまいます。
  回避策はいくつかありますが、以下NewRelic社のナレッジを参考に、Flutendを導入する事で連携を行う。
  fluentdを用いたNew RelicプラットフォームへのShift_JISログの連携方法
  

検証環境

• OS:Windows Server 2019
• ログファイル：test.log
  ※Windowsサービスをのステータスを取得するPowershellスクリプトをNewRelic-Flexで実行させたアウトプットのファイル。
• システムロケール：Shift-JIS
  
  
  

方法

1. NewRelicのアカウントからAPIキー（INGEST - LICENSE）を作成し、キーを控えておく。
   ※後のFluentdのコンフィグファイルで使用する。
   

2. Fluentdをインストーラーをダウンロード Download Fluentd
   ※FlutendでもTd-agentでも問題ない。検証環境ではTd-agentを選択

3. Fluentdをインストール
   インストールウィザードの内容はデフォルトで問題なし

4. FluentdにNewRelicのプラグインをインストールする。
   4-1.アプリから「Td-agent Command Prompt]を起動
   
   
   以下コマンドを実行
   ※基本的にはどちらか一方で良い
   fluent-gem install fluent-plugin-newrelic
td-agent-gem install fluent-plugin-newrelic

5. Flutend（td-agent）のコンフィグファイルを設定する。
   ※td-agentの場合：デフォルトパス
   C:\opt\td-agent\etc\td-agent\td-agent.conf
   →基本的な設定値はNewRelic社のナレッジを参考 ログフォワーディングのためのFluentdプラグイン
   以下、今回の検証環境における設定
   5-1.収集するログファイルを指定し、文字コードのエンコーディングを記述する
   
   
   5-2.filterに前述のタグ名を付与
   
   
   5-3.手順1で取得したNewrelicのライセンスキーを指定する。
   
   
   5-4.上記設定後、コンフィグファイルを保存

6. Fluentd(td-agent)のサービスを再起動する。
   

結果

*以下のようにFluentdで収集したログがAPMServiceとして認識され、且つログファイルの内容が文字化けせずに出力される
※[plugin.type]もFluentd

補足

• システムロケールの設定で「ベータ：ワールドワイド言語サポートでUnicode UTF-8を使用」にチェックを入れると、Fluentd未導入でもShift-JISの文字化けが防げる。
  ※変更する場合はOS再起動が必要のため要注意。またベータ版機能である点と他アプリなどへの影響範囲などは十分に確認する必要有