UiPath Orchestrator向けのElasticsearch/Kibanaの構築メモ

イントロ

ググると出てくる、[2018.3対応版]Orchestrator導入ステップバイステップガイド 。コレを使って Orchestrator向けに ElasticSearch/Kibanaを構築したときの覚え書きです。ガイドからは微妙に読み取れなかったところを中心に書いていこうと思います。

ちなみに使用している Orchestratorは2018.4.5です。

2019/12/18現在
上記のリンク切れてますね。2019LTS対応版というのが出たから、なくなったのかな。。。というわけで一応そちらへのリンクを貼っておきます。。
https://www.uipath.com/ja/resources/knowledge-base/orchestrator-installation-guide
前バージョンのヤツなくなるのは困るんですけどね、、。

準備と主要なモノのダウンロード

サーバはWindows Server。今回は AWSの Windows Server 2019¹ を使いました。
またダウンロードについて。「ステップバイステップガイド」の 5.Elasticsearch / Kibana連携 を見ると、、、必要なモノは以下です。

• Java JRE。「Windows Offline (64-bit)」のリンクでよいでしょう。
• Elasticsearch 6.4.2 。「msi (beta)」のリンクからダウンロード。
• Kiabana 6.4.2 。「Windows」のリンクからダウンロード。
• NSSM。NSSMというプロセスをサービス化するツールを。nssm 2.24 でよいかと。

インストール

基本的に「ステップバイステップガイド」の 「5.2 Windows版Elasticsearchのインストールと設定手順」 のとおりでOKでしょう。
Elasticsearchはデフォルトでは下記のディレクトリにインストールされるみたいです。

インストールが完了したのち、ブラウザで http://localhost:9200/ にアクセスして、なにかJSONファイルが落ちてくることを確認しましょう。

ネットワーク設定を変更する

Elasticsearchはデフォルトでは自ノードからの接続しか受け付けないようで、これだとOrchestratorからログを投げられても受信できません。ということでOrchestratorサーバからの接続を受け付けるよう設定を変更します。

具体的には、C:\ProgramData\Elastic\Elasticsearch\config\elasticsearch.yml に、

network.host: 0.0.0.0

を追加し、下記のように Elasticsearchサービスを再起動します。
(これ自体は スタートメニューをおして「ser」などと入れればアシストされると思います)

この設定追加ですが、ガイドにも微妙に書いてあるんですが、、Elasticsearchシロウトには分かりませんorz。。ハマりました。

またWindowsのファイアウォールの設定追加も必要です。具体的には、コントロールパネル >> Windows Defenderファイアウォール >> 左メニューの詳細設定を開き、受信の規則 >> 新しい規則 をクリック。その後、 ポート>特定のローカルポート: 9200 > 接続を許可する、であとは次へ次へでOKかと。名前は適当に9200とか。

以上でOKです。Orchestratorなど他のサーバからも http://[IPアドレス]:9200 で繋がることを確認しておきましょう！

Kibanaのインストール

Kibanaのインストールも基本ガイド通り。「5.3Windows版Kibanaのインストールと設定手順」をみながら実施しましょう。
といってもほぼ書いちゃうけど、

zipファイルを適宜解凍して(C:\ProgramData\kibana-6.4.2-windows-x86_64\に解凍しました)、
Elasticsearchと同様に設定ファイル([インストールディレクトリ]\config\kibana.yml )に下記のリモート接続可の設定を追加

server.host: "0.0.0.0"

そして、ファイアウォールの受信設定(5601を許可)を行い、、、

最後に下記の通りプロンプトからプロセスを起動します。

C:\Users\Administrator> cd %programdata%
C:\ProgramData> cd kibana-6.4.2-windows-x86_64\bin
C:\ProgramData\kibana-6.4.2-windows-x86_64\bin>.\kibana.bat

さて、http://[IPアドレス]:5601/ にアクセスすると

表示されましたー。。

Kibanaをサービス化する

プロンプトで起動したプロセスを、Windowsのサービスとして起動したい場合は、以下の作業を。
起動したKibanaをCtrl-Cで停止。先にダウンロードしておいた nssmというツールを適宜解凍して、そのディレクトリに移動。

そして以下のコマンドを実行します。

C:\ProgramData\nssm-2.24\win64> nssm.exe install "Elasticsearch Kibana" "C:\ProgramData\kibana-6.4.2-windows-x86_64\bin\kibana.bat"
Service "Elasticsearch Kibana" installed successfully!

(インストールしたディレクトリなどは、適宜読み替えてください)
Windowsの「サービス」に表示されるようになったはずなので、サービスから「開始」してみます。

起動出来たら、再度、画面が表示されることを確認しましょう！

あとガイドには「インデックスシャード数」を変更するって作業がありました。適宜やっておきましょう。

Orchestratorからの接続と疎通確認

さて、Elasticsearchが Orchestratorサーバからの接続を受け付けるようになったので、いよいよ Orchestrator から接続してみましょう。
Orchestratorの設定ファイルはC:\Program Files (x86)\UiPath\Orchestrator\Web.config でした。

なのでWeb.configをひらいて

Web.config

<target name="robotElasticBuffer" xsi:type="BufferingWrapper" flushTimeout="5000">
    <target xsi:type="ElasticSearch" name="robotElastic" uri="" requireAuth="false" username="" password="" index="${event-properties:item=indexName}-${date:format=yyyy.MM}" documentType="logEvent" includeAllProperties="true" layout="${message}" excludedProperties="agentSessionId,tenantId,organizationUnitId,indexName"/>
</target>
<target name="serverElasticBuffer" xsi:type="BufferingWrapper" flushTimeout="5000">
    <target xsi:type="ElasticSearch" name="serverElastic" uri="" requireAuth="false" username="" password="" index="serverdiagnostics-${date:format=yyyy.MM}" documentType="logEvent" includeAllProperties="true" layout="${machinename} ${message}"/>
</target>

など空になっている uri属性を

uri="http://172.31.38.10:9200"

などElasticsearchのURLにします。また、もうすこし下の rules 要素について

Web.config

<rules>
  <logger name="Robot.*" final="true" writeTo="database"/>
  ..略
</rules>

と書き込み先がSQL Serverのみとなっているところを

Web.config

<rules>
  <logger name="Robot.*" final="true" writeTo="database,robotElasticBuffer"/>
  ..略
</rules>

として、Elasticsearchにもログを書き込むように設定追加します。

OrchestratorにRDPではいったあと、下記の手順でIISを再起動すれば、

Orchestrator側の設定追加は以上です。

Kibanaの Management>> Index Patterns を見ていると、初めは

となっていたのですが、Orchestratorに接続した Robotでワークフローを実行すると、めぐり巡って Orchestrator上のログがElasticsearchサーバに連携された結果、

などの表示になっていればOKです！！！

Orchestratorからのログを表示するKibanaの設定について

最後にガイドの「5.4 OrchestratorでのElasticsearch接続設定と動作確認」にしたがって、Kibanaの設定を行います。

先のIndex Patternsの画面より index pattern:「default-*」と入力して「Next step」をクリック。

Time Filter field name:「@timestamp」を選んで「Create index pattern」をクリック。

下記の通り、なにやら色々と作成できたみたいですね！左メニューの Discoverに行って、右上から表示期間で「Today」などを選択すると、

たしかにログがElasticsearchまで到達していることが確認出来ました！！！！

おつかれさまでした。

Orchestratorは ロボットがワークフローを実行したときの実行ログをグラフィカルに閲覧する機能がとっても貧弱なので、Elasticsearch/Kibanaはなにかと重宝しそうです。

関連リンク

• [2018.3対応版]Orchestrator導入ステップバイステップガイド (2019/12/18時点リンク切れ)
• Orchestrator導入ステップバイステップガイド(直近版)
• Elastic 公式
• RPA Reporting with ElasticSearch and Kibana - UiPath uipath orchestrator kibana でググったら出てきたPDF。フィルタとかとても参考になる
• Kibanaで簡単! サクサク ビジュアライズしよう！ 時間毎の可視化とか、とても参考になりました
• Kibana Dashboard 実行ログ分析テンプレート ← ナレッジベースにあった。要確認。

1. Windows_Server-2019-English-Full-Base-2019.06.12 (ami-077528626d6f3e504) でした。 ↩