はじめに

初めてPentaho DI 触ってみて、その勢いでこの記事を書いています。
ド素人なので用語とか色々間違っているかもしれません。

環境

ここからJavaをインストールします。

Note:
Java10では動作しないみたいなので、8をインストールしました

ここのPentaho Community Edition 8.0 > Data Integraton > All OSからZipファイルをダウンロードします。

Zipファイルのダウンロードができたら好きなところに展開します。

展開したディレクトリに移動してSpoonを起動します。

$ cd deta-integration
$ ./spoon.sh

こんなのが立ち上がります。

Note:
起動にはしばらく時間がかかります

実際にDIしてみます。
最近、ネ申Excelぽいのと戦ったので、それに似た要件でやってみます。

この入力から、以下の出力を作ってみます。

つぎに、入力1のオクテットごとに区切られたIPアドレスを１つに結合させます。

変換 > フィールド結合を右のワークスペース的なところにドラッグ＆ドロップします。
フィールド結合のアイコンにカーソルを当てて、左下の入力コネクタを選択します。
入力コネクタをinput1のアイコンに接続させて、ステップのメインインプットを選択します。
フィールド結合のアイコンをダブルクリックして結合方法を記入します。
- ターゲットフィールド名：結合して新しくできるフィールドの名前
- 区切り文字：結合する際の区切り文字（今回はIPアドレスを作りたいので.を指定）
- フィールド：結合したいフィールドを列挙
- アドバンスドタブ > 選択したフィールドを削除する：チェックを入れると結合元のフィールドたちは削除される
ここまでで、こんな状態になります。

つぎに、IPアドレスをキーに入力1と入力2を結合させます。

最後に、結合結果を出力します。

出力 > テキストファイル出力を右のワークスペース的なところにドラッグ＆ドロップします。
テキストファイル出力の入力コネクタをマージ結合に接続させます。
テキストファイル出力のアイコンをダブルクリックして、出力方法を記入します。
- 拡張子：出力ファイルの拡張子（CSVを指定）
- 全般タブ > 区切り文字：フィールドの区切り文字(CSVにするので,)
- フィールドタブ > フィールド名：出力するフィールドの名前

Note:
フィールドタブで出力するフィールドの選択や、フィールドの順序を設定できます

左上の三角ボタンをクリックすると、上で定義したDIが走ります。

できたCSVファイルを確認してみます。

$ cat output.csv
10.0.0.1,ikegami,aaa
10.0.0.2,obata,bbb
10.0.0.3,sakagami,

できた！

Pan でコマンドラインからも実行できました。
-file=の後ろにSpoonで作成した.ktrファイルを指定して実行します。

$ ./pan.sh -file=qiita.ktr

SpoonやらPanやらKitchenやら、それぞれの説明はここをみました。

Spoon(スプーン)…ETLをモデリングするGUIツール。Kettleの中心コンポーネント。