Attunity Replicate と CData ODBC Driverを使って、MySQLにDynamics 365 Customer Engagement データを複製してみる

はじめに

本記事ではAttunity Replicateを使って、Dynamics 365 Customer Engagement の顧客データ（取引先担当者）を取得し、MySQL に複製する方法を紹介します。

Attunity Replicate とは？

Attunity Replicate とは Attunity社が提供するマルチプラットフォーム対応、高性能データレプリケーションツールです。
以下のようなUIをベースに、簡単な設定で高速なデータベース間レプリケートを実現します。

Attunity Replicateは、データベース、DWH、Hadoopなどの異なるソース/ターゲット間において、高速で簡単なリアルタイム・データ・レプリケーションを可能にするソリューションです。Time-to-Value (価値が生み出される時間)を短縮し、ビジネス・ニーズに最適化したデータ分析処理・分析基盤の構築を支援します。
ビッグデータ時代といわれる今、企業は既存の情報資産を分析し、新たな価値を発見し、新しいビジネスをスタートさせるチャンスと言われています。データレプリケーション製品、Attunity Replicateはそんなデータ分析をスタートさせるための特効薬です。データベースに眠る既存の情報資産をクリック操作だけで、リアルタイムで、データウェアハウスに転送する事ができ、すぐにデータ分析を開始する事が可能です。

今回のシナリオ

今回は前述の通り、Attunity Replicateを使って、Dynamics 365 Customer Engagement から顧客データをMySQLにレプリケートしますが、通常Attunity ReplicateはDynamics 365 for Salesをデータソースとして扱うことはできません。

それはAttunity Replicateがどのように Dynamics 365 API側へリクエストを投げるべきかの判断材料やメタデータの情報が無いためです。

そこで、CData ODBC Dynamics 365 Driverを用いて、このボトルネックを解決します。

まず、Attunity Replicate からはODBCインタフェースでSQL（Select文）をCData Dynamics 365 ODBC Driverに向けて発行してもらいます。そのリクエストを受け取った、CData Dynamics 365 ODBC Driverは、Dynamics 365 の Web API のエンドポイントに対して、SQL文を解釈し、HTTPリクエスト形式に変換して発行します。

リクエスト後、JSONフォーマットで返ってきたデータセットはCData Dynamics 365 ODBC DriverがODBCインタフェースのResultsetに変換して Attunity Replicate に返します。

その後、Attunity Replicate は標準機能で TargetとなるDB、MySQLやSQL Server、MongoDBなどへデータを複製を行います。

必要なもの

1.Attunity Replicate
2.Dynamics 365 Customer Engagement カウント
3.CData Dynamics 365 Driver

実施手順

Attunity Replicateのインストール

CData Dynamics 365 ODBC Driverのインストール

以下のサイトから評価版ビルドをダウンロードします。

• CData Dynamics 365 ODBC Driver

ダウンロードされたインストーラ形式(.exe)のファイルを起動します。
(注)ODBCデータアドミニストレーターを閉じてから実行してください。
(注)途中オンラインでのアクティベーションが実行されるためインターネットアクセス出来る環境で行ってください。

下記のようなインストーラが起動するので、ライセンス契約書を確認した上で、デフォルト設定のままインストールを進めて完了させます。

インストールが完了するとデフォルトブラウザが起動して製品ヘルプファイルが起動します。

また、ODBCのDSN構成ダイアログが表示されます。

（注）ODBCデータソースアドミニストレーターはマシンのビット数（32bit, 64bit）にあった方をご利用ください。

CData Dynamics 365 ODBC Driverの接続設定

ODBCのDSN設定

起動した「ODBCのDSN構成」ダイアログ内の下記の項目に、事前に取得したDynamics 365 の接続情報を設定します。

Dynamics 365 の接続情報	設定項目
組織URL（例えばhttps://test.crm7.dynamics.com）	Organization URL

「接続テスト」ボタンをクリックします。すると下記のようにDynamics 365 APIを利用するためのOAuth認証フローが実行されます。

対象となるユーザー情報でログインし

以下のアクセス許可を承諾してください。

承諾後、以下のように「接続テストに成功しました」と表示されれば、設定完了です。

Attunity Replicate のタスクを作成

それでは、実際に Attunity Replicate を用いて、Replicateの構成を行っていきます。

まず、Attunity Replicate を立ち上げて新しい同期タスクの作成を行います。タスクの作成には、「＋ New Task」をクリックします。

任意のTask Nameを設定し、Task Operationは「Full Load」を選択します。

（ODBC接続の場合はFull Loadを選択する必要があります。）

入力後「OK」をクリックすれば、タスクの作成は完了です。

Endpoint Connection (Souce)の設定

続いて、ODBCへの接続設定を行います。

画面右上の「Manage Endpoint Connections」からAttunity Replicateに登録されている接続情報を管理できる画面へ移動できます。

この画面から、複製元となる「Source」と複製先となる「Target」の接続情報を構成していきます。

まず「Source」を構成します。

「＋ New Endpoint Connection」をクリックすると、新しく接続情報入力画面が表示されるので、任意の名称を入力の上「Role：Source」「Type：ODBC」を選択します。

ODBC選択後、「Browse」のボタンをクリックすると、ODBC DSNの一覧画面に移動できます。

この画面から、先程構成したDynamics 365 ODBC DSNを選択し「OK」をクリックします。

「Test Connection」をクリックし接続が成功すれば、Saveを行って接続先の作成は完了となります。

Endpoint Connection (Target)の設定

続いて、複製先となる「Target」の接続情報を構成します。

本記事ではLocalhostにインストール済みのMySQLを対象とします。

先程と同じように「＋ New Endpoint Connection」をクリックし、任意のNameを入力の上、今度は「Role：Target」を設定し、「Type：MySQL」を選択します。

MySQLのServer・Port・Username：Passwordを入力すると、「Browse」ボタンからデータベースの一覧画面に移動できるようになります。

この画面から複製先の対象となるデータベースを選択し「OK」をクリックします。

「Test Connection」ボタンをクリックし、接続が成功したら「Save」をクリックして、接続先情報の作成は完了となります。

SourceとTargetの接続とマッピングの調整

それぞれの接続情報の作成が完了しましたので、最後にSourceとTargetの紐づけ、同期のマッピング設定を行います。

以下のようにTask画面にて、作成したSourceとTargetの接続情報を適切にドラッグ・アンド・ドロップで配置します。

次に同期先のテーブルを決定するため、画面右上の「Table Selection」をクリックし

スキーマを検索し、テーブル一覧を表示します。

一覧から複製したいテーブルを「Selected Tables/Views」のリストボックスに移動させることで、同期対象のテーブルを決定できます。

次に、同期対象となるカラムを確認します。

同期対象となるカラムはSelected Tablesの一覧の対象テーブルをダブルクリックし

「Transform」タブに移動することで確認できます。この画面で「Output」の一覧に表示されているカラムが同期対象となるカラムです。

任意のカラムを選択し、「OK」をクリックします。

以上で同期タスクの作成は完了です。

実行

それでは実際に同期処理を手動で実行してみます。

手動の実行はTask画面の「Run」をクリックします。

同期処理が開始されると以下のような画面で同期の状況を確認可能です。Complete ゲージが満杯になれば同期完了です。

今回はDynamics 365 Customer Engagement の以下のデータを対象としました。

それが、Attunity Replicateを実行することで、以下のようにMySQLに複製されます。

あとは、MySQLのデータとして利用が可能ですので、DWH的に利用したり、各種プログラムから扱ったりと、通常Dynamics 365 の認証やAPI仕様を把握して、利用しなければいけないところを、そのままMySQLのデータとして利用することができるようになります。

おわりに

今回は Dynamics 365 Customer Engagement のデータを取得してみましたが、CData では Dynamics 365 Customer Engagement 以外にもおよそ100種類ほどの ODBC Driver を提供しています。

ERP・CRM・NoSQLやSNS等、様々なツールからODBC 経由でデータが取得できるので、是非 Attunity Replicate と組み合わせて様々なデータレプリケートに役立ててみてもらえればと思います。