kintone データをポイント＆クリック操作でRDB(MySQL) に複製（レプリケーション）を作成

はじめに

本記事では、サイボウズ株式会社が提供している、webデータベース型の業務アプリ構築クラウドサービス kintoneに蓄積されたデータを、CData Sync製品を使ってMySQLやSQLServerなどのRDBにバックアップ＆レプリケーション（複製）を作成する手順をご紹介します。

実現イメージ

本手順では、ポイント＆クリック操作でSaasデータをデータベースに複製を作成するサーバー製品である　CData Software社のCData Syncを使用します。製品の詳細はこちらのページをご覧ください。

前提

本手順で必要な環境が必要となります。

• Windowsマシン、もしくは、Tomcatが動作しているWin/Mac/Linuxマシン
• kintoneのアカウント
• Windowsマシンの場合、管理者権限が付与されており、プログラムのインストールが可能であること
• MySQL、および、WorkBenchが使用可能であること
• Postman (*管理用WebAPIの利用 のみ)

手順

CData Syncのインストール

最新版ビルドは、こちらのURLよりダウンロードください。

• Windows(.NET)版
• Cross-Platform(Java)版

CData Syncは、下記のURLこちらのページからダウンロード可能です。Windows(.NET)版と、Cross-Platform(Java)版が選択可能です。

Windows(.NET)版の場合

Windows(.NET)版には、組み込みWebサーバ機能がビルトインされているのでIISや他のWebアプリケーションサーバの設定は不要です。setup.exeをダウンロードして、ウィザードに従ってインストールしてください。途中、管理者のパスワードの設定が必要となりますので、任意のパスワードを入力してインストーラを完了します。完了すると、Windowsのステータスバーに、CData Data Syncのアイコンが表示され、自動でデフォルトブラウザでCData Syncのログイン画面が起動します。

Cross-Platform(Java)版の場合

Cross-Platform(Java)版の場合は、TomcatなどのJavaのアプリケーションサーバーに配布（デプロイ）することで利用可能です。setup.zipをダウンロードして、中に含まれるdatasync.warをデプロイしてください。Tomcat にWAR ファイルを配布するにはいくつかのオプションがあります。

• Webapps フォルダにWAR ファイルをコピーする。
• Tomcat の管理コンソールの中でWAR ファイルの配布を行う。

Tomcat のドキュメントには、この方法のさらに詳しい説明があります。WAR ファイルがTomcat のファイルアップロードに許可されているデフォルトの最大サイズを超えている可能性があります。デプロイメント中のエラーを解決するために、Manager アプリケーションのWEB.XML ファイルを変更して、より大きなファイルを許可することができます。Tomcat の設定に応じて、このファイルは'/usr/share/tomcat7-admin/manager/WEB-INF'、または別の類似ディレクトリにあります。このファイルでは、許容される最大ファイルサイズをビット単位で変更できます。例えば、200 MB のWAR ファイルのデプロイメントを許容するには、次の値を変更して許容される最大ファイルサイズを変更します。

<multipart-config>
<!-- 200MB max -->
<max-file-size>209715200</max-file-size>
<max-request-size>209715200</max-request-size>
<file-size-threshold>0</file-size-threshold>
</multipart-config>

Tomcat ユーザーにCData Data Sync へのアクセスを許容
本製品 の管理者となる人に、"cdata_admin"ロールをアサインします。Tomcat のデフォルトのユーザーレルムを使用している場合は、CATALINA_BASE/conf/tomcat-users.xml にあるtomcat-user.xml ファイルを編集することで、これらのロールを追加することができます。 次の例では、管理ユーザーは、本製品 への管理アクセスのために必要なロールを与えられています。

<user name="admin" password="admin" roles="cdata_admin,admin-gui,manager-gui,manager-status,manager-script,manager-jmx" />

データディレクトリ権限の設定
Java servlet container を実行するプロセスのユーザーに、データディレクトリへの読み/書きのアクセス権限を許可してください。

• Windows:C:\ProgramData\CData\datasync\
• Unix or Mac OS X: ~/cdata/datasync/
  Tomcat サーバーを再起動して、変更を反映します。 これで本製品にログインできます。任意のURL （例：http://localhost:8080/datasync） にアクセスするとCData Syncのログイン画面が起動します。

CData Sync製品のライセンスアクティベーション

ブラウザでCData Syncのログイン画面を開きます。Windows(.NET)版の場合は、「admin/ (インストーラで指定)」、Cross-Platform(Java)版の場合はtomcat-users.xmlで定義したユーザ情報を使用して、ログインします。

初めてログインすると「情報」タブが開きますので、ライセンスを保有している場合は「新しいライセンスをインストール」をクリックしてライセンスキーを入力してアクティベーションを行ってください。評価版をご利用の場合は「30日間の評価版をアクティベート」をクリックして名前とEメールといった必要情報を入力して使用許諾契約書に同意してアクティベーションを実行します。

cdata.comサーバにアクセス出来ないネットワーク環境の場合は、オフラインでのアクティベーション手順をお伝えしますのでテクニカルサポートまでお問い合わせください。

アクティベーションが完了すると、「ライセンス情報 > プロダクトキー」がセットされます。評価版の場合は、30日間のうちの残り日数を確認することが出来ます。

接続の設定

「CONNECTIONS」タブを開きます。「データソース」タブ内のクラウドアプリケーションからkintoneを選択します。

こちらの画面にない場合は「ここをクリックして」リンクからコネクタを追加することが出来ます。検索ウィンドウで「kintone」と検索してダウンロード＆インストールします。インストール後、ログイン画面に戻ります。

kintoneへの接続情報を設定して、「テスト接続」で成功することを確認出来たら「変更を保存」ボタンをクリックして保存します。

設定項目	設定値
User	kintoneへのログインユーザ
Password	kintoneへのログインパスワード
Url	kintoneのサブドメイン含むサイトURL（例：https://****.cybozu.com）　※https://****.cybozu.com/k/の「/k」は不要

（注意）kintoneのセキュアアクセスやプロキシサーバ経由でkintoneにアクセスしている場合には、別途、Advancedタブでの設定が必要となります。

続いて、同期先のRDBへの接続情報を設定します。レプリケーション先のデータベースを「Destinations」から選択します。今回はMySQLを選択します。

MySQLへの接続情報を設定して、「テスト接続」で成功することを確認出来たら「変更を保存」ボタンをクリックして保存します。

*事前にMySQLのスキーマ（データベース）を作成しておく必要があります。

データソースのkintoneと同期先のMySQLの接続設定が揃いました。

実行ジョブの設定

「ジョブ」タブに移り、「+ジョブを追加...」ボタンをクリックします。

ジョブ名に任意な名前をつけ、ソース：[Kintone]、同期先:[MySQL]を選択し、kintone内のどのテーブル（アプリ）のレプリケーションを作成するかを選択するために「+テーブルを追加」ボタンをクリックします。

kintone内のアプリ（テーブル）の一覧が表示されるので、今回は「営業支援パック」の「顧客管理・案件管理・活動履歴」を選択して「+選択したテーブルを追加」ボタンをクリックします。

「テーブル」タブに上記で追加したアプリ（テーブル）が追加されていることを確認して、右上の「変更を保存」ボタンをクリックしてジョブ定義を保存します。
それでは、ジョブを実行して見ましょう。追加されたテーブルを選択して、「実行」ボタンをクリックします。「The job started runnnning...」というメッセージが表示されて実行されます。

実行が正常に完了すると「The job [job name] has completed.」といったメッセージが表示され、各テーブルのステータス列を見ると追加されたレコード件数が表示されます。

レプリケート先のMySQLの管理コンソール（MySQL Workbench）からアクセスすると、テーブルが作成されていることを確認できます。試しに「顧客管理（営業支援パック）」テーブルのデータをSELECT文で取得して確認してみます。kintone内のデータのレプリカが出来ていることを確認できます。

作成したJobを30分間隔で実行するといったスケジュール実行の設定を行います。設定したら「変更を保存」してください。

kintone側の該当アプリのデータを追加や変更してみてください。本スケジュールされたJobは追加・変更されたレコードのみ処理の対象をするので、スケジュールされたジョブでは、追加・変更されたレコードのみ処理されたことを確認できます。追加・変更がなけば下記のように「Records affected:0」となります。

管理用WebAPIの利用

コネクションの作成やジョブの実行など管理機能で出来る操作は、WebAPIからも利用出来ます。まずはじめに、WebAPIでアクセスする際のアクセストークンを生成します。「設定」タブ > 「Security」タブ > 「ユーザー権限」からAPIアクセスユーザを追加します。生成された認証トークンは後で利用するので手元に控えておいてください。

また、外部マシンからAPIアクセスしてみる場合は、「信頼されたIPアドレス」にアクセスする側のマシンのIPアドレスをセットください。「*（アスタリスク）」を設定するとどのマシンからでもアクセス出来るようになります。

画面上の「ヘルプ（もしくはAPI）」タブを開きます。本画面にAPIのエンドポイントのリストおよびリファレンスが記載されています。例えば、リソース内の「/api.rsc/connections」エンドポイントは、接続コネクションの情報を一覧取得したり、接続コネクションを作成するエンドポイントです。

実際にPostmanなどからAPIを叩くとJSONレスポンスで返ってきます。

「/api.rsc/executejob」をPOSTメソッドでJobを起動することもできます。

文字化け問題

ジョブ設定画面のテーブル名、および、クエリが文字化けする

（発生条件）　Cross-Platform(Java)版でTomcatをご利用の場合
（解決策）　bin配下のcatalina.batの「set JAVA_OPTS=%JAVA_OPTS%」に「Dfile.encoding=UTF-8」を追加してエンコーディングを変更してください。

set JAVA_OPTS=%JAVA_OPTS% -Xms256m -Xmx512m -XX:MaxPermSize=256m -Dfile.encoding=UTF-8

ジョブ実行結果のステータスが??????でエラーが発生してジョブが失敗する

（発生条件）　RDS、macOSのMySQLを使用する場合
（解決策）　MySQLのエンコーディングをUTF8にあわせてください

まとめ

CData Sync製品を利用した、ポイント＆クリック設定だけで、kintoneデータをRDB(MySQL)に複製（レプリケーション）を作成する手順でした。CData社のWebサイトから30日間ご試用いただける無償評価版がございますので是非ご試用ください。