Databricks WorkspaceとGitHubを連携してDatabricks Appsにデプロイする

はじめに

Databricks WorkspaceとGitHubを連携させることで、ソースコード管理の効率化を図ることができます。
本記事では、その設定手順とDatabricks Appsにデプロイする方法について解説します。

前段

• Azure DatabricksでDatabricks Appsを検証するための環境構築
• Databricks Apps でカスタムアプリのデプロイ
• FastAPIにSPAアプリケーションを統合する
• Databricks AppsにSPAアプリを含めたカスタムアプリを作成する

GitHub連携の設定手順

※Github アクセストークンは発行済みの前提です。

1. Databricks Workspace画面から、作成 -> Gitフォルダを選択します
   

2. GitリポジトリのURL、Gitプロバイダー、Gitフォルダ名を入力し、Gitフォルダの作成ボタンを押下します

   • Github以外にもGitLabやBitbucketなどのGitプロバイダーに対応しています。リンク
     

3. 今回はパーソナルアクセストークンの方式で認証するため、パーソナルアクセストークンを選択し、Githubユーザ名とアクセストークンを入力します
   

4. WoekspaceにGitフォルダがチェックアウトされていることを確認します
   

※ Databricks AppsにSPAアプリを含めたカスタムアプリを作成する で作成したカスタムアプリをチェックアウトしています

Databricks Appsにデプロイする

1. 更新前のAPIレスポンスを確認します

   

2. ソースコードを修正して、コミット、GitHubにプッシュします

   

3. Gitフォルダのリポジトリページから、pull, 確認ボタンを押下し、Databricks Workspaceにチェックアウトされているソースコードを更新します
   
   

4. --source-code-pathをGitフォルダのパスに変更して、デプロイを行います

   cd ./backend
   databricks apps deploy --app-name <app_name>  --source-code-path /Workspace/Users/<username>/<repo_name>/...
   

5. デプロイが完了したら、Databricks Appsのページから払い出されたURLから更新後のAPIレスポンスを確認します

   

まとめ

ソースコード管理の効率化のため、Databricks WorkspaceとGitHubを連携させることができました。
また、連携されたGitフォルダを利用して、Databricks Appsにデプロイすることができました。

参考

• Databricks Git フォルダーの Git 統合