Export and import Databricks notebooks | Databricks on AWS [2022/11/30時点]の翻訳です。
本書は抄訳であり内容の正確性を保証するものではありません。正確な内容に関しては原文を参照ください。
Databricksでは、以下のフォーマットでノートブックをインポート、エクスポートすることができます。
- ソースファイル: 拡張子
.scala、.py、.sql、.rであるソースコードのみを含むファイル。 - HTML: 拡張子
.htmlのDatabricksノートブック。 - Databricks
.dbcアーカイブ - IPythonノートブック: 拡張子
.ipynbのJupyter notebook。 - RMarkdown: 拡張子
.RmdのR Markdown document。
ノートブックのインポート
URLあるいはファイルから外部ノートブックをインポートすることができます。また、DatabricksワークスペースからバルクでエクスポートされたノートブックのZIPアーカイブをインポートすることもできます。
- サイドバーの
Workspaceをクリックします。以下のいずれかを実行します。
- 任意のフォルダーの右側にある
をクリックしImportを選択します。 - ワークスペースやユーザーフォルダで
をクリックしImportを選択します。
- 任意のフォルダーの右側にある
- URLあるいはサポートされている外部フォーマット、DatabricksワークスペースからエクスポートされたZIPアーカイブを含むファイルを選択します。
-
Importをクリックします。
- 一つのノートブックを選択した場合には、現在のフォルダにインポートされます。
- DBCやZIPアーカイブを選択した場合、現在のフォルダにフォルダ構成が再作成され、それぞれのノートブックがインポートされます。
ファイルをインポートしてノートブックに変換
ファイルの最初のセルにコメントを追加することでPython、SQL、Scala、Rスクリプトを単一セルのノートブックに変換することができます。
Python
# Databricks notebook source
SQL
-- Databricks notebook source
Scala
// Databricks notebook source
R
# Databricks notebook source
スクリプトでセルを定義するには、以下に示す特殊なコメントを使用します。Databricksにスクリプトをインポートすると、COMMANDのラインでマークされた内容でセルが生成されます。
Python
# COMMAND ----------
SQL
-- COMMAND ----------
Scala
// COMMAND ----------
R
# COMMAND ----------
ノートブックのエクスポート
ノートブックツールバーでFile > Exportを選択し、エクスポートのフォーマットを選択します。
注意
HTML、IPythonノートブック(.ipynb)、アーカイブ(DBC)としてノートブックをエクスポートし、コマンド出力をクリアしていない場合、エクスポートに出力が含まれます。
フォルダの全てのノートブックをエクスポート
注意
HTML、IPythonノートブック(.ipynb)、アーカイブ(DBC)としてノートブックをエクスポートし、コマンド出力をクリアしていない場合、エクスポートに出力が含まれます。
ワークスペースフォルダの全てのフォルダをZIPアーカイブでエクスポートするには:
- サイドバーのWorkspaceをクリックします。以下のいずれかを実行します。
- 任意のフォルダーの右側にあるをクリックしExportを選択します。
- ワークスペースやユーザーフォルダでをクリックしExportを選択します。
- 任意のフォルダーの右側にある
- エクスポートのフォーマットを選択します:
- DBCアーカイブ: メタデータとノートブックコマンドの出力を含むバイナリーフォーマットであるDatabricksアーカイブをエクスポートします。
- ソースファイル: Databricksワークスペースにインポートでき、CI/CDパイプラインで使用でき、それぞれのノートブックのデフォルト言語でソースファイルを参照できるノートブックソースファイルのZIPアーカイブをエクスポートします。ノートブックのコマンドアウトプットは含まれません。
- HTMLアーカイブ: HTMLファイルのZIPアーカイブをエクスポートします。それぞれのノートブックHTMLファイルはDatabricksワークスペースにインポートすることができ、HTMLとして参照することができます。ノートブックのコマンドアウトプットは含まれます。