こちらのチュートリアルを実行しながら、最近の新機能をウォークスルーします。
以下のように、ノートブックでデータパイプラインを実装します。なお、新たなセルUIをオンにしています。
DLTパイプラインを作成します。
ここでいきなりパイプラインを実行するのではなく、新機能の検証(Validate)機能を試します。
検証を実行すると、ターゲットテーブルにデータを書き込まずにパイプラインのロジックの検証を行うことができます。
検証がスタートします。
少し待つとパイプラインのグラフ構造が表示されます。
指定したターゲットスキーマにもデータは書き込まれません。実際に処理を実行する前にロジックを確認する開発フェーズでは有用ですね。
ちなみにリストタブも追加されています。気付いてませんでした。パイプラインの各ステップを一覧することができ、フィルタリングも可能です。
パイプラインを実行すると、リストビューでもリアルタイムで進捗を確認できます。
