0
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 1 year has passed since last update.

Azure data factoryを利用してスキーマを定義せずコピーする

0
Posted at

スキーマ定義しないメリット
- パラメータパイプラインを利用して異なるスキーマのデータを1つのパイプラインでデータ連携可能

スキーマを定義しないデメリット

  • ソースデータのスキーマ定義の変更に気づけず、後続のデータ加工、データ活用段階に影響をあり

データフロー

  • ソースデータセット、シンクデータセットのスキーマをクリアしたうえで、データセットのソースとシンクにてパラメータをセットする
  • ファイル対ファイルの検証しかしていないが、シンクのマップタブの「自動マッピング」はデータフローでは同名のファイルの更新の場合ファイルの洗い替えとなるため設定しても意味なさそう

コピーアクティビティ

image.png

引用:https://learn.microsoft.com/ja-jp/azure/data-factory/copy-activity-schema-and-type-mapping#schema-mapping

0
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?