0
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

More than 1 year has passed since last update.

Azure Data Factory - Data Flow の In関数の使い方

Posted at

#はじめに

Azure Data Factory や Azure Synapse Pipeline の Data Flow (GUIとノーコードでデータ加工できるツール)を使ってデータ加工するときのIn関数の使い方がちょっとクセありなので、使い方例を紹介します。

#やりたいこと

列内の複数データを抽出するとか除外するとかSQL文でもよくIn関数使いますよね?
Data Flowの式ビルダーで、SQL同様に
test_data in ('test1', 'test2', 'test3')
と指定したらエラーになりました
あれ?In関数使えないの?って思って別の方法で実装しようとした方もいるのではないでしょうか
筆者もその経験者の1人です

#方法

結論から言いますと、Data Flow の式ビルダーでIn関数は使えます ちょっとクセがあるだけです
test_data in ('test1', 'test2', 'test3')
ではなく、
in (['test1', 'test2', 'test3'], test_data)
と書けばいいみたいです SQLの書き方に慣れていると違和感ありますよね
わかりにくいですが、リファレンスに記載もあります
https://docs.microsoft.com/ja-jp/azure/data-factory/data-flow-expression-functions#in

こちらは実際に使用した例ですが、フィルター(Filter)モジュール等で特定のデータを除外したい場合なんかに使用することもありますね
inの前に!(ビックリマーク)を付けることで、not in (次の値を含まない)の意味になります
Dataflow02_02.PNG

#さいごに

プログラミングやSQLの経験がある方は、どのツールやプログラムでもやりたいことをどう実装すればよいか勘所があると思います
ただしツールやプログラムによって関数式の記述方法は若干クセがあります
そんなときは、各ツールで必ずリファレンスページが用意されていますので、リファレンスページで[Ctrl +F]でページ内検索して探してみて下さい
Dataflow02_03.PNG

#参考

0
0
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
0

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?