背景
参考情報
今回のシナリオ
パラメーターが渡る流れ
事前に押さえておくポイント
- 1. list / dict はそのまま渡さない
- 2. JSON 文字列の形式に注意する
- 3. Notebook の Parameter cell でも文字列として定義する
今回作成する Notebook パラメーター
手順
1. Notebook の Parameter cell を作成する
2. サンプルデータを作成する
3. パターン 1：JSON 文字列を list に変換して isin() で使う
4. パターン 2：数値リストを使って isin() でフィルターする
5. パターン 3：カンマ区切り文字列を list に変換して使う
6. パターン 4：複数条件を JSON で渡す
7. isin() 以外に使える条件指定の例
- 7.1 contains() で部分一致する
- 7.2 startswith() で前方一致する
- 7.3 between() で範囲指定する
- 7.4 when() で分岐列を作る
8. 実際の Lakehouse Table に適用する場合
Pipeline 側の設定
1. Pipeline パラメーターを作成する
2. Notebook Activity のベースパラメーターを設定する
3. 複数条件 JSON の設定例
実行確認
よくあるハマりどころ
1. JSON の形式が正しくない
2. Notebook 側で json.loads() していない
3. Parameter cell にしていない
4. パラメーター名が一致していない
5. 数値列に文字列リストを渡している
6. 空リストを渡したときの挙動を決めていない
7. カンマ区切り文字列で値自体にカンマが含まれる
まとめ
Disclaimer