注意事項
本記事の情報は、2021年9月16日時点での情報です。
最新の情報については、Microsft社のドキュメントにてご確認ください。
内容
Azure Synapse AnalyticsにおけるMicrosoft Spark Utilitiesにて、mssparkutils.notebook.run()
によるノートブックの実行数には明確な制約がないそうです。ドキュメント等に明確な記載がないため、今後、変更される可能性があります。
別のAzureサービスであるAzure Databricksにおける同等の機能(dbutils.notebook.run()
)では、ジョブ実行に関する制約が適用されて、1時間当たりの同時実行数の上限が5000であることや同時実行数の上限が1000であることなどの制約があります。
引用元:ジョブ - Azure Databricks | Microsoft Docs
この制約がAzure Synapse AnalyticsとDatabricksの一方が優れているという結論にはならないとは思いますが、開発時には留意しておいた方がよさそうです。