2
1

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?

Databricksクラスターログをボリュームに出力できるようになりました

Last updated at Posted at 2025-03-14

これも地味に嬉しいアップデート。これまではS3とDBFSにしか出力できなかったので、出力されたログの確認が若干面倒でした。

コンピュートログがボリュームにデリバリーされるようになりました(パブリックプレビュー)

コンピュートリソースのドライバー、ワーカーおよびイベントのログをボリュームにデリバリーさせることができるようになりました。コンピュートログのデリバリーをご覧ください。

クラスターの設定画面のAdvancedロギングにアクセスします。配信先にボリュームが追加されています。

Screenshot 2025-03-15 at 7.51.53.png

ボリュームのパスを指定します。

Screenshot 2025-03-15 at 7.52.40.png

クラスターを起動して少し待つと、ボリュームにフォルダが作成されます。クラスターIDのフォルダの下にはドライバーノードやイベントログが格納されています。

Screenshot 2025-03-15 at 8.11.21.png

Screenshot 2025-03-15 at 8.05.05.png

拡張子がlogのものであればプレビューも可能です。

Screenshot 2025-03-15 at 8.06.05.png

はじめてのDatabricks

はじめてのDatabricks

Databricks無料トライアル

Databricks無料トライアル

2
1
1

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
2
1

Delete article

Deleted articles cannot be recovered.

Draft of this article would be also deleted.

Are you sure you want to delete this article?