障害概要
SageMakerのノートブックインスタンス上でimport文を実行すると、失敗する。
発生原因
エラーメッセージを見ると、No space left on deviceという文字がある。
df -fを実行したところ確かに使用しているファイルシステムの利用率が100%だった。
対応内容
削除しても問題なさそうなファイルを消しても、400kbしか容量を確保できなかった。
なので、notbookインスタンスのボリュームサイズを5GBから15GBに変更する。
メモ
- Inodeの枯渇が原因で容量が十分にあっても
No space left on deviceが出ることがある。 - /tmp/ディレクトリで10GBまでファイルを保存できるが、一時ディレクトリなのでファイルの永続性はない。
- /home/ec2-user/SageMaker/では、ノートブックインスタンスを停止してもファイルは残る。
参考リンク
No space left on deviceについて
https://tackeyy.com/blog/posts/process-of-solving-disc-full-on-ubuntu-server