コンテナ起動直後はnvidia-smiコマンドが通っていたのに数日放置すると以下のエラーが出てGPUにアクセスできなくなる現象がある。
nvidia-smi
Failed to initialize NVML: Driver/library version mismatch
ネット上の情報を漁ると様々出てくるコンテナ起動時に--privilegedオプションを入れるのが手っ取り早い。
--privileged
$ docker run --gpus all --privileged [コンテナ名]
Register as a new user and use Qiita more conveniently
