LoginSignup
0
2

More than 3 years have passed since last update.

HP Z2 Mini G4に、Ubuntu 20.4をインストールして、Python DockerでDeep Learning環境を作ったメモ

Last updated at Posted at 2020-09-03

HP Z2 Mini G4を手に入れたのでSetUpしたときのメモ

マシン: HP Z2 Mini G4 Workstation
CPU: Intel(R) Xeon(R) E-2224G CPU @ 3.50GHz
RAM: 32GB
GPU: NVIDIA Quadro P600
GPU: インテル® HD グラフィックス P630(CPU内蔵)
OSは:

$ cat /etc/lsb-release
DISTRIB_ID=Ubuntu
DISTRIB_RELEASE=20.04
DISTRIB_CODENAME=focal
DISTRIB_DESCRIPTION="Ubuntu 20.04.1 LTS"

OSインストール

結局、最新版のUbuntu 20.04.1 LTS をインストールしました。
次に、openssh-server, openssh-clientをインストールしました。
このインストール前に、アップグレードしておかないとインストールできません、最新版入れてるのにといつも思います。

$ sudo apt update
$ sudu apt upgrade -y
$ sudo install openssh-server
$ sudo install openssh-client
$ sudo systemctl enable sshd
$ sudo systemctl start sshd

ここから先は、Macから、sshでの作業です。

NVIDIA Driver install

推薦Driver 確認

$ ubuntu-drivers devices
== /sys/devices/pci0000:00/0000:00:01.0/0000:01:00.0 ==
modalias : pci:v000010DEd00001CBCsv0000103Csd00008458bc03sc00i00
vendor   : NVIDIA Corporation
model    : GP107GLM [Quadro P600 Mobile]
driver   : nvidia-driver-435 - distro non-free
driver   : nvidia-driver-440 - distro non-free recommended
driver   : nvidia-driver-390 - distro non-free
driver   : nvidia-driver-440-server - distro non-free
driver   : nvidia-driver-418-server - distro non-free
driver   : xserver-xorg-video-nouveau - distro free builtin

推薦 Driver install これだとCPU内蔵向きが選ばれる

sudo ubuntu-drivers autoinstall

指定 インストール sudo apt install ドライバー名

最近はこれだけで cudaがインストールされる便利になった物だ
1. sudo apt install nvidia-driver-440 インストール
2. nvidia-smi  確認
3. sudo reboot 再起動

 $ sudo apt install nvidia-driver-440

$ nvidia-smi 
Sat Aug 29 16:47:10 2020       
+-----------------------------------------------------------------------------+
| NVIDIA-SMI 440.100      Driver Version: 440.100      CUDA Version: 10.2     |
|-------------------------------+----------------------+----------------------+
| GPU  Name        Persistence-M| Bus-Id        Disp.A | Volatile Uncorr. ECC |
| Fan  Temp  Perf  Pwr:Usage/Cap|         Memory-Usage | GPU-Util  Compute M. |
|===============================+======================+======================|
|   0  Quadro P600         Off  | 00000000:01:00.0 Off |                  N/A |
| N/A   54C    P0    N/A /  N/A |      0MiB /  4032MiB |      2%      Default |
+-------------------------------+----------------------+----------------------+

+-----------------------------------------------------------------------------+
| Processes:                                                       GPU Memory |
|  GPU       PID   Type   Process name                             Usage      |
|=============================================================================|
|  No running processes found                                                 |
+-----------------------------------------------------------------------------+

$ sudo reboot

Docker install & nvidia docke install

これは、最近非常に簡単になった点です。
https://github.com/NVIDIA/nvidia-docker ページを見てください。インストール条件は
- NVIDIA driver
- docker 19.3
上記をインストル済みの場合は、Quick Startが出来ます

手順は:Docker 19.3をインストールしてから、nvidia-docker-toolkitをインストール

A. Docker インストール
  1. docker old versionの削除
  2. curlのインストール
  3. repository の追加
  4. docker GPG keyの追加
  5. docker インストール
  6. docker-composeのインストール
  7. docker-compose installディレクトリの実行権を付加
B. nvidia-container-toolkit インストール
  1. nvidia dockerレポジトリの追加
  2. インストール
docker install 公式ページ
# uninstall old version
$  sudo apt-get remove docker docker-engine docker.io containerd runc

# install use repository
$ sudo apt-get update
$ sudo apt install curl

$ sudo apt-get install \
    apt-transport-https \
    ca-certificates \
    curl \
    gnupg-agent \
    software-properties-common

# Add Docker’s official GPG key:
curl -fsSL https://download.docker.com/linux/ubuntu/gpg | sudo apt-key add -

# Verify
$ sudo apt-key fingerprint 0EBFCD88

$ sudo add-apt-repository \
   "deb [arch=amd64] https://download.docker.com/linux/ubuntu \
   $(lsb_release -cs) \
   stable"

$ sudo apt-get update
$ sudo apt-get install docker-ce docker-ce-cli containerd.io
$ docker --version
Docker version 19.03.12, build 48a66213fe


# docker Compose install
# Run this command to download the current stable release of Docker Compose:
# 次のコマンドを実行して、Docker Composeの現在の安定リリースをダウンロードします。
$ sudo curl -L "https://github.com/docker/compose/releases/download/1.26.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose

# 実行権を付けます
$ sudo chmod +x /usr/local/bin/docker-compose
$ docker-compose --version
docker-compose version 1.26.2, build eefe0d31

nvidia-docker インストール

# Add the package repositories
distribution=$(. /etc/os-release;echo $ID$VERSION_ID)
curl -s -L https://nvidia.github.io/nvidia-docker/gpgkey | sudo apt-key add -
curl -s -L https://nvidia.github.io/nvidia-docker/$distribution/nvidia-docker.list | sudo tee /etc/apt/sources.list.d/nvidia-docker.list

sudo apt-get update && sudo apt-get install -y nvidia-container-toolkit
sudo systemctl restart docker

# test
$ sudo docker run --gpus all nvidia/cuda:10.0-base nvidia-smi

# docker run --gpus all -it --rm -v local_dir:container_dir nvcr.io/nvidia/pytorch:xx.xx-py3
$  docker run --gpus all -it --rm -v local_dir:container_dir nvcr.io/nvidia/pytorch:20.08-py3

nvidia-dockerの確認

$ nvidia-container-cli info
NVRM version:   440.100
CUDA version:   10.2

Device Index:   0
Device Minor:   0
Model:          Quadro P600
Brand:          Quadro
GPU UUID:       GPU-55463dd1-1880-c457-390a-29cd30b1fc80
Bus Location:   00000000:01:00.0
Architecture:   6.1

Python & jupyter のインストール

Pythonは、3.8.3が入っていましたが、pipは入っていませんでしたので、pip3をインストール。
pipでjupyterを入れてみましたが、駄目なので、aptでインストール

$ python3 --version
Python 3.8.2

$ sudo apt install python3-pip

$ pip3 --version
pip 20.0.2 from /usr/lib/python3/dist-packages/pip (python 3.8)

$ pip3 list
Package                 Version
apturl                  0.5.2
bcrypt                  3.1.7
blinker                 1.4
...
wheel                   0.34.2
xkit                    0.0.0

# jupyter install

$ sudo apt  install jupyter-core
$ sudo apt install jupyter-notebook
$ sudo apt install ipython3

jupyter リモート公開設定

パスワードハッシュ値取得
~$ ipython3 
Python 3.8.2 (default, Jul 16 2020, 14:00:26) 
Type 'copyright', 'credits' or 'license' for more information
IPython 7.13.0 -- An enhanced Interactive Python. Type '?' for help.

In [1]: from notebook.auth import passwd                                        

In [2]: passwd()                                                                
Enter password: 
Verify password: 
Out[2]: 'sha1:<ハッシュ値>'

In [3]: exit                                              

試していませんが、いつも、ipythonをインストールしてから行っていましたが、jupyterでも出来る様です
マニュアルによると、https://jupyter-notebook.readthedocs.io/en/stable/public_server.html
Running a notebook serverを読んでみてください

設定file作成
$ mkdir ~/.jupyter
$ vi ~/.jupyter/jupyter_notebook_config.py

c = get_config()
c.IPKernelApp.pylab = 'inline'
c.NotebookApp.ip = '0.0.0.0'
c.NotebookApp.open_browser = False
c.NotebookApp.port = 9999 
c.NotebookApp.password = u'sha1:<ハッシュ値>'

c.NotebookApp.ip = はsubnet mask 指定です
c.NotebookApp.port = アクセスポートです
c.NotebookApp.password = 発行したパスワードハッシュを入れてください

これでブラウザーから Server_address:9999でアクセス出来ます


メモ:sudo apt-get purge nvidia-*

0
2
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
2