オフライン環境にPythonのパッケージをpipで持ち込みたい #pip

◎本番環境はCentOS 6.7
○本番環境へのファイルの持ち込みは可能 (一応やろうと思えば何でもできる。)
△本番環境へ用意されたリポジトリのパッケージは利用可能 (Ansibleを入れるなら少なくとも以下が無いと辛い)
- 開発者ツール(gccやmake等)
- opensslとgmpのライブラリとdevelパッケージ(ヘッダファイル)
- setuptools (pythonでpipより前からあるパッケージ管理システム )
×本番環境はインターネットに繋げない(操作も別端末で行う)
×本番環境はシステム環境を汚してはならない

今回はこんな環境にpipを使ってAnsibleを入れました。
pipを使う理由は、依存関係の解決とそのソースコード一式のダウンロードが出来るので汎用性がありそうだと思ったからです。

長々書いちゃってますが、コマンドを流すだけなら3分ぐらいで出来ます。

必要なものを揃える

以下が必要です。無いと逆に怖いです。

本番環境がLinuxですが、揃えるだけであればWindowsでもOKです。
(今後バージョンが上がるとできなくなるかもしれません。)

Pythonは公式からWindowsのバイナリが出ているので入れましょう。 CentOSはminimal構成でもPython2.xは入ってます。

setuptoolsはネットワークが繋がる環境であれば、https://pypi.python.org/pypi/setuptools にある ez_setup.py をpythonで実行することで簡単に導入できます。

python ez_setup.py

pipを導入するわけですが、まず、http://pip.readthedocs.org/en/stable/installing/ にある get-pip.pyをダウンロードします。

pythonでのパッケージ管理システムのpipのインストールスクリプト
・・・なんですが、これ、pip installで出来ることなら大抵出来るようになっています。
これを使ってAnsibleに必要なものを全て揃えます。

ディレクトリを作り、そこで作業します。

mkdir pip-ansible-installer
cd pip-ansible-installer

get-pip.pyを上記のリンク先のコピペなりcurlなりでダウンロードします。

curl -O https://bootstrap.pypa.io/get-pip.py

次にrequirements.txtというファイルをコマンドを打って作ります。
これは他の言語のパッケージ管理システムでいうGemfileやcpanfileのようなものです。

今回はansibleの最新を入れたいのでansibleとだけ書いておきます。

echo ansible > requirements.txt

もしpythonのあんなパッケージこんなパッケージも入れたい！ってときはここに書いておくといいかもしれません。(ただ、pipもこのタイミングで入るので、別口で入れてもいいと思います。)

なお、setuptoolsとpipは暗黙的に宣言されているので記載は不要です(書くと2重定義で怒られる)

これよりダウンロードの儀に入ります。

もし、プロキシを経由しないと外に出れない場合は、環境変数HTTPS_PROXYの設定をしておきましょう。(https通信をします。)

HTTPS_PROXY=http://proxy:8080/

パッケージのソースを格納するディレクトリを作ったら、いよいよダウンロード開始です。

mkdir .src
python get-pip.py --download .src --requirement requirements.txt --no-binary :all:

--download: インストールではなく指定したディレクトリにパッケージ(orソースコード)をダウンロード
--requirement: 利用するアプリが依存しているパッケージ名を記載したファイルを指定すると、引数指定の代わりになる
--no-binary: :all:でバイナリパッケージではなくソースコードパッケージをダウンロードします。(環境に合わせたバイナリをダウンロードさせないため)

ここまではLinuxでもWindowsでも同じ手順で出来ます。
(うちの仕事場では基本的にWindowsしかインターネットがつながらないので重要...)

Windowsなら右クリックからzipに、Linuxなら以下のコマンドでtar.gzなどに圧縮しておきます。

cd ../
tar czf pip-ansible-installer.tar.gz pip-ansible-installer

少し長くなりましたが、以降はAnsibleを入れたい環境の作業です。ansibleを実行するユーザで実行してください。

Ansibleは一般的なビルドツールのほかに、以下が必要です。

これらはyumなどで入れておきましょう。

sudo yum install -y python-setuptools python-devel openssl-devel gmp gmp-devel

先に上記で作り上げた圧縮ファイルを入れたい環境に持ち込みます。
unzipなり、tar xzfなりで解凍してビルドしていきます。

cd pip-ansible-installer
python get-pip.py --no-index --find-links=.src --requirement requirements.txt --user

以下のような出力が出たら終了です。

Successfully installed ansible jinja2 paramiko pip setuptools-0.9.8 wheel

ansibleのコマンドを実行するのはユーザであると思うので、とりあえず.bash_profileに追記しておきます。自分のシェルに合わせて追加してください。

echo "export PATH=\$HOME/.local/bin:\$PATH" >> "$HOME/.bash_profile"
source "$HOME/.bash_profile"

あとはansible-playbookするなりして世界を変えていきましょう。

なんでこんなしょうもない苦労しないとならないんだ。