More than 1 year has passed since last update.

[Python×Docker×OpenPyXL] Excelファイルを扱うDocker環境構築(Mac)

Last updated at 2022-05-14Posted at 2022-05-14

リポジトリ

投資で仮想通貨の取引を行っている
- 取引記録を取引所からExportしたときに、一つの注文に対してほぼ同時に複数の約定が起こり取引記録が複数に分裂することが多々起こったため、それらの取引履歴を一つにまとめたいと思った
  - 手作業でやるのは流石にしんどいので、Pythonで自動化するか！

って感じです

Python と OpenPyXL によるExcelファイル操作を行うDockerコンテナを作れる
ついでに、VScodeの Remote Containers を使ったローカル環境を一切汚さずデバッグができる環境を作れる
- (別記事にしました https://qiita.com/sawa-akabee/items/0199dac0320203f13d8e)

コンテナ起動(docker run) からのフローは下記となる
- docker run
  ⇒ 環境変数でExcelファイルのパスを渡したコンテナ内でExcelファイルが処理される
  ⇒ 処理終了後、コンテナが自動で破棄される

この挙動により、一度環境を構築してしまえば1コマンドでExcelファイルが処理され、無駄にコンテナが残ることもありません

	バージョン	memo
Python	3.10.4
OpenPyXL	3.0.9	Excel ファイルを Python で扱うためのパッケージ
Docker	20.10.11
Remote Containers	0.234.0	VScode 拡張。コンテナ内で VScode を動作させる(?)。デバッグなどの目的で導入。

$ git clone ~~~

※以降、このcloneしたディレクトリでコマンドを実行するものとしてます

$ docker build --tag py-file-io .

※imageが作成されたことを確認し、image id をコピーしておく

$ docker images -a

REPOSITORY  TAG       IMAGE ID       CREATED             SIZE
py-file-io  latest    8027ef8d5630   About an hour ago   1.03GB

$ docker run -it --rm \
-v $(pwd)/src:/root/src \
-v $(pwd)/input:/root/input \
-v $(pwd)/output:/root/output \
[py-file-ioのimage ID]

オプションについて

--rm
- コンテナがstopされた時にコンテナを破棄するオプション
  - コンテナ起動時にDockerfileのENTRYPOINTにかかれているコマンドが実行され、そのコマンドの処理が終了した時点でコンテナはstopされる
-v
- ボリュームを指定するオプション(ローカル:コンテナ)

(より詳しく)この時何が行われているか？

ボリュームの指定により、ローカルの/src とコンテナ環境の /root/src が共有される(他inputなども同様)
docker run に image IDを渡しているので、そのimageでコンテナが作成される
image作成に使用したDockerfileには
- ENTRYPOINTが指定されてるので、コンテナ作成後ENTRYPOINTのコマンドが起動する
  - ⇒ /root/src/sample.py が Pythonで実行される
  - WORKDIRは /root/src と指定してある
/root/src/sample.py は /root/input 内にあるファイルを1つずつ処理し /root/output に格納していく
/root/src/sample.pyの処理が終わるとコンテナはstopされる
--rm オプションを付けてコンテナを起動していたのでコンテナは破棄される
/root/output はローカルの/outputにマウントされていたので、/root/output に格納されていた出力ファイルはコンテナが破棄されていてもローカルの /output に残っている

今回の/root/src/sample.py の処理は完全に自分用のニッチな処理なので、この環境を使って別の処理を書きたいということがほとんどな気がします。

なので、実際に自分がこの機能を開発したときのデバッグ環境として利用したVScode拡張のRemote Containersの使い方を別記事に書きました！