More than 5 years have passed since last update.

aws の ec2(amazon linux 2017.09.1) にて nginx + php-fpm(7.1) のメモリ使用率が徐々に増えていく現象に出くわした, Ansible で行った対策のメモ

Posted at 2017-11-16

aws の ec2 にて、 nginx + php-fpm(7.1) の環境を構築したらメモリ使用率が徐々に上昇していく現象に出くわした。

で、対応したので、そのメモ。

生じた環境

原因は http://s-tajima.hateblo.jp/entry/2015/02/20/233615 にとても詳しく書いてあるので、そちらを参照して下さい。（参考になりました！ありがとうざいます！）

要は、 https へのリクエストを curl で行っている時に slab_cache(dentry cache) が溜まっていき、結果メモリが圧迫されるらしい。

上記環境にて稼働しているアプリケーションは Guzzle を用いて定期的に https へリクエストを出していた。

つまり、これが原因。

dentry cache の使用状態を以下のコマンドで調べる。

$ sudo slabtop -o | grep dentry

おそらく、それなりに使用されてしまっているので、次に、以下のコマンドで dentry cache を開放する。

$ sudo sh -c "echo 2 > /proc/sys/vm/drop_caches"

再度、前述の $ sudo sh -c "echo 2 > /proc/sys/vm/drop_caches" で使用状況を確認し、 dentry cache が減っていることを確認する。

次に、 curl を用いて https へリクエストを出してみる。

今回は、 php スクリプトを呼び出すことで実現されるので、対象のスクリプトを呼び出した。

改めて、 $ sudo slabtop -o | grep dentry で確認すると、1回スクリプトを呼び出すたびに増えていくことが確認できる。

まず、上記の通り、以下のコマンドで dentry cache を削除しておく。(これは手動でやった。)

$ sudo sh -c "sync; echo 2 > /proc/sys/vm/drop_caches"

※ sync もしておく。

次に、 php-fpm に環境変数として NSS_SDB_USE_CACHE: yes を渡す。

具体的には /etc/php-fpm.d/env.conf を追加して、以下の設定を適用する。

/etc/php-fpm.d/env.conf

[www]
env[NSS_SDB_USE_CACHE] = "YES"

/etc/php-fpm.conf に追記するなどの方法もあるが、 Ansible で行いたかったので、
/etc/php-fpm.d/env.conf を templates から配置するようにした。

具体的には、 ./roles/php/templates/env.conf.j2 というファイルを用意して、上記と同じ内容を記載。

./roles/php/templates/env.conf.j2

[www]
env[NSS_SDB_USE_CACHE] = "YES"

タスクファイルで以下を実行するように設定する。

./roles/php/tasks/main.yml

- name: publish /etc/php-fpm.d/env.conf
  template: src="env.conf.j2" dest="/etc/php-fpm.d/env.conf"

なお、この方法は /etc/php-fpm.d/*.conf が自動的に読み込まれるように /etc/php-fpm.conf に書いてある前提です。

そもそもの原因は curl で https へのリクエストを出すことで生じるので、 php スクリプトしか動作しない前提などであれば、上記で問題は無いはず。

もし、他のスクリプトなどで実行する場合は、それらに適した方法があると思われます。

あまり望ましい方法ではないかもしれませんが、 cron で sudo sh -c "sync; echo 2 > /proc/sys/vm/drop_caches" を設定しておく、という方法もありかもしれません。

というメモ。