Apache2.2 をデフォルトのまま使用すると、メモリを使い切ってしまう可能性があるため、チューニングが必要になる。
環境
- CentOS 6.8
- httpd-2.2.15-54.el6.centos.x86_64
Apache2.2 デフォルト
- MPM prefork
- MaxClients 256
メモリ1GBリバースプロキシの場合
まず、現在の１プロセスあたりのメモリ使用量を調べる。
$ ps aux | grep 'httpd' | egrep -v 'grep|root' | awk 'BEGIN{sum=0;} {sum+=$6} END{print sum/NR;}'
4480.3
このサーバーでMaxClients分の256コネクション使い切った場合、
4.3MB x 256 = 1100.8MB
となり、メモリの割り当てが1GBの場合、スワップまたはOOMが発生してしまうと予想される。
また、ssh できるメモリも無く、制御不能になるだろう。
チューニング
MPMをworkerに変更するだけでとりあえずOK。他はデフォルトのまま。
- MPM worker
- ServerLimit 16
- MaxClients 300
- ThreadsPerChild 25
MPMをworkerに変更したところ、１プロセスあたりのメモリが13MBになった。
MaxClientsが16で、ThreadsPerChildが25なので、最大プロセス数は12。
13MB x 12 = 156MB
メモリが1GBあれば全然問題なし。そればかり、preworkより最大コネクション数が44多い。
チューニング次第では、最大で1425コネクションくらいイケる。
メモリ2GB mod_wsgiの場合
$ ps aux | egrep 'USER|httpd' | egrep -v 'grep|root'
USER PID %CPU %MEM VSZ RSS TTY STAT START TIME COMMAND
apache 2560 0.0 0.3 188192 7628 ? S 06:36 0:01 /usr/sbin/httpd
apache 7832 0.0 0.3 188192 7624 ? S 07:10 0:01 /usr/sbin/httpd
apache 7833 0.0 0.3 188192 7624 ? S 07:10 0:01 /usr/sbin/httpd
apache 7834 0.0 0.3 188192 7624 ? S 07:10 0:01 /usr/sbin/httpd
apache 8145 0.0 0.3 188192 7624 ? S 07:13 0:01 /usr/sbin/httpd
apache 8438 0.0 0.3 188192 7628 ? S 07:14 0:01 /usr/sbin/httpd
apache 12965 0.0 0.3 188192 7624 ? S 07:45 0:01 /usr/sbin/httpd
apache 15250 2.9 3.8 1538260 74348 ? Sl May28 51:44 /usr/sbin/httpd
apache 15251 2.9 4.4 1543012 84260 ? Sl May28 51:45 /usr/sbin/httpd
apache 15412 0.0 0.3 188192 7628 ? S 08:00 0:00 /usr/sbin/httpd
apache 19639 0.0 0.3 188192 7624 ? S 08:28 0:00 /usr/sbin/httpd
apache 19797 0.0 0.3 188192 7552 ? S 08:29 0:00 /usr/sbin/httpd
これは、Apache + prefork + mod_wsgi + Djangoで、mod_wsgiをDaemon mode(processes 2, threads 20)で動かしている。RSSが大きい2つがmod_wsgi。
この場合でもやはり、MaxClients分の256コネクションで2GBをApacheが使い切ってしまう可能性がある。
チューニング
なので、以下のように設定。
- MPM worker
- ServerLimit 16
- MaxClients 300
- ThreadPerChild 25
- mod_wsgi Daemon mode(processes 9, threads 25)
Apacheの設定は、MPMをworkerに変えただけで、他はデフォルトのまま。
staticのファイルは、Apacheがそのままレスポンスを返すので、mod_wsgiはDaemon modeのまま。access_logからmod_wsgiとstaticのアクセス比率が、3:1 だったので、MaxClients 300を1として、mod_wsgiが3になるようにしつつ、Apacheが2GBの8割以下になるように調整。
今後
Apacheの使っていないモジュールを外せば、最大コネクション数をもっと増やせそう。
しかし、Nginxをリバースプロキシとして動かす場合、1GBメモリで最大で25,000コネクション捌けるらしい。
今のApacheがコネクションを捌ききれなくなったら、スケールする前に、Nginxへの切り替えを検討した方がコスト的にいいかもしれない。
