シグナル15（SIGTERM）でプールwwwが終了しました：実行がタイムアウトしました

Question

Drupal 6とNginx 1.5.1およびPHP-FPM（PHP 5.3.26）を実行し、SSDストレージに3GBのスワップスペースを備えた1GBシングルコアVPSで実行しています。共有から切り替えただけです。サイトが重くなりすぎたため、このアンマネージドVPSをホストしているので、まだロープを学んでいます。トラフィックが適度に高く、あまり監視していませんが、Google Adsenseは通常、1日あたり3万ページビュー近くを記録しています。通常、50〜80人の認証済みユーザーがログインし、さらに数百人の匿名ユーザーが常にBoost静的HTMLキャッシュにアクセスしています。最大10個のPHP-FPM子プロセスが構成されています。「オンデマンド」PHP-FPMを使用しています。プロセスマネージャー。

一見ランダムに見えるため、デバッグが非常に難しいエラーが発生することがあります。ユーザーによる30件の意図的な投稿のうち、1件が重複しています。最初のクリック後に投稿ボタンが無効になるように設定したので、ダブルクリックの結果ではありません。実際、私が投稿していたときに一度も起こりました。ダブルポストは、互いに数秒以内に発生します。ログファイルを調べたところ、重複した投稿は常にnginx POSTエラー：recv() failed (104: Connection reset by peer) while reading response header from upstreamに対応しているようです。このイベントは、次のPHP-FPMエラーに関連しているようです。 index.phpの実行タイムアウトエラーとそれに続くPHP-FPMワーカープロセスのSIGTERM。

nginxアクセスログとエラーログ、およびPHP-FPMエラーログを次に示します。

nginx_acess.logファイル：

1.2.3.4 - - [02/Jul/2013:12:34:34 -0500] "POST /comment/reply/22802/420734?quote=1 HTTP/1.1" 302 5 "http://example.com/comment/reply/22802/420734?quote=1" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:34 -0500] "GET /node/22802 HTTP/1.1" 200 18775 "http://example.com/comment/reply/22802/420734?quote=1" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:35 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21333 HTTP/1.1" 200 707 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:35 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21121 HTTP/1.1" 200 707 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:35 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21122 HTTP/1.1" 200 707 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:43 -0500] "GET /comment/delete/420748 HTTP/1.1" 200 5262 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:44 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=20342 HTTP/1.1" 200 707 "http://example.com/comment/delete/420748" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:44 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21333 HTTP/1.1" 200 707 "http://example.com/comment/delete/420748" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:44 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21121 HTTP/1.1" 200 707 "http://example.com/comment/delete/420748" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:45 -0500] "POST /comment/delete/420748 HTTP/1.1" 302 5 "http://example.com/comment/delete/420748" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:46 -0500] "GET /node/22802 HTTP/1.1" 200 18533 "http://example.com/comment/delete/420748" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:47 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21406 HTTP/1.1" 200 707 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:47 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=21121 HTTP/1.1" 200 707 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0" 1.2.3.4 - - [02/Jul/2013:12:34:47 -0500] "GET /sites/all/modules/ad/serve.php?o=image&a=20343 HTTP/1.1" 200 707 "http://example.com/node/22802" "Mozilla/5.0 (X11; Linux i686; rv:21.0) Gecko/20100101 Firefox/21.0"

nginx_error.logファイル：

2013/07/02 11:12:52 [error] 1821#0: *2140 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET / HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/node/22802" 2013/07/02 11:16:23 [error] 1821#0: *3020 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET / HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/node/22802" 2013/07/02 11:18:13 [error] 1821#0: *3375 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /node/22763 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/node/22763" 2013/07/02 11:18:43 [error] 1821#0: *3576 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /comment/edit/420694 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/node/22763" 2013/07/02 11:19:33 [error] 1821#0: *3576 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /node/22763 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/node/22763/edit" 2013/07/02 11:22:33 [error] 1821#0: *4397 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /forum HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/" 2013/07/02 11:29:23 [error] 1821#0: *5811 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /node/22470 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/" 2013/07/02 11:34:43 [error] 1821#0: *6794 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /recent-posts HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/forum" 2013/07/02 11:41:33 [error] 1821#0: *8082 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /sites/all/modules/ad/serve.php?o=image&a=20343 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/node/22802" 2013/07/02 11:50:03 [error] 1821#0: *9435 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /forum HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/" 2013/07/02 11:55:21 [error] 1821#0: *10378 open() "/var/www/drupal6/sites/all/modules/smileys/packs/Roving/no-swear.png" failed (2: No such file or directory), client: 1.2.3.4, server: example.com, request: "GET /sites/all/modules/smileys/packs/Roving/no-swear.png HTTP/1.1", Host: "example.com", referrer: "http://example.com/node/22802/edit" 2013/07/02 12:02:33 [error] 1821#0: *11677 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /user/5170/track/navigation HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/user/5170" 2013/07/02 12:03:03 [error] 1821#0: *11736 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET /node/15888 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/user/5170/track/navigation" 2013/07/02 12:15:23 [error] 1821#0: *13882 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "GET / HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/admin/reports/access/44258972" 2013/07/02 12:34:33 [error] 1821#0: *17088 recv() failed (104: Connection reset by peer) while reading response header from upstream, client: 1.2.3.4, server: example.com, request: "POST /comment/reply/22802/420734?quote=1 HTTP/1.1", upstream: "fastcgi://127.0.0.1:9532", Host: "example.com", referrer: "http://example.com/comment/reply/22802/420734?quote=1"

php-fpm_error.logファイル：

[02-Jul-2013 12:34:13] WARNING: [pool www] child 5768, script '/var/www/drupal6/index.php' (request: "GET /index.php") execution timed out (39.990074 sec), terminating [02-Jul-2013 12:34:13] WARNING: [pool www] child 5767, script '/var/www/drupal6/index.php' (request: "GET /index.php") execution timed out (40.002037 sec), terminating [02-Jul-2013 12:34:13] WARNING: [pool www] child 5767 exited on signal 15 (SIGTERM) after 50.005181 seconds from start [02-Jul-2013 12:34:13] NOTICE: [pool www] child 5796 started [02-Jul-2013 12:34:13] WARNING: [pool www] child 5768 exited on signal 15 (SIGTERM) after 40.019244 seconds from start [02-Jul-2013 12:34:13] NOTICE: [pool www] child 5797 started [02-Jul-2013 12:34:33] WARNING: [pool www] child 5769, script '/var/www/drupal6/index.php' (request: "POST /index.php") execution timed out (59.990557 sec), terminating [02-Jul-2013 12:34:33] WARNING: [pool www] child 5769 exited on signal 15 (SIGTERM) after 60.014359 seconds from start [02-Jul-2013 12:34:33] NOTICE: [pool www] child 5801 started

IPアドレスが「1.2.3.4」の私が今日12:34に発生した重複投稿エラーを表示するために、これらは整理され、少し難読化されています。重複が発生したノードは22802です。

以前の共有ウェブホストでApache/FastCGIを実行していた場合、この問題は発生しませんでした。また、キャッシュにRedisを使用しており、Zend Optimizer + opcacheを使用していることにも言及する必要があります。しかし、重複エラーを回避するために、これらのメカニズムの両方を無効にしようとしましたが、違いはありませんでした。

あなたが提供できるどんな助けにも感謝します！

rahim123 · Answer

さて、私は自分の質問に答えるつもりです。問題は明らかに、私が使用していたrequest_terminate_timeout = 30s値に何らかの関係があり、ondemand FPMプロセスマネージャーと組み合わせられた可能性があります。二重投稿は常に、直後の子プロセスの強制終了と組み合わされたPHP-FPMタイムアウトエラーと一致していました。そのため、request_terminate_timeoutを無効にしました。php.iniファイルですでに30秒のタイムアウトが指定されているため、それはとにかく冗長であるようです。また、このボックスで負荷がかなり安定しているのは私だけなので、ondemandプロセスマネージャーは本当に必要ないことに気づきました。そこで、staticに切り替えて、pm.max_requestsかなり低くて100です。これにより、メモリリークが防止されます。

これらの変更の一方または両方により、重複する投稿が効果的に排除されました。