php-fpm导致服务器负载飙涨

最近的看网站打开很慢经常挂掉。。。
访问量也没有增加,之前都是好好的
linux系统负载严重超标。。。一分钟居然到300多。。。
通过查看系统日记没有什么问题,最后发现php-fpm存在以下二点错误。。。

第一种错误

Dec 27 09:37:47.112251 [WARNING] fpm_stdio_child_said(), line 167: child 11503 (pool default) said into stderr: "Dec 27 09:37:47.111260 [ERROR] fpm_unix_init_child(), line 168: setrlimit(RLIMIT_NOFILE) failed: Invalid argument (22)"
Dec 27 09:37:47.112285 [WARNING] fpm_stdio_child_said(), line 167: child 11502 (pool default) said into stderr: "Dec 27 09:37:47.109294 [ERROR] fpm_unix_init_child(), line 168: setrlimit(RLIMIT_NOFILE) failed: Invalid argument (22)"
Dec 27 09:37:47.112301 [WARNING] fpm_stdio_child_said(), line 167: child 11501 (pool default) said into stderr: "Dec 27 09:37:47.108313 [ERROR] fpm_unix_init_child(), line 168: setrlimit(RLIMIT_NOFILE) failed: Invalid argument (22)"

问题及分析:
使用ulimit -n 查看文件打开连接数,在查看一下php-fpm 配置文件里 rlimit_files的值 ,发觉php-fpm配置文件打开连接数与系统文件打开连接数不一致 造成的
解决办法:
ulimit -Shn 102400
接着修改php-fpm配置文件中的

<value name=”rlimit_files”>102400 </value>

然后重启php-fpm服务,问题得到解决。但是负载还是降不下去。。。接着下面的。。。

第二种错误

Dec 27 09:38:07.213414 [WARNING] fpm_request_check_timed_out(), line 146: child 11496, script '/data/www/xxx.xxx.com/member.php' (pool default) executing too slow (3.104162 sec), logging
Dec 27 09:38:07.213570 [NOTICE] fpm_got_signal(), line 48: received SIGCHLD
Dec 27 09:38:07.213675 [NOTICE] fpm_children_bury(), line 194: child 11496 stopped for tracing
Dec 27 09:38:07.213684 [NOTICE] fpm_php_trace(), line 139: about to trace 11496
Dec 27 09:38:07.213818 [ERROR] fpm_trace_get_long(), line 78: ptrace(PEEKDATA) failed: Input/output error (5)
Dec 27 09:38:07.213853 [NOTICE] fpm_php_trace(), line 167: finished trace of 11496

问题:脚本执行超时,出现Input/output error

网站打开很慢,开始觉得是不是程序的问题,但是觉得这个系统是康盛的,理论上不会执行那么久,所以暂时就排除,又怀疑的磁盘,检查了,磁盘运行健康,具体的详细检测,就没法,还有一种可能调用第三放接口,不过通过目前的测试一切正常;接着就是数据表被破坏,检查了一下,也正常;
后来又 想了一下,转向memcached 看这个服务看有没有问题,因为系统用了缓存机制,我通过测试查看memcached 缓存数据居然连接不去,重启服务又连上去了,一会儿有断开了。。。查看memcached的连接数 -c 设置 1024 后来做了调整了65535 memcached就正常了,目前负载降下来了,具体负载问题,还要观察几天,看是不是此问题造成的php-fpm压力过大,最终负载飙涨,形成连锁反应!

还没有评论,快来抢沙发!

发表评论

  • 😉
  • 😐
  • 😡
  • 😈
  • 🙂
  • 😯
  • 🙁
  • 🙄
  • 😛
  • 😳
  • 😮
  • emoji-mrgree
  • 😆
  • 💡
  • 😀
  • 👿
  • 😥
  • 😎
  • ➡
  • 😕
  • ❓
  • ❗
  • 72 queries in 0.420 seconds