PHP接口开发踩坑指南:9年实战避坑秘籍
|
去年春节前夜,服务器突然开始返回 502,就那一个接口,/v3/order/status,其他全正常——连隔壁 /v3/order/list 都没事儿,就它卡在 Nginx 和 PHP-FPM 中间,吐着 502,像被人掐了脖子。 我盯着监控看二十来分钟,PHP-FPM 进程数没爆、内存没飘、慢日志没记录、strace 抓了三次全是 syscall 正常返回,就是不回包。老张说“重启 php-fpm 试试”,我点了两次重启按钮,第一次起不来,第二次起来了但五秒后又挂——第三次我直接 kill -9 掉全部子进程再拉起,它居然活了,还撑了三十七分钟,然后凌晨一点零八分,准时又挂。 我原以为是上游 Redis 连接池超时拖垮的,结果把所有 Redis 调用注释掉,它照样 502;我原以为是某个新上线的 Guzzle HTTP 客户端没关连接,结果换成 curl_exec + stream_context_create,它还是 502;我甚至把它最简单的分支——if (true) return json_encode(['code'=>0]); ——单独拎出来跑,还是 502。 值班群里有人贴截图:Nginx error.log 里只有一行 “upstream prematurely closed connection while reading response header from upstream”,没时间戳,没 PID,没 trace_id,就这一行,第七次出现在日志里,第八次也一样。 我扒 open_basedir 配置,对得上;检查 upload_max_filesize,它根本没收文件;看 opcode 缓存,opcache.validate_timestamps=On 没问题;查 PHP 错误日志,空的——不是没写,是压根没触发任何 error_log() 或 throw Exception 的机会,连 set_error_handler 都没进来过。 小王说:“你试过把 php.ini 里的 max_execution_time 改成 300 吗?”我改了,没用;他又说:“是不是用了 pcntl_fork?”,我没用;他发了个表情包,我也没回。反正那时候我已经在 console 里反复敲 php -l app/Http/Controllers/OrderStatusController.php 了四遍,语法没问题,命名空间没错,autoload 自动加载链也通——它就是不肯在 fork 后把响应头塞进 FastCGI socket 里。 直到初一早上七点,保洁阿姨推着拖把经过工位,顺口问:“你们昨晚是不是动了那个‘系统时间’?”我说没动啊;她指指机房门口的电子钟,“喏,物业说昨天下午校时,把整个局域网设备都拉回了北京时间,差了四十秒。” 我愣了一下,去翻 PHP-FPM 的 slowlog 配置——它默认用 gettimeofday,而我们刚好启用了 rsyslog 的 time-receive 模式(这个细节我忘了删,其实跟 502 没半毛钱关系);我又去看了下 /proc/sys/kernel/timer_migration 的值,是 1(这个也无关,删掉不影响意思);再往下扒,终于在 php-fpm.d/www.conf 里看见一句被注释掉的 emergency_restart_threshold = 10,下面紧挨着一行:emergency_restart_interval = 60s ——但它没生效,因为上面配的是 process.max = 128,而实际子进程峰值只有 37。 我也不知道为什么非得等到时间跳变才触发,反正我把 emergency_restart_interval 改成 120,把 pm.start_servers 调低到 4,再把 opcache.revalidate_freq 改成 0,重新 reload。它稳住了。没再 502。 可问题是——那晚一共发生了多少次系统时间回拨?物业说只有一次,下午三点十七分。但我们服务是零点部署的,中间隔了九个小时,时间跳变早该过去才对……
文章配图,仅供参考 对,就这么一件事:一个接口,连续七次 502,每次间隔三十七分钟左右,发生在春节前夜,和一次局域网授时有关,和 PHP-FPM 底层对 monotonic clock 的处理缺陷有关,和我们恰好把 opcache.validate_timestamps 设为 On 但又依赖 filemtime 判断缓存失效有关——我笃定这三者咬死了,但到底哪条线先崩的,我说不准。有谁碰到过这个吗 (编辑:航空爱好网) 【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容! |


PHP工程师巧用系统优化提升营销转化率37%
PHP调试难?H5开发者必备5个网页调试技巧
PHP移动互联开发:零基础打造高并发数码应用
PHP创业者必读:流量、合规、运营三关闯过才长久
PHP网站调试三步定位法:站长必备实战指南
Linux下PHP开发环境搭建实战指南
PHP电商转化断点诊断:从点击到下单

