后端最崩溃的线上问题是什么？
半夜两点，家里安静得只剩下手机震动声。报警群里消息一条接一条地弹出来。我眯着眼睛看了一眼屏幕，第一反应是“监控误报吧”——上周刚发过版，该测的都测了，没什么问题。然后第二条消息来了，接着是第三条、第四条。手机开始不停地响，像有人拿指尖一下一下地敲桌子。我爬起来开电脑，连VPN，登录服务器。top命令敲完，CPU正常，内存正常，负载正常。我松了一口气，心想：那就好，可能是网络波动，过会儿自己就恢复了。正准备关电脑回去睡觉，老板在企业微信上发了一句：“用户是不是进不来了？有人在群里反馈了。”我看了他一眼，没回。又过了五分钟，产品经理截图了一个用户投诉发到群里：“一直转圈，进不去。”后面跟了一句，“后端有问题吗？”你明明什么都没动，明明一切都正常，明明一周前发版测试通过，但此时此刻，用户就是进不来了。我不知道那个晚上我是怎么过的。我只记得我把日志翻了两遍，查了Redis，查了数据库，查了连接池，查了第三方接口——全都正常。我感觉自己在黑暗里走，手里拿着一根针，一根刺，要在一条看不见的路上找那一根裂缝。凌晨四点，我忽然想起来，前两天改过一个很小的配置文件，把超时时间从30秒改成15秒。我当时觉得“这没什么影响”，就顺便改了。我把它改回去，重启，服务恢复，用户能进了。老板没再追问，产品经理也没追问，用户也安静了。但那天晚上我睡不着了。因为我改回来的那一行代码，到现在我也没想明白——30秒和15秒，差距真的那么大吗？它怎么就在这一刻触发了问题？最崩溃的不是线上挂了，是你查了三个小时，什么都没查到。然后你抱着试试看的心态改了一行代码，它好了。你不知道为什么好的，也不知道下次还会不会这样。那一刻你只剩下一个念头：这行，真的能一直干下去吗？
发布于 江西
分享
评论
赞
未登录
友善发言
评论
加载中
