服务器调优与选型：20年实战锤炼的精准匹配之道

　　去年过年期间，老周——就是做了五年网站运维那个老周，穿双蹭亮的旧皮鞋蹲在IDC机柜前拧螺丝，螺丝刀还沾着半截干掉的辣条油渍。我蹲他边上剥橘子，掰开一瓣塞嘴里，酸得眯眼，那会儿机房顶棚滴水，嗒、嗒、嗒，节奏比监控告警还准，第三声刚落，K8s节点雪崩就来了。

　　不是CPU打满，不是磁盘IO卡死，是网卡队列溢出后TCP重传堆到两百多毫秒，连带etcd lease续期失败，整个控制面飘了十七分钟。我盯着那块亮得反光的Dell R740后盖，心里发毛：这机器三个月前还在测试环境压测过“百万并发”，当时老周拍胸脯说“稳如泰山”，结果真上了除夕流量洪峰，它自己先喘不上气——内存没跑满，CPU才四十三，可网卡中断处理线程死锁在irq/163-enp134s0f1上，动都不动。我原以为是内核参数没调够，结果抓包一看，是网卡RSS哈希歪了，八成流量全砸在CPU2上，剩下七个核吃瓜看戏。

　　老张接了个电话，耳机线耷拉在肩膀上，说话时左手无意识抠右手食指指甲缝里的灰，一边说“哎呀妈这会儿哪还有人修”，一边把刚拆下来的Intel X710网卡翻过来，用指甲盖刮掉标签角上一点胶渍。我说要不要试试换mlx5，他头都没抬：“换？等厂商春节值班表排到正月十五再说。”他话音没落，机房顶灯忽闪一下，我抬头瞧见天花板裂了道细缝，白灰簌簌往下掉，落在旁边堆着的三箱未开封的戴尔固态硬盘上，包装盒印着“RapidSparc™”字样，字是蓝色的，但右下角被谁拿签字笔潦草打了叉，墨水晕开了。

　　调优这事，越往后越像中医切脉。你信不过仪表盘读数，得靠手感——听风扇转速突变的顿挫感，闻电源模块烧糊前那股若有若无的环氧树脂味，摸服务器底板散热片温差：左高右低，准是PCIe通道分配不均；前后凉中间烫，八成是NVMe盘散热胶老化。去年除夕那台R740，我最后拆开底盖，在主板背面第七根铜箔走线旁用万用表测到三点二伏的浮动电压——这个我敢打包票，因为表笔夹子还挂着去年双十一抢券时留下的红色塑料绳头。测完我直接把BIOS里PCIe ASPM改成L0s，关掉所有节能策略，再把net.core.somaxconn从一百二十八改到三千七百。改完十分钟，系统没重启，只是重新加载了bonding驱动。流量下来了。可我其实说不准——这到底是参数治好了病，还是那会儿微信红包峰值过去了，自然退潮。

　　老周把最后一颗螺丝拧进位，扳手“咔哒”弹回工具袋，我听见隔壁柜子空调外机突然启动，“嗡——”一声闷响，震得桌面上半杯冷掉的咖啡晃出涟漪。他站起来拍拍工装裤膝盖上的灰，裤缝线早磨白了，右膝补丁底下还露出点蓝布边。他说：“上次选型会，采购拿着HP DL380 Gen10报价单来问我，‘老周，这机器支持RDMA吗？’我答‘支持’，他乐了：‘那妥了！’——结果上线三天，发现他们买的是没插QSFP28光口的版本。我说‘那口是选配’，他说‘哦，那你当时咋不说？’……啧，我说啥？说‘你们砍预算时砍掉的那七千八，正好是QSFP28模块的钱’？”

　　真正要命的从来不是参数表格里标红的那些指标。是某次凌晨两点，你盯着sar -n DEV输出，发现enp134s0每秒收包数跳变，从八万突然掉到一万六，再弹回七万九，来回抖——可应用日志安静得像睡着。你查驱动，查firmware，查物理链路，最后发现交换机端口错包率没超阈值，但它悄悄把端口降成了1G半双工。没人报错，没人告警，连LLDP都照常广播。这事儿后来查清楚了，是某次网络设备固件热升级后，一个没文档说明的auto-negotiation bug，在零下三度低温环境下触发。温度传感器数据在Zabbix里画得平滑，但机房角落那台备用空调压缩机坏了三个月，没人修，只靠另一台硬撑。这事我没写进故障复盘报告，因为根本没法归因——你总不能写“建议全年恒温”，对吧？

　　服务器调优与选型：20年实战锤炼的精准匹配之道。这话听着玄，其实就八个字：优胜劣汰。不是厂商吹牛吹赢的，是真实流量捶出来的。我见过同一款型号，甲客户用着稳如老狗，乙客户三天两头OOM，查到⭐️⭐️⭐️⭐️甲客户机柜里每台服务器都多插了一张Intel E810-CQDA2，专扛eBPF程序分流；乙客户连bios里NUMA balancing都开着，还怪应用写得差。所以啊，别老盯着CPU主频和内存带宽，去数数你的业务里有多少个短连接、多少次TLS握手、多少个fd泄漏却没close的goroutine。这些玩意儿不会出现在招标文件里，但它们会坐在你的服务器里，啃光你预留的百分之十五余量。

　　老张走前顺手把桌上半盒没吃完的麻辣香肠塞进工装口袋，塑料袋窸窣响。我低头看手机，微信群跳出来三条消息：一条是DBA问“pg_stat_replication里write_lag怎么突然飙到八百毫秒”，一条是开发@我“前端静态资源404是不是CDN缓存没刷”，第三条是我妈发来的语音，还没点开，但我知道她又在问“今年回不回来吃年夜饭”。我把手机扣桌上，屏幕朝下。橘子皮还在手心躺着，汁水已经干了，皱巴巴，黏乎乎。

文章配图，仅供参考

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!