运维

2013年11月30日，FireEye安全系统在Target公司的网络中检测到了恶意软件活动，并向安全运营中心发送了告警。12月2日，系统再次告警。这些告警被安全团队看到，但没有采取行动。几周后，4000万张信用卡信息被盗，这场数据泄露最终让Target付出了超过2.1亿美元的代价。 ...

凌晨3点，你被电话叫醒——生产环境的核心服务大面积报错，错误日志里全是Connection reset by peer和ETIMEDOUT。你花了四个小时排查，发现罪魁祸首是一个从未被关注的超时配置：某台负载均衡器的空闲超时从60秒被改成了30秒，而你的数据库连接池配置的是55秒心跳间隔。 ...

你刚在远程服务器上执行了一个耗时两小时的数据库迁移脚本，眼看就要完成，切回终端一看——client_loop: send disconnect: Broken pipe。脚本进程随SSH会话一起灰飞烟灭，所有进度化为乌有。 ...