监控系统

2013年11月30日，FireEye安全系统在Target公司的网络中检测到了恶意软件活动，并向安全运营中心发送了告警。12月2日，系统再次告警。这些告警被安全团队看到，但没有采取行动。几周后，4000万张信用卡信息被盗，这场数据泄露最终让Target付出了超过2.1亿美元的代价。 ...

一个API报告的中位响应时间是50毫秒，运维团队对此很满意。但用户持续投诉系统"卡顿"。监控面板显示P99延迟达到了2秒——这意味着每100个请求中就有1个需要等待2秒。如果这个系统每秒处理1000个请求，那么每分钟就有600个用户在经历糟糕的体验。 ...