标签:监控 · 6 条内容
中午十二点半,饭还没吃完。一家做冷链的,冷库有温控记录要求。告警太多,多到最后没人看。屏蔽通知之后确实安静了,直到某天出故障,才发现自己是最后一个知道的。
2024-07-21那次是春节前一周。一家做工业设计的,渲染农场夜里跑满。告警太多,多到最后没人看。屏蔽通知之后确实安静了,直到某天出故障,才发现自己是最后一个知道的。
2023-09-07早上刚上班,群里就有人发了张截图。一家做冷链的,冷库有温控记录要求。监控群日均 200 多条告警,团队集体把通知屏蔽了。
2019-04-23一家做冷链的,冷库有温控记录要求。监控群一天两百多条告警,团队最后集体把通知屏蔽了。真出故障那天,是靠用户打电话才知道的——监控还在跑,只是没人看。这篇写得比较细…
2018-07-13先说背景。告警太多,多到最后没人看。屏蔽通知之后确实安静了,直到某天出故障,才发现自己是最后一个知道的。阈值照搬模板默认值,磁盘到 90% 告警,可这台机器的正常水位就是 88%。
2016-03-08一家做工业设计的,渲染农场夜里跑满。监控群一天两百多条告警,团队最后集体把通知屏蔽了。真出故障那天,是靠用户打电话才知道的——监控还在跑,只是没人看。下面按时间顺序写…