告警疲劳

引言 凌晨 1 点 47 分，我被手机震醒。拿起来一看，是一条企业 IM 推送：“【P2】测试环境流水线构建失败”。我点进去，发现是我两天前随手创建的一个定时任务，构建脚本里少写了…

2024 年 3 月，我参加了一次跨部门的故障复盘。起点很普通：21:07，一条 P1 级告警推送进某个 300 人的研发大群，随后被四十多条"收到"&quot…

我做过一次不太体面的复盘：把某个 60 人规模研发团队连续 6 个迭代的延期任务全部拉出来，逐条对照当时的提醒记录。结果是，超过七成的延期任务，在截止日之前至少被提醒过两次；真正&…

2023 年我做一次版本复盘时发现，那个版本一共漏了三个关键节点通知：测试用例冻结、灰度名单确认、发布窗口变更。这三个节点在项目管理工具里全都配置了提醒，但没有一个真正起到作用，因…