标签频道
MTTR
该标签下的文章、提问与讨论帖。
【背景】 SRE 干了 3 年,复盘会里见过最刺眼的一类事故不是"没发现",而是"发现得太快、动手得也太快":凌晨 2 点告警风暴,值班同学 30 秒内重启了 4 个副本,MTTR 很漂亮,第二天复盘才发现——重启把现场(堆内存、连接状态、
背景 先讲一个我亲历、每次复盘都会被翻出来的场景。 凌晨 02:13,Prometheus 告警把值班同学从床上叫醒:核心网关 5xx 率从 0.2% 飙到 4%,持续 4 分钟,触发的是一条 "error_rate > 1% for 3m
背景 做了 5 年运维,值班这几年我反复遇到同一个分歧,而且几乎每次 P1 群里都会吵起来:故障刚发现的前 15 分钟,oncall 的默认动作到底是「先回滚/切流止血」还是「先花几分钟把根因定位清楚再动手」? 我手上有两组真实数据可以给大
背景:做了 8 年网络工程,这些年线上故障见得多了,我发现一个反复出现的撕裂——故障发生后的头 30 秒,团队到底是"先回滚"还是"先定位",分歧极大,而且几乎没有标准答案。热榜上大家都在聊怎么预防(连接池、超时重试、Kafka 幂等、mT
文
标题
摘要