技术与生活 / 一篇记录
让告警直接指向下一步动作
只发一句“服务异常”会把定位工作全部留给接收者。告警应让人知道哪个服务、什么症状、持续多久,并能直接进入相关日志或监控页面。
告警至少说明影响对象、开始时间、当前状态与排查入口。
实际怎么检查
这是一条运维检查思路,具体阈值与工具要结合服务规模和实际部署环境选择。
站点 / 错误比例 / 持续时间 / 日志入口
让另一位维护者仅凭告警就能找到相关服务。
遇到异常再检查什么
为同一个故障合并重复通知,同时在恢复时给出明确状态。若告警长期没有可执行动作,就应重新检查阈值、聚合方式和责任范围。
恢复通知应该表达同一事件的结束,而不是开启一条无法关联的新消息。保留事件标识和持续时间,能够让维护者区分短暂抖动、反复故障与一次长期未恢复的问题。
重复无意义告警会降低注意力,应设置聚合与恢复通知。
参考:运维 文档。