用途:在创建生产事故响应流程(runbook)和值班(on-call)手册时使用,帮助团队规范事故处理、沟通与复盘。
主要能力:
- 事故分级:SEV-1(完全宕机、数据丢失或安全泄露、影响超50%用户,立即响应,呼叫值班与经理);SEV-2(部分降级、影响10%-50%用户、性能下降超50%,15分钟内响应);SEV-3(轻微降级、影响低于10%用户,1小时内响应);SEV-4(外观问题、内部工具,下一工作日处理)。
- 事故响应模板:包含检出触发、前5分钟初步响应(确认与评估、通知干系人、启动时间线)、前15分钟快速缓解(回滚、扩容、重启、熔断)等。
- 沟通协议:SEV-1每10分钟、SEV-2每30分钟、SEV-3每小时更新,并给出状态消息模板(调查中、已定位、监控中、已解决)。
- 调查与根因分析:收集日志、指标、数据库状态,重建时间线。
- 解决与验证:错误率、响应时间、客户投诉等完成标准,以及事后行动项。
- 事后复盘模板:影响、时间线、根因、促成因素、做得好的与不好的、行动项、经验教训。
- 值班手册:班前准备、收到告警后的操作、升级决策树、交接流程与交接模板。
- 反模式:不要慌乱、不要跳过沟通、不要跳过复盘。
使用方式:按模板填充具体系统信息与命令;示例命令包括 curl 健康检查、kubectl 查看/回滚/扩容/重启/设置环境变量、pg_stat_activity 查询等,需按实际环境调整。
适用场景:生产事故应急响应、值班流程建设、复盘文档编写。
限制:资料未提供具体收费、价格、平台支持范围或效果保证;示例命令与阈值仅为模板示例,需结合自身系统验证。