重大事件管理:流程、角色与沟通方案
重大事件管理怎么做?讲清如何判定重大事件、分步处理流程、各角色的分工、通报沟通的节奏,以及重大事件管理与问题管理的区别和衔接。
先说结论: 重大事件是业务影响大到不能按普通工单排队处理、需要单独的、更快的流程的事件。流程是:宣布、在一位事件经理统一指挥下组队、按固定节奏沟通、先恢复服务、事后复盘。找出并消除根因是另一件事,由事后的问题管理负责。
IT 事件绝大多数是例行的:用户打不了印、笔记本太慢、密码要重置。少数不是:全公司邮件瘫痪、总部办公室断网、支付系统停摆。这类事件需要另一套工作方式。本文说明什么是重大事件、如何一步步处置、谁负责什么、怎样沟通,以及事件管理与问题管理的分界线。
术语参考了 Atlassian 的 IT 事件管理指南和问题管理指南。Atlassian 指出,遵循 ITIL 或 ITSM 实践的团队会用"重大事件"来称呼需要紧急响应的事件;并引用 ITIL 对已知错误的定义:已有记录在案的根因和临时解决办法的问题。我们于 2026 年 10 月 28 日阅读这两篇(查证日期:2026-10-28)。下文的阈值和时间只是可供调整的示例,并非行业标准。
什么是重大事件?
Atlassian 把事件描述为任何中断或降低服务质量(或有此威胁)的情况。重大事件则是业务影响高到普通的排队式处理已经不够用的那种。没有放之四海而皆准的数字,因为"影响高"取决于每家企业,所以必须事先定义。
典型触发情形有:
- 核心服务对大量用户或整个站点中断:邮件、网络、账号登录系统、ERP、客户门户。
- 创造收入或关系安全的系统停了。
- 后果严重的安全事件,例如勒索软件或管理员账号疑似被接管。
- 同时影响多个客户或多个地点的故障。
- 较小的故障,但持续时间已超过其优先级所允许的范围。
重大事件并不等于 P1。很多机构同时有好几张 P1 工单,却没有启动重大事件流程。区别在于,重大事件需要多个团队的人在一位协调人统一指挥下协同工作,并持续向管理层通报。
优先级本身由影响度和紧急度决定。我们的严重程度与优先级的区别一文讲了怎么定,P1 至 P4 说明则展示了各级别的实际含义。
什么时候该宣布重大事件?
把宣布标准写下来,并且要在压力下也容易套用。一张简短的清单比一份长长的制度好用。
- 受影响的服务在关键服务清单上,或受影响的用户、站点数量超过规定值。
- 用户没有合理的临时办法可用。
- 预期影响严重:营收损失、安全、法律或合同后果,或声誉受损。
- 第一位工程师在较短的时限内(例如 30 分钟)无法修好,或根本无法估计何时修好。
服务台的任何人都应该可以提出重大事件,并由一位指定的人(通常是当班的事件经理)确认。宣布了一起后来证明规模较小的重大事件,代价很低;真正的重大事件晚宣布一个小时,代价就大了。
重大事件管理流程有哪些步骤?
下面是适合中小型 IT 团队的一套流程,按顺序进行。
- 发现并记录。 监控告警、电话或多张类似工单暴露了问题。记录开始时间、受影响范围和报告人。
- 宣布。 套用标准,给事件命名,并建立唯一的事件记录,所有信息都挂在这条记录上。使用一个共享的通道或会议,例如电话会议桥加一个聊天群。
- 指定事件经理。 由一个人负责协调,他不做技术操作。
- 组建响应团队。 拉入受影响领域的技术负责人,以及能联系供应商、网络运营商或业务方的人。
- 评估影响。 谁无法工作?哪个业务流程停了?业务上的截止时间是什么?
- 先恢复服务。 选择最快、最安全的回到可用状态的办法:回滚变更、切换、重启、采用临时办法。不要在停机期间追求完美的解释。
- 按计划沟通。 按约定的间隔发出通报,无论有没有新进展。下文详述。
- 确认恢复。 请真实用户或业务负责人验证,而不是只看仪表盘上一片绿色。
- 关闭事件并交接。 记录时间线、临时办法和未解决的疑问,把根因调查移交给问题管理。
- 复盘。 在几个工作日内召开事后复盘,趁大家记忆还清楚。
关键原则:恢复服务和查明原因是两件不同的事。混在一起只会拉长停机时间。
重大事件中各角色分别做什么?
角色要少而清晰。小团队里一个人可以身兼两职,但事件经理不应该同时去修故障。
- 事件经理: 主持会议桥,决定优先级,维护时间线,确保技术团队没有被任何事情卡住。
- 技术负责人: 指挥诊断和修复工作,向事件经理说明已知、未知和正在尝试的内容。
- 沟通负责人: 撰写并发送通报,让工程师不用分心。小团队里可以由事件经理兼任。
- 专业工程师: 负责具体系统、网络、安全或应用的工程师。
- 业务或客户代表: 确认影响、业务截止时间,以及服务恢复到什么程度算可以接受。
- 记录员: 记录时间点、决定和行动,这是复盘的原始材料。
如果你的 IT 是外包的,应事先与服务商商定这些角色,包括你这边谁有权批准切换或紧急变更。谁会被叫来、什么时候叫,可参考我们的L1、L2、L3 支持级别和升级矩阵。
重大事件期间如何沟通?
沉默造成的伤害比坏消息更大。听不到任何消息,人们会以为没人在处理,于是不断打电话、层层上报,反而把工程师从修复工作中拉走。
- 尽快发出第一条通知。 说明受影响的内容、开始时间、正在调查,以及下一次通报的时间。不要等到知道原因再说。
- 设定固定节奏。 例如紧急故障每 30 分钟一次,可视情况调整。即使内容是"无变化,仍在调查",也要准时发。
- 用平实的语言。 说明用户现在能做什么、不能做什么,以及临时办法。避免内部工单号和术语。
- 只有一个信息来源。 一个通道,一条状态信息,一位负责人。不要让三个人发三个不同的预计时间。
- 谨慎给出预估。 除非很有把握,否则给出的应是下次通报的时间,而不是承诺修复的时间。
- 发出恢复通知。 说明恢复了什么、用户应该检查什么,并告知之后会有复盘。
- 复盘之后跟进。 用一份简短总结说明发生了什么、将会改变什么。
按受众调整内容:管理层需要影响和业务后果,用户需要知道现在能做什么,技术团队需要细节。
事件管理和问题管理有什么区别?
这是最常见的混淆,答案在于各自的目标。
- 事件管理要尽快恢复正常的服务运行,追求速度,把影响降到最低。用临时办法恢复服务就是成功。
- 问题管理要找出并处理事件背后的根本原因,防止再次发生,追求深度和预防。临时办法只是中间步骤。
Atlassian 把问题管理描述为识别和管理 IT 服务上事件成因的过程。已知错误则是已有记录在案的根因和临时办法的问题。
用一个具体例子对比。某个周一早上,文件服务器磁盘写满,没有人能打开共享文件。
- 事件响应: 腾出空间或扩容,确认用户能打开文件,然后关闭事件。
- 问题调查: 查明磁盘为什么满了,是备份任务、失控的日志,还是有人拷贝了大文件;以及为什么监控没有提前提醒。然后补上告警、配额或容量,防止再次发生。
两者互相衔接。一起重大事件通常会引出一条问题记录,多起相似的事件也可以关联到同一个问题。如果根因暂时找不到,就应把临时办法写入已知错误记录,让下一位工程师能更快恢复服务。
事后复盘怎么做?
复盘应当不追究个人:目的是改进体系,而不是找人批评。内容包括:
- 从第一个症状到完全恢复的时间线,含发现、宣布、关键决定和恢复的时间点。
- 哪些做得好,哪些拖慢了响应,哪些纯属运气。
- 用平实的语言描述业务影响。
- 目前所知的原因,以及仍不清楚的部分。
- 行动项,每项有明确负责人和到期日,登记为问题记录、变更申请或监控改进。
- 宣布标准、角色分工和联系人清单是否需要更新。
这份时间线同时为MTTR、MTBF 和 MTTA这些平均指标提供真实的测量数据。如果事件涉及数据丢失或恢复时间很长,请对照RTO 与 RPO中的目标看看结果。
在第一起重大事件之前应该做哪些准备?
大部分收益来自事前准备。
- 定义什么算重大事件,以及谁有权宣布。
- 保管一份最新的联系人清单,涵盖团队、供应商、网络运营商和关键业务负责人,并保证系统宕机时也能拿到(例如纸质版或存在手机里)。
- 为首次通知、进展通报和恢复通知准备好模板。
- 设立固定的沟通通道或会议桥号码,别让人在压力下现想。
- 记录关键服务、其负责人和依赖关系。
- 事先约定紧急变更规则,别让修复卡在审批上。
- 每年至少做一次简短演练。
如果你的 IT 是外包的,请向服务商索要其书面的重大事件流程和联系路径。博迅的 SLA 页面按优先级公开了响应目标,管理型IT外包服务方案与按人头定价展示了管理型IT外包服务的公开价目,并标明合同约定的服务时段内紧急事件 15 分钟首次响应。如果想讨论适合你自身环境的重大事件流程,欢迎联系我们。
常见问题
ITIL 里的重大事件是什么?
在 ITIL 和 ITSM 实践中,重大事件指业务影响显著偏高、需要用有别于普通事件的更快流程来处理的事件。具体门槛由各机构自行定义,而不是由 ITIL 规定。
重大事件和 P1 有什么区别?
P1 是单张工单的优先级;重大事件是一种响应方式:多个团队、一位协调人、有结构的沟通。很多 P1 工单按常规流程就能处理,重大事件流程用于那些需要跨团队协调的事件。
重大事件经理做什么?
重大事件经理负责协调响应:主持会议桥、分配任务、维护时间线、处理升级,并确保通报按时发出。他通常不亲手做技术修复。
事件管理和问题管理有什么区别?
事件管理的目标是快速恢复服务,哪怕靠临时办法;问题管理则调查根因并消除它,防止事件再来。一起重大事件通常以一条问题记录收尾。
重大事件期间多久通报一次?
一开始就约定节奏,例如紧急故障每 30 分钟一次,即使没有新消息也要照做。合适的间隔取决于事件的严重程度和变化的快慢。
小企业需要重大事件流程吗?
需要,只是可以更轻量。一页纸就够起步:宣布标准、一位指定的协调人、一份联系人清单和几份消息模板。小团队更需要它,因为同样几个人既要修故障,又要负责沟通。
重大事件之后应由谁主持复盘?
最好是不属于主要修复人员的人,通常是事件经理或服务负责人。中立的主持人更容易开成不追究个人的讨论,也能让焦点留在行动项上。
想把这些指标写进合同,而不是停留在 PPT 上? 博迅的管理型IT外包服务方案把 SLA 和按人头的月费并排公开,覆盖香港、新加坡、中国大陆和美国。查看方案与定价,或联系顾问。
分享:
📬 亚太IT月报
中国合规动态、网络安全预警及亚太IT实践指南,每月一期。
不发垃圾邮件,随时可取消订阅。