安全线上培训系统故障应急处置方案

安全线上培训系统故障应急处置方案一、编制目的与适用范围线上培训系统一旦在授课时段宕机，影响面不是“几名学员学不了课”，而是：企业年度安全培训计划中断→三级安全教育、复训节点逾期→触发《中华人民共和国安全生产法》第二十八条关于安全教育培训的合规风险，并可能因培训记录缺失在事故调查中被认定为培训不到位。本方案的目标是把“故障发生”到“培训恢复或替代落地”的处置时间压缩到可接受区间，并保证培训记录的完整可追溯。适用范围：•自建或租用的安全线上培训平台（含移动端App、Web端、小程序端）•承载培训业务的配套系统：在线考试系统、学时统计模块、人脸识别签到模块•系统服务方（供应商）与本企业安全管理部门、人力资源部门、信息化部门共同执行编制依据：《中华人民共和国安全生产法》《安全生产培训管理办法》（应急管理部令，以现行有效版本为准）、企业与平台服务商签订的服务水平协议（SLA）。二、故障分级标准与响应权限故障处置的首要问题是“谁有权启动哪一级响应”。分级错误会导致小故障大动干戈、大故障层层请示延误处置。按下表执行，判定以“影响人数+业务阻断程度”双指标取高者。级别判定标准响应时限启动权限处置原则Ⅲ级（一般）影响人数<50人；个别功能异常（如视频卡顿、页面加载慢），核心功能可用30分钟内响应，4小时内恢复培训系统管理员（信息化部门指定专人）记录故障、监测观察、通知受影响学员顺延Ⅱ级（较大）影响50~200人；考试、签到、学时记录单一模块不可用；或故障持续超过2小时未恢复15分钟内响应，2小时内恢复或启用替代方案信息化部门负责人启用替代培训方式，供应商介入排查Ⅰ级（重大）影响>200人或全员；平台整体不可访问；或恰逢大规模考试/应急复训等不可顺延节点；数据疑似丢失或泄露10分钟内响应，立即启用替代方案分管安全副总经理全员切换线下/替代通道，供应商最高优先级处置，必要时书面通报监管部门说明培训计划调整分级争议时从严认定（就高不就低），由值班管理员初判、部门负责人确认，确认结果记入《系统故障处置登记表》（见附件一）。三、组织机构与职责成立线上培训系统应急工作小组，成员及职责如下，职责对应到人而非到部门，确保call到即动：角色担任人职责联系要求组长分管安全副总经理Ⅰ级响应决策、对外通报审批手机24小时开机，10分钟内可接通副组长安全管理部部长Ⅱ级响应决策、替代培训方案审批工作日15分钟内响应，非工作日30分钟内系统管理员信息化部门指定2人（主备岗）故障监测、初判分级、一线处置、供应商联络培训时段全程在线值守培训管理员安全管理部培训专员学员通知、替代培训组织、学时补录培训时段电话可及供应商对接人平台服务商客户成功经理远程排查、升级内部研发SLA约定：Ⅱ级以上15分钟内响应工作小组每季度召开1次复盘会（结合第4季度演练），会后24小时内下发会议纪要并跟踪整改项闭环。四、预防与监测措施故障处置成本远高于预防成本，本章措施是降低Ⅰ级故障发生概率的第一道防线。1.日常监测◦系统管理员每个工作日8:30对平台执行一次可用性检查：登录1个测试账号、播放1段课程视频（不少于1分钟）、提交1次模拟答题，三项全部通过方视为可用，结果记入《系统日检记录表》。◦培训/考试高峰时段（计划培训日开课前30分钟）增加一次专项检查，重点验证并发登录能力。2.合同约束◦与供应商SLA中明确：可用性≥99.5%/月、Ⅱ级以上故障15分钟内响应、数据每日备份且保留期不少于90天、重大故障48小时内出具书面故障报告。未达标的按合同违约条款扣减服务费。3.容量与变更管理◦供应商执行版本升级、机房迁移等变更须提前5个工作日书面通知；变更窗口避开计划培训日和考试日。4.数据备份核验◦系统管理员每月第5个工作日核验一次备份有效性：抽查导出上月学时记录与平台前端显示一致性，偏差>0.5%即启动数据核查流程。五、应急处置流程5.1故障发现与报告（目标：10分钟内完成初判上报）1.发现渠道包括：日检异常、学员/讲师报障（培训管理专员收集）、供应商主动通报、监控告警短信。2.系统管理员接报后10分钟内完成三件事：复现确认（用测试账号验证是局部问题还是全局问题）、截图留证（含时间戳）、按第二章标准初判级别并上报对应权限人。3.严禁在未确认影响范围前就向全员发布故障通知，避免造成恐慌性重复登录加剧系统负载；应先通知受影响当期培训的讲师和班长，由其组织学员原地等待或有序离场。5.2分级处置动作Ⅲ级处置：管理员远程排查（重启会话、切换CDN线路、清理缓存指导学员），4小时内未恢复自动升级为Ⅱ级，不得以“观察观察”拖延。Ⅱ级处置：1.副组长批准后，培训管理专员在30分钟内向受影响学员发布调整通知（企业微信群+短信双通道，模板见附件三）。2.系统管理员按SLA向供应商提交工单并电话确认受理，每30分钟跟进一次进展直至恢复。3.若预计2小时内无法恢复，启动替代培训方案（见5.3）。Ⅰ级处置：1.组长批准后立即执行全员替代方案，培训管理专员1小时内完成线下场地、讲师、签到表的组织安排。2.系统管理员要求供应商30分钟内给出初步故障原因和恢复预计时间，每15分钟同步一次进展。3.涉及数据丢失或疑似泄露（学员个人信息、考试成绩外泄）的，信息化部门2小时内报告组长，由组长决定是否依据《中华人民共和国网络安全法》《中华人民共和国个人信息保护法》履行报告义务，严禁私自隐瞒或对外口径不一。4.恢复后24小时内，供应商须提交书面故障报告（原因、影响时段、影响数据范围、整改措施）。5.3替代培训方案（优先级递减，严禁跳过审批直接选用）1.优先：切换备用平台。与主平台数据兼容或可独立使用的备用培训渠道（备用账号在应急联系人处封存，每季度验证一次登录有效性）。2.次选：线下集中培训。启用企业培训教室，沿用原课程PPT和考核试卷纸质版（培训管理专员长期备存纸质版课件与试卷，每半年更新一次，确保与新课程大纲一致）。3.兜底：延时补训。确无可替代条件时（如疫情管控等场景），书面报副组长批准后顺延，顺延后的补训须在系统恢复后15个工作日内完成，严禁出现“三违人员、新入职员工”等强制培训对象的学时断档。4.严禁以“口头讲一讲、签个字”代替规范培训——无课件、无签到、无考核的培训在合规审查中不被认可，等同未培训。5.4恢复与数据核查1.系统恢复后，管理员先以测试账号验证核心功能（登录、播放、答题、学时写入），确认正常后通知业务恢复，严禁直接向学员宣布恢复。2.数据核查：比对故障时段前后的学时记录、考试提交记录，确认无丢失；发现记录缺失的，由培训管理专员依据线下签到表、纸质试卷在5个工作日内人工补录，补录记录标注“补录”及依据凭证编号。3.故障关闭：Ⅲ级故障由管理员关闭，Ⅱ级由副组长确认关闭，Ⅰ级由组长确认关闭，关闭前须完成登记表填写。六、事后复盘与改进（PDCA闭环）每次Ⅱ级及以上故障关闭后5个工作日内召开复盘会，输出三份材料：1.故障报告：时间线（发现—响应—恢复各节点实际耗时vs时限要求）、根本原因（用5Why分析至管理层面，不得止于“服务器故障”这类表象）、责任界定（供应商违约的启动合同追责条款）。2.整改清单：每项整改明确责任人、完成期限、验收方式，副组长按期验收，逾期未完成的在月度安全例会上通报。3.方案修订：本方案每半年评审修订一次；凡在实战中暴露的流程断点（如联系不上供应商对接人），当次复盘会即修订对应条款并重新发布。改进闭环验收标准：同类故障6个月内不再因同一根因触发Ⅱ级以上响应。七、培训与演练应急方案不演练等于没有方案。安排如下：1.桌面推演：每半年组织1次，参演人员为本方案第二章至第五章涉及的全部角色，模拟“考试日上午平台整体不可访问”场景，检验通知链路和替代方案启动时效，全程计时。2.实战演练：每年11月结合年度应急演练计划开展1次，要求备用平台完成一次真实的课程发布与学时导出，验证数据可用性。3.人员更替衔接：角色人员岗位变动时，原岗位人员在离职交接清单中列明本方案职责移交项，接任者10个工作日内完成方案学习和一次推演，由副组长签字确认。附件一：系统故障处置登记表（样表）字段填写内容登记编号GZ-YYYYMMDD-序号故障发现时间/发现人/发现渠道如2025-03-1209:05/李某某/学员报障故障现象描述具体页面、功能、报错信息、截图编号影响范围受影响人数、涉及培训班次、是否涉及考试故障级别及判定人Ⅰ/Ⅱ/Ⅲ级+判定人签字各级响应时间点发现/上报/启动处置/恢复/关闭（精确到分钟）供应商工单号平台工单系统编号处置措施及替代方案启用的方案、批准人数据核查结论学时/考试记录完整性核查结果，补录凭证编号根本原因5Why分析结论复盘会日期/整改项编号对应整改清单编号附件二：应急联络通讯录（模板，涉密信息按内部文件管理）角色姓名手机备用联系方式备注组长（分管安全副总）张某某138******企业微信24小时副组长（安全部部长）王某某139******企业微信—系统管理员（主岗）刘某某137******企业微信—系统管理员（备岗）陈某某136******企业微信—培训管理专员赵某某135******企业微信—供应商客户成功经理某某某188******服务热线400*SLA对接供应商7×24技术热线—400*****工单系统Ⅱ级以上必打通讯录每季度第1周由系统管理员核验一次有效性（逐个拨测），更新后重新分发至全体小组成员。附件三：学员故障通知模板【培训调整通知】各位学员：安全线上培训平台于今日XX:XX出现故障（故障现象简述），影响今日XX课程。请勿反复刷新登录。现启动替代方案：XX（备用平台链接/培训教室地点及时间）。原学时记录不受影响/将统一补录。咨询电话：培训管理专员135******。给您带来不便敬请