公安局设备故障应急演练脚本

公安局设备故障应急演练脚本第一章演练背景与总体设计1.1故障场景设定维度设定值备注故障类型公安网核心交换机双主控宕机模拟硬件级灾难影响范围市局—分局—派出所三级链路中断含视频专网、指挥调度、PGIS故障时长黄金4小时参考公安部《重大故障处置规范》演练时间周二14:00—18:00业务低峰期，降低真实影响演练方式红蓝对抗+盲演红方：运维科；蓝方：业务警种1.2演练目标量化表目标类别指标达标阈值考核方式故障发现监控告警延迟≤3分钟网管平台日志定位速度根因确认时间≤15分钟故障定位报告指挥协同指令传达耗时≤5分钟录音回放业务恢复关键系统RTO≤60分钟业务探针数据零丢视频卡口补录率100%存储校验第二章组织架构与角色职责2.1三级指挥体系层级岗位姓名（示例）联系方式职责关键词战略层演练总指挥副局长王××警务通短号60001决策、对外发布战术层现场指挥长科信支队长李××60002资源调配、阶段裁决执行层技术组长运维科长张××60003技术方案、风险把控2.2角色分工矩阵（RACI）任务\角色指挥长技术组长网络工程师警务指挥通信参谋政宣值班故障通报ARCIII拓扑切换CARIC—警力调度ICCARI舆情管控II—CCA>注：A=批准；R=负责；C=协商；I=知情；“—”为无需参与。第三章演练准备清单3.1环境基线核查检查项基准值核查命令演练前快照备注核心交换机CPU≤30%`displaycpu-usage`27%留足突发余量链路冗余度≥2条物理路由`displayiprouting-table`3条含MSTP+OTN视频云存储水位≤70%`vstorestatus`68%保证补录空间时钟同步≤50ms`ntpdate-q`12ms防止录像时标错乱3.2应急物料箱类别明细数量存放点责任人网络万兆光模块（10km）4只机房A—7号柜张××电源交换机主控备件2块恒温备件库刘××工具30m光纤卷轴1盘应急车1号王××文档拓扑速查手册（塑封）10份指挥台李××生活对讲机耳麦备用电池20块物资箱后勤3.3通讯频率与暗语场景明文暗语示例发现故障核心交换机宕机红桃A出现“指挥台，红桃A出现，重复，红桃A出现”开始倒代启用备用链路切换至二号方案“技术组执行二号方案”业务验证视频回传正常画面清晰“画面清晰，可收队”演练结束系统回切完成收剑入鞘“报告，已收剑入鞘”第四章演练流程脚本（T+时间轴）4.100:00—00:05故障注入时间操作者动作判定标准输出T+0导调组远程下电核心SW主控网管平台产生Critical告警告警截屏T+1监控席电话通知技术组长接通≤30秒录音T+3技术组长启动应急预案微信群发“红桃A”微信记录4.200:05—00:20故障定位步骤命令/工具预期结果实际记录（空白供填写）1.确认告警`displayalarmactive`主控板Down2.检查电源`displaypower`Power1:Absent3.查看日志`displaylogbufferreverse`存在“Hardwarefault”4.现场目检手电、放大镜主控板STATUS灯红色常亮4.300:20—00:40临时恢复（倒代）措施配置脚本回退脚本验证地址切换至汇聚层双机`vrrpvrid99priority120``priority100`54引流视频专网`route-policyVIDEOpermitnode10``undoroute-policy`摄像头段/16限速保障语音`qoscar4000kbps``undoqoscar`警务通网关4.400:40—01:30业务验证业务系统验证方法成功指标责任人110接处警模拟警情录入≤10秒派警指挥中心赵××视频监控抽测20路录像丢帧≤1%视频科钱××卡口比对布控车辆模拟过车3秒内预警交警孙××移动警务20部警务通刷身份证读卡≤2秒科信周××4.501:30—03:00故障修复阶段关键动作风险点预防措施备件上线主控板插拔静电击穿佩戴防静电腕带+金属机框接地版本同步`copytftpflash`空间不足提前`dir`查看，必要时清理旧版本配置比对`displaycurrent-configuration`vs基线缺省口令使用`diff`工具逐行核对灰度回切先切30%流量环路风险开启环路保护、观察STP拓扑4.603:00—04:00复盘与改进复盘维度问题举例改进动作完成时限监控盲区视频专网未覆盖Syslog新增2台镜像探针1周通报链条派出所收到信息滞后8分钟建立“一键短信”平台2周备件不足万兆光模块型号不匹配更新备件清单并加贴二维码3天操作手册命令行过长易输错制作图形化WEB向导1个月第五章监控与考核数据看板5.1实时数据表（演练当天）时间节点告警数量已恢复业务未恢复业务备注T+30min47条110接处警、警务通视频云存储存储链路未倒代T+60min15条视频云存储高清视频会议需要4K带宽T+90min3条高清视频会议—全部恢复T+120min0条——监控静默，进入观察期5.2关键指标雷达图数据指标目标值实际值得分（百分制）故障发现3min2min100定位时间15min18min85业务RTO60min52min95数据完整性100%100%100协同效率5min4min100舆情控制0负面0负面100>综合得分：96.7分，评定等级：优秀。第六章风险与合规项6.1法律合规速查条款内容摘要演练对照是否满足《网络安全法》第25条持续保障网络稳定运行建立倒代链路是《个人信息保护法》第51条防止数据泄露演练数据全部脱敏是《公安机关执法办案场所管理规定》录像不得中断备用NVR已接管是《国家网络与信息安全信息通报办法》重大事件2小时内通报30分钟内已通报省厅是6.2安全风险清单风险描述概率影响处置策略演练脚本外真实故障低高预留30%工程师待命倒代链路带宽过载中中提前限速+流量清洗误操作导致生产网全断低极高双人复核+命令预演舆情误读为黑客攻击低中提前准备通稿+网安巡查第七章附件与模板7.1故障定位报告模板（Markdown）```markdown故障定位报告编号：2025-06-24-001时间：2025-06-2414:07—14:22故障现象：公安网核心交换机主控板宕机，全网中断根因分析：1.主控板硬件Fault，芯片温度过高（78℃）2.机房空调冷凝水故障，局部热点证据链：日志：`%Jun2414:07:32SW-CoreERROR:Hardwarefaultonboard1`现场照片：见附件1处置措施：更换主控板+新增备品备件恒温柜预防措施：每月清洗空调滤网部署温度探针接入网管```7.2应急通讯录（节选）单位姓名手机短号备注省厅科信总队胡××