机房搬迁服务应急预案

机房搬迁服务应急预案

目录

第一节应急体系............................2

一、应急体系............................2

二、应急响应............................2

三、应急预案............................4

第二节搬迁过程中的应急预案................6

一、搬迁过程中设备硬件损坏.............6

二、设备开机无法正常运行...............6

第三节机房应急处理预案.................7

一、基本原则............................7

二、应急事件级别定义....................8

三、组织机构及职责......................9

四、应急响应机制.......................10

五、应急方案...........................12

六、后期处置...........................15

七、应急保障...........................16

1

第一节应急体系

一、应急体系

应急体系是招标人管理维护体系的重要组成部分G应急

体系建设的目的是保证业务的连续性，消除数据中心系统出

现的各种意外的中断，尤其是保护关键业务免受重大故障或

灾难的影响。

应急响应体系通过预防措施和恢复控制相结合的方式，

使由意外事故（如：自然灾害、事故、设备故障和故意行为）

引起的破坏减少至可接受的水平。

应急体系包括事件定位、影响分析、控制风险、限制损

害事故的后果、并经过演练后加以执行、以确保在所要求的

时间期限内恢复业务处理、减少事件的影响，降低系统的风

险。

二、应急响应

本投标人针对本项目可能出现的故障和问题，提供一般

性响应和紧急响应两套方案。

（一）一般性响应

在系统正常运行后，对于一般的故障情况，将由本投标

人驻厂工程师进行诊断和解决，1小时内解决故障。

若故障排除困难，将在接到故障申报后本地服务机构工

程师将给予支持，1小时内提出解决方案，2小时（平均时

2

间）内到达招标人故障现场（部分节点需依照其交通实际情

况有所延误），故障排除时间为2小时；

如再次出现故障排除困难的情况下，本投标人将再派高

级技术人员予以彻底排除，排除时间为12小时；本投标人

考虑到招标人对系统的使用情况，对于一般的故障情况下为

招标人提供7X24小时的响应服务。

（二）紧急响应

对于重要及关键的故障，本投标人在1分钟内进行响应，

4小时解决故障。对于重要及关键紧急故障本投标人将提供

24小时全天候响应服务。

本投标人针对上述两套方案，同样分为多级技术支持体

系为招标人提供多层次的技术支持，借助招标人多年以来服

务积累的雄厚的技术力量及经验，本投标人的技术支持队伍

提供对口技术服务，迅速响应招标人的疑问和问题，并提供

恰当和准确的解答。

1.现场代表：是招标人在需要技术支持时接触到的第一

个层面，是实施招标人项目的直接参与者。现场代表都接受

过严格的专业技术训练，完全能够处理绝大部分现场问题。

如果遇到短时间内无法解决的问题，现场代表会将其转交给

高级技术人员处理；

2.高级技术人员：更是由专精于某一种硬件或软件，并

经过工程实施和现场维护锻炼，在解释和解答问题等支持服

务方面具有丰富经验的高级技术工程师组成；

3

3.技术专家：本投标人拥有多名大型项目实施经验的计

算机硬件、软件、应用方面的专家、博士，他们不仅具有很

高的理论水平，而且经过多年的实践，掌握了丰富的项目管

理、实施以及系统维护的现场经验。

三、应急预案

应急预案的设计应当包括IT应急措施、非IT应急措施、

相关部门的协调、应急资源的保证、应急预案启动条件等。

(-)IT应急措施

对关键业务的应急保护，首先应该通过IT内部的应急

措施加以实现。这些IT措施主要是数据备份、网路备份以

及系统和网络的应急调用等。IT应急措施的设计应当具有可

操作性。

(-)非IT应急措施的设计

对关键业务的应急保护，尤其是与计算机信息网络系统

关联程度一般或者与计算机信息网络系统关联程度极高的

核心关键业务的应急保护，应当考虑采用非IT应急措施加

以实现。非IT应急措施是在关于计算机信息网络系统短期

内无法恢复的假设基础上进行关键业务连续性设计的。如，

切换到手工的方式进行业务的操作，或通过介质传输的方式

进行办自动业务操作等。

(三)相关部门的协调

网络系统的应急预案设计是从保护整体利益，降低网络

整体风险为基本出发点，因此，对关键业务的应急保护涉及

组织的各个部门和各个方面的配合和支持。关于关键业务应

急保护相关部门的关联方式是组织应急预案设计的关键。

（四）应急资源的保证

应急预案设计应当将应急活动程序化，并通过程序化确

定执行应急预案所许的组织资源，包括人员、设备、资金和

其他物资，尤其是人员的保证和其他资源的同意指挥调度

等。应急资源的保证还包括供应商、开发商、系统集成商，

以及其它外协和相关单位支持。

（五）应急预案的启动条件

组织应急预案的启动条件是组织应急预案设计的重要

内容，也是实施应急预案的必要条件。组织应当严格规定应

急措施的实施和应急资源调用的程序、决策者和责任人。同

时，启动应急预案的决策信息必须来自组织规范的报告制

度，并有记录及可追溯。

（六）应急预案的演练

组织的应急预案正式批准之前都必须进行演练。演练也

可以在仿真条件下进行，但参加演练的人员必须与实际执行

应急预案的人员的组成相近。

应急预案演练是组织应急预案完善的重要工作，包括应

5

急预案演练的计划安排、演练过程和效果的详细记录，演练

活动的评估报告和应急预案改进建议等。

第二节搬迁过程中的应急预案

一、搬迁过程中设备硬件损坏

针对系统运输过程中硬件损坏，我们采用加强运输管理

来规避此处风险。另外对网络设备采用备份操作系统文件、

配置文件进行应急，应用系统采用数据级备份进行系统应

急，同时准备相应备机、备件，紧急时进行硬件或系统替换，

并及时联系进行设备维修。

二、设备开机无法正常运行

在搬迁前进行设备开关机测试及搬迁后设备开机过程

中，如果发生设备无法正常运行故障时，按照下图所示流程

进行处理：

9

设备出现故障，

无法正常使用

艘榭章信息，

进行故障分类

生成问题报告，

彳会技术支持库

是制定解决方案，

・安排工程师处理

图5.2-1设备维修流程图

第三节机房应急处理预案

一、基本原则

1.居安思危，预防为主。实行突发事件统一管理、统一

指挥、各级负责的原则；

2.统一领导，分级负责，全面规划、及时发现、快速反

应、措施果断的原则，并按照事件级别迅速上报相关领导和

责任人。

7

3.制度规范，加强管理。严格按照事件处理流程规范操

作，使突发应急的工作规范事件化、制度化。

4.快速反应，协同应对。当突发事件发生时，各级要立

即按应急预案，投入应急工作；加强各个部门配合协作。形

成统一指挥、反应灵敏、功能齐全、协调有序、运转高效的

应急管理机制。

5.主动报告原则：当突发事件发生后，要及时报告应急

预案实施情况。

二、应急事件级别定义

根据网络与信息安全突发公共事件的可控性、严重程度

和影响范围，一般分为四级：I级（特别重大）、n级（重

大）、in级（较大）、IV级（一般）。国家有关法律法规有

明确规定的，按国家有关规定执行。

i.i级（特别重大）：重要网络与信息安全系统发生全市

性大规模瘫痪，事态发展超出相关主管部门的控制能力，对

国家安全、社会秩序、经济建设和公共利益造成特别严重损

害的突发公共事件。

2.II级（重大）：重要网络与信息安全系统造成全市性

瘫痪，对国家安全、社会秩序、经济建设和公共利益造成严

重损害，需要跨部门、跨地区协同处置的突发公共事件。

3.III级（较大）：某一区域的重要网络与信息安全系统

瘫痪，对国家安全、社会秩序、经济建设和公共利益造成一

定损害，但不需要跨部门、跨地区协同处置的突发公共事件。

8

4.IV级(一般)：重要的网络与信息安全系统受到一定

程度的损坏，对公民、法人和其他组织的权益有一定影响，

但不危害国家安全、社会秩序、经济建设和公共利益的突发

公共事件。

三、组织机构及职责

(一)应急领导小组组织机构

组织机构框架图

(二)应急领导小组职责

1.应急总指挥职责

(1)保证在任何时间，及时协调应急行动所有涉及的

岗位人员；

(2)提供必须的紧急响应设备；

(3)在紧急情况下全面负责紧急行动；

(4)在必要时向外界求救，例如：119、110、120等。

9

2.应急副总指挥职责

(1)在总指挥领导下具体开展工作，当总指挥不在时

履行总指挥职责；

(2)根据获得的应急信息下达命令。

3.各相关设备负责人职责

(1)负责尽快收集信息向应急总指挥汇报事故情况；

(2)负责现场临时设备抢救和走事态的控制；

(3)听从上级指挥人员的指挥。

4.应急小组成员职责

(1)值班人员平时应做好应急事件的监控、预警工作，

当应急事件发生后，迅速生产事件上报相关领导，并进行先

期处置，如有必要通知二、三线工程师。

(2)二线、三线工程师在接到应急信息后，应积极配

合值班人员进行先期处置，迅速赶往故障现场提供技术援

助。

(3)对于在应急故障处理期间发生的新问题、新情况，

应认真登记，及时上报。对于超出《应急预案》界定的应急

事件，应及时汇报应急领导小组，争取尽早提出补救措施进

行恢复。

四、应急响应机制

(一)基本处理流程

1.值班人员平时应做好应急事件的监控工作，对于突发

事件应认真分析、准确判定故障发生的数据域，负责跟踪该

10

事件直至其结束C对于不在运维中心的故障，应在第一时间

内通知负责人去现场处理，密切关注事件流程及进展情况，

并做好登记工作上报领导。

2.正常情况下，要求值班人员在30分钟内进行事件确

认。如果属于一般事件则按照事件流程进行分派处理，否则

应迅速启动《应急预案》，并严格按照《应急预案》所规定

的步骤快速实施应急处置，及时汇报上级领导，掌握实时处

理情况。

3.在处理过程中，如需其他部门去现场增援处理，应及

时向上级领导部门汇报，协调沟通，尽快联系技术工程师或

厂家技术支持赶赴现场援助处理。

（二）机房应急开关机具体措施

机房各设备关闭顺序如下：

（三）服务器及存储设备故障处理

it

故障发生

五、应急方案

（一）网络故障事件应急预案

1,发生网络故障事件后，系统使用人员应及时报告应急

小组。

2•应急小组及时查清网络故障位置和原因，并予以解

决。

3.不能确定故障的解决时间或解决故障的期限并属较

12

大（III级）及其以上的，应急小组应报告所领导。

4.网络系统故障突发事件分级：

故障等级故障现象

1级网络完全拥塞或设备宕机

网络或设备处理能力严重受影响，对最终客户

的业务运作有严重影响

网络或设备故障对重要的客户（公司经理级或

重要的部门）造成严重影响

2级网络或设备的性能严重下降，对最终客户的业

务运作产生重要影响

部分区域网络故障

一般网络节点发生故障

大部分客户的网络通讯质量下降

3级网络或设备性能受损，但最终客户大部分业务

仍可正常工作

报警出错和操作命令反常

4级其它一般的故障，不影响系统的整体运行，不

影响大部分客户的使用

（二）服务器故障应急预案

1.服务器故障后，应急小组确定故障设备及故障原因，

并通知相关厂商。

2.根据服务器修复和恢复系统所需时间，由所领导决定

13

是否启用备份设备。

3.如启用备份设备，在服务器故障排除后，应急小组在

确保不影响正常业务工作的前提下，利用网络空闲时期替换

备用设备。如不启用备份设备，应急小组应积极配合相关厂

商解决服务器故障事件。

（三）空调设备故障处理

若空调损坏，应第一时间通知厂家上门进行维修，井及

时报告信息部相关领导请示，获得授权后按机房设备关闭顺

序关闭各类设备。

（四）消防设备故障处理

一旦机房发生火灾，应遵照下列原则：首先确保人员安

全；其次保护关键设备、数据安全；三是保护一般设备安全；

人员疏散的程序是；机房工作人员立即按响火警警报，

并通过119电话向公安消防请求支援，所有人员戴上防毒面

具，所有不参与灭火的人员按照预先确定的线路，迅速从机

房中撤出；

人员灭火的程序是：首先切断所有电源，启动自动喷淋

系统或使用灭火器，灭火值班人员戴好防毒面具，从指定位

置取出泡沫灭火器进行灭火。

（五）电源设备故障处理

在紧急情况发生时，应按如下步骤进行关机：

14

1.确认所有负载均已安全关机。

2.关闭UPS负载电源。

3.将UPS的系统启用开关切换到。ff的状态。

4.将DC电池连接断路器切换到off的位置。

5.将所有电池拉出到红色电池断开线以外。

6.断开PDU上的断路器。

7.将PDU后面总输入断路器切换到断开位置。

8.将每个上行主电路断路器切换到断开位置。

（六）灾害性事件应急预案

1.一旦发生灾害性事件，应急小组每一位成员都应有责

任在第一时间进入机房抢救服务器及存储设备。

2.应急小组对服务器及存储设备的损坏程序进行评估。

如服务器损坏或存储设备损坏无法使用，立即联系相关厂

商，进入维保服务程序。

3.根据服务器或存储设备修复和恢复系统所需时间，由

所领导小组决定是否启用备份设备。

（七）其他突发事件应急预案

应急小组立刻派出技术人员进入现场，制定相应措施，

根据实际情况灵活处理，并按要求报告所领导小组。

六、后期处置

1.故障排除后，应急小组向各部室发出故障解除、系统

15

恢复正常运行通知。

2.系统恢复运行后，相关操作人员尽快通知参保单位和

个