大数据中心运维解决方案

大数据中心运维解决方案1运维目标及对象 42运维工作内容 4 6 6 74运维服务方案建议书 84.1运维支持人员 84.1.1驻场运维 8 9 94.2.1云平台运维 9 4.3服务流程 4.3.1运维流程 事件管理 变更管理 4.3.4双方工作职责 4.4节假日运维保障 4.5服务承诺 4.6工作规范与考核 4.7提交文档 4.8项目验收 5.应急处置预案 5.1应急预案 5.2应急方案制定更新与演练 5.4应急演练 产品名称弹性计算服务关系型数据库服务开放存储服务负载均衡服务开放结构化数据服务开放数据处理服务分析数据库服务数据管理服务云产品管理控制台1)资源管理2)产品技术支持3)告警处理及监控优化4)日常巡检5)故障处理6)问题收集及跟进用户用户上门运维Goc职能组断是否故意&yes-程处理完成硒需费上了运维流程关键节点说明工作内容简述主要关键节点说明问题提交：用户有任何问题，通过工单平台以工单的形式提单到GOC。工单流转：用户在阿里官网通过工单系统提交工单会直接到GOC-监控中心团队。(注：GOC只处理阿里云平台和产品相关故障，不涉及应用层问题。)视问题需要，GOC将协调现场支持，现场支持人员可在4小时内到达交付物《工单处理记录》故障处理流程如下：确认故障信息关键点说明如下：流程关键节点说明工作内容故障主要关键节点说明：故障来源有2类：监控发现和用户反馈故障需要确认。计划中的变更引起的异常，用户使用造成的问题等不判定为故障。报障信息：客户报障需要描述准确故障现象、业务影响、页面URL、IP地址、问题发生时间、报错前操作截图和报错截图、ping和tracert截图等，可引导客户提交工单来提供故障信息。(详情确认故障后5分钟内发送故障通告。如果故障处理超过2小时，故障支持每2小时更新进展。故障中如需现场支持，GOC将协调人员在4小时内到达现场。故障后将对问题进行跟踪，包括：问题原因、问题跟进责任人、改进措施、预计解决时间点、验收标准等。交付物运维支持包括驻场运维及二线运维，驻场运维可以通技术支持提供7*24服务，负责日常工单转派和紧急事务的协调。技术支工单入口内运维服务提供人员提交工单。云平台巡检工作内容请参见-附件2《***项目云平台巡检手册》项目1.数据备份、迁移类1、数据库、文件备份与恢复；2、应用程序备份与恢复；3、多台服务器间的数据库同步；件、附件等迁移；6、数据迁移；1、系统、网站异常排查，日志维护、审计；2、系统账户维护、异常账户检查；3、系统各类服务、端口开启与关闭；4、系统、站点漏洞排查、漏洞修复、病毒及木马清理、防火墙策略、安全加固及调优5、各类应用软件安装配置、参数配置、版本6、磁盘分区、加载及清理空间；7、数据库配置、重装、升级，报错联调；8、实时监控系统运行状态检查，联调9、系统、网络、数据库、站点运行状况巡检，出具巡检报告；10、系统资源、应用程序、进程优化；11、木马、黑客攻击防范；12、系统、应用程序高可用配置；13、应用故障、报错排查；14、网站负载排查、网站配置文件修复、网站代码调试；15、站点故障排查(针对网站无法打开，访问慢等情况)Apache、nginx、MySQL、FTP等软件安装及参2、伪静态组件安装及调试；3、云平台安全环境配置；4、云平台状态监测；5、多机负载均衡配置；具体工作内容备注维护1.巡检频率：每周一次状况、操作系统日志。3.每周进行系统分析并提交报告；SAN网络维护1.巡检频率：每周一次3.每周进行系统分析并提交报告；1.巡检频率：每周一次2.检查备份作业、验证备份有效性、备份介质异地存放。3.每周进行系统分析并提交报告；存储设备维护1.巡检频率：每周一次2.检查硬件状态灯、检查系统配置情况、检查系统日志3.每周进行系统分析并提交报告；1.巡检频率：每周一次2.检查机房环境温湿度、配电设备运行情况、空调运行状况等。3.每周进行系统分析并提交报告；置(大)1.根据应用系统要求调整服务器、存储配置2.较为复杂的，如排查故障。3.按每套系统每年一次调整计算厂商进入机房，需陪站置(小)1.根据应用系统要求调整服务器、存储配置。2.较为简单的，如更新程序。3.按每套系统每半年一次调整计算厂商进入机房，需陪站具体工作内容网络技术支持网络诊断解决，按每台设备每年发生1次网络故障计算网络链路物理问题修复维修内外网网点的故障，按每个物理点位每5年发生一次故障计算网络设备配置信息备份对网络设备的配置信息进行备份，以备设备故障时恢复。固定每半年1次，更改后立即备份。核心设备状态检查，网络设备路由状态查看每周1次网络设备巡查1个月一次(包括内网和外网)。内网机房巡检内网机房巡检每周一次具体工作内容备注服务台1.接听热线电话。低于50%3.监督现场工程师工作，将事件处理结果反馈给用户。4.每周分析报告，对于高频事件，升级为问题，交由二线解决。服务台是运维工作的总调度(大)1、现场技术支持，按5年1次频率计算。2、复杂的，原因未知的故障，如软件冲突、硬件损坏更换。厂商现场维修需陪站，3、包括PC机、打印机、读卡器等各种硬件设备和操作系统。(中)1、现场技术支持，按2年1次频率计算。2、较为复杂的，如重装系统、重装软件、不能按照常规方法排错的。3、打印机故障，如卡纸、配件损坏。4、包括PC机、打印机、读卡器等各种硬件设备和操作系统。(小)1、现场技术支持，按1年2次频率计算件故障、软件调试配置等。3、包括PC机、打印机、读卡器等各种硬件设备和操作系统。检1.巡检频率：每季度一次2.检查客户端工作是否正常、清理灰尘、整理线缆。3.检查系统配置和参数是否与文档一致。客户端配置调整1、根据应用系统需求或网络需求更改客户端配置2、更改配置时应符合安全规定。3、按每年一次计算参与组织用户培训1.参与组织新用户信息系统培训核3.每季度一次，每次2场日常行政事务1.设备发放、管理2.传送公文、领用办公用品3.其他办公室行政事务4.3服务流程事件管理=流程接口=判断事件管理流程事件管理流程侦测和记录调查和解决关闭维人员0事件的值测始束43专家支持团队原厂商/第三方运维服务提供商华胜天成驻场运维支持团队6289输出1.事件侦支持人员填写的具自动创建的事单表单中并进行分配。2.分类和包括事件的优先级、影响度、紧急度和分类；的事件单通过查询知识库尝试解决事件；输出如果驻场支持团队支持可以解决事复”;如果驻场支持团队无法解决事件，则将事件根据分类分派给相应的专家支持团队或协调联系第三方设备厂商更换备件支持；对于无法分类的事件，驻场支持团队人员将事件升级给客户方管理3.调查和分类和分配的事断，给出解决方案，流程进入步骤"4.解决和恢复";提交事件经理，重新分派此事件；需要找到事件的根本原因，专家支持为事件创建问题；或提交给厂商支持进行处理。4.解决和已解决的事商联系原厂商/第三方维保服务提供商进行故障处理，或进行备件更换故障处理记录6解决和故障，或更换备件，恢复运行。已解决的事理汇报由运维支持团队向客户提交故障处理报告故障处理报告8.与用户确认已解决的事件单事件解决后，由驻场支持团队人员与客户方管理员进行确认，如果用户没有确认事件的解决，则重新分配该事件继续进行调查和诊断。如果有新的解决方案，则更新知识9.事件关闭已得到用户确认的事件单得到用户确认后，可将事件关闭，关闭前需要检查信息是否都记录正关闭的事件单10.监控事件该步骤监控所有事件的生命周期；对关键时间点进行监控，并根据SLA、OLA、UC进行升级。流程接口团队专家支持团队客户团队原厂商/第商台、故障工单用户申报故障、负责故障侦测、受理、记录、分类和初始升级负责转派工单、程协调、跟踪原厂商/第三方维保服务提供商进行故障处理、备件更换负责协助维保服务提供商执行故障处理、协助负责故障处理结果审批故障审批流程告负责故障解决后，客户方管理员审查、确认负责负责人/组织机构负责事件管理流程的设计和改进；负责事件管理流程文档的发布；负责提高事件处理的效率和效果，实现流程既定的绩效指负责管理系统中的事件模块，以满足应用的变化和流程的改监控和分析事件管理工作量；确保受到影响的用户及时了解其事件的进展；协助服务台经理处理未及时接收的任务、推进事件的解决；协助服务台经理对被拒绝的事件进行协调；负责事件的分析回顾，并组织相应的培训以提高一线解决能负责事件汇总、生成报告并汇报管理信息(周报、月报、季报和年报)。描述负责人/组织机构持创建新的事件/代理事件的提交人创建事件；通过查询知识库，尝试解决事件；创建问题，并将事件与问题相关联；对于事件/问题进行处理，包括分派、等待、接单、解决等操向知识库提交解决方案。师专家支持团队创建新的事件/代理事件的发现人创建事件；尝试解决事件；创建问题，并将事件与问题相关联；对于事件/问题进行处理，包括等待、接单、解决以及要求重新分配等操作；向知识库提交解决方案；必要时，将事件生成问题或升级到三线支持。后台专家厂商、第三方维保服务提供商、客户管理员等支持人员及时受理升级的故障给出反馈；向驻场支持团队提供知识；必要时，厂商/第三方维保服务提供商进行故障现场处理或备件更换。用户IT部门管理员厂商务提供商变更管理变更经理变更主管驻场运维团队变更经理变更主管驻场运维团队变更顾问委员会6CAB审批紧急变更子流程5是否是否需要7248务变更请求者1序号步骤名称责任人输出说明1者需求及相关信息系统中记录的更请求提出变更请求，跟相关部门或用内部的任何人都可以成为变更请系统根据变更类别，自动提交给合适的变更主管对变更加以描述，初步判断变更类型，风险等级等步骤名称责任人输出说明2划主管系统中记录的初始经过完更请求，包必需的正确信息变更主管负责对变更请求者提交的RFC进行检查，如有必要则对RFC相关信息完善或更正，以保证RFC的正确性和完整性查询配置管理数据库初步评估变更的类型、风险等，必须提出可能会影响哪些业务系统和部门，以供决策参考对紧急变更，确认后立刻提交给变更经理按照401紧急变更子流程处理对标准变更，协调资源，制定变更计划，包括实施计划、测试计划、回退计划、配置项更新计划(资源管理更新计划)等实施计划要求有详细的操作命令，并包括实施变更的具体时间、操作执行人、核查人以及实施变更后观察期内的监控人员等将实施计划、测试报告、回退计划、配置项更新计划等提交给变更经理审批析结果变更计划3技术方案驻场师术实施方案根据变更主管提出的变更计划，从技术角度制定实施方案及实施计划4主管方案审批意见案进行审批、确认5审批批准的求变更经理接受变更请求，评估和确定变更的类型、风险等级等评估分析结果审阅所有提交的计划，包括实施计划、测试报告、回退计划、配置项更新计划(资源管理更新计划)等计划变更经理将风险等级为重大或高的变更报送变更委员会审批，变更委员会的成员由变更经理确定变更经理可以做出驳回或批准的意见序号步骤名称责任人输出6管理委员会结果计划批准的变更请求导、用户或相关厂商组成，对变更实项更新计划等审阅的意见7收集审批意见准的审批意见以建议变更主管取消变更或重新计划等如果审批意见是批准，安排和分派任务否则，检查、测试和计划，可以取消或重新计划8安排和分主管实施方案组织变更实施人员，做好实施前准备工作(包括沟通准备)向所有相关部门发出变更通告根据变更计划和审批意见，制定实施方案并对具体的实施任务进行分派审批意见实施任计划9实施任务单主管施任务单由变更主管向驻场运维团队派发实施变更实施人员计划实施结果在必要时启动恢复计划如果在变更实施前没有完成指定中完成文档列表中全部文档的上载实施实施实施报告驻场师施报告过程，向变更主管提交实施报告回顾变更主管对需要回顾的变更，由变更主管组织进行回顾结果对于需要CAB参与回顾的变更，由经理邀请组织相关人员参与回顾详细实施对回顾结果进行整理归档序号步骤名称责任人输出说明计划有文档关闭变更主管已回顾的关闭的求变更主管和变更经理针对变更的优先级和风险等级更新变更记录，关闭变更记录变更由变更经理进行关闭在变更关闭前需要检查是否所需全的变更方可以关闭。流程接口客户驻场运维团队根据客户方提出的变更规划，提交变更实施技术制定变更技术方案及变更审负责协助审批后，转派负责变更审批，生成变更计负责变更回顾后，告负责变更实施后回顾，提交变更实施报告负责负责角色组织机构必要时提出变更申请，创建变更请求并提交给相关相应变更主管填写变更分类填写变更内容，描述变更需求如果是紧急变更，必要时准备参加紧急变更委员会召开的在变更处理过程中提供必要的信息客户管理员可以根据专业领域以及不同的变更种类，分派不同的人员作为变更主管。对于某些重要变更，还可以将变更主管和估、变更计划、实施方案、详细实施计划等方面。以下分客户管理员组织机构别以“流程管理”和“归口管理”两个方面描述变更主管的职责：流程管理：由与变更请求内容相关的具体专业领域的负责人担任确保记录的正确性、完整性和必要性，必要时拒绝无关、负责领导变更的构建/测试，实施和回顾负责收集与该变更有关的部门或小组的意见，分析变更对于应用的影响制定变更实施方案和详细实施计划确保变更在预定的时间，使用适当的资源和成本完成负责变更指定文档列表中要求的文档是否上载完全的检查负责组织对于变更的回顾负责关闭简单变更管理流程：确保日常工作符合流程及相关工作流的规定从审批的角度及时检查每一个送来的变更请求负责协调各小组在变更中的配合确保所有的变更都必须通过变更请求提交，而不是经过其他途径关闭标准和紧急变更推动变更顾问委员会(CAB)的工作：为每一次标准变更确认变更顾问委员会成员推动CAB会议准备CAB会议日程为CAB会议提供必要的信息管理信息：维护有关的管理信息将报表分发给所有相关的技术、业务和管理人员员会变更顾问委员会(ChangeAdvisoryBoard,CAB)是深圳电信的一个对变更进行评估和决策、并决定批准或者拒绝某个变更请求的虚拟组织变更经理负责发起CAB讨论会议由客户范围内的技术、业务和管理人员组成的虚拟小组，包括：描述组织机构变更经理将组织、协调CAB讨论、评估每个需要审批的变需要对变更进行更请求，由CAB决定批准还是不批准这个变更请求。CAB审批的管理层应当被授权决定变更所需的预算、人力资源等。CAB也将在变更执行的过程中决定如何解决问题、与有关人员沟通解的技术人员与员协助变更主管制定变更实施方案、变更实施计划记录实施相关的信息，确保文档的完整性负责实施和测试变更完成后，进行监测，并记录监测结果与变更主管沟通，通报变更实施的进度和结果驻场运维团队=判断=流程接口<理报表711理2库数据、模型维护中请、中批56生成配置管理步骤名称负责人1客户IT部门管理层/咨询顾问该步骤是配置管理的起始点。其目的是规划和定义配置管理的目标、范围、目的、政策和流程步骤，以及配置管理中涉及的人员组织。初始设置、创建和发布配置管理数据库，也是该步骤的工作内容之一。2护客户IT部门管理员/咨询顾问对于新的请求，为了确保配置管理数据库中现有的数据模型能够记录新的配置项的属性和关系。因此，本步骤主要考虑选择和鉴别所管辖的配置项的信息结构，包括属性、配置项之间的关系和配置文档3配置项模型、数据调整申甲方配置经员制定配置项模型、数据调整申请单，并进行审批确认将配置项模型、数据调整申请单，转派驻场运维团队人员进行更新；4数据维护客户管理员该步骤确保在数据的接收到废弃的过程中，只有经过授权的配置项才能被接受和记录到配置数据库中。还应当确保对于步骤名称负责人配置项的增加、修改、替换或者删除都附有适当的控制5配置管理审核、回顾客户管理员应当定期进行配置项的回顾和审核，以确保物理环境中的部件的存在性，并检查配置项信息是否正确记录在配置管理系当记录的数据与物理存在的配置项之差异，如果需要，则修改以减小存在的差6配置管理报告按照集团管理要求，定期生成配置项统计报表根据客户管理层决策、日常运维、项目建设等活动的需要，提供配置项报告7客户IT部门管理层/咨询顾问根据配置管理审核结果、业务支撑中心系统和组织调整、管理平台改造等状况，调整配置管理流程，以提高流程效率、适应新的管理需求阶段流程接口客户驻场运维团队设计阶段负责协助新配置项信息负责数据审查负责维护阶段配置项模型、数据调整申负责角色组织机构负责人对整个流程的执行情况和结果负责发布衡量标准和目标，以提高流程的有效性和效率鉴别和管理关键的成功因素控制并领导流程改进活动批准或拒绝违背流程的事例定义配置管理团队的角色、职责和义务客户方部门管理层描述负责人/组织机构向同级的其他流程负责人以及业务支撑管理层汇报流程的状态审核、抽查配置管理流程的执行情况作为配置管理流程的代表，与其他部门沟通是配置管理具体活动的负责人，包括带领执行配置项的鉴别、监控、控制、维护、审计等工作。配置经理将从整个业务支撑部门的层面管理配置管理流程和配置管理数据库。规划和制定配置管理的范围；制定配置管理策略；负责规划的结构，审批库结构的变更；制定配置项(Cl)的收集和建设的步骤；负责确保配置管理流程的日常顺利运行，以确保的可靠性和准确性定期对配置管理数据进行审计和验证；作为的责任人，当用户对配置管理流程不满意时，作为用户投诉升级的第一线；必要时将问题升级或将例外情况报告给管理层建立配置管理数据库的安全控制手段，严格控制对的访问权限，确保惟有授权的配置项才被使用；确定配置管理报表的格式和内容；定期生成配置管理报告，定期召开配置管理回顾会议。开发配置管理的信息、标准、步骤、使用的工具和技术的需求监控配置管理流程的有效性和效率，提出改进流程的建议员由各专业技术人员分别担任配置管理员，维护各自所管的设备或应用。为配置经理、配置项维护员提供配置管理相关的专业咨询；控制、审核配置管理数据库中本专业的配置信息。定期参与审核配置数据当问题解决过程中需要配置专家时，负责提供配置管理方面的当某个项目需要配置管理信息时，作为项目的技术资源提供帮助当问题升级/解决、项目开发、服务支持回顾会议等活动需要配置专家时，负责参与和协助提供改进流程的建议客户管理员护员配置管理数据库的实际操作人员，负责记录、修改数据库中的配置项信息。根据定义好的逻辑和物理的配置项属性和相互关系，收集配置项信息，创建初始的配置管理数据库；负责配置管理数据库的维护，根据配置经理的要求，调整数据模型和信息；定期配合配置经理，参与审核工作；确保配置审核出的差异得到修正，配置数据库得到相应的修改流程接口维团队专家支持团队维团队原厂商/第三服务商障工单用户申报故障、服务请求负责故障侦测、受理、记录、分类和初始升级负责协调厂商转派工单、跟踪处理过程方维保服务提供商进行故障处理、备件更换负责协助提供商执行故障处理、负责提交故障处理报告负责故障解决后，客户方管理员审查、确认负责流程接口客户方团队创建case到服务台的故障、服务请求或咨询等，由服务台去负责单由服务台制定现场支持任务单，转派工程师现场支持负责理，由服务台联系厂商，执行厂商故障申报流程，并对故障处理过程进行跟踪负责协助流程接口流程描述驻场运维团队术方案根据客户方提出的变更规划，提交变更实施技术表负责协助审批后，转服务管理平台/负责变更审批，生成变更计划时间表负责告负责变更实施后回顾，提交变更实施报告负责变更实施审批、确认负责流程接口驻场运维团队设计阶段配置项的定义和信息收集负责协助在变更管理流程控制下更新配置项信息负责数据审查负责维护阶段配置项模型、数据调负责原厂商*o000*0*00*oo000率00等000o0*注：■--主要责任方，承担主要的工作责任O--组织或审核方节假日主要是指国家法定假日，包括元旦、春节、五一、国庆。为保证云平台的正常稳定运行，节假日期间的运维保障工作安排如下：●节假日前对云平台进行全面深入的巡检工作，排除各种潜在的故障隐患，保证云平台在节假日期间的平稳运行●节假日前开始对云平台实施封网操作至节假日结束，封网期间停止一切线上变更和升级操作，避免由变更升级操作导致的影响，如有紧急变更操作需要得到云产品团队负责人、专有云技术经理、客户运维团队负责人的同时审批通过●节假日期间云平台实行7*24小时oncall支持，如有故障发生，可第一时间联系总负责人及一二线人员，支持人员在4小时内到达现场处理提供5×8小时驻场运维，7x24小时响应，不限量响应客户IT部门维护人四晚5:30到次日早8:00)、周末班(周五晚晚5:30到周一早8:00),节假日值班(国家法定节假日),值班后可在下一工作日进行倒休。乙方承诺派驻现场的驻场工程师相关工作经历3年以上，服务人员简历需技术服务请求；负责终端设备的巡检工作；(人工服务，第一条行为规范第三条考勤管理迟到、早退每次扣10元，月累计迟到、早退累计超过5次(含5次)者，每次扣50元。工作的均为旷工，旷工每天扣除1000元。累计旷工3天(含3天)以上者，第四条绩效考核额的2%,以后每出现一次故障，在上一次扣款额度上，增扣合同金额的1%,所有扣款累计不得超过合同金额的5%。序号交付物名称备注1服务器主机巡检表每日2数据库巡检表每日3网络设备巡检检表每日4服务器主机巡检表每月5数据库巡检表每月6网络设备巡检检表每月7每日8服务器物理搬迁记录发生时提供9服务器物理变更记录发生时提供服务器安装与启动服务报告发生时提供磁带机磁盘柜安装与启动服务报告发生时提供现场职守服务报告每月驻场工作签到表每日维护工作日志每日故障分析报告每月绩效考核表每月●运维初始化服务验收在初始化服务实施结束阶段，和客户将根据方案计划，对于设计文档共同进行回顾与验收，对于初始化服务的结束认可将自动标志日常运维服务阶段的开始。1开放平台系统支持信息收集收集信息是否完整2建立完善ITIL运维服务管理体系(事件、配置、变更)运维体系是否建立3部署运维自动化系统(巡检工具)工具是否部署、使用4建立日常运维管理文档体系文档体系是否建立5运维支持过渡渡是否顺利交接●驻场运维项目验收在项目服务期内，项目团队计划一段时间进行一次项目总结和评估，在每个服务年度结束时进行年度服务总结和评估，每次项目总结和评估后，项目团队将向客户方提交服务总结报告。项目结束前一周，我方将向客户提出服务项目验收请求，项目验收应履行正式验收流程，双方成立专门的验收工作组，负责组织、监督和裁决整个项目生命周期内服务交付情况，并给出最终验收意见。应急处置预案是为了提高云平台运维人员应对云平台紧急事件的响应云平台应急处置预案具体内容请参见-附件1《***项目云平台应急预案名称等级组织部门客户信息中心涉及组织及职责客户信息中心：故障处理总协调、技术方案审定公司服务器网络、核心路由器遭到破坏性攻击，网络性能严重下降，各应用系统不能提供正常服务及早发现攻击根源，将影响降低为最少。通知相关人员到岗，恢复网络通信。保留现场。追查原因。1.对在线系统不造成影响2.在主要人员变更和网络结构发生变更时要进行演练。3.演练前应填写工作单，确保系统有最新的全备份。4.演练结束形成演练总结报告。预案流程说明1.事件报警与确认：代维工程师每天定时对网络进行监测，及时发现网络中的异常流量及其它故障。当代维人员巡检发现情况或网络用户举报发现情况时，应由代维人员首先判断是否发生服务器、网络、核心路由器遭到破坏性攻击，判断网络性能下降的严重程度，启用相关应急预案(该预案在服务期内由制定);2.收集故障现象(不同网段ping服务器网段丢包率、延迟率)通知相关人员，保留现场。3.判断是否是某个主机系统或应用系统故障，如果是启动相应的应急预案。3.判断网络是否存在异常流量，发现可能存在的来源，是否有故障线路和设备。4察看核心路由器和服务器网段交换机设备状态及配置信息，并尽可能导出系统日志并分析，联系设备厂商提供现场支持，及早发现故障原因，及时切断异常信息来源，确定是设备故障尝试重新启动设备，不能恢复时更换备用设备；5.判断网络中是否发生病毒爆发事件或黑客供给事件，如果是启动相应的应急预案6.安全审计及事故分析通过网络设备日志、防火墙日志、入侵检测系统日志等，对事件进行审计，对损失进行评估，追查事件的发生原因。7.消除隐患、调整策略：根据审计结果，修正防火墙、入侵检测、主机防护系统策略。8.损失评估、责任追究：由信息中心、运维团队共同评估损失，追究责任。9.安全报告、归档：安全报告、归档预案名称数据库系统应急预案等级高组织部门客户信息中心涉及组织及职责客户信息中心：故障处理总协调、技术方案审定运行数据库系统的主机由于不可抗力故障，导致数据库服务中断，影响业务系统对外服务。通知相关人员到岗，按照业务系统的要求，恢复数据库系统，应用部门核实数据恢复状况，同时查明原因，做好事故分析。1.对在线系统不造成影响2.在主要系统管理员人员变更和服务器、操作系统、数据库实例名等发生变更时要进行演3.演练前应填写工作单，并做全备份。4演练结束形成演练总结报告。预案流程说明1.事件报警与确认：驻场工程师每天定时、时时检查系统数据情况，对数据进行监测，及时发现数据库物理资源的异常及其它故障。当故障发生时，首先确认数据库服务器、操作系统、数据库系统能否正常启动，如都不能启动完成修复工作，启动本应急预案。2.数据库服务器故障，通知相关人员，保留现场，分析网络、主机、操态和资源情况。(1)通知主机系统管理员、安全系统管理员、应用系统维护管理员、数据库备份管理员。(2)确认网络是否正常、主机是否正常、操作系统及主机资源