一卡通平台系统应急预案

1、一卡通平台系统应急预案深圳数智国兴信息科技一卡通技术部2021-01-13修订历史记录版本日期AMD修订者说明V1.02021-01-13AM刘运亚V1.12021-01-15AM刘运亚A-添加,M-修改,D-删除目录总那么51.1. 编写目的51.2. 适用范围61.3. 编写人员62 .应急处理流程62.1. 原那么62.2. 触发条件62.3. 实施流程72.4. 责任分工73 .系统描述113.1. 物理拓扑图113.2. 设备列表113.3. 系统软件安装/部署123.4. 应用软件安装/部署123.5. 数据库安装部署131.1 安装Windows2021131.1.1 用光盘启动

2、系统131.1.2 安装Windows2021131.2 安装数据库141.3 加载系统数据库141.4 启动操作144 .WEB效劳器安装部署144.1 安装Windows2021144.3 安装TOMCAT7.0144.4 WEB应用安装部署154.5 启动操作155 .应用效劳器安装部署155.3 安装Windows2021155.4 安装JDK1.7TOMCAT7.O155.5 应用的安装部署155.6 启动操作156 .文件效劳器安装部署166.1 安装Windows2021166.2 安装JDK1.7TOMCAT7.O166.3 应用的安装部署166.4 启动操作166.5 关联系

3、统166.6 数据库备份176.6.1 数据备份177 .应急详细技术方案187.1 故障判断187.1.1 故障判断流程187.1.2 流程说明187.2 单点效劳器故障197.2.1 故障类型1197.2.2 故障类型2197.2.3 故障类型3197.2.4 数据库损坏或者效劳器系统崩溃197.3 数据库软件207.4 磁盘P列217.4.1 配置信息恢复217.4.2 文件系统数据恢复217.5 效劳器硬件217.6 系统软件227.7 网络设备227.8 电源设备228 .系统恢复确认238.1 主机系统检查238.2 应用程序检查239 .附件一、备份操作步骤239.1 数据库备份

4、239.1.1 逻辑备份239.1.2 物理备份249.2 数据库备份数据恢复24总那么1.1. 编写目的本文的编写目的是为各个用户的应急处理提供操作指导,保证在系统异常时,可以有序的实施恢复操作,及时恢复业务.1.2. 适用范围适用系统：一卡通系统适用对象：各个用户系统治理员、维护支撑人员以及其他治理人员.1.3. 编写人员一、一卡通系统应急预案编写工作小组人员名单：刘运亚2 .应急处理流程2.1. 原那么支撑系统应急处理遵循“先疏通,后抢修的原那么,在较短时间内尽可能恢复业务,减少业务受影响的范围,缩短业务受阻的历时：1 .保证网络平安,最大限度地预防业务中断,预防业务性能下降扩散.2 .

5、应急处理尽量简单、明了,尽量优先恢复业务,保证网络效益最大化.3 .业务应急根据不同业务类别实施不同的应急策略,优先满足面向客户的业务恢复.2.2. 触发条件同时具备以下条件的时候,经省移动公司批准后启用应急处理流程:1 .是否开启应急处理流程；2,判断100分钟内无法排除;3 .严重影响业务；2.3. 实施流程2.4. 责任分工角色责任描述部门姓名联系备注(*)协调部门1、向用户解释系统状况；2、协调相关部门协同处理移动运维部门分公司监控中心上级领导1、向省公司或分公司移动运维部门领导汇报故障处理进度；2、部门间沟通协调.3、决定是否启用应急环境.故障协调人员1、组织维护人员分工协作；2、向

6、上级领导汇报进度；移动运维部门故障处理人员1、判断故障移动运维部门点；2、提出并实施解决方案或应急措施；3、系统恢复后检查系统状况；4、编写故障分析报告.厂家支撑1、协助平台供给商报障电400-6809856人员判断故话障点,可技术支持,必要时必须赶到现场处理故障；2、按维保合同提供必要的备件；3、协助分析故障原因并协助整改.业务配合1、执行市场部彭波发人员业务应技术支持中央刘运亚急措施,向用户解释系统状况；研发中央杨杰2、系统恢复后检查应用系统状况.3 .系统描述3.1. 物理拓扑图3.2. 设备列表设备名称操作系统用途仔列号IP地址ykt_SDJN-YPT-YKT-03LinuxSUSE生

7、产环境NFC数据库1ykt_SDJN-YPT-YKT-06WindowsServer2021R2生产环境数据采集效劳器2ykt_SDJN-YPT-YKT-05WindowsServer2021R2生产环境数据访问节点生产环境NFCWEB应用入口3ykt_SDJN-YPT-YKT-04WindowsServer2021R2生产环境数据访问节点生产环境数据库效劳器4ykt_SDJN-YPT-YKT-01WindowsServer2021R2生产环境WE眩用入口3.3. 系统软件安装/部署设备名称安装软件作用数据库效劳器SQLServer2021应用效劳器OneCardReport工程一卡通云平台和

8、报表工程MyRest、cloudweb工程一卡通云平台后台程序与BOS堂口程序MyRest、cloudwebsmartcar工程为APP后台接口程序3.4. 应用软件安装/部署注意：apk需放在smartcardappspkgs目录下1 .把工程源代码导入选JiimportEclipse开发工具.2 .根据部署的效劳器修改对应工程的配置文件card工程：修改src/perties文件修改resturl值,把IP地址修改成Web效劳器的路径例如：:8080/MyRest/只需要修改IP地址和端口号修改reporturl值,把IP地址修改成Web效劳器的路径例如：:8080修改

9、url值修改成数据库平台库的库名,与数据库效劳器的IP修改username值：数据库对应的登陆账户名修改password值：数据库对应的密码OneCardReport工程：报表工程.在Webroot/reports/目录下,每张报表有单独的数据集,需要填写数据库对应的地址.与账户密码.密码采用BASE64力口密.例如：<propertyname="odaURL"></property><propertyname="odaUser">sa</property><encrypted-propertynam

10、e="odaPasswordencryptionID="base64">SEYzZ3hyWTk</encrypted-property>cloudweb工程：修改src/main/conf/props/pertries修改jdbc.url值对应的数据IP地址与库名端口号修改jdbc.username值对应的数据库登录名修改jdbc.password数据库对应的密码3,把修改好的工程源代码导出成War包4 .把相应War包解压到效劳器Tomcat下的webapps目录下,启动Tomcat,完成部署.5,完成部署后输入正确的IP地址

11、加上端口号与工程名可以访问工程示例：3.5,数据库安装部署1.1 安装Windows20211.1.1 用光盘启动系统重新启动系统并把光驱设为第一启动盘,保存设置并重启.将2003安装光盘放入光驱,重新启动电脑.刚启动时,当出现如下列图1所示时快速按下回车键,否那么不能启动2003系统安装.1.1.2 安装Windows2021光盘自启动后,如无意外即可见到安装界面从光盘读取启动信息,很快出现如下列图所示.全中文提示,“要现在安装Windows,请按ENTER,按回车键.许可协议,这里没有选择的余地,按“F8.这里用“向下或向上方向键选择安装系统所用的分区,这里准备用C盘安装2003,并准备在

12、下面的过程中格式化C盘.选择好分区后按“Enter键回车,安装程序将检查C盘的空间和C盘现有的操作系统.下列图表示安装程序检测到C盘已经有操作系统存在,提出警告信息.如果你选择安装系统的分区是空的.在这里我坚持用C盘安装系统,根据提示,按下键盘上的"C'键后出现如下列图所示.下列图最下方提供了5个对所选分区进行操作的选项,其中“保存现有文件系统无变化的选项不含格式化分区操作,其它都会有对分区进行格式化的操作.这里,我用“上移箭头键选择“用NTFSt件系统格式化磁盘分区格式化C分区完成后,创立要复制的文件列表,跟接着开始复制系统文件随后的操作根据系统操作步骤一步步进行即可完成W

13、indowsServer2003的安装.1.2 安装数据库平台数据库为SQLSERVER2021R2,安装图解如下：1.3 加载系统数据库(1) 首先建立数据库.用Sa用户登录后,在数据库,新建数据库中建立OCard_HZ_Basea据库.(2) 建立sdykt用户翻开MicrosoftSQLServerManagementStudio,在平安性-用户名中创立sdykt用户,访问密码设为abcd,并把该用户设为sdykt数据库的用户.(3) 导入OCard_HZ_Base系统数据库在OCard_HZ_Base数据库上右键任务复原数据库上操作,将OCard_HZ_Basebak导入到数据库中.1

14、.4 启动操作在系统找到相应的效劳启动：4.WEES艮务器安装部署4.1. 安装Windows20214.2. 安装JDK1.74.3. 安装TOMCAT7.0Tomcat7.0的安装过程如下4.4. WEB应用安装部署(1) 将程序打包的文件复制到tomcat安装路径的webapps目录下,(2) 解压后配置访问端口,编码,内存范围已经数据库连接地址(3) 在tomcat安装目录的conf目录下server.xml配置端口访问限制参数4.5. 启动操作在tomcat安装目录的bin目录下找到tomcat.ext,双击翻开启动tomcat,然后再浏览器中输入ip+端口+工程名访问.5.应用效劳

15、器安装部署1.5安装Windows20211.1. 安装JDK1.7TOMCAT7.01.2. 应用的安装部署(1) 将应用的安装文件复制到tomcat安装目录的webapps下,然后解压.(2) 配置好访问端口和数据库连接.1.3. 启动操作在tomcat安装目录的bin目录下找到tomcat.ext,双击翻开启动tomcat,然后再浏览器中输入ip+端口+工程名访问6 .文件效劳器安装部署6.1. 安装Windows20216.2. 安装JDK1.7TOMCAT7.06.3. 应用的安装部署(1) 在tomcat安装目录下的webapps文件夹下新建文件夹upload(2) 设置文件夹up

16、load的读写权限,然后再里面建分类文件6.4. 启动操作在tomcat安装目录的bin目录下找到tomcat.ext,双击翻开启动tomcat,然后再浏览器中输入ip+端口+工程名访问.6.5. 关联系统系统名称关联业务故障对系统的影响一卡通会议签到系统业务开通如果不能访问平台,会议签系统仍然可以应用,当能再次连接平台时数据重新同步.一卡通考勤治理系统业务开通如果不能访问平台,考勤系统仍然可以应用,当能再次连接平台时数据重新同步.一卡通门禁治理系统业务开通如果不能访问平台,门禁系统仍然可以应用,当能再次连接平台时数据重新同步.一卡通消费系统业务开通如果不能访问平台,消费系统到仍然可以应用,当

17、能再次连接平台时数据重新同步.6.6. 数据库备份6.6.1. 数据备份设备名称备份内平台数据库容备份方数据库软件自动备份法备份周每天备份期及时9:30分间点14:30分21:30分00:15分备份介质保存期9:30、14:30、21.:30f限00:15三个月7 .应急详细技术方案7.1. 故障判断7.1.1. 故障判断流程7.1.2. 流程说明1） 故障发生和现象描述：a软件或硬件导致宕机,如：数据库、磁盘不可访问、主机不能正常运行、网络不正常、电源掉电、运行温湿度等环境条件超标等b操作系统CPU占用率大于95懈严重影响业务超过30分钟c操作系统内存消耗超过95嘛严重影响业务超过30分钟d

18、操作系统I/O等待率大于50懈严重影响业务超过30分钟e磁盘使用率到达100%f应用程序运行异常,导致业务系统不可用g系统双击工作异常,严重影响业务处理h业务处理性能比平时慢50%Z上且持续一段时间2） 网络和效劳器可用行检查：包括PINGTELNET佥查等3） 数据库可用行检查：包括SQLPLU防问、表空间、数据库死锁、等待事件、数据库日志查看等4） 效劳器系统资源使用情况检查：包括CPU内存、磁盘空间、系统I/O的使用率和系统日志查看等5） 应用程序健康性检查：包括效劳CORE效劳排队、效劳挂死、域间通讯检查和程序运维日志查看等6） 检查的顺序建议根据网络、系统、数据库、中间件和应用日志的

19、顺序进行检查,可以根据故障现象进行实际的调整7） 定位故障等级包括单点故障、多点故障、其他故障8） 需要应急处理的故障如下：故障序号故障现象描述故障等级处理方法备注1如果平台上面设备最舟-次通讯时间与现实时间相差5分钟以上,或者大批量通讯异常单点故障参照7.2.12输入平台网址无法显示登陆界面或者显示404单点故障参照7.2.23登陆网址到登陆界面输入正确的用户账号密码无反响单点故障参照7.2.34数据库效劳器不能正常使用,或者该效劳器系统崩溃无法正常开机运行多点故障参照,单点效劳器故障1.1.1, 故障类型11.1.2, 故障类型21.1.3, 故障类型3“6.2数据库备份数

20、据恢复恢复数据库1.1.4, 数据库损坏或者效劳器系统崩溃如果出现数据库损坏或者数据库效劳器系统崩溃,无法开机正常运行.可以在备用效劳器上面参照“3.4应用软件安装/部署重新部署该工程,并且根据“6.2数据库备份数据恢复恢复数据库7.3. 数据库软件数据库出现紧急故障乃至数据丧失、数据库不可用时,主要通过逻辑恢复和物理恢复两种方式来完成.在执行恢复操作时,一般建议联系集成商和ORACLE、助进行实施.第一种情况：【故障现象】：归档日志目录满的情况.【解决方法】：先将归档日志临时移至其他目录,然后做备份处理：Mv数据库目录log_1*备份数据库目录启动NBU&份软件进行归档日志备份.第二

21、种情况：【故障现象】：单个表或局部表数据丧失的情况.【解决方法】：如果有近期的逻辑备份,可以考虑通过从逻辑备份中导出进行表恢复.但需要考虑恢复的时间点要求问题.第三种情况：【故障现象】：数据库无法翻开等情况,采用RMAN4行恢复.【解决方法】：由于硬件原因或数据库内部自身的原因,数据库无法翻开,需要全库恢复,局部表空间数据损坏,可以考虑进行局部表空间的恢复.这个恢复操作主要通过调用rman脚本进行恢复.建议这个操作在其他设备上进行：1 .如果有另一套阵列设备环境,建议在新阵列环境上进行恢复.2 .根据原有的配置重新划分卷组、文件系统.3 .在操作系统上根据原有的配置重新划分diskgroup和

22、lv.4 .调用rman脚本进行数据库恢复,需时约4-12小时.5 .如果没有阵列设备,直接在原来的环境上进行恢复.7.4. 磁盘阵列如磁盘阵列故障无法修复时,可使用最近备份进行恢复.7.4.1, 配置信息恢复阵列配置信息的恢复需要建立在原来信息备份的根底上.阵列配置信息的备份主要是记录配置参数.7.4.2, 文件系统数据恢复阵列的文件系统数据出现丧失时,可以使用最近的备份进行恢复.由于阵列的数据量大,目前我们一般都通过备份软件DP或NBU采用磁带库进行数据备份.7.5. 效劳器硬件第一种情况：【故障现象】：效劳器硬盘损坏【解决方法】：尝试从镜像盘启动,同时根据维保的厂家报障流程进行报障处理.第二种情况：【故障现象】：其他部件损坏效劳器硬件的故障,根据维保的厂家报障流程进行报障处理.7.6. 系统软件【故障现象