物流管理信息系统运行保障机制.docx

深圳市今天国际物流技术股份有限公司物流管理信息系统运行保障机制创建日期:201606-30修改日期:201606-30创建人:于新建审核人:批准人:签订日期: 文档版本:V1.1目录一、服务器日常排查21.系统环境排查22.接口排查53.数据核对5二、问题处理51.问题流程图及描述51.1地州用户问题申报、处理流程51.2今天国际日常排查发现问题、处理流程72.问题响应时间83.问题/故障分类及处理时长83.1问题/故障主要原因83.2处理时间83.2.1问题紧急程度83.2.2业务影响程度84.问题处理结果确认9三、数据备份9四、应急预案10五、日志管理10六、其他10物流管理信息系统运行保障机制系统上线运行期间，为保障系统正常、稳定、安全、快速地进行，特制定如下保障机制。一、服务器日常排查今天国际实施运维人员，每天对服务器运行情况排查，具体排查内容如下。1.系统环境排查服务器日常检查情况排查项目排查说明排查项排查结果备注管理机操作系统1、服务器文件系统维护(AIX)/web_data、/usr、/home目录等使用率不能超过70%/web_date使用率32%linux/usr使用率32%/var使用率32%/home使用率32%2、send文件夹维护是否正常socket/send目录下单个文件夹内最大文件数不能超过32768个ls|wc -l 文件数2973、操作系统运行监控是否正常Disk下磁盘busy%不能超过90%CPU平均使用率使用率2%IO读取情况使用率2%数据库(ORACLE)4、表空间是否正常(AIX)存在Free pages项小于100，或者state项不是0x0000的情况存在（表空间SYSCATSPACE除外），表空间使用率不能超过85%是否正常正常5、检查db2diag.log是否正常文件中出现fatal、serious错误是否正常正常6、检查数据库日志是否正常检查/db2_log文件系统的使用率，如果达到80-90%左右的时候，应及时进行清理/db2_log使用率使用率56%linux7、数据库是否启动/连接数是否满若数据库连接已满,会导致数据连接失败能否正常连接正常8、查看是否锁表若出现锁表情况,则会显示dead lock等字样是否锁表正常应用服务器（WAS）9、应用服务器的运行情况是否正常如检查java进程已经不存在，由于内存资源被耗尽进程是否存在正常10、查看应用服务器的版本#./versionInfo.sh版本号6.0.1.111、监控systemerr.log是否正常查看是否有SystemErr字样的报错数据传输通道（MQ）12、MQ的运行情况是否正常进程是否存在正常13、MQ服务是否启动和侦听器是否处于正在运行状态发送方或接收方通道显示非活动，并且队列中有消息堆积是否正常正常14、MQ消息是否有堆积消息数若大于0,则表示消息堵塞,需要重启rodc应用是否有堆积已处理，正常15、MQ日志是否报错(DCListenerThread.run)指令接收是否成功，看日志中是否报错是否有报错正常程序问题16、SendBillInfoToStma日志是否报错temp目录下文件过多,导致无法写入新文件日志是否报错正常17、SendCommerceStockToStma日志是否报错temp目录下文件过多,导致无法写入新文件日志是否报错正常排查时间2016/6/28今天国际国际排查人排查地点乌鲁木齐今天国际负责人2.接口排查3.数据核对二、问题处理1.问题流程图及描述1.1地州用户问题申报、处理流程描述：1. 地州系统使用人员发现并提出问题。2. 今天国项目组通过电话、QQ群等方式收集问题，并填写系统运行问题收集文档。3. 今天国际项目组进行问题分类，并展开响应排查。4. 1.若为一般问题，今天国际自行处理。2.若为新增需求或不能解决问题，则反馈工商一体化项目进行讨论是否处理。5. 待问题处理后，反馈地州问题提出人员进行验证，如仍存在问题，则返回第3步6. 地州问题提出人员验证通过后，进行系统运行问题收集签字确认并由今天国际存档。7.1.2今天国际日常排查发现问题、处理流程描述：1、 今天国际通过日常运维排查发现问题。2、 今天国际项目组进行问题分类，并展开响应排查。3、 1.若为新增需求或不能解决问题，则反馈工商一体化项目进行讨论是否处理。2.若为一般问题，今天国际自行处理。3.若与地州业务冲突，则告知地州业务人员配合。4、 待问题处理后，将处理、验证后结果反馈工商一体化项目组。 2.问题响应时间3.问题/故障分类及处理时长3.1问题/故障主要原因问题分类系统故障操作系统硬件数据库网络软件数据异常系统原因硬件问题软件问题业务操作流程规范不完善操作错误沟通不畅其他新增需求3.2处理时间3.2.1问题紧急程度问题紧急度处理时间一般重大3.2.2业务影响程度业务影响程度处理时间业务中断效率降低无影响4.问题处理结果确认三、数据备份目前物流管理信息系统使用的为大型ORACLE数据库，ORACLE数据库具有以下性能有点：1.面向Internet环境数据库、JAVA支持。2开放性、可伸缩性、并行性。3操作简便、安全性高等。ORACLE数据库有三种标准备份方法，他们分别为导出/导入（EXPORT/IMPORT）、冷备份、热备份。导出备份是一种逻辑备份，冷备份和热备份是物理备份。我们主要采用热备份和导出/导入（EXPORT/IMPORT）两种方法，这两种方法特点为：热备份：热备份是在数据库运行的情况下，不影响正常工作而采用的Archivelog mode(归档模式)备份数据的一种方法。所以，如果你有今天的热备份文件，在发生问题时，就可以利用这些资料恢复更多的信息。热备要求数据库在Archivelog方式下操作，并需要大量的档案空间。一旦数据库运行Archivelog状态下，就可以备份了。导出/导入（EXPORT/IMPORT）：利用Export可将数据从数据库中提取出来，利用Export则可将提取出来的数据还原到Oracle数据库中去。增量导出是一种常用的数据备份方法，它只能对整个数据库来实施，并且必须作为SYSTEM来导出。导出文件名缺省为export.dmp。我们具体备份日程为：热备份是系统自动备份生成归档日志主要保存在服务器的磁盘阵列柜上。导出/导入（EXPORT/IMPORT）方法在服务器上每天自动备份一次，时间为：0：00.四、应急预案物流管理信息系统的安全关系着整个物流业务流程是否正常运行，信