QC成果交流材料微机监测网络的高效维护方案.doc

此文档收集于网络，如有侵权，请联系网站删除Q C成果交流材料微机监测网络的高效维护方案青岛电务段电子设备车间微机监测工区QC小组2013年4月10日一、 概况（1）小组概况：小组名称微机监测工区QC小组成立日期2012年4月方针目标加强监测网络维护检测，确保监测设备正常运行本期课题微机监测网络的高效维护方案小组类型公关型组长李任东活动日期2012年4月-12月注册号码2012-012小组成员7人课题编号012活动频次2次/1月出勤率98%平均接受QC教育48小时以上2）小组成员分工：序号姓名年龄性别职称组内职务文化程度1孙国辉40男助理工程师组织领导大专2高晓艳40女高级工程师技术指导大本3李任东27男信号工组长大专4曹广杰26男助理工程师组员大专5尹德伟27男助理工程师组员大本6曲正30男信号工组员大专7祖娜30女工程师组员大本8金昕30女信号工组员大本9于婷婷27女信号工组员大专（3）设备概况：微机监测系统的网络结构是采用串联加环路的方式实现的，即一条线路上的各站仅需要一条通道，该通道站站开口，将沿线各站串联在一起，线路末端站再增加一条通道至电务段，使网络成环。其网络结构是由车站基层网、电务段管理网和远程访问用户网三部分组成的，以多级监测管理层自上而下地逐级汇接而成的层次型的计算机广域网络系统。微机监测系统通过广域网数据传输系统把车站系统、电务段系统及上层网络连接起来。广域网数据传输系统完成IP数据包在各计算机的传输，它包括：路由器、协议转换器、集线器等。二、 选题理由信号设备在铁路运行中起着十分重要的作用。故障处理中，现场工区必须及时处理故障并将理结果向上级汇报。并且故障处理远程指挥以及远程分析十分重要。这就要求微机监测网络系统时时刻刻运行良好，确保在紧急环境下，电务段、车站以及远程访问用户能够准确及时完成信息数据传递。然而在实际工作中，经常由于微机监测网络中断导致监测数据无法查看，使电务段无法及时掌握现场工区故障设备情况，无法及时有效的组织进行故障处理及故障分析总结。三、 案例调查为准确掌握导致监测网络设备中断的原因，现将微机监测今年一年以来导致的监测网络设备中断故障统计分析一下。统计表如下：序号项目频数频率1.路由器及其软件配置2033.3%2.协议转换器及其接口1830%3.2T模块23.3%4.V35数据线11.7%5.通信通道915%6.其他问题1016.7合计60100%微机监测网络故障统计表四、 目标确定本次攻关的目标是：将60件故障减少40件，故障下降60%。60% 60件 20件 现状 目标值目标论证：1.有上级领导的大力支持帮助，我们对小组的技术、业务能力有信心。2.经过现状调查，进一步统计分析，在60件故障中，20件是由于路由器配置bug造成，我们通过优化路由器配置，完全可以降低故障率。协议转换器问题，我们可以用一些技术手段使其稳定工作，路由器协议优化后，数据负载也会降低，有利于提高协议转换器的寿命。对于2T模块和V35线的故障，这些是一些偶发故障，我们定期筛查通信质量，可提前发现并更换为良好的设备从而减少故障发生的概率。而对于通信通道问题，我们将采取积极和通信部门沟通的策略，也定能缩短故障恢复时间。综上，我们可以完成我们所订的目标。五、 原因分析1.前期维护方式存在漏洞。我们之前的维护是被动的“问题驱动维护”，也就是说出现问题了我们才进行处理，这样不但被动而且故障恢复时间慢，我们应当制定定期的网络维护计划，定期查看路由器的负载，定期备份配置文件和软件，及时分析，做到防患于未然。2.路由器配置存在bug。由于电务段使用的微机监测有很多厂家。他们在联网的时候通常是只注重自己的网络负载，没有从全局考虑。比如在OPSF协议下area0内的路由器数量远超过思科所推荐的最大50个。再就是一些ABR骨干路由器竟然用的是1700系列的路由器（如行上店站），这无形中影响了网络的稳定性。3.对于协议转换器，我们发现设备并不是立刻坏掉，而是有个由良好到不良到坏的渐进过程。我们之前对协转的维护都是等到协转完全坏了才去更换。再就是，协转本身工作环境比较苛刻，特别是雷雨多发期，我们前期对协转的保护工作没有做好。4.很多情况下，通信中断是因为铁通的通道出现了故障。但是我们和铁通沟通不佳，致使故障恢复很慢。这也是影响微机监测网络的重要原因。六、 制定对策根据以上找出的4条主要原因，我们制定了对策表：对策表： 项目序号要因对策目标地点负责人完成时间1维护方式不当重新制定网络维护的计划任务，防患于未然做的有计划，有标准青岛高晓艳李任东曲正3月底2网络规划不当重新配置关键地点路由器不出现因网络规划不当而产生故障管辖各站曹广杰祖娜3月底3协转故障及时发现不良协转,对协转进行必要接地保护降低协转故障管辖各站尹德伟于婷婷3月底4通信通道不良加强通道故障处理技能，加强与铁通沟通，共同维护微机监测通道。杜绝责任推诿情况管辖各站金昕3月底七、 实施对策1优化定期的网络维护任务定期维护网络，使网络始终处于一个良好的运行状态。使故障真正的被消灭在发生之前。为此我们制定了新的定期维护方案。1.1每天查看一个环路的路由器负载情况，对于cpu利用率大约50% 的路由器进行监控，并且找出负荷过高的原因，及时组织处理。1.2每天查看一个环路的路由器各端口的误码率，并且记录，为发现设备隐患提供数据基础。1.3每个月月底备份一遍所有路由器的starting-config。并且采用tftp服务器模式进行备份，确保文件完整最新。2网络协议的优化整个微机监测网络使用的是OSPF路由协议，但是设计时各厂家没有从全局出发，致使网络稳定性不高。对此我们制定了如下对策。2.1缩减area0内的路由器个数。我们将蓝烟线的路由器设置为了area2，胶新线的路由器设置为了area1。2.2对于胶新线，当时厂家没有设置loopback地址。这样路由器在使用OSPF协议时就使用了最大IP作为其ID，而最大IP是时常变化的，这对整个网络的稳定性有很大影响。所以我们将胶新线的路由器加入回环地址，确保路由器稳定。2.3对于ABR骨干路由器，尽量使用质量较好的路由器，比如1800系列路由器，或者是2600系列的路由器。这样可以有效增加网络的稳定性。3处理好“协转”故障多的问题3.1协转是一种故障率较高的设备，但是它的损害时常是渐变性的损害。我们利用这个点，在协转真正坏之前就将其更换。对于误码率小于200的端口，我们首先通知现场工区紧固接头，如果通信质量还是不好，立即更换协转。3.2协转需要一个相对安全的电磁环境。我们对协转进行可靠接地。对于通信机械室到协转的同轴线，我们要求必须加上防雷盒。4加强通信通道问题的快速判断处理4.1很多情况下，通道不好是因为铁通通道不好。当发生通道不良时要尽快的确定是谁的设备存在问题。如果是铁通通道不良，应立即通知铁通处理，防止推诿扯皮。处理的办法一般来说是打环，但是s口如果没有ip unnumbered loopback0 也会出现环，这个是需要注意的。为此我们写了一个规范化操作的文档，一步一步的排查。最终达到快速判断处理通道不良隐患。4.2 当我们确认是通信问题时，我们要做的有理有据，防止推诿扯皮，积极协调进行通道不良隐患处理，共同确保通信通道畅通。八、 效果检查1.完成课题目标：经过我们QC小组的攻关活动，管内微机监测网络运行质量大大提高，故障率大幅度降低。自2012年3月活动开始至今年3月底，微机监测网络故障仅发生10件，故障下降83%，超额完成既定目标。下降83% 60件 10件 攻关前故障 攻关后故障2.社会效益：通过本次活动，降低了故障率，确保了微机监测设备的正常运行，大大提高了我们对信号设备的监测和管理效率，为铁路运输的安全生产做出了积极贡献。九、巩固措施及今后打算通过此次科技攻关活动，取得了良好的效果，既锻炼