某机房设备故障处理培训课件

1、省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 1省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 2目标目标学习完此课程，您将会：学习完此课程，您将会：了解某公司设备分类了解故障处理流程和方法 熟悉故障信息搜集了解典型故障处理案例集省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 3省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 4某公司机房分类某公司机房分类A类机房：类机房： B类机房：类机房： C类机房：类机房：。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 5某公司机房常见设备某公司机房常

2、见设备一、接入设备：语音接入；宽带接入一、接入设备：语音接入；宽带接入二、传输设备：二、传输设备：SDH、PDH、光电转换器、光电转换器三、接入交换机：三层交换机、二层交换机、路由器三、接入交换机：三层交换机、二层交换机、路由器四、交换设备：程控交换机、软交换四、交换设备：程控交换机、软交换五、配线架：五、配线架：ODF、DDF。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 6省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 7故障处理流程和方法故障信息来源故障信息来源故障处理流程故障处理流程故障处理常用方法故障处理常用方法省信息产业服务有限公司市分公司

3、固网设备维护组2012年5月Page 8一、故障信息来源u用户或客户服务中心的故障申告（电子工单）。用户或客户服务中心的故障申告（电子工单）。 u日常维护或巡检中所发现的异常。日常维护或巡检中所发现的异常。 u网管告警系统的告警输出（中心机房）。网管告警系统的告警输出（中心机房）。 u对接设备维护人员的故障通告（外线，各分公司申告）。对接设备维护人员的故障通告（外线，各分公司申告）。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 9二、故障处理流程二、故障处理流程 开始收集并记录相关信息能否判断故障范围和 类别确定故障范围和类别是否为紧急 故障 定位故障原因 屏蔽隔离故障

4、 排除故障故障是否被排除？记录故障处理过程及结果联系厂家技术支持人员否是否应急维护处理是省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 10故障处理流程故障处理流程1、收集并记录故障信息收集并记录故障信息在故障处理的初期收集各种相关信息，可以帮助定位故障原因，提高维护人员处在故障处理的初期收集各种相关信息，可以帮助定位故障原因，提高维护人员处理故障的效率。理故障的效率。2、确定故障范围和类别确定故障范围和类别在获取故障信息以后，需要对故障现象进行分析，确定故障的范围和类别。在获取故障信息以后，需要对故障现象进行分析，确定故障的范围和类别。 3、定位故障原因定位故障原因故障定

5、位就是从众多可能原因中找出具体原因的过程。维护工程师使用各种方法故障定位就是从众多可能原因中找出具体原因的过程。维护工程师使用各种方法分析、比较各种可能的故障原因，排除不可能的原因，最终确定故障发生的具体分析、比较各种可能的故障原因，排除不可能的原因，最终确定故障发生的具体原因。原因。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 11故障处理流程故障处理流程4、屏蔽屏蔽/隔离故障隔离故障正确定位故障原因后，对故障进行屏蔽或隔离来恢复业务或避免故障范围扩大。正确定位故障原因后，对故障进行屏蔽或隔离来恢复业务或避免故障范围扩大。5、排除故障排除故障排除故障是指采取适当的措施

6、清除故障、恢复设备正常运行的过程，如检修线路、排除故障是指采取适当的措施清除故障、恢复设备正常运行的过程，如检修线路、更换部件、修改配置数据、复位单板等。判断是否需要到现场，更换部件、修改配置数据、复位单板等。判断是否需要到现场，6、确认故障处理结果确认故障处理结果在完成故障排除的工作后，还需要根据故障影响的范围，对受影响的相关业务进在完成故障排除的工作后，还需要根据故障影响的范围，对受影响的相关业务进行验证测试，来确认故障现象是否消失。行验证测试，来确认故障现象是否消失。 7、联系技术支持联系技术支持如果在故障处理过程中遇到难以解决的问题，需要联系技术支持进行处理。如果在故障处理过程中遇到难

7、以解决的问题，需要联系技术支持进行处理。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 12收集并记录故障信息收集并记录故障信息 信息收集的内容信息收集的内容故障发生时，需要第一时间收集故障信息。主要收集以下故障信息：u 故障发生的具体时间、地点。 u 故障现象的详细描述。 u 故障点设备类型及接入类型。 u 故障后已采取的措施和结果。 u 问题的级别及希望解决的时间。u 用户及电信联系人信息。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 13确定故障范围和类别确定故障范围和类别 确定故障的范围确定故障的范围确定故障的范围就是确定故障处理的方向，也

8、就是说在什么地方、顺着什么思路去查找故障的具体原因。 确定是设备接入的所有用户出现故障还是部分用户出现故障： u如果是所有用户出现故障，进一步了解上端设备接入的其他设备或用户是否同时出现故障。 u如果是部分用户出现故障，进一步了解： u故障用户的业务类型，其他业务是否出现故障。 u故障用户与正常用户的业务单板是否相同。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 14定位故障原因定位故障原因 故障定位就是从众多可能原因中找出具体原因的过程。维护工程师使用各种方法分析、比较各种可能的故障原因，排除不可能的原因，最终确定故障发生的具体原因。 准确并快速的定位故障是故障处理过

9、程中的重要环节： u 有利于提高故障处理的效率。 u 有效避免盲目处理导致的故障扩大等人为事故。 u 为排除故障提供指导和参考。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 15屏蔽屏蔽/隔离故障隔离故障 正确定位故障原因后，对故障进行屏蔽或隔离来恢复业务或避免故障范围扩大。常用的故障屏蔽或隔离的方法有：u 手动重启系统。 u 进行主备倒换。 u 采用迂回路由，隔离故障设备。 u 如果是某项功能故障，可以使用命令关闭该功能。 u 如果是单个用户业务故障，可以将故障影响的用户转移到正常的端口。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 16排除故

10、障排除故障 排除故障是指采取适当的措施清除故障、恢复设备正常运行的过程，如检修线路、更换部件、修改配置数据、复位单板等。屏蔽或隔离故障后，启动排除故障的工作。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 17确认故障处理结果确认故障处理结果 在完成故障排除的工作后，还需要根据故障影响的范围，对受影响的相关业务进行验证测试，来确认故障现象是否消失。要进行全面验证，保证故障现象完全消失且没有新的问题被引入。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 18三、故障处理常用方法三、故障处理常用方法 告警分析告警分析 性能分析性能分析 分段处理分段处理 仪表

11、测试仪表测试 对比分析对比分析 互换分析互换分析 配置数据分析配置数据分析 协议分析协议分析省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 19告警分析告警分析 通过分析告警，可以定位故障的具体部位或原因，也可以配合其他方法定位故障原因。告警信息是指设备网管告警系统输出的信息，通常以屏幕输出的形式提供给维护人员，具有简单、明了的特点。告警信息涉及硬件、链路、业务等各个方面，信息量大且全，是进行故障分析和定位的重要依据之一。告警信息包含以下内容： u 告警的描述 u 告警发生的位置 u 告警发生的可能原因 u 告警的修复建议 省信息产业服务有限公司市分公司固网设备维护组201

12、2年5月Page 20性能分析性能分析 通过设备提供的性能统计手段，对发生故障的业务进行性能指标的分析，定位故障原因。多种故障的定位过程中都需要了解系统性能统计信息。针对不同的故障类别，需要查看不同的统计信息，这要求维护人员： u熟悉系统的结构和运行机制。 u了解系统能够提供哪些统计信息。 u了解如何查看、分析统计信息 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 21分段处理分段处理 在故障现象复杂，可能涉及到多个环节时，使用分段处理的方法逐个排除正常的环节，最终定位故障。对进行分段处理工作的工程师有以下要求： u对设备的系统结构和原理有深入的了解。 u对可能导致业务故

13、障的各个环节全面了解。 u熟练掌握环回操作。 u熟练使用测试仪器。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 22仪表测试仪表测试 仪表测试法是指使用各种仪器、仪表取得实际的各种性能参数，对照理论的参数值来定位和排除故障。仪器、仪表以直观、量化的数据直接反映设备运行状态，在故障处理过程中有着不可替代的作用。常用的仪器、仪表包括： u 万用表 u 光功率计 u 示波器 u 可调光衰减器 u 线路测试仪 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 23对比分析对比分析 对比分析是指将故障的部件或现象与正常的部件或现象进行比较分析，通过找出不同点来定位

14、故障。对比分析适用于故障单一的场合。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 24互换分析互换分析 在更换备件后仍不能定位故障时，使用互换分析法定位和排除故障。互换是指将处于正常状态的部件（如单板、光纤等）与可能故障的部件对调，在以下情况下使用： u在更换备件后，仍然不能确定故障的范围或故障点时使用。 u通过比较对调后二者运行状况的变化，确定故障的范围或故障点。 u适用于故障复杂的场合。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 25配置数据分析配置数据分析 配置数据分析是指通过分析设备的配置数据来定位问题，在新开局点或更改配置后应推荐使用此分

15、析方法。数据配置错误或更改是引起故障的重要原因之一，配置数据分析是故障定位不可缺少的一个方法。例如：一台MA5680T下所有用户无法收看组播节目，通过检查配置数据发现：组播源设置的TTL值太小，导致组播数据在MA5680T上转发时，由于TTL值等于0而被丢弃。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 26协议分析协议分析 （一般用不到）（一般用不到）协议分析是指通过信令跟踪、捕获数据包等手段对故障进行分析的方法。协议分析用于当接入设备和上层设备的对接出现问题时定位和排除故障。协议分析要求维护工程师对协议有深入的了解，掌握各种协议报文的交互流程，从而能够从获得的报文中定

16、位故障。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 27小结小结本章主要介绍了本章主要介绍了故障处理的一般步骤和常用方法省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 28省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 29故障处理流程故障处理流程开始初步定位故障位置检查光纤状况检查设备状态检查设备运行状况检查设备数据配置检查设备统计信息检查上层设备状态结束省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 30 初步定位故障位置初步定位故障位置 个别端口用户无法上网：u 用户终端或者线路故障。 u EPON或交换

17、机端口故障。 u 数据配置问题。 整板用户无法上网u EPON单板故障。 u 光路问题。 整框用户无法上网u 光路问题。 u 主控板或者是上行单板故障。 u 网络攻击。 BRAS设备下的所有用户无法上网u 上行设备问题。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 31检查光纤状况检查光纤状况 在EPON业务发生故障时，通过检查光纤状况排除故障。主要检查：u光纤是否插好。 u光纤是否弯曲严重。 u光纤是否有断线。 u平均发送光功率是否正常。 u接收光灵敏度是否正常。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 32检查检查ONT状态状态 Power（

18、主电源指示灯）u常亮表明电源供电正常。熄灭u请检查电源连接是否正确。 u请检查电源适配器是否匹配。 u如果电源正常，所有指示灯都熄灭，请更换ONT。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 33检查检查ONT状态状态AUTH（EPON注册指示灯）u常亮设备认证成功。熄灭设备认证失败。 u检查MA5680T上是否添加了该ONT。 u检查配置的ONT的MAC地址与ONT实际MAC地址是否一致。LINK （EPON链路指示灯）u亮PON端口链路状态正常。u熄灭检查光纤是否插好（插得太紧或太松都会有问题）。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page

19、34检查检查ONT状态状态LAN常亮以太网端口的链路正常。熄灭以太网端口的链路故障。 u检查以太网端口的物理连接是否正常。 u检查与以太网端口连接的物理设备是否正常。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 35在线查询在线查询ONT状态状态如果“Control Flag”为激活态，且“Run state”为up，说明ONT正常，说明用户上线且认证通过。 如果“Control Flag”为去激活态，ONT进行注册时被禁止，需要在EPON模式下使用ont activate命令激活控制开关。 如果“Control Flag”为激活态，而“Run State”为down，

20、则说明用户未上线。 如果ONT的“MAC”与实际的ONT不一致，会导致注册失败。 如果“Config State”为“Normal”状态，说明ONT配置恢复状态正常。 如果“Config State”为“Failed”状态，说明ONT配置恢复失败。有可能是ONT绑定了错误的ONT模板，并对ONT进行了不支持的配置。可使用display ont capability命令查询ONT的实际能力，并重新绑定相匹配的模板。 如果“Match State”为“Mathch”状态，说明ONT配置的能力集模板匹配。 如果“Match State”为“initial”状态，说明ONT实际能力与能力集模板的配置一

21、致时，进入配置恢复阶段的“初始态”。 如果“Match State”为“mismatch”状态，说明ONT配置的能力集模板匹配失败。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 36检查设备运行状态检查设备运行状态 操作步骤操作步骤1、检查主控板的运行灯状态。 正常情况下：RUN ALM绿灯1s亮1s灭，周期闪烁，ACT灯常亮。如果出现异常，请检查主控板是否接触良好。2、检查业务板的运行灯状态。 正常情况下：RUN ALM绿灯1s亮1s灭，周期闪烁。如果出现异常，请检查业务板是否接触良好。3、检查PON接口灯状态。 正常情况下：ONT在线时，PON接口的绿灯常亮 。如果

22、出现PON口灯不亮，请检查光口激光器是否打开。如果被关闭，在EPON模式下，使用port laser-switch on命令打开。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 37检查设备数据配置检查设备数据配置 操作步骤操作步骤1、检查ONT绑定的DBA模板。 A、使用display ont info命令检查ONT所绑定的DBA模板。 B、使用display DBA-profile all命令检查DBA模板的相关信息，确认绑定的DBA模板是否满足需求。如果不满足，可以使用ont modify命令为ONT绑定合适的DBA模板。 2、检查业务流配置是否正确。 A、使用dis

23、play service-port命令查询业务虚端口配置是否正确。如果不正确，请重新进行配置。 B、使用display ont port vlan命令查询ONT的端口VLAN配置是否与业务流对应。 如果是用户侧为untagged方式的业务数据，应该使用ont port vlan命令将ONT端口要加入到业务VLAN，使用ont port native-vlan命令配置端口的Native VLAN与上行VLAN相同。 如果是用户侧VLAN为tagged 方式的业务流，应该使用ont port vlan命令将ONT端口加入到用户侧VLAN中。 3、检查VLAN中是否加入了上行口。 使用display

24、 vlan命令检查是否为业务VLAN增加了上行口。如果没有增加请使用port vlan命令为该VLAN增加上行口。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 38 检查设备统计信息检查设备统计信息 1、使用display port statistics命令查询上行口的流量统计信息。 主要检查： u 端口的发送、接收帧计数是否在增加，从而确定以太网端口在收发方向是否正常工作。 u 是否有帧丢弃计数。如果有，可能是端口设置了流量抑制，或者对接设备发送的流量超过了端口的能力。 u 是否出现了CRC错误计数，如果计数不断增加，应如下处理： l 光口：检查光纤是否松动、两端光模块

25、是否匹配（模块类型是否匹配、波长是否匹配、传输距离是否匹配）。 l 电口：检查两端端口协商是否一致，网线和单板硬件是否正常（请更换以太网板检查是否正常）。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 39检查设备统计信息检查设备统计信息2、使用display port statistic命令查询EPON端口的性能统计信息。 统计信息中包括了端口收发数据的详细信息，通过这些信息可以判断端口是否正常工作。主要检查： l PON端口的发送、接收帧和字节计数是否在增加，从而确定以太网端口在收发方向是否正常工作。 l 系统端口的发送、接收帧和字节计数是否在增加，从而确定以太网端口

26、在收发方向是否正常工作。 l 是否有错误的帧和字节计数。如果有，可能是端口设置了流量抑制，或者对接设备发送的流量超过了端口的能力。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 40检查设备统计信息检查设备统计信息3、使用display ont statistic命令查询ONT的性能统计信息。 统计信息中包括了端口收发数据的详细信息，通过这些信息可以判断端口是否正常工作。主要检查： l ONT端口的发送、接收帧和字节计数是否在增加，从而确定以太网端口在收发方向是否正常工作。 l 是否有错误的帧和字节计数。如果有，可能是端口设置了流量抑制，或者对接设备发送的流量超过了端口的

27、能力。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 41检查上层设备状态检查上层设备状态 在EPON业务发生故障时，通过检查上层设备状态排除故障。 如果MA5680T及所接终端都正常，则问题可能出在上层设备，请检查上层设备的运行状态、数据配置。特别要关注上层设备和MA5680T对接接口的状态和属性的兼容性。省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 42常见故障分类和原因分析常见故障分类和原因分析 ONT不能正常注册不能正常注册l ONT光口不正常。 l 连接ONT的光纤故障。 l ONT侧的光功率不在正常范围内。 l 没有添加ONT。 l OLT

28、端口配置的逻辑最远距离与实际不一致。 l OLT端口没有使能自动发现开关。 l 添加ONT时配置的MAC与ONT实际的MAC不一致。 l 添加ONT时配置的Password与ONT实际的Password不一致。 l OLT上已经存在相同MAC的ONT。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 43典型案例典型案例-ONT长发光导致系统瘫痪长发光导致系统瘫痪 故障现象故障现象发现某个PON口下面只有一个ONT在线。故障分析故障分析1、从局端看，某个PON口下只有一个ONT终端。2、断开该终端ONT（要断开线路或切断该终端ONT电源），如果此时该PON口下其他用户都能正

29、常工作，一般可以断定是该终端ONT长发光或者该线路有一个长发光的1310nm的光源（属于恶意入侵系统）。操作步骤操作步骤1、更换为正常的ONT或切断该终端线路。 2、验证发现其他ONT在线，问题解决。 总结总结如果某个ONT的光模块故障，处于常发光状态，则会占用全部上行时隙，导致和此ONT位于同一OLT端口下的其他ONT全部瘫痪。这类现象只有在ONT光模块出现异常或者个别用户恶意入侵系统才会发生。 省信息产业服务有限公司市分公司固网设备维护组2012年5月Page 44典型案例典型案例-OUI设置错误导致设置错误导致ONT注册不上注册不上 故障现象故障现象添加ONT后，ONT配置及匹配状态一直

30、为“initial”，无法正常注册。同时上报以下告警：! EVENT MAJOR 2007-12-27 11:40:57 ALARM NAME :ONU can not supported EXTEND-CTC PARAMETERS :FrameID: 0, SlotID: 1, PortID: 1, ONUID: 0操作步骤操作步骤1、更换ONT，问题依然存在。 2、使用离线增加ONT和自动发现后确认ONT的方法增加ONT，问题依然存在。 3、检查ONT能力集模板配置，没有发现问题。 4、检查OLT设备OUI配置，发现OUI为“0 x000000”。使用epon oui命令将OUI修改为“0 x111111”，问题解决。 总结