3.14-CES业务、FE业务分析与故障定位

CES FE业务分析与故障定位 2013年2月 培训内容 CES业务分析及故障定位 FE业务分析及故障定位 小结 CES业务分析及故障定位 业务特点 固定带宽 固定帧长E1业务 固定带宽2M155M业务 承载63个2M时隙 S1O2盘集成8个155M光口E1和155业务均是TDM CES 业务 其配置单位为2M 数据敏感 易造成业务中断丢帧错包乱序报文时钟敏感 3 CES业务分析及故障定位 思路 4 定位故障电路 一 找出问题业务在网管上右键点工程 业务管理 打开过滤 输入源网元号或网元名称 宿网元号或网元名称 CES业务分析及故障定位 定位故障电路 业务类型分析概述 定位到VC 6 定位工作路径 业务类型分析概述 定位到Tunnel 7 主用备用Tunnel 定位保护路径 CES业务分析及故障定位 思路 8 分析电路 CES业务分析及故障定位 分析电路 9 提炼CES故障业务规划表 CES业务分析及故障定位 分析电路 10 PE7 PE8 PE2 PE6 PE3 PE4 PE5 15 1 15 3 15 4 11 3 6 2 8 1 8 2 7 2 7 1 4 2 4 1 11 3 7 2 提炼CES故障业务拓扑图 CES业务分析及故障定位 思路 定位故障点 11 CES业务分析及故障定位 定位故障点 源节点故障中间节点故障宿节点故障 12 CES业务分析及故障定位 定位故障点 分析业务规划表和拓扑图性能分析方法 源中宿节点逐步定位 1 端口流量 报文计数2 VP层流量 报文计数 13 源节点 14 端口流量分析 在8号站的交叉盘XCUK1上面查看状态 打开LSP保护状态信息 找到标签为423 查看主备状态 如果都没有告警 说明主备状态都正常 源节点 CES业务分析及故障定位 定位故障点 16 中间节点 入口槽位盘显示 宿节点 17 宿节点 入口槽位盘显示 宿节点 宿节点 备用槽位盘显示 CES业务分析及故障定位 定位到节点并查看该节点丢包原因点击端口丢包原因查询右边的按钮 CES业务分析及故障定位 常见丢包原因REASON ING UNI SHORTFLOW ACL POLICY DROP 入口非法 检查VPWS配置情况REASON ING NNI OUTER LABEL SPACE CHECK ERROR 外层入标签非法 检查ilm表情况REASON ARP INVALID 出接口查找不到ARP 检查ARP配置情况 20 CES业务分析及故障定位 思路 21 CES业务分析及故障定位 分析故障原因 故障节点配置数据检查网管配置分析端到端配置主控配置数据分析单网元配置单盘配置数据分析单板卡配置 22 数据不同步会造成业务故障 网管配置数据分析 业务配置标签规划与槽位端口与物理走纤一致告警信息端口Link Los CRC记数 端口收发光功率正常状态和性能信息仿真链路收发包 端口流量 保护组状态正常LSP流量稳定帧长统计查看业务是否发出 23 网管配置数据分析 业务配置标签规划与槽位端口与物理走纤一致告警信息端口Link Los CRC记数 端口收发光功率正常状态和性能信息仿真链路收发包 端口流量 保护组状态正常LSP流量稳定帧长统计查看业务是否发出 24 选中业务 右键查看业务属性UNI接口 业务时隙 业务配置1 业务配置与业务规划是否一致 定位至Tunnel 保护组在8号站 640 上 主用标签是423 备用标签是424 业务配置2 网管配置在主控和单盘上是否同步 告警 27 本地 远端 告警示例远端链路接入故障和本段链路包丢失 状态 28 异常 正常 Tunnel流量 性能 仿真链路接收的包数和发送的包数是否相等 CES业务分析及故障定位 主控 单盘 源 宿节点数据分析VPWS配置LSP Tx配置LSP Rx配置ARP配置中间节点数据分析LSP Rx配置ARP配置 30 查看VPWS配置 查看LSP TX配置 查看LSP RX配置 协议盘上查看ARP IP地址 MAC地址 单盘配置数据分析 分析步骤登陆单盘单盘常用命令VPWS配置LSP Tx配置LSP Rx配置ARP配置历史配置数据记录 33 单盘命令函数集锦 menu CES业务工程问题分析 查找过程 1 找到故障电路2 查询流量3 中间节点入tunnel表没有lsp表项4 登陆主控盘 发现有配置数据 5 登陆NP盘 发现没有配置数据 6 检查配置下发时间 较早时间配置数据 7 检查主控配置锁开关 36 协议盘查看TNE状态命令 CES业务工程问题分析 1 找到故障电路2 查询流量3 中间节点入tunnel表中流量不对称4 检查源节点发送数据流量 太少5 检查单盘配置 发现CES使能开关关闭 38 查找过程 1 找到故障电路2 查询流量 正常3 沿路检查端口性能和告警 4 发现有CRC计数 端口收光功率过低 39 查找过程 案例4 LSP1 1保护倒换出现异常 没有成功倒换 查询原因 所在的网元S1O1单盘的设备类型为PTN 影响了背板总线 修改设备类型为IPRAN后 问题解决 注意 S1O1单盘修改设备类型后单盘会重启 重启时间需要20分钟左右 CES业务工程问题分析 1 找到故障电路2 检查保护组状态3 检查流量 业务走向备用路径4 登陆交叉盘 检查保护组告警信息5 读总线告警信息与备用槽位发送告警信息不一致6 查询哪块板卡影响背板 CES板卡 NP板卡逐个定位 41 查找过程 培训内容 CES业务分析及故障定位 FE业务分析及故障定位 小结 FE业务分析 数据不敏感帧长随机帧速随机VLAN操作 43 UNI NNI Tag识别 Vlan增加 删除 Tag识别 Vlan增加 删除 Tag不识别 Vlan增加 Tag不识别 Vlan增加 找故障电路 44 网管查看相关配置 首先在网管上找到出现故障的业务路径 方法如下 右键点击工程1 选中 业务管理 然后点击 业务管理主视图 中的过滤图标 在弹出的对话框中输入原宿网元后点击确定 网管查看相关配置 找到出现的故障业务后 右击该业务 选中 显示业务属性 在弹出的对话框中可以看到PE7和PE2节点上VPWSUNI测配置 网管查看相关配置 47 按照前述方法找到出现故障的业务后 右击该业务 选中 定位到IPRANVC 右侧会显示该业务相关标签信息 LSP保护主备状态 48 右击出现故障的业务 选中 定位到IPRANTUNNEL 右侧显示tunnel保护信息 从右侧保护路径可以看出在PE8和PE2上配置了保护 LSP保护主备状态 49 打开PE8的XCUK1的状态 从上图中可以看到PE8的收标签为315 点击LSP保护状态信息 找到标签值为315的对应项 查看其主备告警信息 LSP保护主备状态 50 PE2上主用路径是11 1 主用标签是317 备用路径是11 3 备用标签是321 打开PE2的11号槽位的状态信息 点击保护组状态 找到主用标签为317的相应项 即可以看到该tunnel保护组的信息 51 FE业务工程问题分析 52 提炼以太网业务规划表 组网拓扑图 PE7 PE8 PE2 PE3 15 1 15 1 15 3 15 4 11 3 11 1 11 1 11 3 提炼以太网业务逻辑图 定位故障点 54 定位故障点方法 Ping包分析法ping特定帧长的报文 通过帧长区间统计查看数据路径 Oam包分析法通过OAM包特定流量 进行分析流量分析法 55 1 1 1 1 2 2 2 2 arp rarp ping ack MEP1 MEP2 Enablevc Vcloc Vcrdi EnableVc 56 FE业务分析及故障定位 定位故障点 配置数据检查网管配置分析主控配置数据分析单盘配置数据分析 57 问题定位 配置 58 以PE7到PE2方向的业务出现故障为例 且LSP工作在主用状态 则其工作路径为 PE7 15 1 15 1 PE8 15 4 11 3 PE3 11 1 11 1 PE2 右击出现故障的业务 选中 定位到IPRANTUNNEL 59 FE业务分析及故障定位 状态 问题定位 60 通过以上步骤确定业务出现故障的网元及槽位后 需在相应网元的槽位上查看丢包原因 查看丢包原因方法如下 点击相应网元 然后右击该网元的相应槽位 点击状态监视 61 在弹出的对话框中 点击左侧端口丢包原因查询所对应的图标 FE业务分析及故障定位 定位故障点 主控盘配置数据 VPWSLSP TXLSP RXARP 62 原宿节点查看配置 63 原宿节点上有VPWS LSP RX LSP TX的配置 以下图示均以PE2为例 收pw标签为312 1 主控中查看vc的配置 原宿节点查看配置 64 3 在主控盘上查看LSP TX的配置 原宿节点查看配置 65 5 在主控盘中查看LSP RX的配置 查看节点上arp配置 66 1 在主控盘上查看arp配置信息 工程ARP故障排除方法 FE业务中断 67 640 R860 R860 R860 640 找到故障电路分析电路OAM分析法 使能VCOAM流量分析查找丢包原因分析主控 单盘ARP配置数据 培训内容 业务分析概述 CES业务分析及故障定位 FE业务分析及故障定位 小结 小结 业务特点 CES业务特点固定带宽 一个2M业务 固定带宽2M 数据敏感 丢帧 错包 乱序 时钟 FE业务特点数据不敏感帧长随机帧速随机VLAN操作 69 小结 故障定位思路 故障定位思路找到故障业务业务分析故障点定位故障分析故障分析方法Ping包分析OAM分析流量分析丢包原