IPRAN日常维护方法及运维经验介绍

Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 47pt 30pt 反白 : FrutigerNext LT Medium : Arial 47pt 黑体 28pt 反白 细黑体 IPRAN日常维护方法及 运维经验介绍 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 前 言 中国电信IPRAN从试点建设至今，已跨越2年有余，其定位和建设 思路均经历了比较大的变化，华为公司跟随中国电信的IPRAN建设 一路走来，全程参与其中，形成了较成熟的交付流程并在运维方面 积累了一定的经验，本文着重对此进行总结和分享。 本文从交付流程、现网特点、DCN管理、日常维护、故障处理等方 面进行总结和分析，并对交付和维护期间的典型案例进行分析。 Page1 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 培训目标 学完本课程后，您应该能： 了解华为IPRAN交付的流程和特点 了解不同时期建设的IPRAN网络的特点和发展 了解IPRAN网络验收测试的基本方法 了解IPRAN网络网元网管管理方式 掌握IPRAN网络日常维护和监控的内容和方法 掌握IPRAN网络故障定位的一般思路和典型方法 Page2 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 目 录 1. 中国电信IPRAN部署交付与验收测试 2. 中国电信IPRAN网元网管管理的实现 3. 中国电信IPRAN网络日常监控与维护 4. 中国电信IPRAN网络故障定位与处理 5. 中国电信IPRAN网络运维案例分析 Page3 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 目 录 Page4 1. 中国电信中国电信IPRAN部署交付与验收测试部署交付与验收测试 2. 中国电信IPRAN网元网管管理的实现 3. 中国电信IPRAN网络日常监控与维护 4. 中国电信IPRAN网络故障定位与处理 5. 中国电信IPRAN网络运维案例分析 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 华为IPRAN交付流程 Page 5 网元上线 与基础配 置下发 （U2000） 验收测试 业务发放 LLD设计 DD设计 HLD设计文档 组网与策略规范 LLD设计文档 LLD设计文档 配置清单（BOQ） DD设计文档（EXCEL） DD设计文档（EXCEL） 网元即插即用上线 IP地址、基础路由协 议等配置下发 LLD设计文档 业务开通需求 时钟部署 端到端业务可通可管 基站自开站实现 验收测试规范 验收测试报告 转维报告 误码检测部署 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 中国电信IPRAN组网与策略规范的发展历程 Page6 2012.3.31 2013.6.27 2013.11.20 2013.1.1 2012年22号文 依托城域网一平面建设IPRAN 接入层使用OSPF STUB区域闭环 A网元使用DHCP实现即插即用 第一批、第二批试点城市交付 2012年集采交付 2013年集采交付 2013.10 2013年兰州会议分享0627新规范 端到端新建或依托城域二平面建设IPRAN 接入层使用OSPF普通区域开环 A网元使用DHCP实现即插即用 细化组网结构、COST规划等 新规范V1.3版本 明确B以上网元使用公网管理 增加DCN方式实现A网元即插即用 明确NTP规划、MTU设置等 整改优化 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt IPRAN网络的验收测试 Page7 结 果 精 细 度 测试难度/复杂度 以实际基站业务进行测试 对关键链路和节点模拟故障进 行倒换测试 反映端到端业务可通性 反映故障保护倒换时间是否满 足无线业务要求 在网管上直接操作 挂仪表端到端进行测试 精确测试端到端时延、抖动、 吞吐量等数据（RFC2544） 精确测试故障倒换时间 （ms） PW/VRF ping/tracert 反映网络侧的可通性 快速测试 倒换测试 仪表测试 不需要仪表 还以用于辅助故障处理 端到端测量测试 可获取RFC2544完整数据 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt PW+L3VPN端到端测量方案介绍 Page 8 A B RAN ER EPC CE eNodeB EPC L3VPN PW 测量系统 测量系统：构造 目的地址为 x.x.x.x的报文， 进入业务通道 1 B设备：测量报 文终结L3VPN 进入对应的PW 3 A设备：判断报文目的IP地址 为x.x.x.x，目的MAC为对应 接口MAC，则进行IP及MAC 地址的翻转，直接发往原PW 4 B设备：测量报 文终结PW进入 对应的L3VPN 5 EPC CE：测量 报文进入 L3VPN正常转 发 2 EPC CE：测量 报文出L3VPN 进入测量系统 6 测量系统：接受 测量报文，获得 丢包、时延、抖 动等信息 7 可实现 性能测量 无需人员 下站配合 无需专用 探针设备 无需额外 物理接口 可实现 带业务测量 开局验收 日常监控 故障定位 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 验收测试案例倒换测试 Page 9 0/2/16 0/3/0 0/2/16 百大商百大商储储 建建设设路路 海港海港SR 建建设设路路SR CR1 CR2 RANCE1 RANCE2 西牟西牟 BTS 黄黄务务立交立交桥桥 宫宫家家岛岛 大大华钢华钢材材 下曲家下曲家 师师范学院范学院 上林苑上林苑 发发展出租展出租 0/3/0 百大商百大商储储 建建设设路路 海港海港SR 建建设设路路 SR CR1 CR2 RANCE1 RANCE2 西牟西牟 BTS 黄黄务务立交立交 桥桥 宫宫家家岛岛 大大华钢华钢材材 下曲家下曲家 师师范学院范学院 上林苑上林苑 发发展出租展出租 测试项 接入层测试 汇聚层测试 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 验收测试案例仪表测试 Page 10 SWITCH 胜浦南巷ATN 新盛花园ATN 胜浦国林螺丝厂ATN 胜浦CX-1 胜浦CX-2 CR-1 CR-2 SR-1 SR-2 RAN-CE-1 RAN-CE-2 环31 Smartbits测试仪（放置在工业园SR机房） ATN（模拟基站） CR-1 CR-2 SR-1 SR-2 RAN-CE-1 唯亭CX-1 唯亭CX-2 唯亭亭南模块ATN 索尔服饰ATN 亭南路ATN 环环3434 MP1550低速测试仪 （放置在工业园SR机房） RAN-CE-2 E1端口loopback内环 3/0/0 测试项 混群（ETH）业务测试 TDM业务测试 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 验收测试案例配置辅助MS-PW进行测试 Page 11 A B ER BSCCE EPCCE 设备角色 政企 政企客户 BTS/eNodeB BTS/eNodeB 政企 政企客户 PWE3 L3VPN L2VE L3VE BSC/EPC 测试仪放置于核心机房BSCCE/EPCCE下，在A设备上使用物理链路进行外环；在A与BSCCE/EPCCE之间建立辅 助MS-PW承载回程流量 测试下行流量走正常的L3VPN+PW进行承载转发，回程上行流量走MS-PW纯二层承载转发 辅助MS-PW 测试流量走向 测试仪 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 目 录 Page12 1. 中国电信IPRAN部署交付与验收测试 2. 中国电信中国电信IPRAN网元网管管理的实现网元网管管理的实现 3. 中国电信IPRAN网络日常监控与维护 4. 中国电信IPRAN网络故障定位与处理 5. 中国电信IPRAN网络运维案例分析 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt IGP公网+L3VPN的网管管理方式 Page13 接入层 汇聚核心层 U2000 使用独立的OSPF进程 承载网管路由 业务路由与网管路由在 A网元上共享路由表 B及以上网元全部使用 业务loopback地址作为管 理地址 承载在公网ISIS进程中 在B网元上将网管子接口 绑定到CTVPN193 VPN中 网管OSPF进程与BGP互 引路由 基站 网管 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管自通+L3VPN的网管管理方式 Page14 接入层 汇聚核心层 U2000 使用独立的OSPF进程 和VPN承载网管路由 管理地址路由在 _dcn_vpn_ VPN中发布 关闭DN-bit环路检测 B及以上网元全部使用 业务loopback地址作为 管理地址 承载在公网ISIS进程中 在B网元上将_dcn_vpn_ 的RD/RT值与CTVPN193 VPN设置一致 网管OSPF进程路由与BGP 互相引入 打开DN-bit环路检测 基站 网管 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 基站 网管服务器的接入网管集中放置通过CN2疏通 Page15 接入层 汇聚核心层 U2000 网管 公网通过EBGP互通，只发布B 及以上网元管理地址的汇总路由 CTVPN193通过MP-EBGP OptionA的方式互通，只发布A 网元管理地址的汇总路由 CN2 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 基站 网管服务器的接入在本地网中接入 Page16 接入层 汇聚核心层 U2000 网管服务器出2个网卡 1个网卡接入公网以管理B及以 上网元 1个网卡接入CTVPN193以管 理A网元 网管服务器需要配置路由以实 现对不同网段管理地址的访问 网管 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 目 录 Page17 1. 中国电信IPRAN部署交付与验收测试 2. 中国电信IPRAN网元网管管理的实现 3. 中国电信中国电信IPRAN网络日常监控与维护网络日常监控与维护 4. 中国电信IPRAN网络故障定位与处理 5. 中国电信IPRAN网络运维案例分析 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 日常监控与维护-概述 Page18 在日常监控与例行维护工作中及时发现、解决问题，防患于未然 网络监控 网络状态监控：网元状态、链路状态、 时钟状态、告警统计 网络性能监控：设备硬件性能、网络侧 性能、端到端业务性能 网络维护 网元日常维护：网元配置备份、设备资 源统计、单板资源统计、网元性能统计 网管维护 网管日常维护：通信状态、磁盘空间与 状态、操作日志、数据库状态与日志、系 统文件备份、密码定期更新等 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网络监控内容概览 Page19 设备状态监控 当前告警监控 告警/事件统计转储 网元健康：网元CPU、内存占 用率、光功率 接口流量：入、出速率；丢包 率、带宽利用率 IP 链路：时延、抖动、丢包、 带宽利用率 端到端业务：L3VPN、PWE3 网络状态监控 网络性能监控 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt Page20 设备状态监控 1、通过拓扑视图监控 3、通过网元面板监控 2、通过告警板监控 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 告警类型 业务影响 告警特征 处理策略 闪断告警 （按运营商 惯例，5分 钟内反复产 生/恢复的告 警） 1、暂时未影响到IPRAN业 务 2、中断时间较短且能自恢 复 对象特征：所有网元 时间特征：从隐患到故障状态需要 一定的转化时间，可处理时间大于 一天 统计特征：频繁发生，一般一天内 闪断频次超过100次 数量特征：60%（可见告警数量）； 91%（Trap数） 定时处理（建议每天一次 集中处理） 稳态告警 （按运营商 惯例，持续 5分钟未恢 复的告警） 1、组网双平面，其中一个 平面的设备/链路持续故 障告警，业务倒换到另 一平面 2、组网单平面，设备/链 路有持续告警，导致业 务影响，如基站掉站等 对象特征：所有网元 时间特征：可以等故障稳定后再派 单处理，一般确认周期为5分钟 数量特征：40%（可见告警数 量）；9%（Trap数） 实时处理（可以设置5分钟 模板过滤） 告警监控-告警监控思路（告警分类并采用不同处理策略） 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 告警监控-告警监控与派单原则（分层控制 抓大放小） 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt Page23 告警监控-告警过滤模板 在主菜单中选择“ 故障 浏览当前 告警” 在“过滤”对话框 中单击“从模板复 制”。在弹出的“ 选择”对话框中选 择“重点端口告警 过滤模板”“影响 业务的关键告警过 滤模板”，在当前 告警查询结果显示 重点关注告警。 1、定义“重点端口告警过 滤模版” 2、定义“影响业务的关键告警 类型过滤模板” 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 性能监控-性能监控的内容与周期 监控类别 监控对象 监控指标 维护周期 网元健康 网元 CPU 占用率、内存占用率 日 接口流量 接口（基站、 承载网） 流入速率、流出速率、流入丢弃包比率、流出丢弃 包比率 日 流入带宽利用率、流出带宽利用率 月 IP链路 IP链路 时延、抖动、丢包率、流入带宽利用率、流出带宽 利用率 日 端到端业务 L3VPN 流入速率、流出速率、流入带宽利用率、流出带宽 利用率、时延、抖动、丢包率 日 PWE3 流入速率、流出速率、流入带宽利用率、流出带宽 利用率、时延、丢包率 日/月 Page 24 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt Page 25 性能监控-性能监控的实现（举例） 创建监控实例 浏览历史性能 浏览实时性能 转储性能数据 创建监控模版 性能监控方案实现 模板名称为“CPU/内存”。 在“选择指标”选择“CPU 占用 率”和“内存占用率”。 设置“上限触发值”为“50”、 “90”，“上限清除值”为 “45”、“85”。 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网络日常维护 Page 26 1. 分析告警隐患 2. 审计变更 3. 备份网元配置数据 4. 备份网元日志 5. 转储告警、性能、日志数据 每日或周日常维护 1. 检查光功率 2. 检查TOPN端口利用率 3. 检查保护有效性 4. 升级网元本地登录信息 5. 统计告警 6. 转存所备份的网元配置数据 每月日常维护 1. 检查网络一致性 2. 检查拓扑成环率 3. 统计网络资源 4. 修改网元用户登录密码 每季日常维护 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管日常维护 1.检查机房环境 2.检查服务器供电情况 3.检查服务器硬件和外设 每季日常维护 1. 浏览当前告警 2. 查询U2000 安全日 志 3. 检查服务器资源使用 情况 4. 检查U2000 与网元 间的通信状态 5. 检查U2000 进程与 服务运行状态 6. 检查高可用性系统资 源状态 7. 备份U2000 数据 每日日常维护 1. 检查服务器磁盘状态 2. 检查服务器磁盘空间 3. 检查操作系统日志 4. 检查SQL Server 数据库日 志 5. 检查Sybase 数据库日志 6. 检查防病毒软件运行状态 7. 检查数据库状态 每周日常维护 1. 检查网管用户配置 2. 备份系统文件 3. 浏览告警统计信息 4. 检查U2000 服务器时间 5. 修改当前用户密码 6. 检查U2000 相关目录 7. 清理U2000 服务器磁盘 空间 每月日常维护 Page 27 概述 状态监控 性能监控 日常维护 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 目 录 Page28 1. 中国电信IPRAN部署交付与验收测试 2. 中国电信IPRAN网元网管管理的实现 3. 中国电信IPRAN网络日常监控与维护 4. 中国电信中国电信IPRAN网络故障定位与处理网络故障定位与处理 5. 中国电信IPRAN网络运维案例分析 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 故障定位与处理概述 Page29 Ping/Tracert 表项分析 协议状态分析 告警分析 路径可视化 发现 定类 定界 定位 通断类 性能类 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 故障的场景与分类 业务(通断)类 故障 性能(质量)类 故障 单个基站业务中断 单台A设备连接的多个基站业务 中断 单个接入环上所有基站业务中断 一对B设备连接的所有接入环中断 某台基站控制器对应的所有基站 中断 基站与EPC网元之间转发丢包 EPC网元PING基站时延大 Page 30 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网络故障定位及处理流程 M2000M2000 U2000U2000 故障排查，排除基站和 EPC问题 无线NOC 网络NOC 向承载网报障：NodeB2 IP, EPC 网元IP, 接通率低 输入： 源：NodeB2 IP 宿：EPC网元 IP 现象：接通率低 查找业务路径，自动执行随路 测试，及路径告警、性能分析 输出： 丢包节点或链路 6 1 业务告警： NodeB2用户接 通率低 2 3 4 5 派单现场处理 7 结果反馈 结果反馈 8 9 Page 31 SGW MME SGW MME EPC-1 EPC-2 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网络故障定位过程和思路 明确业务影响 范围 故障发现 故障定界 故障定类 故障定位 确定故障发生 网络层次 确定是性能类 故障还是业务 类故障 网管定位 命令行定位 Page 32 业务侧反馈 网管监控 根据故障的影 响范围判断 ping/tracert 采取抓包等手 段判断 网管智能判断 根据故障的现 象确定故障的种 类 根据故障的种 类选择故障定界 、定位方法 告警分析 经验判断 分析协议状态 、转发表项等 抓包报文分析 网管可视化智 能检测等 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网络故障定位/定界及处理方法概述 Page 33 告警/日志分析 重点关注硬件告警 注意分析关联告警 积累经验、事半功倍 协议/表项分析 IGP、BGP、LDP、 BFD等协议状态是否 正常 PW/L3VPN状态是 否正常 ARP、路由表项是否 正确 VRRP主备状态是否 正常 抓包分析 通过抓包确定报文 丢失点 通过对抓包报文的 分析可以解决疑难 杂症 抓包一般受条件限 制较大 综 合 网 管 U2000端到端路径可视化智能定位 ping/tracert分析 网元逐段ping测试 网元Tracert测试 业务端到端ping测试 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 告警定位-业务类告警 一选择主菜单“故障 浏览当前告警”，查看“是 否影响业务”，判断告警是否影响业务。 二常用的业务故障的定位方法，有以下三种： 1. 测试与检查：提供业务的故障定位功 能，故障定位的“检查步骤”指定了 业务的检测项和检测顺序；同时，支 持对业务各个层面进行Ping 操作，以 检测业务各层面的连通性；还支持 Traceroute操作和采集业务关键信息 功能，从而定位具体的故障点。 2. 快速诊断：支持对指定的对象（如 PW、VSI、VRF 等）进行连通性检测 和故障定位。 3. 测试诊断：支持对业务进行定时诊断。 Page 34 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 告警定位-性能类告警故障 一性能类故障是指，告警名称 中包含“性能”或“越限”字 眼的告警。 1.查看该条告警的详细信息： 检查指标“阈值”设置是否 合理？ 2. 如果不合理，则在“性能管 理”中调整阈值设置。 3.如果合理，则根据告警原因 调整相关的硬件或者业务。 二查看产生该条告警资源的实时 性能和历史性能图像，判断是否 是持续性告警，进而做出相应的 处理措施；在“实时性能”中查 看性能指标是否还处于越限状态。 三在“浏览历史性能数据” 中查看性能指标历史状态。 Page 35 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 告警定位-其他类告警故障 对于出现的告警，按 照此步骤定位： 1. 在告警浏览窗口中， 找到告警记录。单 击右键查看告警详 细信息。 2. 单击右键选择“拓 扑定位”，查看告 警源在拓扑中的位 置。 3. 单击右键选择“定 位到网元面板”， 查看出现告警的网 元面板状态。 4. 对于衍生告警，定 位出根源告警后， 结合告警的“处理 建议”进行处理。 Page 36 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt ping/tracert定位-以定位基站与EPC之间故障为例 Page37 SGW MME SGW MME EPC-1 EPC-2 基站ping网关是否可达/丢包 基站pingEPC是否可达/丢包 B网元ping基站是否可达/丢包 B网元带基站网关地址pingEPC是 否可达/丢包 B网元tracert EPCCE是否可达/路 径是否正常 EPCCEpingEPC是否可达/丢包 EPCCE带源IPping基站网关（位于B） 是否可达/丢包 EPCCE带源Ipping基站是否可达/丢包 EPC网元ping网关是否可达/丢包 EPC网元ping基站是否可达/丢包 B A D-ER ER EPCCE Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 协议/表项分析定位-以定位基站与EPC之间故障为例 Page38 SGW MME SGW MME EPC-1 EPC-2 查看PW状态是否正常（命令行、 网管皆可查） 查看PW主备状态是否正常 查看LDP remote Peer是否正常 查看基站的ARP是否正常 查看PW/LDP remote peer状态 是否正常 查看BGP邻居关系是否正常 查看VPN路由是否正常 查看EPC网元的ARP是否正常 查看BGP邻居关系是否正常 查看VPN路由是否正常 查看VRRP（如果有）主备状态是否正常 B A D-ER ER EPCCE 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 抓包分析-抓包方法 Page39 镜像抓包 网络1 网络2 PC+抓包工具 (wirshark) 镜像报文 输入报文 转发报文 抓包原理:通过设置端口镜像,将本设备一个接口的流量复制一份， 从本设备一个接口输出,捕获报文的过程不影响报文的转发处理. 可设置的报文过滤规则: 1.基于物理接口镜像输入报文、输出报文 2.基于子接口（VLAN）镜像输入报文、输出报文 3.基于流分类镜像报文 4.支持镜像上送CPU 的报文 CF卡远程抓包 网络1 网络2 CF卡 抓包原理:借用镜像流程，在下行将镜像报文送到CPU端口，并 以文件形式存储在设备CF卡中. 可设置的报文过滤规则: 1.转发报文上下行抓包 基本ACL(20002999) 高级ACL (30003999) 基于以太网帧头的ACL(40004999) 基于MPLS的ACL(1000010999) 2.上送CPU报文 基本ACL(20002999) 高级ACL (30003999) 输入报文 转发报文 抓包文件 FTP获取抓包文 件进行分析 说明说明:CF:CF卡远程抓包避免了维护人员去现场连线或者修改网络配置抓包，能根据问题现象有针对性、快速及时启动抓包功能，大大的卡远程抓包避免了维护人员去现场连线或者修改网络配置抓包，能根据问题现象有针对性、快速及时启动抓包功能，大大的 缩短了故障定位缩短了故障定位时间，维护人员根据客户实际情况选择报文获取方式时间，维护人员根据客户实际情况选择报文获取方式 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 抓包分析-报文分析 Page40 报文列表 以太报文头 IP报文头 报文具体内容 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管路径可视化定位-功能概览 U2000 路径可视化功能包括 路径发现、性能、告警、智能诊断、流量对账/统计等 路径发现 流量对账/统计 智能诊断 告警 性能 Page 41 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 源 宿 设备成千上万，业务2030跳，不清楚路径，无异于大海捞针，耗时费力。 网管路径可视化定位-功能概览 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 发散式：检查、判断、再检查、再判断 严密式：自动逐层检查 传统CLI定位流程 U2000诊断流程 PW Down 基 础 业 务 V P N 隧 道 路 由 链 路 检查告警 检查资源冲突 检查AC接口状态 检查AC接口配置 检查PW配置 检查BFD for PW 检查LDP会话 检查隧道状态 检查IS-IS配置 检查连通性 检查主接口配置 检查光功率 PW Down 检查PW配置 错误 修改配置 正确 检查AC接口状态 Down Up 主接口被禁用？ 检查LDP会话 Down Up 检查LDP 检查BFD状态 检查光功率 否 Up 检查误码 与基站参数匹配？ 正常 过低 Ping通？ 检查丢包 人 VS 机器 能力对比 平均定位时长 传统 U2000 传统 U2000 约10分钟 约40分钟 相当于23 年维护经验 1 2 3 4 5 6 网管路径可视化定位-诊断速度 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 1. 能否Ping通 2. PW状态是否Up 3. L2VPN是否使能 4. VC标签是否匹配 5. VC ID是否一致 6. VC Type是否一致 7. MTU值是否合理 8. 是否使能了控制字 9. 是否绑定了隧道 10.LDP会话是否Up 11.BFD for PW是否Up 12.接入接口是否Up 业 务 隧 道 路 由 链 路 物 理 7 3 4 5 6 2 1 7 举例：PWE3业务检查项 快速诊断支持超过300项检查，覆盖网络各层次各个对象 对于问题项，都给出问题说明和修复建议，可以一键跳转进行修复 网管路径可视化定位-诊断内容 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管路径可视化定位-操作方法-路径输入 一 手工输入： 1.手工输入三层业务源IP地址，或者连接三层 业务源地址的路由设备接口IP地址。 2.手工输入三层业务宿IP地址，或者连接三层 业务宿地址的路由设备接口IP地址。 二 选择输入： 三 选择网元。自动查询存在二层业务和三层业务 的接口列表。支持按网元名称、接口名称、接 口描述、接口IP地址过滤。 四 选择连接业务的接口。支持按接口名称、接口 描述、接口IP地址过滤/排序。 二 说明：三层业务需同时输入源宿IP地址；二层 业务只需输入连接业务的一端接口。 Page 45 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管路径可视化定位-操作方法-路径呈现 一 可视化呈现： 通过用户的输入与配置，以及特定的路径发 现算法，U2000实现了路径的可视化呈现。 二 历史路径： 通过对全网路径信息备份，在网络发生变化后 将历史路径还原并显示在TOPO上 。 Page 46 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管路径可视化定位-操作方法-随路性能 一 随路告警： 路径拓扑刷新之后，路径上存在告警的节点 会以对应的告警级别着色。 二 随路性能： 当某网元CPU、内存占用率，以及接口的带宽利 用率高于设置的门限，拓扑图上自动冒泡显示当 前的性能指标。 支持链路上MTU、速率、带宽利用率、单播速率、 广播速率、多播速率、单板CPU占用率、单板内 存占用率、性能数据刷新时间的显示 Page 47 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管路径可视化定位-操作方法-智能诊断 一 SmartPing： 设置源、目的IP地址、VPN名称（可选）、回 应报文地址（可选）等参数 探测报文参数（超时时间、发包间隔、填充模 式、报文大小）。 设置丢包率、延迟时间等阈值参数。 二 快速诊断： 功能菜单上点击快速诊断按钮或拓扑区中右键 菜单快速诊断，选择需要检测的路径。 Page 48 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 网管路径可视化定位-操作方法-流量统计 一 流量对账： 1.路径TOPO链路上右键菜单选择“发送报文对 比” 2.在实时性能监控界面中查看出入接口的流量统 计；当有报文丢失时，流量波形会存在不一致。 二 ACL流量统计： 根据选取检测点，自动在统计点配置ACL规则、 流分类、流行为、流策略。 自动在检测的源宿点之间发送报文。自动统计 各点匹配的报文值，支撑定位故障点。支持外 部（如无线侧）发包。 Page 49 概述 场景分类 流程思路 定位方法 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 目 录 Page50 1. 中国电信IPRAN部署交付与验收测试 2. 中国电信IPRAN网元网管管理的实现 3. 中国电信IPRAN网络日常监控与维护 4. 中国电信IPRAN网络故障定位与处理 5. 中国电信中国电信IPRAN网络运维案例分析网络运维案例分析 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 案例分析-N:1场景基站即插即用问题 Page51 M2000 B A D-ER ER EPCCE DHCP discover 被正常转发的 DHCP offer 未被正常转发的 DHCP offer 问 题 现 象 问 题 分 析 基站 如下图所示，基站双归接入到一对B设备并通过DHCP的方式实现即插即用（自开站），但是 在N:1场景（同一对B下基站共享网关）中，发现基站无法正常上线。 主PW 备PW 方案一：在B网元上开 启option82功能，将 L2VE子接口与基站的 对应关系在DHCP discover报文中携带， 该信息在M2000回复 的DHCP offer报文中 也会携带从而保证得以 正确转发。 B1 B2 问题解决 定界1：从M2000抓取 的信息发现M2000作 为DHCP Server能正 常收到DHCP dicover 报文并正常发出DHCP offer报文，初步怀疑 是承载网侧问题。 定位1：手工 shutdown B2 L2VE接 口（终结基站PW的接 口），发现基站可正常 上线，初步定位问题与 B2网元有关。 定位2：理论分析可知，B网元将DHCP offer报文从L3VE转发到特定基站对应的 L2VE子接口需要根据映射表进行转发， 而该映射表是DHCP dicover报文在B网 元哈桑进行转发生成的，由于DHCP discover报文都是有B1转发的，所以当 DHCP offer回到B2时，报文被丢弃。 方案二：在2台B网元上 分别配置唯一的 loopback地址用于修 改DHCP Relay报文的 gi-address，从而确保 DHCP discover报文与 DHCP offer报文来回 路径一致。 Copyright 2013 Huawei Technologies Co., Ltd. All rights reserved. 35pt 32pt ) :18pt 案例分析-BSCCE