互联网QC降低互联网DSLAM丢包率.ppt

降低互联网DSLAM丢包率 铁通江西分公司网络支撑中心QC小组 课题名称 降低互联网DSLAM丢包率成果类型 现场型注册时间 2010 07活动日期 2010年07月 2010年12月注册号 QC 14 2010 00X 一 小组概况 小组成员 二 选题理由 1 江西分公司下达网运考核指标 互联网DSLAM丢包合格率 96 每月进行考核一次 2 2010年7月 2010年10月互联网DSLAM丢包合格率统计表 二 选题理由 综合上述两点 我们选定课题为 降低互联网DSLAM丢包率 二 选题理由 三 确定目标 根据铁通江西分公司下达的网运考核指标 我们小组确定本次QC活动的目标值为 互联网DSLAM丢包合格率 96 四 可行性分析 1 7月份通过互联网综合网管 已监控的772套DSLAM设备 导出DSLAM设备丢包率不达标的设备有127套 是在部分规定时间内统计到的核心路由器 NC SGR1 NC SGR2 至这些DSLAM设备ping包存在全部或部分丢弃现象 为了查清症结 对此其形成的原因进行了分类统计 四 可行性分析 四 可行性分析 四 可行性分析 结论 DSLAM上行链路拥塞 停机要点施工作业 DSLAM主控板故障 城域网链路拥塞 DSLAM级联 DSLAM上行端口协商模式错误 机房停电和城域网光缆中断故障占了总数的80 31 是症结 2 造成互联网DSLAM丢包率不达标的症结 DSLAM上行链路带宽不足 停机要点施工作业 DSLAM主控板故障 城域网链路拥塞 DSLAM级联 DSLAM上行端口协商模式错误 机房停电和城域网光缆中断故障 占DSLAM丢包率不达标设备总数的80 31 我们 四 可行性分析 QC小组须重点解决这些问题 再同步处理汇聚层交换机 光猫故障 DSLAM主控板软件版本低等其他方面问题 达到目标是完全可能的 3 根据表一的统计 我们在2010年10月 DSLAM丢包合格率为92 62 这比较接近我们的目标值 增强了信心 再加上小组成员的共同努力 达到目标是完全可能的 五 原因分析 小组成员集思广议 大家齐心合力 找出DSLAM设备丢包率不达标的各类原因 列出以下系统图 人 故障处理不及时 告警发现不及时 值班人员专业技能差 责任心不强 考核制度不完善 无奖罚细则 机 无维护考核指标 设备参数配置不合理 上行端口协商模式错误 设备 线路性能下降 设备 线路老化 未按规定进行设备 线路保养 设备 光缆近寿命终结期 主控板软件版本低 设备软件不合理 机 专业技能培训未达标 管理地址丢失 DSLAM设备丢包率不达标 机 光猫可靠性低 光猫故障 料 设备机架接地不良 雷雨天电路板坏 上行链路带宽拥塞 环 市电停电 设备受雷击 防雷设施不健全 机房应急供电不及时 测 法 上行电路传送方式不理想 传输设备传送能力不足 DSLAM级联 设备上行电路无保护 DSLAM组网不合理 停机施工 综合网管功能不健全 施工时间与PING包测试冲突 监控手段不完善 丢包监测手段 处理方法不完善 监测手段和处理方法不全面 DSLAM设备丢包率不达标 接上图 五 原因分析 从系统图上可看出 造成电路不稳定的末端因素由15个 1 无奖罚细则 2 专业技能培训未达标 3 无维护考核指标 4 设备 光缆近寿命终结 5 设备参数配置不合理 6 设备软件不合理 7 上行链路带宽拥塞 8 光猫可靠性低 9 设备机架接地不良 10 防雷设施不健全 11 应急供电不及时 12 设备上行电路无保护路 13 DSLAM组网不合理 14 综合网管功能不健全 15 丢包监测手段和处理方法不全 六 要因再确认 为了确定要因 我们对15项末端因素进行验证分析 见 要因验证表 六 要因再确认 造成互联网DSLAM丢包率高的5个主要原因 1 设备参数配置不合理2 上行链路带宽拥塞3 DSLAM组网不合理4 综合网管功能不健全5 丢包监测手段和处理方法不全 七 制定对策 我们针对确认的主要原因 制定对策表 八 对策实施 实施一 DSLAM设备参数配置优化工作通过互联网综合网管和手工登录设备命令行界面的方式 在全省范围内对DSLAM设备上行链路的接口协商参数的配置情况进行核查 如果发现配置为半双工 则进行修改全双工 全省上行链路的接口协商参数不合理的设备17台 八 对策实施 设备配置修改后截图 八 对策实施 实施二 克服DSLAM设备上行链路带宽拥塞问题每日检查BAS接入端口流量情况 判断是否存在接入链路带宽利用率过高的问题 针对上行链路带宽拥塞的DSLAM局点 在省OA系统公布 网运部立即安排地市进行城域传送网优化调整工作 保证DSLAM上行链路带宽利用率不超过80 同时网支中心还定期去地市公司进行巡检 指导地市处理此类故障 比如景德镇中华北路DSLAM A 中华北路DSLAM B 中华北路DSLAM C都有丢包 通过互联网综合网管查看丢包明细的方法 发现三台设备丢包时间都发生在7月11日21 00 如下图 八 对策实施 然后通过查看这三台设备的组网 发现都是挂在一台汇聚交换机下 此交换机上行链路在21点带宽利用率已经超过90 如下图 八 对策实施 网支中心发现此问题后 立即通知景德镇公司组织进行链路扩容工作 全省此类问题共计有55件 八 对策实施 实施三组网上禁止DSLAM级联 安排市分公司进行网络改造 增加汇聚交换机 网支中心通过互联网综合网管远程检查和地市巡检等方式 对全省DSLAM的组网进行了检查 发现级联的DSLAM设备立即通知市公司整改 全省消除DSLAM级联设备21处 八 对策实施 带级联情况设备拓扑图 八 对策实施 网络改造后设备拓扑图 八 对策实施 实施四 完善互联网综合网管功能 屏蔽因停机施工作业引起的丢包数据统计 对于丢包100 的DSLAM设备 互联网综合网管立即发出声光告警 通知网管值班人员处理 如下图 八 对策实施 八 对策实施 增加施工时段内对受影响DSLAM设备PING包测试进行数据过滤 同时调整停机施工审批流程 凡涉及互联网设备的停机施工 调度须报互联网工程师审批 进行综合网管相应数据设置 八 对策实施 实施五 制定整治指导意见 提高业务能力 为了便于地市规范的整治不合格DSLAM设备 网支中心撰写了 三率报表不达标数据排查整治指导意见 并且组织地市技术人员进行现场培训 认真指导网管值班人员和设备维护人员对不达标DSLAM设备进行排查整治工作 有效提高大家解决问题的能力 八 对策实施 九 效果检查 效果检查一结论 通过QC小组的活动 DSLAM丢包合格率有了明显的提高 11 12月DSLAM丢包合格率98 12 达到了江西分公司的考核标准 DSLAM丢包合格率 96 2010年11月 12月DSLAM丢包合格率统计表 九 效果检查 效果检查二结论 DSLAM丢包合格率由活动前的85 13 提高到活动后的98 12 达到了我们设定的目标值 DSLAM丢包合格率 96 QC活动前后效果对比图 九 效果检查 效果检查三经济效益和品牌效应随着DSLAM设备丢包率下降 铁通互联网运行质量逐步提高 活动开展以来下半年新增宽带34108户 环比上半年月新增宽带29542台 净增4566台 若按一户收取宽带包年费300元计 合计136 98万元 取得了比较可观的经济效益 DSLAM丢包合格率的提高 铁通宽带上网速度更快和体验感更好 不仅让用户满意 也在日益激烈的市场竞争中 进一步提升中国铁通 铁通新时速 宽带新生活 的品牌形象 十 巩固措施 1 制定巩固措施 制定DSLAM设备和BRAS设备参数配置的标准 维护人员严格按照此标准进行配置 确保不会出现参数配置方面的错误 加强日常巡视制度 维护人员密切关注DSLAM设备上行链路忙时利用率 一旦超过预警值80 则立即申请扩容 组网上禁止DSLAM级联 省公司通过下发文件的方式进行严格要求 十 巩固措施 1 制定巩固措施 进一步完善互联网综合网管功能 积极主动联系厂家 解决影响维护的各类遗留问题 对 指导意见 进行完善 把各种可能影响DSLAM丢包的原因都归纳进去 对写明处理的对策 便于市公司操作 十 巩固措施 2 效果巩固情况 为了检查实施效果是否巩固 我们对2011年1 3月DSLAM丢包合格率进行了统计 详见下表 十 巩固措施 从上述图表可见 在巩固期内 DSLAM丢包合格率平均值为97 10 仍保持在一个较高的水平 说明巩固措施效果好 十一 总结和下一步打算 通过本次QC活动 我们取得了一定的成绩 使得DSLAM丢包合格率有了较大的提高