X年7月网络运行情况报告.ppt

2013年7月网络运行情况报告,湖北移动网管中心,目录,目录,手机上网投诉情况总体分析,手机上网投诉量1-4月呈上升较快，5-7月窄幅波动。用户原因造成的投诉占到GPRS投诉的绝大部分，占比基本保持一致。,手机投诉情况总体分析,双向GPRS类投诉分析：,无线设备退服次数恶化,全省G网、T网小区退服次数,注：退服比=退服次数/小区配置数,2013年5月开始G/T网小区退服次数开始上升，7月份全省小区退服比大幅增加。2013退服比与2012年曲线规律一致。T网由于配套条件劣于G网，故退服比一直高于G网。小区退服主要原因：停电、传输中断、硬件故障、软件故障、工程调整等。进入5月份后我省雷暴天气逐渐增多，特别是7月份各地市大面积拉闸停电情况增多，高温、雷电、传输等因素对小区退服影响较大。,有信号无法上网快速响应流程,有信号无法上网快速响应及现场处理工作从2012年12月22日开始实施，至今超过半年，制定的现场处理流程如右下图。网管中心负责组织协调、投诉筛选、用户回访、后台跟踪、核心网优化、生成派单规则、流程固化、终端问题现场排查。网优中心负责无线网性能指标提取和分析、协助制定派单规则、组织无线网优化。地市分公司负责现场测试、无线网问题处理、编写分析报告和案例。,归因分析现场处理中发现的热点问题归类,网络部针对“有信号但无法使用”、“网速慢或网页无法打开”投诉，成立了攻关小组，制定快速响应流程，对手机上网类投诉工单进行抽样回访、现场跟踪测试并深入分析投诉原因。投诉快速响应小组截至7月共计处理用户投诉266件，确认存在问题的投诉209件，已发现的导致互联网投诉的热点问题分为以下9类：,GSM小区无线资源不足，双忙小区语音业务压制数据业务。（54件）基站设备软硬件故障导致小区吊死。（46件）网络覆盖不足。（32件）部分GSM小区数据业务资源配置不足，数据单忙。（33件）小区上下行干扰太大。（11件）传输故障，误码率高。（3件）PS接入拒绝计数多，CCCH负荷高。（3件）终端问题。（15件）其他非网络问题。（11件）.,209,件投诉,9,类问题,3,方面问题,软故障,资源,终端,投诉问题派单规则制定1,热点投诉问题,对应派单机制,GSM小区双忙,0流量小区,双忙小区,手机上网综合下载速率低小区,影响上传业务的高干扰小区,基站软硬件故障,小区高干扰,GSM网络覆盖不足,GSM小区数据单忙,传输误码率高,数据业务单忙小区,传输故障小区,PS接入拒绝计数多,CCCH负荷高小区,终端问题,TD下载速率低小区,在有信号无法上网现场处理工作中，我们根据热点问题的集中度逐项总结分析，探索规律并根据反馈情况调整总结，制定实施如下的8种问题小区发现规则并利用IT手段固化派单。,投诉问题派单规则制定2,投诉问题派单规则制定3,软故障零流量处理案例,7月15日襄阳用户反映在宜城板桥镇手机有信号但无法上网，维护人员现场发现问题与描叙一致，定位小区为宜城罗屋NG-1小区。查询这个站点告警，该站点没有告警显示，基站运行正常。查询宜城罗屋NG-1小区后台指标，小区语音业务正常，无拥塞。但数据业务异常，无论是GPRS还是EGPRS上下行均无流量（如左下图）,问题描述,性能指标,重启该小区GENA功能，重新激活小区上网功能。该小区信道配置较小，调整CDEF为50（原值为20）.CDED为10（原值为1），复测手机在此处已经可以正常使用EGPRS网络，测试浏览网页速度和下载速率均在可以接受范围内。建议：平时要加强对小区参数设置情况的关注，可以减少用户产生投诉。,实地测试时发现在现场位置信号覆盖强度为-62dbm，信号明显强度强于周边相邻小区，属于绝对主控小区，可以说该小区信号覆盖强度完全可以满足数据业务需求，查询后台发现该小区数据业务参数设置基本正常，GENA和EGENA均处于开启状态，但是PDCH信道设置较少，（如右下图）判断小区数据业务处于休眠状态。,问题分析,处理措施及总结,性能类小区下载速率差异很大,1、手机综合下载速率34.05%分布在100kbps到200kbps之间；2、TD手机用户下载速率56.61%分布在600kbps以上；,全省最好与最差TOP10TD手机用户下载速率小区（7月）,全网最好与最差TOP10小区TD手机用户下载速率相差甚远。,全省最好与最差TOP10手机综合下载速率小区（7月）,全网最好与最差TOP10小区手机综合下载速率相差甚远。,资源类双忙小区分布,为更详细的了解全网小区情况，网管中心针对双忙小区从地市和场景两个维度进行了区域划分,从分布上来看，人群密度大、业务需求大的商业中心、企事业单位、城区道路、层居民区、村庄、乡镇存在较多的双忙小区；从占比上来看，医院、风景区、集贸市场、城中村、写字楼等场景区域双忙小区比例远大于全省双忙小区平均占比，位于这些区域下的用户可能会有更多的潜在投诉。,双忙小区超忙医院,现场处理情况：普爱医院大厅及11F，现场测试医院内均占用市四医院信号，信号强但下载速率慢。主要原因为复用度达到11以上，半速率比率96%，每线话务量1.3，属于超忙小区；由于是爱立信老式2308机型，最大载波数只能到4，因此需替换站型解决。,问题跟踪：早期医院室分建设多采用2308机型，支持4载波，目前无法扩容。医院人流量大、数据业务高。经统计现网有33个类似点急需解决，其中医院类占55%。该类问题扩容已经列入扩容最高优先级。,同济，协和，省中医院，武警总医院，武汉中医院等均存在该类问题！,问题发现：对诺西WAP与中兴WAP在西塔Gn口的抓包统计数据显示：中兴WAP网关Gn口DNS成功率低于诺西WAP网关Gn口DNS成功率；（注：主要是未设置代理地址，不经过WAP网关内部直接从防火墙出去这部分业务；业务量约占Gn口浏览业务的3%左右）,问题分析：核对中兴WAP网关内部服务器的DNS成功率通过对中兴WAP网关内部成功率进行核查，核查经过中兴WAP网关服务器内部的DNS成功率超过99%；排除WAP网关内部DNS问题；核查融合APN后设置CMWAP接入点未设置代理地址这部分业务的DNS成功率-设置如右图所示；通过业务模拟重现，抓包后发现，未设置代理的这部分业务时延较高；分析业务可能存在拥塞或者排队现象；问题定位及可能影响的用户感知：对业务路径进行了分析，核查了GRE路由器、防火墙的配置均正常；通过比对诺西与中兴防火墙的配置并分析H3C防火墙的工作原理，从理论上复现了故障原因；影响DNS业务拥塞的原因为H3C防火墙公网NAT转换地址不足；导致DNS解析时NAT转换失败；该问题有可能会引起DNS业务繁忙时未设置代理地址的用户访问DNS业务有排队现象；隐患优化：为解决业务高峰时未设置代理地址用户访问DNS拥塞隐患，将中兴WAP网关Socket公网地址从1个扩容到8个，扩容后信令抓包数据显示，成功率与诺西WAP网关一致，均在95%以上；,APN未设置代理地址,核心网：中兴WAP网关未设置代理地址业务DNS成功率优化,终端问题,终端侧原因归类如下所示：,解决措施：,终端软件问题：如终端固件BUG、终端自带软件问题、终端与网络匹配问题等，一般建议用户更新固件版本或去终端售后进行刷机操作解决；终端设置问题：目前双向平台已可以通过用户的IMEI号匹配终端的品牌、型号和操作系统等数据，可根据用户的终端操作系统查阅对应的操作系统设置说明指南来解答用户疑问；终端硬件问题：一般建议用户送修或更换终端；第三方软件问题：一般建议用户尝试更新第三方软件至最新版本看是否解决，若还未解决则建议用户尝试更换相同功能的其他主流软件；其他问题：如手机停机等问题可以根据双向平台显示的用户终端品牌和型号来搜索是否有相关的终端案例来进行解答。,用户号码IMEI对应表,询问用户该问题是否是偶发性现象软件问题询问用户该问题是否是设置后出现设置问题询问用户该问题是否在安装第三方软件后出现第三方问题.,截止2013年8月，网管中心共整理案例2350例；但从7月开始，业支不再提供用户号码及IMEI关系对应表，影响用户终端信息的准确获取。,大部分流量依旧驻留在G网，影响客户感知,虽然两网流量双双增长，但自6月起，TD流量环比增幅连续两月弱于G网流量，全省TD数据业务流量占比最近两月呈现微弱下降趋势，TD分流力度需进一步加大。,全省GSM、TD网络流量趋势图,GB,大部分地市TD流量占比下降,TD流量占比持续两月下降地市,最近两月全省有8个地市遵循全省总体规律出现下降趋势。降幅超过4个百分点地市江汉、天门、孝感，原因均是TD流量下降、G网流量上升，需关注。武汉TD数据流量占比逐月升高。虽然7月份因高校放假等原因影响G和T流量较6月均有所下降，但G网流量降幅大于T网，故7月TD流量占比显著提升。,武汉TD流量占比持续两月上升,注：TD数据流量占比=TD网流量/(TD网流量+G网RLC层流量），分地市流量只能从RLC侧取，全省G网流量是GB口流量,江汉,天门,TD流量占比先降后升地市,TD流量占比先升后降地市,十堰,襄阳,宜昌,黄冈,大部分地市TD流量占比下降（2）,6月较5月下降，7月较6月有所上升的地市有四个，四个波动地市中仅十堰总体上7月较5月上升，其他地市下降。6月较5月上升，7月较6月有所下降的地市有三个，三个波动地市中仅荆门总体上7月较5月上升，其他地市下降。,TD手机分流比连续两月下降,1-7月份，全省分流比累计值由9.1%增至11.8%，基本保持每月均增长状态。1-5月份，全省TD手机流量占比保持增长状态，同时当月分流比持续增长。6月、7月TD流量环比增速（3.2%，4.6%）有所减缓，增速低于G网（5%，9%），导致6月、7月当月TD分流比环比下降；同时6、7月手机流量占比也有所下降。,注：TD手机分流比=湖北用户使用TD手机产生的TD流量/湖北用户产生的总流量。TD手机流量占比=湖北用户使用TD手机产生的总流量（包括TD和GSM流量）/湖北用户产生的总流量。,TD手机分流比预测,若要2013年12月累计分流比为15%，那么每月的手机TD流量增幅应不低于18.5%，到12月TD手机TD流量达到1.13万GB每天（Gn口统计）。若要2013年12月累计分流比为17%，那么每月的手机TD流量增幅应不低于26%，到12月TD手机TD流量达到1.53万GB每天（Gn口统计）。下半年计划销售终端360万部，按照上半年的销售终端VLR登记率（27%）和现有的话务模型，预计TD手机TD流量可以达到1.13万GB.,高流量2G小区持续增加,4月至7月，全省高流量2G小区呈递增趋势。7月，高流量2G小区个数及高流量2G小区流量占全省2G总流量比例均较6月有明显增长。4月至7月，高流量2G小区增长明显的有黄冈、江汉、孝感等地市。注：高流量2G小区：日均流量大于500MB的2G小区,TD手机用户活动的无覆盖区域分析,7月，TD手机用户发生在无覆盖区的总流量为TD手机用户总流量的32.3%。TD手机用户活动的无覆盖区域有15757个网格，主要分布在恩施、宜昌、黄冈等地市。无覆盖区域有484个网格有待开通的TD站点（占总规划网格的约24%），以各地市规划区的驻留比（70%以上）推算建站后吸纳的TD手机流量，每天可增加约178.7GB的TD流量。Top100无覆盖网格中TD手机用户总流量占无覆盖网格中TD手机用户总流量的5%，其中有45个网格有待开通的TD站点，如完成将每天增加45.3GB的TD流量。,解决TD网络问题，提高TD网流量,收到黄冈用户投诉，在黄冈商城附近无法使用TD上网，终端总是自动选上2G网络查询黄冈商城小区后台指标，小区TD各项指标正常，并未产生告警。但通过提取该小区2G和TD流量，发现TD流量非常小（如下图，该小区2GLAC为29042，TDLAC为57633）,问题描述,下一步的计划,目录,7月全省温度情况,湖北省地理位置图,平均温度：33.9超过35度：15天,平均温度：33.7超过35度：13天,平均温度：34.3超过35度：17天,平均温度：33.6超过35度：12天,平均温度：35.5超过35度：22天,平均温度：34.8超过35度：20天,平均温度：35.5超过35度：25天,平均温度：35.1超过35度：22天,平均温度：35.0超过35度：21天,平均温度：35.3超过35度：23天,平均温度：34.0超过35度：17天,平均温度：34.4超过35度：17天,平均温度：33.9超过35度：18天,平均温度：34.6超过35度：18天,平均温度：34.6超过35度：19天,平均温度：33.9超过35度：15天,上半年停电告警及占比走势,1-7月停电告警呈增长趋势，4月以来尤为明显，每月环比增长在3%以上，7月份环比增幅39.67%。全网发生停电告警的站点的数量也逐步增多，其占比由57.29%增长到81.68%。,全省停电告警及停电告警占比图,停电告警站占全量站比率图,全省各地市停电处理有效性分布,同时，对各地市连续多天重复出现停电告警的站点的数量进行了统计，可以看出，十堰、襄阳、宜昌、荆门、荆州、很大程度上是由于其重复发生停电告警的站点多造成，且与十堰、宜昌、荆门、黄冈等温度告警较多成正比关系。,月度重复7天出现停电站分布,全省各地市停电告警处理及时性分析,同时，对地市处理停电告警的及时性也进行了统计，上图为在6、12、18、24、48小时内处理告警量和时间的对比关系，斜率越大说明处理越及时（告警量/历时时间比值），可以看出，在6个停电告警量最多的地市中，襄阳、宜昌的处理及时率最好，十堰、恩施次之。,全省各地市停电处理及时率分布,上半年温度告警及占比走势,1-7月温度告警呈增长趋势，4月以来尤为明显，每月环比增长在50%以上，7月增幅38.81%。全网发生温度告警的站点的数量也逐步增多，其占比由1.99%增长到17.63%。本月对各地市温度告警产生的原因及特点进行了分析。,全省各地市处理有效性分布,同时，对各地市连续多天重复出现温度告警的站点的数量进行了统计，可以看出，十堰、武汉、宜昌、黄冈、荆门温度告警较多，很大程度上是由于其重复发生温度告警的站点多造成，如十堰，超过7天、每天都产生温度告警的站点就有200多个，占到十堰全部温度告警站点的42%，因此平均下来十堰每个站点每个月要发生2.24次温度告警，而同样基站规模的荆州，只有0.11次。,月度重复7天出现温度站分布,温度告警故障归因分布,通过对7月份所有温度告警工单的归因分析，发现影响温度告警的最主要的因素是供电及空调问题，这两项原因造成了81%的温度告警，停电后会造成空调直接停机，造成站点内温度升高。另外夏季空调持续工作时间长，空调故障频发，如压缩机、室外机、风扇，自启动装置故障等都会造成空调停机引起温度上升。,各地市停电次数与温度告警的关系,统计了7月各地市的停电发生次数，总体来看，停电次数多的地市，温度告警数量必然较多，如十堰、宜昌、荆门、黄冈、恩施，但停电因素对各个地市的影响程度不一，如武汉停电次数较少，但温度告警依然很多，说明还有其它的影响因素，襄阳停电次数虽较多，但温度告警很少，说明停电对其影响较小（其7月高温天气只有13天）。,地市温度与停电对比分布图,各地市空调问题与温度告警的关系,统计了7月各地市空调故障发生次数，总体上看，空调故障次数与温度告警次数有正相关性，结合前述分析，可以看出停电和空调故障对各地市的影响程度的差异特点，如十堰、武汉，60%以上温度告警是由空调故障原因造成，而宜昌、荆门、黄冈、恩施则主要是由于停电原因造成。,地市空调问题基站比分布图,通过上述分析可归纳出各地市温度告警的成因特点：武汉、襄阳、鄂州、咸宁、随州分公司，需注意空调问题带来的温度影响宜昌、荆门、黄冈、恩施需注意停电问题带来的温度影响。十堰公司需同时注意停电和空调问题带来的温度影响。,各地市温度告警的成因分析,全省各地市温度告警处理及时性分析,同时，对地市处理温度告警的及时性也进行了统计，上图为在6、12、18、24、48小时内处理告警量和时间的对比关系，斜率越大说明处理越及时（告警量/历时时间比值），可以看出，在6个温度告警量最多的地市中，宜昌、荆门的处理及时率最好，十堰、武汉次之。,全省各地市温度处理及时率分布,7月份停电、温度区域分布对比图,VS,同时，核心城区与城区和农村的停电基站比为1:3:6与温度基站比1:3:6相吻合。基本可以看出停电区域与温度区域有必然关系。,7月份，停电基站分布情况，为农村81%，城区（含县城）17%，核心城区2%，与温度告警基站分布情况相吻合。,VS,区域停电站占全量站分布图,区域温度站占全量站分布图,极端天气、外部事件对网络的影响,今年我省多地连续出现特大暴雨及高温高热天气，引发大面积断电、泥石流、滑坡等易造成网络故障的不可控事件，根据7月我省动环、无线、传输专业告警增长原因分析，暴雨、高温等极端天气，包括市政施工、物业纠纷等外部因素对网络的影响在逐步增长。,雷击,保护限电,用电超负,计划限电,供电检修,电网改造,泥石流,滑坡,市政施工,车辆挂断,拉闸限电,市电停电,光缆中断,暴雨,高温,物业纠纷,外部破坏,供电问题,线路问题,各种常见外部不可控因素对网络造成的直接影响归结起来为两点，即最后都引发供电问题或线路问题。而在夏季，暴雨和高温对业务的影响面要大于另外三个因素。,供电部门,基站侧无线设备,设备,空调,采集点、蓄电池组,SDH、PTN,OLT/ONU,外部因素对上层业务影响定量分析-1,线路问题,语音、GPRS、TD,集客、家客、WLAN,外因,业务层,动力传输层,基站/小区退服,无线层,告警,设备,供电问题,设备,告警,告警,44%,39%,86%,11%,40%,24%,14%,97%,2%,47%,12%,30%,注：数值为7月供电、线路问题及各设备自身问题造成的告警比例。,69%,10%,97%,外部因素的应对措施,每年4月前，进入高温前要完成全网空调、蓄电池的预检预修，确保正常工作，并及时开启空调。针对不同区域停电站点分布及放电特性（农村81%，3.51小时、县城17%，2.38小时、核心城区2%，2.23小时），区别配置蓄电池，保证电池放电时长与停电特征的匹配。对于偏远、易停电区域的基站，可借鉴外省配置固定油机，建立油机自动启动手段，提高发电及时性。对于电网改造、供电检修、高温限电等计划性停电，在夏季到来之前与供电部门建立沟通渠道，提前获取停电信息，做好预防性供电保障。切实做好物业沟通工作，避免随意拉闸限电，对于沟通不畅的，建议采取其他取电方式。总结先进地市经验，提升维护效率，遏制停电对网络造成的影响。持续完善动力环境监控系统。,供电问题,目录,光缆中断导致大面积基站退服故障3起,【归因分析】本地网故障原因分为两类：（1）同环先后发生多点阻断，致倒换保护失效；（2）因资源受限或方案把关不严导致部分段落同路由，引起网元脱网。【改进建议】1、建立隐患台账。建议分公司全面清查2.5G以上传输光缆路由隐患，做好台账，制定整治和盯防计划。2、加大资源储备。目前过街路由资源缺乏，导致被迫同路由情况时有发生，建议分公司加大基础资源建设。3、严把方案审核。对于机房搬迁，建议严格审核方案，确保搬迁站点符合物理双路由条件。,7月份发生3起因光缆中断导致大面积基站退服故障：,电源故障或停电导致大面积基站退服故障2起,7月份发生2起因电源故障或市电停电引起大面积基站退服故障：,【归因分析】引起大面积基站退服故障主要原因：（1）站点或骨干节点的电源设备损坏；（2）市电停电无后备电源室分站点大量退服。,【改进建议】1、对室外一体化机柜设备接地工作进行全面排查，确保站内设备接地。2、更换基站中部分放电时长小于4小时的电池。3、在后期工作中多与供电部门沟通，提前预知供电局计划性的大面积停电。,武汉和黄冈重大故障分析,【改进建议】1、今后遇到极端天气时（暴雨、雷电、台风、洪水等），将启动临时应对措施，机房巡检由每日6次改为每小时1次，值班人员由1人增加为2人，同时每小时对机房情况进行传报。2、加强与综合、物业等部门的联系，及时发现问题，将隐患消除在故障发生之前。,【改进建议】1、网优中心已要求各分公司每月进行RNC系统巡检，提前更换隐患板件，目前暂未发现问题。2、在RNCV2.00.510版本软件（入网证号TD-Z13005）中增加自愈机制，彻底排除隐患。,目录,集客用户业务使用感知分析及质量提升措施,互联网业务质量对集客用户越来越重要，为提升集客用户的感知，2013年3月网管中心进行了对集客用户互联网业务专项提升工作，保障集客用户通过CMNET省网出口疏导的业务质量。,2013年3月对比发现集客类用户较其他类型用户的差异主要表项在对交互类应用的要求较高，主要包括邮件、IM、交易、网银和政府网站这五种业务。,示例：各运营商集客用户邮件类业务的感知,交互业务的感知对比：电信宽带铁通宽带移动宽带。3月通过拨测移动宽带IM、交易、网银和政府网站这四类业务的感知情况，得出丢包率1%、Ping时延60ms的应用占比为42%。,业务质量提升措施,通过SIG流量分析系统对业务进行整理。建立集客用户访问主流的邮件、IM、交易、网银和本省重点网站等重要业务对应的地址数据库。通过获取的重点业务对应地址库，网管中心采取调整路由出口的方式来进行优化，调整了各应用服务器的出口路由。通过对淘宝、京东、工行、建行、政府、公积金等集客用户最关心的网站进行域名结构分析，对影响页面感知较大的235个图片域名通过加入缓存来提升页面访问速度。保证了集客用户在进行网页浏览等页面操作时的良好体验。,集客用户互联网业务感知比较分析,集客用户业务使用感知提升效果及下一步计划,提升效果,质量提升措施后：各运营商集客用户邮件类业务的感知,质量提升措施后：重点业务质量访问拨测结果（5月）,调整后测试结论：经过针对性优化，集客用户重点互联网业务优化效果明显，集客用户的互联网业务感知得到持续、有效的提升。,网管中心将定期对业务地址对应库进行整理，不断增加其业务支持类型，对集客用户关心的团购、网页游戏、财经类网站进行整理和优化。进一步完善对邮件、IM、交易、网银和政府网站业务的覆盖，不断提升集客用户互联网业务的感知情况。,下一步工作计划,在目前移动集团引入的主流域名资源的不断增长，以及网内缓存系统、游戏加速出口的建设，我省的部分互联网资源已经优于铁通。目前CMNET具备了良好的互联网资源管理和优化能力。建议将铁通网内集客用户迁移到移动CMNET网内，可以更好的提升集客用户的互联网感知。建议将铁通网内集客用户的迁移回CMNET，将降低与铁通公司之间的结算成本；同时