四川移动WLAN故障案例库(2012年1季度期).docx

四川移动WLAN故障分析案例库（更新日期：2012.3）四川省移动公司网络部2012.3目录一、WLAN常见故障分析思路31.1影响用户感知的常见故障31.2排障总体思路41.3有信号无法连接41.4网络断线51.5网络慢6二、四川移动WLAN案例集锦72.1有信号无法连接7案例一：德阳ARP病毒造成IP获取失败故障7案例二：乐山财贸校IP地址池不足问题8案例三：眉山11g与11n共存网络用户不兼容问题102.2网络断线13案例一：泸州移动VLAN划分问题13案例二：自贡移动GPON设备处理能力问题15案例三：南充移动遭遇恶意干扰问题16案例四：成都理工大学AP频繁掉线问题19案例五：乐山旅游学校AC升级导致AP下线的问题212.3网络慢23案例一：遂宁职业学院空口效率低下问题23案例二：广元移动容量问题和AP过覆盖问题27案例三：内江职业学校11a模式解决高峰期网络分流问题29一、WLAN常见故障分析思路1.1影响用户感知的常见故障WLAN网络结构自下而上为APL2接入网 L3 VPN（城域网）-ACBRAS后台系统（PORTAL、DNS、AAA、DHCP、策略服务器等）。网络架构中任一环节出现故障最终都会影响用户感知，下图为影响用户感知的常见问题和故障，L2接入网以上部分主要是有线侧网元的配置参数问题，AP及无线环境部分主要是系统内外的干扰问题等。APAC后台系统：1、策略服务器参数错误2、DHCP地址池空间不够3、DNS解析错误4、PORTAL受攻击BRAS：1、软件BUG2、接入设备配置错误3、业务VLAN配置不当4、主机名不规范AC：1、端口配置不当2、主备配置不一致三层VPN：1、AP管理地址分配失误2、VPN参数配置二层接入网：端口故障AP及无线环境：1、系统内外干扰2、AP软件BUG3、负荷过重4、参数设置不当CMCCL3 VPNL2接入网1.2排障总体思路针对用户有信号无法连接的故障处理和WIFI系统优化工作的总体思路：（1）AP与AC间上联链路问题，造成管理通道不可达，AP会自动关闭空口广播，用户不会感知信号存在，网管出现告警。（2）AC与BRAS间链路或配置出现问题，用户对信号有感知，但无法连接，WLAN网管不一定出现告警。1.3有信号无法连接有信号用户无法连接的问题主要集中在空口、三层、AC、BRAS、后台系统几个方面空口及 AP侧 无线干扰问题 负荷过重引起的拥塞问题 主设备故障问题 AC侧 业务板端口配置不当问题 主备配置不一致 BRAS侧 BRAS侧城域网参数错误 接入端口配置错误 BRAS双挂 主机名不规范 后台系统 DHCP server数据库参数设置不当 策略服务器参数错误 DHCP地址池空间不够 DNS解析错误 1.4网络断线问题主要集中在空口、L2、BRAS几个方面空口及AP侧无线干扰问题设备故障导致重启掉线无线信号覆盖不足L2接入层POE供电故障、 交换机配置问题 BRAS侧双AP双BRAS间的断线问题漫游切换导致的断线问题1.5网络慢用户感觉网络慢的问题主要集中在空口、AP以及互联网出口质量等问题 空口及 AP侧 无线干扰问题 信号弱覆盖 负荷过重引起的拥塞问题 互联网出口 互联网出口拥塞 互联网出口网络质量不稳定 二、四川移动WLAN案例集锦2.1有信号无法连接案例一：德阳ARP病毒造成IP获取失败故障问题描述：2011年12月14日德阳罗江警安学校娇子4、5栋、鸿儒1、2栋使用京信新AP覆盖的区域出现部分用户无法获取IP地址，导致用户投诉。故障分析：前期由于出现过部分AP下挂的用户无法获取IP地址的情况，经测试判断为AP设备问题，后经厂家对AC、AP的软件版本进行升级后故障排除；但正常运行一周后再次出现相同故障。在楼道POE交换机端口镜像，有线端和无线端分别使用wireshark软件抓包测试。对抓取的数据包进行分析，由于无法获取IP地址，主要对DHCP报文进行分析，在分析无线报文中发现，在整个网络中发现了大量的ARP请求报文。故障原因：由于局域网内某台用户终端中了ARP病毒造成，病毒将用户终端伪装成网关， AP又未开启二层隔离导致其它用户终端连接到病毒终端请求IP地址分配，造成用户无法连接到真正的网关，无法正确获取IP地址。解决办法：开启AP二层隔离功能，在无线侧将用户终端隔离相互不能访问。案例经验小结：开启AP的二层用户隔离，可有效防止ARP病毒攻击，同时还可避免同AP下用户局域广播对网络整体速度的影响。所以在对AP进行数据配置时，一定要设置二层隔离，避免类似事件再次发生。案例二：乐山财贸校IP地址池不足问题问题描述：乐山财贸校3月1日和3月2日高峰期不能获取IP地址。故障分析：（1）测试人员检查了用户的电脑，用户电脑的网卡驱动正常，网卡开关已打开，IP地址已设成自动获取。测试人员的电脑终端在故障投诉地点同样无法获取到IP址，初步排除是终端问题。（2）使用AirMagnetWiFi Analyzer PRO软件现场测试，发现现场AP下挂载用户数为人，排除是设备接入用户数过多造成的。（3）乐山办公大楼和财贸校用的是同一个AC管理，故障发生时在办公楼也同样无法获取IP地址。同时，峨眉交大校区，西华校区，中医药大学也同样有无法获取IP地址的投诉。（5）乐山市中区的IP地址池容量为.5个 C,峨眉的IP地址池容量为5.25个C，且乐山的WLAN网络和小区宽带（PPPOE）的IP地址池是共用的。登陆AC，发现WLAN认证前域约有1000多用户，小区宽带用在线用户约有1400多户 。判定为IP地址池耗尽导致用户无法获取到IP地址。故障原因：由于IP地址池资源不足，导致用户无法获取到IP地址。解决办法：根据业务使用情况对现有IP地址池进行扩容。案例经验小结：现有IP地址的分配方式很容易造成地址池的不足，对于潜在用户的规模进行预估和形成日常的地址池利用率监测机制，当地址池利用率达到80%左右的时候，建议考虑对于地址池进行扩容案例三：眉山11g与11n共存网络用户不兼容问题问题描述：随着用户规模的不断增长，为了解决高校部分位置高峰期容量不足的情况，分公司计划对于密集区域升级到11n网络，即11n与11g AP并存，以提高用户带宽达到改善用户感知的目的。但是密集区域AP改为11n后，部分用户反映信号不好，网络质量反而降低。故障分析：用户的网络结构为独立AP加小室分方式覆盖，单AP通过功分器覆盖5间宿舍；通过测试发现如下问题：（1）覆盖AP下挂用户数量不多，空口利用率不高。（2）同寝室其他用户信号正常且使用正常，同一区域部分用户电脑信号好，部分电脑用户信号很差。（3）进过登陆AP发现，信号好的用户直接连接到最近的11n的AP，而信号很差的用户连接到了楼上或楼下11g的AP上。发现这一问题后，我们把寝室最近的11n的AP更换为11g后测试，所有电脑信号均正常，能够正常使用。故障原因：维护人员发现不管11n的信号有多好，部分电脑均会选择11g的AP连接，导致信号很差。经过查看电脑无线网卡发现，虽然电脑网卡支持11n，但网卡驱动过旧，为2010年驱动。解决办法：使用相关软件更新驱动版本，并启用802.11n模式后，该用户恢复正常使用：案例经验小结：如果部分网卡驱动过旧，会导致网卡不会首选11n网络，而选择11g的网络，特别是对于11n和11g并存的情况，可能导致用户不会连接最近的AP而导致上网质量过差。在维护过程中，需要及时更新用户网卡驱动，以防止类似现象发生。2.2网络断线案例一：泸州移动VLAN划分问题问题描述：泸州移动10月老办公大楼割接后出现5F、7F以及8F部分用户不能正常上办公OA网络的问题故障分析：通过现场测试发现如下问题：（1）地址分配异常：197网段为老楼网段、79为新楼网段，在老楼能获取到新楼的IP地址如上图，我们看到两个不同办公楼原本应该隔离的地址分配策略，结果却出现相互交叉的现象。（2）对5F、7F、8F的AP进行逐个用户连接性测试，发现有的AP能够正常分配地址，有的AP却不能正常分配IP地址，最后分配成为AP的默认地址段的地址对于老楼的故障楼层每个AP进行地址分配测试，发现部分AP不能正常分配地址，或者只能分配AP的默认地址。（3）对于能够正常分配地址的AP和不能正常分配地址的AP进行配置比对，发现不能正常分配地址AP的VLAN划分均配置有问题如上图，对于问题AP的配置进行检查，发现这部分AP的VLAN全部配置有误。故障原因：由于网络割接之后，对于部分AP数据配置不当，导致配置错误的AP不能正常分配IP地址，造成同一区域部分用户不能正常上网的问题解决办法：重新检查大楼AP的数据配置，针对配置错误的AP进行数据修改。案例经验小结：VLAN划分过大会造成广播风暴、过小容易造成用户的切换掉线、错误会造成网络中断，在实际工作中要根据现实情况合理的规划VLAN，并且对于数据配置更新要做记录，以避免维护中资料的不齐全造成配置故障。在11月乐山中医药大学部分寝室用户出现经常连接受限的情况也是由于VLAN划分不合理造成的切换掉线问题。案例二：自贡移动GPON设备处理能力问题问题描述：9月开学后，出现大面积用户上网过程中重新获取IP地址，造成掉线故障分析：（1） 高峰期查看地址池，地址池足够使用（2）通过空口抓包和有线转包都发现大量的异常ARP报文如上图，我们看到大量的ARP消息，呈现ARP的异常（3）自贡理工学院采用的是有线进入每个寝室，另外无线信号也全覆盖的方案，传输使用的是一个GPON接入，有线点和无线的用户数量大概在3000多户，查阅中兴GPON设备的最多接入用户数不超过512个如上图中兴的GPON对于同时的并发用户数是有限制的，而自贡理工学院的有线和无线全部通过1个ONU设备传输，同时在线的用户数量肯定超过设备的处理极限的，所以造成用户的掉线故障原因：由于同时在线的用户数量过多，超过GPON设备同时处理的极限，造成用户的掉线解决办法：对于GPON设备进行扩容案例经验小结：在组网过程中，合理根据设备的处理能力进行设计，GPON虽然有很多优势，但是设备本身还是有处理极限的，对于规模较大的高校一定要事先考虑到容量的极限，以避免出现大面积的网络问题。相同的问题再德阳、绵阳、宜宾分公司也出现过，通过设备扩容能够得到有效解决。案例三：南充移动遭遇恶意干扰问题问题描述：南充西华师范大学部分用户经常出现连接受限的问题故障分析：通过在现场的测试我们看到如下的现象：（1）电信的组网结构为有线和无线相结合，无线部分在走廊内采用的是MOTO的AP，SSID设置为和移动相同的CMCC_EDU，并且在寝室内在另外增加一个家用无线AP，做为室内的无线接入和有线接入HUB用。电信SSID为CMCC_EDU的AP后台没有做任何数据配置，用户关联后不能获取IP地址。电信AP设为CMCC_EDU移动楼道AP电信每个寝室室内接入AP如上图看到电信的MOTOROLA的设备，SSID设置为CMCC_EDU，另外每个寝室内部一个SSID设置为CHINA TELECOM-寝室号的AP在室内信号强度足够强，造成无线环境相当复杂。（2）电信采用的是1个AP覆盖6个寝室的覆盖策略，移动采用1个AP覆盖4个AP的策略，相对于电信来讲移动的信号要好很多，但是在部分电信信号强于移动的区域，移动的用户很容易关联到电信的AP（3）南充分公司对已移动的AP进行了严格的信道规划，和电信已经做到了最小的相互干扰。故障原因：西华师范大学电信为了防止移动争抢其有线用户，采取的恶意竞争导致用户的故障。在这样的结构下，虽然移动做了信道优化，但是电信如果将AP信道修改到一个信道内，将对于移动网络造成较大的影响。解决办法：（1） 将移动的SSID进行修改（2） 信道优化，最大减少干扰（3） 增加AP的覆盖强度，为用户提供最好的接入条件（4） 通过公司间的行政手段协调（5） 通过学校进行协调（6） 加强网络资料的收集，随时对设配的配置进行修改，主动避开干扰。案例经验小结：省内已经出现了多次恶意干扰，德阳、遂宁都是容易产生恶意干扰的高发地区，通过加强维护人员的判别能力，第一时间分析定位干扰，对于干扰进行取证。案例四：成都理工大学AP频繁掉线问题问题描述：通过对网管平台连续三天的告警统计汇总发现理工大学每日产生的端口下线告警均在270-450条之间，而设备相同、网络规模相差不大的理工影视学院产生的告警仅为理工大学的6%-10%。故障分析：成都理工大学以及成都理工影视学院两个学校的WLAN网络均采用烽火POE交换机以及弘浩厂家的AP设备，设备本身不存在较大的差异。另外两者的网络规模相差也不大，但是告警数量却相差10倍以上。通过现场测试发现如下问题;（1）在对弱电箱中的交换机以及供电模块的查看过程中发现，轻微的对网线的碰触会导致交换机的端口状态瞬间发生变化，从UP状态变为DOWN状态。（2）现网的无线AP供电普遍采用POE交换机1-8号端口通过POE模块供电；9-24号端口通过交换机端口供电。测试中发现很多POE供电模块供电功能失效，导致AP下线。（3）测试过程中发现有一部分端口的告警信息为闪断告警，交换机的端口状态的频繁切换，并且一直持续不停。由现场测试发现的以上问题，初步判断可能的原因为POE交换机供电故障、AP设备故障、网线水晶头问题。为进一步定位问题原因，采用排除法，进行如下三次对比试验：（1）更换POE交换机。（2）更换新的AP。（3）检查网线，更换水晶头。最后发现，更换交换机和AP设备后，端口频繁掉线问题依然存在，而更换网线水晶头后，监控了24小时发现端口未出现UP/DOWN现象。故障原因：理工大学AP频繁掉线问题是由于网线水晶头老化造成,导致在交换机侧的供电端口与网线接触不良.从而使的大量AP频繁处于UP/DOWN切换.如上图，中间为新水晶头，两边为已经氧化发黑的旧水晶头。解决办法：更换出现AP频繁掉线问题的所有网线水晶头。案例经验小结：网线水晶头里的金属与空气直接接触，如果环境潮湿，非常容易氧化，造成网线接触不良。在网络建设时，一定要按照规范清理设备的安装环境，做好防尘、防潮处理，避免设备因环境因素造成的损坏、寿命缩短等问题。建议代维单位进行定期的设备巡检，从而及时发现隐患，排除故障。案例五：乐山旅游学校AC升级导致AP下线的问题问题描述：用户投诉男生公寓2楼207房间搜索不到WLAN信号故障分析：（1）测试人员的终端在2楼207也搜索不到WLAN信号，排除是终端问题。（2）通过测试发现男生公寓整栋楼都无法搜索到WLAN信号。如上图，我们无法搜到正常的WLAN信号。（3）测试其它区域发现女生公寓整栋楼也同样无移动WLAN信号。实训楼、食堂、教学楼均能搜到WLAN信号。由于未带多媒体箱钥匙，无法打开多媒体箱查看情况，但从外面能听到多媒体箱内设备运行的声音，排除是供电的问题。对于如此大规模的AP掉线，初步判定可能是AC吊死或后端数据配置的问题。（4）维护人员登陆AC，发现旅游学校除了食堂的AP还正常在线以外，其它楼栋的AP均不正常工作，部分AP出现不断重启的情况，重启AC，故障仍未解决。故障原因：由于AC连接互联网，AC固件自动在线升级错误造成部分配置数据为保存而丢失，导致乐山旅游学校AP大规模掉线或重启。解决办法：（1） 禁用AC的自动升级功能。（2） 恢复AC的数据配置，保存配置数据后，重启AC。案例经验小结：禁用AC的自动升级功能，以及在配置好关键节点设备数据好做好数据保存工作，以避免AC升级过程中造成大面积的网络问题。2.3网络慢案例一：遂宁职业学院空口效率低下问题问题描述：遂宁职业技术学院在下半年以来出现如下问题：（1） 用户闲时和忙时的网络质量都不是特别让用户满意。（2）忙时的网络质量相对闲时劣化现象非常明显。故障分析：在用户投诉最密集的女生10栋宿舍我们通过测试发现如下问题：（1）闲时的网络质量非常不稳定（2）忙时网络质量更是差到了用户不能忍受的状况。如上图我们可以看到，不管我们在忙时和闲时的测试过程中，在网络信号覆盖良好的情况下，网络质量呈现出来不稳定的状态（1）闲时有出现无线连接后，Portal认证推送页面非常缓慢甚至不成功的现象，丢包率达到20%多。如上图看到的，Portal认证推送出现不成功，用户没有办法做下一步的任何网络动作，同时我们可以看到连接的信号强度良好，但是空口获得的连接速率只有2M。（2）笔记本终端在覆盖良好的环境下，得到AP分配的空口握手带宽极度不正常，总在低速帧范围内（1M、2M、5M、9M等）频繁切换跳动，根本没有办法达到54M、48M的高速帧测试AP测试AP如上图，我们在测试过程中看到，在信号良好的情况下，空口的握手速率总是在低速帧之间频繁的切换。（3）在用户下载过程中，空口带宽的效率非常低下，大量的传输都工作在低速帧的状态下上图中，我们看到在下载过程中，网络传输速率最高才11M，根本没有办法达到正常的54M,48M，呈现出空口效率低下的状态。故障原因：如上图我们看到现场的配置没有对于空口速率有任何配置，采用的是AP自动分配速率的方式，而现场的环境干扰又存在，造成AP在检测到干扰的问题后，为了提高传输的准确性，不断的降低分配给用户的空口带宽，最终所有用户都工作在低速的状态下，整个空口效率得不到提升。解决办法：支持速率如上图将AP支持的最低速率提升到18M以上，让用户最低的分配空口带宽工作在较高状态，虽然干扰会造成一定的丢包，但是整体空口效率得到提升，用户的感知会得到提升。案例经验小结：802.11的协议决定了，高速帧传输效率高，但是抗干扰能力差，低速帧传输效率低但是抗干扰能力强的特点，在现实环境复杂的情况下，我们可以强制要求设备工作在高速传输状态，虽然会有一定的丢包情况，但是这样能够提高整体网络的工作效率。相同的问题再德阳移动、泸州移动都得到了实际的验证案例二：广元移动容量问题和AP过覆盖问题问题描述：广元移动办公楼网络出现如下的问题： 用户上网速度慢 用户经常在公司办公网和随E行之间切换故障分析：现场的网络结构为，每层楼12个AP通过室内分布系统覆盖，大楼傍边一个室外AP通过定向天线覆盖作为随E行公共热点，两个网络的用户在忙时都出现网络慢的现象，并且相互切换认证页面；通过测试发现如下问题：（1）办公楼内AP的附着用户数都比较多，达到20个左右甚至更多。如上图，CMCC的AP同时附着用户数在16个，有的AP甚至更多。（2）在办公楼内能够收到随E行AP的信号，有时候甚至比本楼层的信号还强（3）两个网络的SSID都是CMCCCMCC（办公网）CMCC（随E行）如上图，两个网络同样SSID，并且网络之