DNS吊死造成missing or unknown APN 批量投诉.docx

DNS吊死造成批量投诉分析一、现象在5月5日11点以后，嘉兴投诉量激增，开始出现批量用户投诉。因为嘉兴IBS服务器未接TD数据，所以只能看到这些用户在2G网内的上网记录。通过IBS平台查询这些投诉用户记录发现这些用户11点之前上网正常，在11点以后集中出现大量的PDP激活失败，原因值返回 missing or unknown APN（27） ，查看用户PDP激活请求的APN全部都为cmnet。用户信令如下图所示：5月5日嘉兴全天共产生此类投诉工单共19单。二、问题分析通过业务支撑平台查看这些投诉用户的APN签约信息，发现这些用户签约的APN正常，并无遗漏掉cmnet，结合用户之前存在使用cmnet进行PDP激活成功，且业务正常，所以排除签约APN遗漏问题。通过IBS平台统计嘉兴2G网内5月5日11：0019:30的PDP激活数据，与5月4日相同时间段内的数据进行对比。下表是各原因值用户数对比情况拒绝原因2014/5/4 11：00-19:302014/5/5 11：00-19:30增幅Time out11275877019-31.70%Requested service option not subscribed30395305860.63%Missing or unknown APN56562991014.87%Activation rejected by GGSN13917324.46%Activation rejected, unspecified203139-31.53%User Aauthentication failed173288.24%Operator Determined Barring37133.33%Service option not supported220.00%Insufficient resources1Invalid mandatory information21-50.00%Protocol error, unspecified110.00%Reactivation required1从上表可以看出，5月5日11:0019:30内PDP激活失败返回Missing or unknown APN的用户数比5月4日相同时间段内增加了1014.87%。统计各主要APN返回Misssing or unknown APN的情况，具体如下表：APN2014/5/42014/5/5增幅11：00-19:3011：00-19:30CMNET21859542631.19%cmwap29532811.19%zjdl.zj1171170.00%uninet3433.33%fetnet01330.00%vzwinternet5uniwap13200.00%从上表中可以看出，cmnet激活的用户返回Missing or unknown APN的用户数同一时间段内5月5日比5月4日增加了2631.19%，其他几个APN并无明显大幅度增加现象。从此现象可以看出，此次造成批量投诉的原因是因为通过cmnet进行PDP激活时被拒绝返回Missing or unknown APN造成的。统计该时段内这些用户的分布情况，如下表所示SGSNSGSN IP2014/5/42014/5/5SGSN2110.73.28.25148SGSN2110.73.28.26127SGSN2110.73.28.271917SGSN2110.73.28.281916SGSN2110.73.28.291917SGSN2110.73.28.301718SGSN2210.73.30.1913SGSN2210.73.30.2811SGSN2210.73.30.3811SGSN2210.73.30.4914SGSN2210.73.30.52016SGSN2210.73.30.61614SGSN2310.73.30.2513835SGSN2310.73.30.2615815SGSN2310.73.30.2714658SGSN2310.73.30.2813662SGSN2310.73.30.2911564SGSN2310.73.30.3011545SGSN2410.73.30.499883SGSN2410.73.30.5013883SGSN2410.73.30.5112732SGSN2410.73.30.5210722SGSN2410.73.30.5315609SGSN2410.73.30.5415627SGSN2910.73.22.10017605SGSN2910.73.22.10113536SGSN2910.73.22.10213553SGSN2910.73.22.979831SGSN2910.73.22.9811842SGSN2910.73.22.9915590总计39912654从表中可以看出，突增的这些用户集中在SGSN23、SGSN24和SGSN29下，而且在这3个SGSN下的各个板卡上增幅大致相当，并未集中在个别板卡上，SGSN21和SGSN22未见明显增长。统计这些用户的信息，发现这些用户绝大多数使用的都是4G卡。终端类型终端是否支持4G是否4G卡是否开通4G业务酷派8720L是是否三星SM-N9005否是是苹果IPHONE 5S(联通版)是是否小米MI 3(移动版)否是是未知是否三星GT-N7105否是否苹果IPHONE 5S(联通版)是是否苹果IPHONE 5S(联通版)是是否苹果IPHONE 5S(港版A1530)是是是苹果IPHONE 5S(A1530公开版)是是是步步高Y1否是否苹果IPHONE 5S(联通版)是是否OPPOR8007是是否未知是否苹果IPHONE 5S(联通版)是是是苹果IPHONE 5S(联通版)是是否苹果IPHONE 5S(联通版)是是是苹果iPhone 5S(A1518移动版)是是否中兴U202否否否CC27代表未知或缺少APN的错误。是MS/UE在做PDP激活时的一种常见错误。具体来说有如下几种情况：1 、MS在做PDP激活的时候，会在上下文激活请求消息里携带请求的APN，告知网络侧自己想要访问的外部PDN代表什么.但MS/UE可能没有在激活消息里携带请求的APN或未签约的APN，造成网络侧也就是SGSN/GGSN不知道用户想要访问哪个外部网络，造成激活失败。2 、MS做激活的时候，携带了请求的APN，但在SGSN做APN的DNS解析请求的时候，DNS SERVER上没有数据，不能返回正确的GGSN IP给SGSN，或者DNS SERVER根本就没有响应。造成激活失败。所以通过分析用户的上网记录、各APN情况和用户分布情况，可以看出，用户之前使用cmnet正常，11点以后才出现此现象，且查看用户签约APN也正常，所以排除用户签约APN问题；统计cmnet情况，该APN并没有全部返回错误，只是小部分用户出现此类问题，而且也集中在个别SGSN上，所以排除DNS SERVER 上没有该APN相关GGSN的数据的问题。所以初步判断为DNS服务器存在某些异常或SGSN23、24和29相连