网络AMR异常掉话问题定位案例

1、某网络AMR异常掉话问题定位案例某项目搬迁割接后，客户反映AMR语音掉话率不论是RNC级话统，还是Cluster话统都要比搬迁前NT网络高,RNC语音掉tg率在1%左右。尤其在小区半径改大以后，掉话率呈现进一步上升的趋势。现场分析话统发现超过70%的语音掉话原因是上行RLFailure，检查上行同失步参数觉得失步比较容易触发，因此修改了上行同失步参数。然而参数修改并没有取得预想的效果，掉话率没有任何改善；分析语音掉话相关的配置参数，发现语音的RLMAXPower配置为-3dB,而NT公司设置是+1dB,相差4dB,我司的缺省设置偏低。将语音下行最大发射功率修改为+1dB,掉话率有所下降，为%左

2、右，基本与NT公司持平。以下是我司和NT公司掉话率变化走势图：通过修改语音下行最大发射功率，掉话率有所下降，然而这个改善并不显着，客户仍然觉得我司的网络掉话率比NT公司的要差，并做了一份对比报告，认为我司网络的AMR掉话率平均比NT高出一倍，对我司网络的性能指标不满；从初步的CHR分析来看，有相当多的异常掉话在信号很好的时候，而且掉话的原因仍然是以IUBRLFailure为主。通常都是呼叫刚刚建立18秒左右掉话，异常现象非常典型。1 .定位问题的基本手段首先根据所有可能原因，从以下几个方面分别进行定位分析:1) TopN小区的路测2) Top5用户的CDT跟踪3) Top5小区的IOS跟踪4)

3、 网络参数对比5) NodeB的日志分析6) 设备告警与掉话小区相关性检查2 .初步的排查1） 路测：首先在对掉话率比较高的几个小区进行路测后，没有发现掉话。路测无法重现这类掉话，因此基本排除了依靠路测定位此问题的可能；2） 参数设置检查：包括了与NT公司参数的对比，以及和其它商用网络的对比，列出与掉话相关的几个不同参数。分析后发现主要可以修改的是软切换参数（1A的延迟触发时间改为100ms,滤波系数改为2）,这能够解决一些切换不及时造成的掉话，而事实上该网络的无线传播环境并不复杂，切换不及时发生的概率较低，而NT公司以前是根据秒周期报告来做软切换的，比我司目前320ms的配置更慢。因此，修改

4、该参数能带来的增益并不大。3） NodeB问题：该网络普遍采用我司RRU,以前没有普遍商用过，一度怀疑RRU可能有问题。为此还对比其它商用局RRU的话统，并对CHR进行分析；对NodeB的日志分析也没有什么结果。4） 设备告警：检查IUB传输告警、小区VSWR、RTWP告警以及拥塞等告警，发现这些告警与当天的TOP5小区相关性不大。5） 通过以上分析，定位问题的手段主要都落在CDT和IOS跟踪上。对前一天CHR统计的AMR掉话Top5用户进行CDT跟踪，结果好几个用户没有开机（或者在NT网络），跟到的两个也没有什么异常发生。分析的重点只能放在IOS跟踪数据上面。3 .锁定异常掉话发生过程一一R

5、BSetup后的RLFailure根据对掉话TOP5小区的IOS跟踪数据进行分析，重点只分析RLFailure造成的AMR掉话。在这些RLFailure原因的掉话中，刨除掉一些确实是信号问题（Ec/Io或RSCP较差）造成的掉话，有相当大一部分RLFailure的掉话确实是在信号非常好的地方发生（前几秒的Ec/Io和RSCP一般达到-8dB/-80dBm以上），而且掉话的过程非常一致一一都是在RBSetup完成后10秒左右收到RLFailure（这时候一般还没有发生软切换，激活集只有一个小区），5秒钟后没有RLRestore掉话。因此把问题锁定在这种典型过程的掉话上面，典型的掉话点信令流程如下

6、：T3S1I-IFAt/F_R/g-2M2M88*2692CWB8FiQiWCKTa-Nodia-72525150DEDICNEAPM9OWQAFRL_RECFOPEFT25313:191(95)HB*F_RL_RECF-_FS*JZ7?fiS2nnAftFfon-r-NnJeB?264RRC.MbuHh'-g/ElJH2tiy2UU88I-72WDIB-11-13111911(1pEDIC_fiBAF_M£'JhDAI'_RL_REFO_ClM'fJiT_工行工皿口口nw血日|7然$2DOB11131119RPC.岷GRRC.RflTUFLCIwP&

7、quot;?fifl?noRSFgUE7后？20jG-n-nni'd斗:巾卜RRC晔RRCJ/EAS.CTRL26420080Ta庆72561319RRCjwEftG.CTPL120920AMToUE?2t0JOaa-11-1313.10.5301)NtjHaOfLLET.DPT.ReP.Mb>l-h<1HL'2MJ2LMJ89tTlUtRWbFF?产曰普IPdJENT”即mwTfl-CHT3613DIB-11-131319而二川萌RRC_LL_DIF_TPJ=tF260201188From-UE72622D0G-ii-nmg：52C6S>口F!W'P

8、_DIRECT_TR*IJ3FlER匕6，g2W8BTh-CH72631113151-3DEIC_MEAP_MSGN0AF_6DiL._lJliA£_P=5T'2眄3皿的F'um-WuJe072612QOO11131311j57032>N昭P.DEDIJME第REF=?T3H%F'EC-C,20020068FiumNaiJaB2DDM1-1llT2CrD2(53>DEDICMEAPMSOkaAFFLFAILJRJD，二郎丽日日Fram-NadeaT2662D0B-11-131320D7C54>DE。忙：_R上Ntnj/mG日心际ULPELEA

9、SJREQU.42例2M招T:-CN?2£?J.J6-11-131JJ-山著命DEDlCJytJJk'JbrU1地F卜UHLLb*UL_C.*MV.MG吼闻U&卜iflrtycr.77FR'f'I'医J；>R町*PUFIFME.COMP-2&namnA!r-172692006-11131320D7C56>RRC靠GRR<R:RCCONMp=L,126920083T.3-UET2TDRlTC_MSORRC_RRC_CONM_R=LTa-U5T出kibkma2coaastWR：._U2pgfM_cmui4j3mL2M2OO

10、8STo-UE4.锁定异常掉话发生手机类型一一V980根据跟踪的IOS信令，网络发了NAS层消息IdendityRequest,而UE回的IdendityResponse中上带了手机的IMEI ,因此根据IMEI的前6为数字可以确定手机的型号。如上图的IMEI:,在Google上查询“IMEI:354909”发现这是MOTOV980手机。这款手机存在较多问题，其中在其它商用网上发现该款手机存在内环功控的问题。将RLFailure掉话的IMEI全部检查,并一一在网上搜索其对应的手机型号，发现V980手机占的比例相当大，见下图：UEType(MEI) Nokia6630 MotoV3x Samsu

11、ngZv10 Samsungz140 Moto7980(355603) MotoV980(354909) IMEL354757 MEI352230 Nokia6280上图查到的V980对应的2个IMEI占42%,后来查到354757也是V980,所以V980手机实际比例为56%,这与V980在网络中占有的较小比例显然不符，因此怀疑V980手机引起异常掉话。为了进一步证实我们的怀疑，把2天CHR统计的掉话TOP10的IMSI逐个进行跟踪，并查看IdentityResponse消息。一共抓到8个用户的消息，其IMEI和对应的手机型号如下表TopAMRDropIMSIIMEIPrefixUEType

12、24354757MOTOV98026357390MOTOV3x20354757MOTOV98024354909MOTOV98028355603MOTOV98025354757MOTOV98020354757MOTOV98023354757MOTOV980这样问题逐渐明显，肯定是与V980手机有关的。在我司的某个商用局，V980手机的问题是不做内环功控，而是固定以满功率发射，因此导致很多站的RTWP抬升导致其它用户掉话。从现网问题小区的RTWP跟踪来看，确实也有类似RTWP尖峰：于是一度把问题瞄准了RTWP问题，但后来的IOS分析否定了这种推测。5 .RTWP问题排除为了证实异常掉话时是否有RT

13、WP抬升，我们打开了IOS跟踪的NBAP公共测量报告，查看RLFailure前后的测量报告，见下图所示，RTWP=(61-1)/10-112=-106dBm,因此RTWP非常正常。Timg第二 ed i m vT i，阻航 SOK.HJf H MMJ 3MfrUl!511:H5igiS) 而诙FT而11 64余酶IW <DEDIC 1囱守 kJEG 川蹒工 C«wJ&_PEMPTg -忖g twx H，RFfiRTnTflO -KI国牛 DEDI MEA= FRT 'N64P1 i：的*跪押所 - 1 -B-im ir-c nr-RTIr ajig. IllHM

14、ICNBAP_ i =riE_ArRl:KE - -： f M；二，RWM日E FEnQENEP ICirtt-hiEAS.RPRratfrll-1511.54.5(2NBrf_C加制_忙睦_6:£七电料归N*40mE空LRFRT制g”15 iiHM* ：加卜 KHEFE1方Hur/o”Masjwrjii-f.1i-15”当中岫币忖叫F、CWH.|bF&!='REE|FT£NEF .EEJE壮 尸 RT田1615伯"”X_ 一/“'+.必此5" 中MBJFjCOEjWEAmTlTT“11 E星0防PE【区煦JJ r：0N WRL

15、J A 11 NOKirCh1M5 11 f4 5tCUTJN&-F .： C«r RF FrFTS N_1.0，Td 'i|= RFRT70CC-1M&H 5f £D<iNE>-F_< CW1t _h ±JqEb_HF h如&TM狷口防,h-p - til-卜 sCJE MI-k- 1R为/1FmiTSScOl)if twifl fcr&s PE-PORTfi Nfirf1 L-6miPART2QCt 11-14 11 14 »CDNELFl' CDMf 0心 PETOFiyNW,1&#

16、163;fi.z_RFh!SQCCrH-1*. 11皿2仍NB>f! -M RETOFTflNF#'.用ET Jf印Al：frl-15 'I 二5引口麻DEDlC.fi'AP,UlEGRMHF _DlRE CT_TRhKi SFEfi'RR'：,_MI= C值白血 LEA'拈 Face 1 r 15 m 整 mm”同轴P ：CW 住心EFE N&*FJ0hr<1： _APRT20 :61175 -1 55 D(4>NBAP M钳耽世恋 FEIrTS N巳所日亡尸FKTSC6-1I-15 H 必挺0中HMPqCMOLjRE

17、MmB 卜BVjCOMLHUSJflRTPtPs Jr -1 . IihkjTii - j.xT'ji'.m. _-/Fi j ； ecmj I20l：fr11-15 11EKDr"0>DEE IC.FAr-*P,M5rR 国 W= JLI.HELEA 三 E_RM¥ Tore-i i-15 iK 随州"C'EOlC.hWjiiiPJJBah A'MAP _iij_rELea 5E_CTk L XAl.fRT-TSTLsOSCMl二 mr 3=L =meni>ailaZ'leii- - rurrrnu't

18、me-d'EiuiefriHir/mei刖w- an i口二"木匚1 bd 币 1： |由.1 皿 J3 M 05明/耻|吟OhJ OElot ioc'3 or oocu而且RLFailure之前也没有看到UE的发射功率攀升，见下图所示，UETxpower上报值为51,由此计算UE发射功率TxPower=51-71=-20dBm。Thni,n F-”"15TTF£M汨F30：H-lll-i4 H fM- 30(01口巴付 NP干岬E卜行 AP_DE二<G：F&5i hFR-NH4P COhrU UEflS RtfCfftS |NEAP

19、_C：CFWM_MEAS F-FR1k：< V 1，仆四' 口|卡."I|，r-. ： |H .-' V J|Cr.'- -Irl.- -f- r.p 'V|,任R CTRL LAW7 r r « »4 - .：irn“可 m 必" " i'r. r 川, ，F i” s -t'，* i2uCPfi-11-i 1i 6* 巾NM。口ITlIJUlE柚.REPORTSJL-b-Md!: 11 t4 52£2t用 Ei"二口廿"jLU 印王予EjPURM口MMMhM

20、 11M5tfli) M*qOU3JggffHMEQ FPA1 NaMdiuOMEApm it<； -r-R-3QW-11H 5 11司网丽二口*uJUIE户&_R£PCRTG %SM>_ijEM_*lEAE_E'PFI可呼如wiTi单型q阴 口好手/*M£卜蚪'nlw如二ET 百亍11 .国同M门 .为师.。0,叫1£阳!?年中可巧 市的WCWM-M长历而11 E41SWNBRP_：2OWUl_U£?_p.LKT' 丸川m %二 贬 :办 h '.ilk repi：-t7F：- _ L 0: -： _

21、 'F I'! h- 、L 'F n '1 i d M - J j ：.可册.厂门*4.1肝23斤EFQRTS2C-5-11-1? 11 MF*.无二乃尸&啊:2MMiMS 11 S4：如同 REj，GI z-r 二力,r匚二；-h环P OMH M匚43 NFFHI ： /_ ' H'产一NR'_J.mMFW1 h - 酬用:qWM二耻应RFFHRi华Ff 月Ei：r.TR4K 耳FE R2图11 ,1 g 1g5：Wflgil WW.BWLMEBB_ffEPCHTO |hBW*jQGWWLMEWJPFT3g：G-li-T5 11

22、 ?flr(-!nr m 乖 11 fOrru.r"仁GJ 11 n 11 f 口口门 口5门二 RKWfiP MM/ IQM-fnh I 站 dtiL I DECRMAP(昵? I. I ' I " M ',：；.13卜 M- 用2工0恸5印 JkEFCHTE N5AFJXMM IHE*5FPR-N卯二口hnuLMfeftSJBPETS |NftAF C0MM_lnEA3_n*R 1|p1加阳JU_而晔E PlliW U，M IL RUlEACU 亡七miU b. jim>"il-pelemeomp .ryxIIGHnir nut (IT)

23、 的前门|内由前H) u匚Suicnd：必制t 一mg 口心 WJ usDahiLDn Oil 7 (23)S Ulp4 g t fPftjRpflulUPnti Qi79口出口9 02B&1 口7923 UL3tM 蕤丸upCvHNttinAI, M削配由11尚1由弗仁加Wu$CelllEflU：7b7b <2fl；95>utDHcp GuOI的氨阑t用UCCpiCHBp-Mt 惶 GurTmhrtijHip照 il)g T，*|3，mhEMUCDUEhlflzIKZD 0211三口1冢句|%小.口口口| m：i mmnnjn分析了IOS中很多的这类异常，发现都是这种情况

24、：RTWP和UE发射功率都很正常的情况下发生的RLFailure。因此基本可以排除上行问题导致，而信号这么好的情况下下行怎么会有问题呢这种错误的假设也导致我们在问题定位的前期一直没有注意查看下行质量。6 .锁定RLFailure的原因下行BLER100%于是打开了IOS中的UE质量上报（下行BLER）和下行码发射功率的测量。发现RLFailure前的下行BLER达到100%,而此时的导频Ec/Io非常好：TI历。*7LLid-'' 1 < 71111 工可占二NHAF LXJilhi HLAL： kLHCJHIHKiP F I:LlPJhi- h'r r：l |2

25、l(£-b1-1i 13： 11 岭江崎NdAF C.OUHREFCiRTSihBAP com 压具工 RFfiT?口311门下，血：F2口中MP_p!切唯 口 f_ .RlG i1 *泡陀F EDlC NEAPT旧-P CEDiC UE曜 RPlRT-13 J1 珏色匕h = AP 辿; h£AD FEP.ffiaT-BiP DED1C UE婚 RPlR'l2fl(J0 Mi IB 111 4电心hb <i,-iyb-Jj*F'J- uMW_lflLAh_|.'k Rr7口i玲，"ri ji。附：h - AF Ml.UW wr 1

26、R1=pr- RTflhfiM.CQIMjmHLRPflr2LO3-U 13 11h = AF _MUlWE_R£Ft RTShB 舟 P/QUw心S.PF RThfifrp C-EDI* mem |-?WTJCUJ , It 11 J1 t'CJ-： 1印也<L-1 月J_LL-l.HH lMMMC4E Ih，川口 FT，Qq*m 用m + . 口 X；i.i ii - 1- ' I J1 *7_ih：近些M也些We-i-ifl v3fli 打甲瓯 NfiAP事lar-i. mi的 也板比11<33白等函1873Si- i ifi i “1：4如色 |版

27、ARJBMWIE崛JgURTM国而面史hEp'cOUhi-liP&A -pFfirKMPqtMjmRjRMT加CE»1l!i 1314蛤冉 iFCflRCLPtaflnERjjinLMlAlULij TP JI *二口LDIl n；*,t- -帚/宓.1, 1 q il iHirAh-JDOfi- - - it i a ji ： ji(y：:xNP.npnir：_jrfzjP1匚口力QeP_EJIDiC._ULAfi_h!T 晶日加了工m皿尸KUEhP'tiw?0(53 1CQMMWM (1)-r：lFi：芯国 Mm。MRMCIIMCffltlii)口事7 m

28、口口IBM) 胤口 mr 口 n巧 8 jB6 UKCprhErNoniZt wcprhnwpoaciflurlrr HNijni：W (4kiMDITChtf g刘(J*| 骐口删财修QB)=.。产 ipc癖TnzHnft?翼口了<：色131山1 H，hBMLRU刊 L JM口划Lb IB 13 JI T (JC： JlirA , 'iTS 11 11 寸信勺 JDUfi- Mfi l5ai TQ二二20ie-M0N "F _E IN_ ML ”._P£MN £N- AF r- liW W|-4f：讦函N = AF*E_R£F< P

29、TS粕 A CrRL MTA，山七P二口加1_昨第_PFflT cFipcTrchintj? wDlTChlcj DJ2 G) 翼口昵MF修0印， clipcrfTrchntMiDCfi-'l-IB 13 11 ”口砂DEDK 卡_“支WAPlpGD|C_1f&k£_FFPClRTC皿P_MWXE昌B A£4 I- -卜Id， L "， "'n.由诉鼻0i£不回就HPfi'T hBAPOMnfl_htAL_PFfi£i- o? 旗"" r 08 m 访 nc ID 喈孔fH ie I

30、D Jl - ii5i：KflM.&QUfcCmOPflT¥叫111醋¥注1百谒 I J Ui 4A hit | jil 10KTB6通过上图UE上报的数据可以计算服务小区CPICHEc/Io=（39-1）/2-24=-5dB,RSCP=（29-1）-115=-87dBm;下行码发射功率TCP=（86-10）/2-10-PO3=28dBm-3dB=25dBm下行BLER=100%（上报值63映射为100%）通过以上计算，下行业务信道码发射功率为25dBm,并没有达到最大发射功率。虽然下行的外环功控我们看不到，但是在覆盖这么好的地方，即使SIRTarget调到上限（5

31、dB）下行码发射功率不需要太高也能满足SIR的要求。这种情况是合理的。下行BLER为100%意味着下行连续误码，这时会触发下行失步，下行失步后UE会在40ms时间内关闭发射机，因此大约8秒后上行RLFailure。为什么在下行信号如此好的地方，会频频出现DLBLER为100%的情况呢后来得到一些信息：从CDT信令分析，也发现了一次这样的掉话，也是下行BLER很差彳!是TCP很小，而对方（主叫）号码是一个特服号码101,怀疑在接听时刻传送的用户面数据异常；在正常呼叫流程中，在UE接听之前，E公司的核心网下发的IUUP是没有数据的，而此时我司RNC配置的传输格式是0X0。由此猜测，在没有数据传输时

32、，V980可能按照1X0的传输格式来解，导致100%的BLERo这个猜测比较切合实际，因为前几天看到的掉话确实大部分都是被叫，而且也都是在UE接听之前发生的，此时用户面没有数据。通过对比我司和NT公司的RBSetup消息，确认我司配置了0X81的传输格式（A子流），而NT公司没有这种配置。而如果此问题就是导致下行BLER100%的原因，则可以打开下行盲检测开关来规避，使用SETCORRMALGOSWITCH命令，打开DOWNLINKBLINDDETECTIONSWITCH（下行盲检测开关）。因为下行盲检测开关打开后不下发0X81的TF,而是下发一个1X0的TF,如下图所示:1-1-DLArMf

33、feonnfTNninrmatioiid，Tniri£Ki口rtC：hni-中ITYpa加卜(Oil日"帕力合口口忙:竹葡HeliBCEryobiil)1- vLfe-SigrMllriuMuduER*piir曲nn闾1- dladlMtMlTrah£ChiTF£国/HiS*fli?0it-DedcatedDynamkTF-InfaHirrit-3r2E目utModa引zeTypElU右1津B-numoePOirtiSiTeLlgt国HumbMOfTranifponElatksB DL- ddR« l u rr(Tl ii C hllifolT

34、Ti dt uftdi-Tra r.fip ann fitw ffi) di- irariiSp crlCtii anr Qxt (1)B tfs-Si gnm II ng Ma deB espiicm-configEl 啪目泡E5gnsUhTFS日 btiiB 一旭QE T D*dic8ifrjDF>aniicTF'KQ3 t rlc-SjzEi- - ninia3e三(7白。了1R ni.mlof!rcrTDSizeLlsiE k NkjEbErGfT=jinB 口uitglu匚 k上现QNULLone hull日 loglca CranraiUGt*l9ms'iMi

35、JLL(2)下行盲检测开关打开时BTIogic-aiClhanneILieIAllSizesNULL(1)下行盲检测开关关闭时检查NT公司的消息，发现其盲检测开着的(NT公司没有面向客户的这个开关)iwicturincLimit：plC04ill)fd3；fdlv迪CtonmniiilinfcriistioiLnilDPCH工d>tsrnn口fdl*povarG£fe4tPi101p-dfd4h:000)ifil£8;pHO)“口iFiHaaZlrFL；HKl'=£i._dIDJif=iExistence.FALSE|然而我们不敢轻易打开盲检测开关，

36、因为有些老版本的高通芯片有个BUG,如果盲检测开关打开，而网络侧配置了太多的CTFC则可能导致问题，因此目前我司的商用网络全部关闭了这个开关。而对于AMR语音核心网只指配了3种速率，于是检查NT公司的CTFC和我司的对比，发现都是6个，见下图所示：丁dlLcffinonTrMSCUnfofli,conpltisNTctfoSiBstSejbITC5KecccifjLddH-ririmjTFla'§naingEl-34。"FE晚*eeHuaweictfcfi：!OxO也).Cfi05EO5fei&T.7CSUteDftfjLddnice：.<01口).5|GTICSRenfAida*白目UENCUctltE，口口回+iu