基于SEQ平台的业务感知质量分析-144法

1、HUAWGI基于业务感知的端到端质戢分析44法文档密级：内部公开基于SEQ平台的业务感知质量分析（144 法）拟制：Prepared by姚锋/00149216日期：Date2015-5-16审核：Reviewed by日期：Date审核：Reviewed by日期：Date批准：Granted by日期：DateHUAWGI华为技术有限公司版权所有侵权必究2021426华为机密，未经许可不得扩散第侦，共13页基于业务感知的端到端质戢分析44法文档密级：内部公开HUAWGI修订记录口期Data修订版本Revision version修改描述change Description作者Author2

2、015-05-16V1.0初稿完成姚锋 001492162021426华为机密，未经许可不得扩散第3页，共13页HUAWGI基于业务感旬的端到端质戢分析44法文档密级：内部公开目录目录31 背景41.1 背景介绍42 端到端业务质量分析思路52.1 总体方法论52.2 数据基础62.3 1套指标体系62.4 4段定界思路72.5 4个专项切入点102.6 分析结论123 应用案例133.1 应用案例133.2 附录131背景本文主要描述如何运用基于业务感知的端到端质量分析(简称：144法)方法来实现移 动互联网业务管理工作，从用户、小区、网络、SP等多个维度发现了问题，并针对发现的 问题进行专

3、题优化，提升业务质量。交付对彖：一线SmailCare服务交付工程师。1.1背景介绍随着通信网络高速演进和数据业务爆炸式增长，移动语音收入首降，往口风光或成追忆, 运营商的商业模式正在发生变化，数据业务正在成为主要收入来源，网络已经进入数据业务 为王的时代。业界觴:数据业务逐步成为主流月淞TOP业务战7酬羅mu# * f $二4H3I2017 年,8®崂締8 长 15f8(20H2017)/OH 1MIMChud网瓦观煮刃帕诂糧陆9%;刪业远爺的商业嵐正在发投化刚融 务仍然茁抵殊；証在励主融入来源对于运营商来说，从语音和短信业务向数据业务进化，是一个人趋势。但由于运营商原 来投资的设

4、备和架构主要是适应语音，转向以数据为主需要人量的投资，对运营商构成了一 定的压力，在数据业务时代运营商将面临以下挑战：1、传统网络KPI无法准确反映业务质量和最终用户的感知？2、对最终用户的真实感知不可测、缺乏基于最终用户的感知评估手段？3、网络结构口趋复杂，对于影响QoE的业务质量问题定界/定位困难？4、如何以客户感知(QoE)为中心进行端到端的业务与网络优化提升？2021426华为机密，未经许可不得扩散第5页，共13页业务痛点：如何做好端到端业务质量管理是难题如何度用户体验?I半爾页珈（累度封装）时间和地点如何管理越来越多的业务和应用?2端到端业务质量分析思路2.1总体方法论为了能适配复杂

5、的MBB网络，对于丰富的数据业务和应用能提供完整的QoE保障解 决方案，我们采用了 “1套指标体系、4段定界法、4个切入点”（简称144法）的端到端业 务质量分析思路来支撑以用户感知为中心的业务质量管理和运维管理；具体思路如F：移动互联网端到端业务质量管理方法论："144法"1套指标体系KQI/KPI/PI4段定界法用户、无线、核心网、SP4个切入占终端、小区、网舊、SP4段定界方法论WEB/WAP 业务流媒体业务KQIKPIPI 指标首、市 GGSN SGSN BSC/RNC CELL停亦占比 播放伶夕茨数 厂播放中断率拯放等待旺冬 L拯放成功率4大輙专题分析小区质分析T

6、CP con nect fit功奉ON和焙经冲«长 刖建立養网追质分析GnBSC/RNC SGSNGGSNSP质分析HUAWGI基于业务感知的端到端质戢分析44法文档密级：内部公开2.2数据基础为了实现我们端到端业务质量分析思路，我们采用ITU E800所确定的框架，沿用与ETSI协议相似的方法，进行了业务KQI指标体系的设计，形成了华为KQI指标体系。我们将华 为KQI指标体系作为数据基础，并灵活运用这些数据来解决运营商需求与运维痛点，基于 客户感知和信令解析为基础的指标体系，通过端到端业务质量KQI发现客户感知劣化问题;具体数据基础简介如卜:诰到躱业务质量KQ场景举例互联网业务管

7、理平台部署方案上组网摸型一A接口协咬InterfaceProtocolS1-MMEDianwterS1-UGTP-US6*DiarrwterGnGTPlupsGTP-CGbTCP/U0P页面响它成功车页面响它时长页E3下載連率 涼洋体序台指林丰例 流沖体跡或功车 流钿帥中断车页面盛7诚功苹页面5&示戍功丰KQI关联招杯计算公式示爭计算指标打点计覧公比空间维畏逹议Sffi提示页而显示页面成功次狡"【页面iSi 求次数说明：页面ii!求 尖故"百次GETiiS求次載小区、BSC/RNC 、SGSN、GGSN、市、全 网、省85%90%2.3 套指标体系随着MBB网络与智

8、能终端迅猛发展，运营商开始面对一个全新的变化。各类上层应用 已经替代传统语音，成为终端用户的主流业务。运营商对于无线网络的建设与网络性能管理, 也迎来的新的挑战。传统的网络KPI管理主要面向控制面，以移动网信令建立指标统计， 对应用户对网络的体验。如接通率对应用户对打通电话的体验，掉话率对应用户通话顺畅的 体验。而在MBB时代，终端用户对用户面的体验更加敏感，如浏览网页时延人、下载文件 速率低。基于控制面的网络KPI难以度量终端用户的用户面业务体验，因此，给运营商带 来一个新的难题一一网络运维无法难以保障用户体验。这使得很多运营商都感受到"KPI 好、但用户体验不好”的运维压力。针对

9、这一背景需求，业界纷纷推出了针对用户面业务质 量和用户体验管理的解决方案，引入了 KQI概念来尝试给运营商解决MBB时代的网络性能 运维问题。2021-4-26华为机密，未经许可不得扩散第6页，共13页HUAWGI基于业务感旬的端到端质戢分析44法文档密级：内部公开具体华为KQI指标体系如卞:KQI» Aooom I Vow i DMeorwea / fKttb <am«X4- 4爪< X4-占R RH2 SWM / 沧山9的卜比工Meat* it朋it心.Vojtube A<K>. 5 片01訂 V5Q： 乂丿 Ace fl收HQNK r 75 电

10、 UOS <> / ewMItJm V *0 WMtWK / (» 卜"Li 入«» s<x* /l：K trvwtoUM "比U4Q "ME3E -k9K9/»?RA3 H?.taM IO BrM pamt, tww to 2 ac|Mn tame to tnteracf、 MOSSerMc* KQU Accms 1>曲锻<?：,，中«WA&芳,穴“喊、5 X，/ -nr4*Rii««u* f een /ori< / >cM08伙钦乙4砂>

11、;f BER 11-域/貝r.OoE Scocw/CEI/C3I f NPS / 6umMH.应用服务器用 户应毁 APP=ElonLayer业务w Service Layer互朕w Herconneco on Layer» in VHIWJ4»< F 议 «<"4,"从 < / ZH1 /- HCM*« / B£R/rK/+KB «<>诫幼* 想入何伙覽««K>r”4-mWMI以川升mvt址I PMQ1 AJM4»n<*. &冯<

12、;4tW<V-UWM < MX. Ul88陀辆8啊OoSWW树吏4>tlKWKrt wa>fcurrjencsj kIM 8S1為祇.IBI.EH/BEK/ At 些&QD /旳d itBER Z« />ttorcomnwng s ResourceLayer2021426华为机密，未经许可不得扩散第9页，共13页分层质量指标管理体系：业务质量KQIffl网络性能KPIW效结合，实现端到端业务质量管2.4 4段定界思路1.总体思路立足KQI指标体系，从成功率类、时延类、速率类三大类KQI指标入手，通过各地市 /各网元的同比分析、同类对彖的坏比分析、

13、KQI与KPI关联分析、异常详单分析等四 人步骤，实现对终端、无线、核心网和SP等四段网络的问题定界，总体思路如下：从成功率类时延类速率类这三大类KQI指标岀发，通过四个步骤克端到端遊质 量问題的定界分析z实现终端.无线.孩心网.SP的四段问题定界段问题主界个步骤类KQIJ旨标:鋳到鎬业务成功 率类KQI指标二:谛到端业务时延 类KQI指标三：端到端业务速率 栄KQI指标步嗓一:同比分圻地市，网 元的端到端业务质量惜况步骡二:环比分析同类5（寸象的端到端业努KQI指标步骡三:KQI指标分解为关 联KPI指标进行定界分析步骡四：详单异常爭件的筛 选收敛走界分析_ :终塢 二：琢 三：核心网 四：

14、SP2.成功率类针对成功率类KQI指标问题的分析思路如下：1、分网元、分地市进行自身指标的同比，定位待分析对彖；2、分析对彖与同类对彖的KQI指标环比，进行差异化分析；3、对TCP建链成功率、首GET成功率、TCP自定义错误码等关联KPI进行深入分析, 找出疑似问题点；4、对以上三步中找到的异常事件详单，进行多维度的二次统计筛选和收敛，给出定界 分析结论：具体步骤和思路如下：步骤步骤2：步骤3：步骤4：成功率类KQI分网元.地市进行自身指标同比.定位待分析对象 分析对象与同类对象的KQI指标环比，差异分析关联 KP 吩析：环艇MhaiT港对前面步骤找到的异常事件详单，进行2次统计筛选收敛定界分

15、析同类对瞇行KQI指标同比. 环比，收敛到网元业务斑异 営爭件贬分解关联指标進行定位对异當事件详单溥选收数 定界完成定界分析3 时延类针对时延类KQI指标问题的分析思路如卞：1、分网元、分地市进行自身指标的同比，定位待分析对彖：2、分析对彖与同类对象的KQI指标环比，进行差异化分析；3、对DNS时长、TCP建链时长、首GET时长等关联KPI进行深入分析，找出疑似问 题点；4、对以上三步中找到的异常事件详单，进行多维度的二次统计筛选和收敛，给出定界 分析结论：具体步骤和思路如下：基于业务感妙的端到端质星分析44法文档密级：内部公开HUAWGI步骤时延类KQI分网元、地市进行自身指标同比.走位待分

16、析对象步骤2：分析对象与同类对象的KQI指标环比.差异分析步骤3：时延类KQI分解到关联KPI的分析：DNS时长.TCP建链时长.首GET时长步骤4：对前面步骡找到的异常事件详单.迸行2次统计筛迭收敛定界分析4. 速率类针对时延类KQI指标问题的分析思路如卞：1、分网元、分地市进行时延类KQI指标的同比，定位待分析对彖；2、分析对彖与同类对象的KQI指标环比，进行差异化分析；3、对下载速率KQI做频谱分析、详单事件筛选收敛分析；4、分析卜载速率的关联KQI和KPI,并进行多维度的二次统计筛选和收敛，给出定界分析结论:具体步骤和思路如卞：步骤时延类KQI分网元、地市进行自身指标同比.定位待分柄对

17、象 步骤2：分析对彖.与同类对彖的KQI的坏比，差异分析步骤3,下载速率KQI的频谱分析，详单事件筛选收敛分析步骤4；下载速率的关联KQIXP1 （时延类分析2021426华为机密，未经许可不得扩散第11页，共13页HUAWGI基于业务感知的端到端质虽分析畀44法文档密级：内部公开2.5 4个专项切入点1.总体思路闌绕端到端业务质量管理思路，针对业务流程中涉及到的终端、小区、网络和SP等四 人维度开展专项分析，形成以提升用户体验为目的的面向客户、业务和网络的多方配合协作 体系，总体思路如2田绕端到端业务质呈肉1思路，针对业务流程中涉及到的终端.小区.网络 SP等四个维度开展专项分析，形成以提升

18、用户体強为目的的面向用户、呀和网 络的多方配合协作体系。端到端2021-4-26华为机密，未经许可不得扩散第13页，共13页从线彌題力切入点，分舷柔.并提出业务推 广建必适过基于用户雜庭的 KQB§标分析卷测重点 用户和异帚用户，优于客 户垠沢改善用户的福动鱼 联网便用弼儿 利托谜到请沁底呈分 析干台逼过对KQRS标 的壬初监拄，iQgUWCd、 E區供给两优杵:为，広 优化旳方冋，玮灼优彳说 車送行跟和估总成甘 市联动的两络优比机希J。 全直.有豉的CiR别 手戻，挑送出sod'区, 適过无线测送行比吉驿 決无送侧確.老大化显 升小区业勢质足.立足网络质星提升， 堤升网络克

19、爭优J& , 计划开展移功互联缓 存即入、综台网去 TC咖速等优匕手段.遇过雰播入涼的引入札更箸.冯浜网元备性.及时发现处理 网塔敌障，尧曲移劲 直联两的业务桓定性& 盟基于 SPjSKKKQI 指标分析，宴觌针对移动 互联网內容提供方旳质呈 监辿，解决盼3移动直联 网访问验的垂要一环。建立内言质星的优化闭 环机制实砂J内春优化 的曲;B苗口舷机制线端专项分析小区专项分析网络专项分析SP专项分析分析值盘考各类标准»KPI考核指标»终端入库标准A全告终猛益体表观 A质优终涙标准 A O © o O O L并目険值小于荃准值一:at例四个专项切入点2.

20、终端专项聚焦投诉人、质量差、热门终端，通过数据筛选准确定位问题根因，提升客户感知，具体思路如卞:I麟大、5热懐端5过滤准确定嗣题爾聞岡络扌旨标2G数潺业务时长3G数据业务时氏每終端2G驻网时长（分钟） 时长:分析每终端丁。驻网时长（分钟） 互操作性2”互躱作次数 分析3-2互操作次数按通率 PS域无钱按通率（）彩信MO成功次数彩信MO总次数 彩信分桁彩<sMO成功率（）住终端HTTP送2£（Kbps单会话> = 5OK1）创建PDP成功次数 创建PDP请求次致 PDP激活PDP激活成功率（含用户原因）毎终端2G流呈（MB）每终端TD流淫（MB）每终端WLAZ流圣（MB）2

21、G流圣占比（）流呈分析2G高流虽用户潘透率（）HUAWGI基于业务感知的端到端质戢分析畀44法文档密级：内部公开2021426华为机密，未经许可不得扩散第15页，共13页3.小区专项通过对KQI指标的主动监控，识别VAC小区，提供给无线RF网优团队作为小区业务 质量优化的方向，并对优化效果进行跟踪评估，形成省市联动的网优优化机制。具体思路如 下：通过对KQIJg标的主动监控，识别VAC小区，提供给网优作为小区优化的 方向，并对优化效果迸行跟踪评估,形成省市联动的网络优化机制。*业务质呈VAC笛选原则1、小区的页面响应成功次 数aX次/天；2、小区的用尸数Y/天；3、页面响应:时长A M ms

22、;4、TC嗓三次握手时长N ms ;5、TCP三次握手时长大 于N ms的比例田高到彳氐HE*6、7天有3天悔标養; 满足如上条件旳小区为VAC 小区。全面,佝效的VAC识别手段挑选出VAC小区通过无线第21行排查解决无线侧问题最大化提升小殴务质呈4. 网络专项通过多输入源的引入和覆盖，网元KPI指标和业务KQI指标有效结合进行网络专项分 析，及时发现处理网络故障，提高移动互联网的业务稳定性，具体思路如卜：廳瞬黔漓趣霭輕25结合,及喙L评估冋题定:位优化深度关联分析SDR.'XDR Frequem Handover根因分斩花务埼便毎牺兄 Top用白，左就应用冏页Email蕭务？s攻戎站

23、火腹匆益设言钙浜> APNH> TCPSZA小设盖”宕咻矢隹支Q析亲例：WGblt 优化无线> iMEi/irasiig 丁OP问小区彌史务取瓷定位（无t传辙 途）网审浏益时址过 长业务面无响应Flu*自11 ""3无绒快速定界 亠终端一KQI Poor Signal Coverage U Pitot PollutionHUAWGI基于业务感旬的端到端质虽分析44法文档密级：内部公开5. SP专项通过基于SP维度的KQI指标导入，实现针对移动互联网内容提供商的业务质量检测, 通过省市公司联动的端到端质量分析优化流程，解决影响移动互联网访问体验的重要一环,

24、具体思路如下：省市联动的端到端质量分析优化淙程曲SP封塔情况，知有必要，申清解封亘這SP服务器泌是吞与遥存有关,有关联系叢存厂商处理曲SP服务器龙址所归黒&SIDCDNS解析不妥,则:优化；苕是核心网没备題,贝师包夬知有谟遇过数据託直接联黑SP沟遗处理复核分公司提出的SPSS质呈情况，并进一步走位原因 苕是SP质呈昶，旦在网内IDC ,见联至IDC奁丢；若是耳联网访问体验的重要一环。通过基于SP维度的KQ萌标导入,实现针对移动互联网内容提供方的质量监测,解决影响移动通过HTTP接入 成功率/响应时 延等性能数垢的 导入，可酢定 位到興体内容提 供方的问题。2.6分析结论 通过应用基于业

25、务感知旳常到谦质糸分析 T44；去"，先后完成质差SP、TD双超小区、 交通千线业另质量专项、2/3G嵩负荷小区业务质JE专项、网络业另质ifi后分析专顶、 质差小区、琴流坛小区等专题分析，从用户、小区、网络、SP等勢个维展发观了问题， 并对芳现的问题进彳勞题优化,取得良好的效卑。成果说明:1、通过网络业另质:&后分析专顶行动友观杭州GGSN存在咅妇居分片问题，优化后，2G下钱速率增标平扌切是升10%左右。150100XX3GJS0H廣越小区优化效采XX TD王千逍巫差小区优化妓果2.通讨网络业另质量后分析专顶行动发现杭州SCG WAP外理机制问颗.优化后.2G下载2003 应用案例3.1应用案例全网应用效果:通过T44法对XX地市送行专项分析，发现了GGSN数据分片问题导致页面下载速率指标偏低，优化后，XX页©T载速率指标提升5%分析业务质量指标彩响因素解决业务质量冋题通过端到端业务质量 平台监控业务质呈，发现 出杭州页面下载速率指标 全省排名偏低通过端到端业务质量平 台，深入分析，发现GGSN 版本数据匀分片问题。旳"二加*亍F节i »ya»unnttw 从匸甲YCM%S(Ug|>4OO 天”k 大干 GCSN/HtHMTuFI. a 成舟 9-;骼粒师优心 130升X用戈*8攸計阳何“沖M