承载集团客户的MPLSVPN网络

1、中国挪动MPLS VPN网络-IP公用承载网中国挪动集团 网络部 黄昭锐- 2 - 目 录中国挪动IP公用承载网引见IP专网组网与路由设置IP专网维护手段与团队IP专网业务与网络质量2MPLS VPN业务开展的背景 客户业务需求-从省内业务扩展到省际业务. IP承载网特性-覆盖广、质量高、平安性高的网络。PEPEPEPEPECEA 用户CEA 用户CEB 用户CEB 用户CEB 用户 MPLS VPN可以为用户提供不同逻辑拓扑衔接的跨省业务。 MPLS VPN经过不同的“虚通道，传送不同用户VPN的数据。 各条“虚通道互不干扰，保证用户数据的隔离。 Internet 互联网与VPN承载网分别，

2、降低公众网络攻击的风险。MPLS VPN网络特点3中国挪动IP公用承载网引见 中国挪动IP公用承载网是中国挪动面向多种业务、可以同时支持语音、视频、数据等多业务的中心承载网络，是全国性的IP网络。 主要面向承载中国挪动自有高效力质量和高平安可靠性要求的电信业务包括软交换网、TD中心网电路域/分组域、中国挪动企业内部支撑系统和大客户业务。 网络经过MPLS VPN来承载和隔离业务，保证业务信息高速、平安传送。中国挪动IP公用承载网始建于2004年，经过多次工程扩容建立，到2021年，网络曾经覆盖全国31个省市自治区约340多个地市节点以及网管中心节点。4- 5 - 目 录中国挪动IP公用承载网引

3、见IP专网组网与路由设置IP专网维护手段与团队IP专网业务与网络质量5IP专网网络组网中国挪动IP承载网整体网络规划定位于中心、会聚和接入3层构造，其中接入节点曾经覆盖全国一切340余个地市，方案建立广州国际出口节点，可以保证满足用户VPN业务的全国/海外接入需求；后续方案建立北京、上海国际出口节点。网络组网省会和重要城市各个地市中心城市6IP专网网络组网中心层：北京、上海、广州、沈阳、南京、武汉、成都、西安、杭州9个城市分别配置2台中心路由器CR或中心兼作会聚路由器CR/BR构成9对中心层节点。会聚层其他省省会城市及厦门、广州、深圳、大连、无锡、青岛成对配置会聚路由器BR，构成27对会聚层节

4、点。接入层全国300多地市成对配置接入路由器AR，也称为PE，构成接入层节点。7IP专网路由设置网络整体路由组织采用扁平化原那么，全网为单一自治域AS域IGP采用IS-IS路由协议，一切路由器置于Level 2层中启动IGP ISIS的快速收敛运用LDP协议分发标签经过MP-iBGP传播VPN路由信息，实现VPN内的互通中心层TE FRR链路维护891、全网开启ISIS，经过metric值设置途径选择；全网为同一个AS域，AS号为24059。2、全网开启MPLS，经过LDP标签分发协议建立LSP;经过MPLS VPN封装业务系统IP专网路由设置103、CR之间部署流量工程TE:流量工程是控制流

5、量如何经过本网络以实现资源利用的最大化和提升网络的表现力的一种手段。TE FRR收敛时间在50ms以内。 目前仅在中心层CR之间的一切链路部署TE； 一切中心节点之间实现“一跳式的维护，备用LSP仅在中心层之间实现；IP专网路由设置- 11 - IP承载网、CMNET专线架构对比整个IP专网为一个自治域每个省网为一个自治域每个省网为 一个自治域骨干层骨干网为 一个自治域省网层IP专网CMNET硬件设备与链路设置路由设备全网采用业界上最先进的设备构建，具备良好的业务支持才干，具备MPLS等业务的开展才干，设备处置才干及可靠性高。中继设置网络一切中继链路带宽设置满足全网任何1台路由器宕机及任何1条

6、中继链路失效时的流量引导需求。全网根本采用N*10G链路组网，全网中继链路平均链路利用率不超越30%。全网为轻载网络，对于效力质量有力保证。2021年2季度，现网省际总带宽到达1413G，省内总带宽12000G。华为 NE5000ENE80E思科 CRS ASRJuniper T1600阿尔卡特 7750SR12IP专网的维护机制设备级链路级网络级 设备关键部件冗余 集中控制&分布式转发体系构架 MPLS OAM 端口Trunk 链路双归 环网维护 IGP快速收敛 TE FRR设备级：路由器设备双电源、双引擎，设备缺点率下降明显；链路级：链路缺点路由器快速检测到达传输级别；网络级：节点、链路缺

7、点快速切换维护，业务中断时间到达电信级。13- 14 - 目 录中国挪动IP公用承载网引见IP专网组网与路由设置IP专网维护手段与团队IP专网业务与网络质量14IP承载网业务情况省带宽Gpbs省带宽Gpbs省带宽Gpbs省带宽Gpbs北京340 浙江200重庆40贵州20 湖北370 河南50天津20云南20 广东300 河北40山西40西藏20 上海210 福建40内蒙20甘肃33 江苏270 安徽40吉林20青海23 四川170 山东40黑龙江20宁夏20 辽宁110 湖南40江西30新疆30 陕西190 广西40海南20总部20 出省带宽 出省带宽利用率在16%以下，节假日突发量约在30

8、%左右。可以满足业务需求。 集团客户接入的业务带宽门限在接入带宽大小，而不是大网容量。出省流量Gbps15IP专网 网络性能与技术目的网络时延PE位置平均时延城市范围同一省内一级城市间60ms郑州，长沙，武汉，南昌，合肥，南京，石家庄，西安，杭州，广州，上海，北京，天津，济南，太原，成都二级城市间或二级至一级城市间90ms兰州、呼和浩特、福州、南宁、西宁、重庆、海口、沈阳、贵阳、哈尔滨、昆明、银川、长春、乌鲁木齐、拉萨、大连、无锡、深圳、无锡、厦门三级城市间或与一二级城市间125ms其他城市国际段（HK-LA-LD）16IP专网 网络性能与技术目的丢包率与抖动性能目的可用率设备可用率：双节点设

9、备99.99%、单节点设备99.8%。链路可用率：双链路可用率99.9%，单链路可用率99.7%。端到端路由器收敛时间 =3s中心区域快速重路由收敛时间 =50ms指标（7月统计）丢包率抖动平均值0.0002%0.93ms最大值0.04%5.47ms17网络存在丢包率的缘由网络特性的缘由：业务流量具备随机性、突发性的缘由，某些节点在业务突发的情况下，转发性能下降，存在随机丢弃的能够性。甚至在骨干网中的路由切换，也会有小几率的丢包。尤其是数据业务主要为UDP报文，本身是面对无衔接的业务，一旦网络略有抖动就会产生丢包。传输性质的缘由：传输面对的环境和地理位置情况多种多样，传输的干扰、光功率的抖动，

10、传输路由倒换时，有能够会有小概率的丢包。网络流量大的缘由：在流量大的情况下，设备或板卡会根据业务的等级，丢弃一些低优先级的数据包。例如ping包的优先级别很低，运用ping测试网络时，会能够有丢包产生 。路由器设备平安维护机制的缘由：路由器的CPU本身有维护机制，CPU任务忙、或遭到攻击、或收到大量快速大包ping时，基于对CPU的维护，有能够会丢弃一些包/ping包,到达路由器大脑的自我维护。行业内的高端路由器都运用了这种维护机制，如思科、Juniper、华为等。Ping测试丢包不等于业务丢包。网管测试机制的缘由：网管统计是一次发送60个测试ping包，所以偶有丢弃一个包时，丢包率就是1.6

11、7%。由于网络及设备处置机制的缘故，存在偶发丢包景象，的缘由如下：18IP专网QOS情况骨干：中心/会聚设备进展转发控制边缘：在接入业务的端口进展流分类在网络入口对分组进展分类、流量控制，设置DSCP在网络中根据分组的DSCP值，进展队列调度、分组丢弃业务设备DiffServ域用户设备PHBPHBPHBPHBQoS的实施分为两个部分：骨干和边缘。在骨干采用的技术包括：带宽分配与拥塞防止WRED带宽分配与拥塞控制WFQ在边缘采用的技术包括：业务分类Classification：IPP/DSCP, MPLS EXP速率限制CAR19IP专网QOS情况业务类型 类别 DSCPIPPEXP CS 信令

12、、 Iu-Ps 信令、 Gn 信令 CS7 567 7 路由协议 CS6 486 6 CS 语音、 PS 语音 EF 465 5 PS 流媒体 AF41 344 4 预留 AF31 263 3 Ps Interactive AF21 182 2 预留 AF1 101 1 Background BE 00 0 QOS设置阐明：上图为骨干网内目前设置的QOS，客户业务接入侧的QOS根据客户需求定制。20- 21 - 目 录中国挪动IP公用承载网引见IP专网组网与路由设置IP专网维护手段与团队IP专网业务与网络质量21IP专网维护手段与团队人员网管系统17*24小时监控2维护团队含省1一致管理-数据

13、网管2VPN业务网管系统告警监控赞扬处置缺点派单、督办缺点处置业务分析、预警分析月度报告网元监控一致告警监控缺点派单质量监控性能统计SLA报告业务开通3技术支持方案制定网络规划22中国挪动IP公用承载网引见网络管理对一切VPN设备和业务资源、业务告警、业务报表和业务恳求流程、业务统计、业务数据配置、业务质量监控进展管理，为网络和业务一致管理提供有效的根底管理支撑手段。功能 资源管理 拓扑管理 告警管理 性能管理 质量管理 SLA管理 业务开通 月报管理 CE管理 客户自维23网络概略监控图24业务接入信息管理25业务资源管理26业务资源拓扑呈现27业务告警管理28业务性能管理29业务流量流向管理30业务质量监控31业务开通管理32总结33附录：集团客户VPN业务情况VPN业务量：7月新奥入网流量为21.2TB，博世入网流量为46.6TB，流量每月比较平稳。博世租用总带宽为1767Mbps，峰值带宽运用1045Mbps。新奥租用总带宽为490Mbps，峰值带宽运用238Mbps。用户赞扬分析：7月用户赞扬共22起新奥6起，博世16起。客户缘由引起的赞扬