集团系统服务器等硬件设备项目技术方案1

1、xxx集团系统服务器等硬件设备项目技术方案福建世通信息产业发展有限公司2013年4月目 录1. 项目背景41.1. 概述41.2. 建设目标41.3. 建设原则42. 网络结构62.1. 网络拓朴62.2. 网络性能73. mpls vpn的方案设计83.1. 定义说明83.2. mpls技术93.3. mpls网络设计113.3.1. ip路由协议选择123.3.2. mpls 骨干网络设计153.3.2.1. 几点说明193.3.3. mp-ibgp的设计193.3.4. 虚路由转发表的设计223.3.5. 路由区分和路由目标的设定233.3.5.1. 路由区分233.3.5.2. 路由目

2、标243.3.5.3. rd/rt的使用及分配253.3.6. pe 与 ce 间的路由253.3.7. mpls vpn接入设计：273.3.7.1. 本地以太网接入273.3.7.2. 专线接入303.3.7.3. 县级网络接入303.3.8. qos的设置311. 项目背景1.1. 概述专网定位于为企事业单位的各种it系统提供高速、高带宽、支持多种业务的骨干传输网络，它为各种业务和应用提供统一的综合传送平台。它不仅为现有的财务、营业、计费、网管、办公自动化系统、人事、客户服务，科技管理等提供信息传送的平台，而且随着网络的升级，还可以为视频会议、远程教学、实时点播、内部网络电话等新的信息服

3、务提供网络通道。多协议标记交换mpls（multiprotocol lable switching）是internet核心网络路由/转发技术最为关键的一个发展，mpls提供了layer 3路由控制和layer 2交换转发的无缝综合，解决影响internet发展的许多复杂问题，如网络带宽、转发性能、可伸缩性、流量工程、qos、vpn等。mpls vpn可以使企业的各个业务系统建立安全的，高效的vpn服务，它的好处主要是可以采用现有的或具有通用功能的路由器实现，不需要增加额外的设备。在投资保护上具有很大的优势。1.2. 建设目标根据xxx集团财务软件应用要求，同时，集团oa应用软件需要，网络平台建

4、设的定位，就是要建立一个高速、高可靠性、扩展性良好、支持多业务的综合网络平台。在省公司和全省各分公司建立mpls vpn骨干网节点，在各县公司、建立mpls vpn网的接入节点，构成一个网络结构清晰、传输带宽充裕、技术先进的数据网络。 1.3. 建设原则(1) 高可靠性的原则。mpls vpn网不仅作为办公自动化系统的承载网络，而且还会成为越来越多的生产系统的骨干传输网络，如:视频系统、网管系统、oa系统等。这对网络的可靠性提出了很高的要求。没有一个高可靠性的网络，不仅会影响到办公系统和管理系统的正常运作，降低办公和管理效率;而且因为对生产系统造成的影响，而导致服务质量和服务水平的下降。(2)

5、 高效性的原则。根据应用系统需求而建立的mpls vpn网应该是一个高效的网络，它不仅要保证网上承载业务正常可靠的运行，而且依靠网络设备的强大处理能力和节点间高速的链路连接，为各种应用系统建立一个高效、顺畅的通道。(3) 可扩展性强的原则。mpls vpn网的建设既要能满足目前应用系统的需求，又要考虑未来一段时间内各种业务发展的情况。它不仅要求具备规模的可扩展性，而且要能适应技术升级和换代的需求。既能保证网络的平滑升级，又能进行投资的保护。(4) 坚持适度超前发展的原则。mpls vpn网的建设应能满足未来310年业务发展的需求，在规模、技术和投资上应该适度超前发展，避免频繁的扩容而引起的业务

6、中断。2. 网络结构2.1. 网络拓朴整个网络结构如上图所示。xxx建设办公自动化信息系统网络，在省中心机房部署高性能的三层路由交换设备，地市交换机采用支持ospf等动态路由协议的路由交换设备，前期建设省中心到地市采用全星形结构，后期业务发展后以及流量增加后，利用动态路由协议组成一个具有环路保护的网状网络结构。区县直接接入地市。利用xxx的传输平台组建一个具有支撑多业务的网络，全网采用省市县三级网络结构，省中心选用1台高性能路由交换设备，各地市各配置1台高性能路由交换设备，各个县级节点交换机，采用星形方式接入地市路由交换设备，在地市节点汇聚后，接入省中心路由交换设备。 考虑到将来xxx除了oa

7、等网络建设需求外，还有资产专网、 财务专网、视频会议系统等应用，考虑到设备投入成本，此次的设备选型要考虑支持mpls vpn特性，网络拓扑如下所示：2.2. 网络性能福建xxx办公自动化信息系统网络是承担全省xxx内部办公联网、以及资产、财务、视频会议等专网的核心承载网络。要求能实现防火墙、负载均衡、认证计费、集中网管等功能，为福建xxx增值业务的扩展提供基础，同时省市级的骨干设备也要具备平滑升级到10g数据传输服务的能力。在不降低网络可靠性的前提下，可采用交换机的集群或者堆叠技术，减化网络架构。如上图所示，各地的网络设备通过mpls vpn的配置，可以划分多个vpn，不同的应用之间可以相互隔

8、离，在一定程度上保障了网络的安全性。网络平台建设的总体目标将集中于以下几个方面：l 标准的可扩展性：省中心网络的结构和设备大部分业务的主机及各数据服务器集中到省中心，保证一个层次分明，架构简单且安全、高性能、易扩展、易管理且保证各业务的安全访问的中心交换网络极其重要。福建xxx办公自动化信息系统网络方案应采用分层的网络设计；每个层次的设计所采用的设备本身都应具足够高的端口密度，为后续福建xxx办公自动化信息系统网络方案扩展奠定基础。应能支持负载均衡、vlan接入、认证计费等功能。功能的可扩展性是福建xxx办公自动化信息系统网络方案随着发展提供增值业务的基础。省市骨干设备要具备平滑升级到10g数

9、据传输服务的能力。在升级过程中，必须保证业务不间断，同时必须保证原模块能正常使用，保护原有投资。l 可维护管理性：为方便网络维护及管理，本次项目采用的网管系统能够实现网络拓朴显示、网络状态监控、故障事件实时告警、网络流量统计。在系统中，如采用第三方设备，网管系统能够切有效管理到这些设备，能够及时发现网络瓶颈，降低网络设备的故障时间。3. mpls vpn的方案设计3.1. 定义说明多协议标签交换（mpls: multiprotocol label switching）：多协议标签交换技术是将第二层交换和第三层路由结合起来的一种l2/l3集成数据传输技术。虚拟专用网络（vpn: virtual

10、private network）：vpn是在公用网络设施基础之上构建的安全可靠的专用网络。服务提供商骨干网（service provider backbone network）：在此文档中指mdcn三期工程的mpls骨干网，它可以承载多个互相隔离的专有应用系统网络。客户（customer）:在此文档中指独立的专有应用网络系统。客户边界路由器（ce: customer edge router）：在客户端的路有器，它通过一台或多台pe路有器连接到服务提供商网络。服务提供商边界路由器（pe: provider edge router）：服务提供商网络中的路由器，用来连接客户边界路由器。服务提供商核心

11、路由器（pc: provider core router，也称为：p）：服务提供商网络中用来连接pe路由器的路由器，但它本身不作为pe路由器。3.2. mpls技术mpls技术是一种在开放的通信网上利用定长标签引导数据高速传输和交换的网络新技术。它是独立于链路层和物理层的技术，能保证各种各样的网络互联互通，使得各种不同的网络数据传输技术在同一个mpls平台上统一起来。mpls的主要优点在于减少了网络的复杂性，兼容了现有各种主流网络技术，大幅度降低了组网成本；在向用户提供ip业务时能确保qos和安全性。mpls不但支持流量工程，并且也是当前最有前景的支持vpn实现的技术。mpls技术的成功之处在

12、于它在无连接的ip网络中引入了面向连接的机制，通过一个短的、固定长度的称为“标签”的标识符，利用标签机制转发分组。其核心思想是：边缘的路由，核心的交换。mpls/vpn的实现过程：客户的边界路由器ce连接到mpls的pe路由器，通过mpls内部创建的vpn，客户的数据被封装并透明地传送到其它的ce路由器。ce路由器向vpn广播包含它下属节点的所有设备的路由表。一个mpls/vpn网络由一些分离的站点组成，这些站点通过mpls服务提供商的骨干网络互联。在每一个站点有一个或多个ce路由器，每个ce连接一个或多个pe路由器。相关联的pe之间使用mp-bgp（border gateway protoc

13、ol-multiprotocol）协议通信。vpn的ip地址范围独立定义，任意两个vpn的ip地址集可以有重叠。在同一个vpn专网中使用的ip地址必须是一个单独地址集。每个ce与它直接相连的pe路由可达。另外，在所有vpn中的pe路由器的ip地址不能重复。mpls支持的路由协议mpls内部（pc-pc、pc-pe或pe-pe之间）的路由通过标准的第三层路由协议来实现，如：ospf、bgp等。第三层路由协议维护的信息将用于给相邻节点分配标签。mpls与用户之间（pe与ce之间）的路由协议可以是：ospf、is-is、rip、bgp或静态路由。mpls骨干网内部的路由协议，即pe-p-pe的igp

14、路由协议可以是ospf或is-is。为传送用户vpn的路由信息，在对应的pe之间使用mp-bgp路由协议。从用户的观点看，虽然要穿过服务提供商管理的vpn通道，但用户看到的是ce之间直接互联，并通过ce将每一个站点的用户内部路由器连接起来。服务提供商的mpls网络对用户是透明的，看不到内部的结构，也看不到mpls网内部传输的路由。从服务提供商的角度看，其mpls网络与用户网络比较是非常不同的。每个用户只有一个vpn，而一个服务提供商可以有多个vpn。服务提供商只能管理每个vpn在mpls骨干网中的通道，它看不到由vpn组成的专网的内部结构。pe路由器分别为每个vpn维护一张路由表，表中有其直接

15、相连的vpn站点的路由信息，并且与相应vpn相关的pe之间交换这些路由信息。3.3. mpls网络设计在充分了解xxx现状的基础上，我们针对福建xxx数据网的 mpls vpn建设工程提出的方案设计主要有如下内容：1、 升级现有的7500系列路由器的ios版本以支持mpls应用，注意相应路由器flash及内存满足要求即可。因此应该做相应的设备调查。2、 igp路由协议的设计和优化，目前支持mpls的igp主要有两种：ospf、isis。如果dcn目前未采用上述两种igp，则必须进行路由协议的修改。路由优化的目标是使igp的层次区域分明，利于路由策略的实施。3、 mp-bgp协议的设置，bgp支

16、持大量路由的运载和丰富的属性定义。目前mpls rfc2547bit的vpn通过bgp来进行实现，因此必须配置bgp协议。4、 mpls vpn中对路由器的定义：主要为p、pe、ce的定义。在dcn网络中，所有的7500/7206系列路由器可以定义为pe。5、 注意mpls vpn中的vrf、rd、rt等命名方式的规范化，有利于网络的管理和维护。3.3.1. ip路由协议选择ospf（openshortestpathfirst）开放最短路径优先是ietf专为internet网络协议开发的内部网关协议（igp）。该工作组成立于1988年，旨在设计基于最短路径优先（spf）算法的igp，以用于in

17、ternet中。当时，rip协议由于其跳数限制，路由包的广播发送，路由收敛的速度等原因，已经越来越不适应internet的发展。ospf属于链路状态协议的一种。运行ospf的路由器会将lsa（link state advertisement）链路状态通告通过multicast的方式通告给和它处于同一层次（area）的所有路由器，而不是象rip，igrp等距离矢量协议那样将路由表的全部或部分只发送给起邻居。ospf路由器通过lsa的收敛，知道本层次的网络拓扑，通过累加链路状态信息，利用spf算法计算到达每个节点的最短路径。当运行ospf的路由器加电后，路由器向其相连的路由器发送hello信息包，

18、以获得相连的路由器的信息，同时告知自己的信息。通过hello信息包，同层次的路由器会选举一个指定路由器（designed router）和备份指定路由器（backup designed router）。由指定路由器向其它路由器发送lsa信息包。当路由器交换lsa信息包后，路由器的链路状态数据库同步，此时称路由器邻接（adjacent）。由指定路由器发送lsa信息包，会大大地减少路由器之间的数据包流量。路由器会定时的发送lsa，同时当路由器发现对方的链路状态数据库和自己的链路状态数据库不同时，它会立即发送lsa。我们知道在距离矢量路由协议中，如rip或igrp，当线路或拓扑发生变化时，路由器由于

19、防止路由循环，会等待一系列的定时器的定时，如更新计时器，无效计时器等等，这些造成路由器收敛时间的增加。而ospf路由协议在发现有事件(event)发生时，立即发送lsa，所以ospf会比距离矢量协议收敛更快。在ospf路由协议中，每一个区域中的路由器都按照该区域中定义的链路状态算法来计算网络拓扑结构，这意味着每一个区域都有着该区域独立的网络拓扑数据库及网络拓扑图。对于每一个区域，其网络拓扑结构在区域外是不可见的，同样，在每一个区域中的路由器对其域外的其余网络结构也不了解。这意味着ospf路由域中的网络链路状态数据广播被区域的边界挡住了，这样做有利于减少网络中链路状态数据包在全网范围内的广播，也

20、是ospf将其路由域或一个as划分成很多个区域的重要原因。同时，ospf是一个有层次的路由协议，而不象距离矢量协议是一个平(flat)的路由协议。在ospf数据包中，有一个域(field)用来放置区域号（areaid）。一个路由器可以处于不同区域之中，称为边界路由器。一个区域边界路由器有自身相连的所有区域的网络结构数据。不同区域的路由器不能相互通讯，同平的链路状态路由协议相比，也大大减少了路由器之间的数据通讯量。下面为一个ospf数据包的格式：版本号类型数据包长度路由器id区域id校验和证明类型证明数据（变长）在ospf路由协议中，有了证明类型和证明两个field，路由器之间可以做相互的校验，

21、从而路由协议之间更加安全。相对于其他协议，ospf有许多优点。ospf支持各种不同鉴别机制（如简单口令验证，md5加密验证等），并且允许各个系统或区域采用互不相同的鉴别机制。依据以下的条件选择路由方式和路由协议：l 安全可靠l 尽可能少的广域网上的路由信息传输；l 有利于提高网络的可靠性；l 适合建立大型广域网络；l 采用开放的国际标准，利于全网设备互连；l 具有尽可能短的路由收敛时间；l 适应mdcn网的建设情况等等。对于一个大型的网络系统，覆盖地域范围广，连接节点众多。所以针对网络具体情况，比较各种路由技术在先进性、可靠性、实用性和开放性等方面的优劣，我们选择ospf（open short

22、est path first）最短路径优先路由协议作为系统使用的主要路由协议，同时，根据具体需求，配合使用静态路由。mpls vpn网络系统是分布于全省的大型高速高效广域网系统，若其网络路由设计采用平面式的结构，那么，在网络中，链路状态数据库的大小、路由计算时间和路由信息报文数量都会极其庞大，远远超出规划设计的限额，包括：路由设备内存需求巨大，计算时间过于漫长、传输延迟无法忍受，广域网通信链路带宽利用率低，网络开销成本太高等等。所以，我们针对mpls 网络系统的情况，设计mpls 网络的路由结构采用多层路由结构框架即划分为多个area，这也与mpls vpn网络拓扑结构的构架相吻合。在mpls

23、网络系统中，我们可以把整个网络系统作为一个自治系统as按照一定的ospf路由法则划分为多个区域。根据网络链路设计，我们在路由上也采用层次化的设计，网络的核心层（省公司）和各地市分公司组成的双星型网络，构成ospf路由的area 0骨干，每个分公司的两个设备连接到核心层的两个节点上，分公司的上联设备为路由area 0骨干的abr（边界路由器），每个分公司所属的本地局域网和下属县构成一个area，这样我们可以在abr处将这个分公司所连接的各个下级节点的路由进行汇总。每一个区域通过ospf边界路由器相连，区域间可以通过路由总结（summary）来减少路由信息，减小路由表，提高路由器的运算速度。这样不

24、同area的路由器（即不同分局的节点路由器）不用相互交换链路信息，大大节省了链路的带宽。 其中各分公司属于一个area区域；每个area将本area的路由聚合后，将聚合路由广播到area0域。3.3.2. mpls 骨干网络设计mpls的组网模型为：ce（custom edge）用户site中直接与服务提供商相连的边缘设备，一般是路由器或路由交换机pe（provider edge）骨干网中的边缘路由设备，它直接与用户的ce相连。 p routers 骨干网中不与ce直接相连的设备，只负责标签转发site是一个内部连通但不通过服务提供者骨干网不具有相互连通性的网络系统。site举例：公司总部、分

25、支机构、合作伙伴、拨号用户、voip网关网络等。在此mpls/bgp vpn的一般模型中，网络由骨干网与用户的各个site组成，所谓vpn就是对site集合的划分，一个vpn就对应一个由若干site组成的集合。但是必须遵循如下规则：两个site之间只有至少同时属于一个vpn定义的site集合，才具有ip连通性。按照这个vpn的定义，一个vpn中的所有site都属于一个企业，称为intranet；如果vpn中的site分属不同的企业，则称为extranet。site可以同时属于不同的集合，site也可以同时属于不同的vpn。在福建xxx dcn网络的mpls 设计中，我们建议将p/pe/ce的逻

26、辑定位为：mpls骨干网络包括的设备为：省公司的7513和各地市分公司的7507。mpls骨干网的igp路由选用ospf，pe之间选用mp-bgp路由。pe与ce之间可以选用ospf或静态路由，每个区域节点为一个ospf的area，mpls的骨干网络作为ospf的area 0；客户的ospf路由表在pe之间通过mp-bgp传递给相关vpn的对端pe（逻辑相邻的pe）。以下是福建xxxmplsvpn骨干网示意图：在新增应用系统的vpn时，mpls只需在pe路由器作相应的配置即可。在增加应用系统的专网（vpn）时，pe路由器的主要配置工作是：增加vpn；与逻辑相关的pe之间设置mp-bgp由于传递

27、动态路有表。pe路由器的主要功能是：接入用户专网，将不同的用户专网通过不同的vpn通道链街；接收/发送用户数据包，在用户数据包前作标记处理；转发用户路由信息；在pe上的配置包括两部分：一是mpls内部接口配置，此端口同pc路由器的配置相同；另一部分是用户接入端口的配置，要根据接入用户的需求，在pe路由器的相应端口作配置。在pe上对一个应用专网的配置，一方面是用户接口配置，需要定义vpn相关的路由传递表，将接入用户的端口或子端口与相关的路由传递表对应；另一方面配置pe-ce之间的路由协议，同时配置相关的pe-pe之间承载用户路由的mp-bgp。3.3.2.1. 几点说明(1) mpls的骨干网只

28、能在同一厂家的设备之间实现。即现在pe和p路由器选用h3c的设备，增加相关的设备时也只能选用h3c的设备。(2) pe路由器：目前，在h3c的mpls/vpn方案中，可以作为pe路由器的设备有：7600，3500系列产品。(3) ce设备：ce设备是用户端的边界路由器，可以是任何具有三层路由功能的网络设备，通过ce在用户网络和mpls之间转发数据。ce也可以是用户终端设备，如：服务器或pc机。3.3.3. mp-ibgp的设计 mpls采用虚拟路由表的方法来实现一个路由器上多个vpn的路由表。每一个vpn对应一个或多个vrfs(vpn routing/forwarding instance)。

29、vrf定义连接到pe上的vpn成员(一个site)资格。一个vrf包括一个ip路由表、一个fib( forwarding information table)表、相关联的端口、和一些控制路由的规则和参数。数据包的路由和交换由vrf路由表和单独的fib表所控制，每一个vpn对应一个路由表和一个fib表。vpn路由信息的传播由vpn route-target communities来控制，这主要是通过bgp的extended communities属性来实现的。vpn路由信息的传播通过下述的方法进行工作：当一条从ce处学习到的vpn路由被inject到bgp中时，一些vpn route targe

30、t communities属性被赋于它；其中主要包括route-target属性，该属性决定这些route将被export到哪些vrf。每个vrf配置有一个import route-target列表，该列表指明了一个bgp的update中的community属性应该包含什么route-target才能被目标vrf接受。比如，某一个vrf的import route-target列表指明route-target communities a、b和c，这样，每一个mp-ibgp的update中communities属性的route-target中有a或b或c的route将被import到该vrf中。一

31、个pe路由器可通过静态路由、rip或bgp从ce处得到某一个ip前缀的路由，该前缀是标准ipv4的前缀。然后，pe通过加上一个8字节的rd(route distinguisher)将它转换成为一个vpn-ipv4的前缀，该前缀属于vpn-ipv4的前缀。通过这种方法，可以使用户地址唯一，即使用户使用的是iana规定的保留地址。用于生成vpn-ipv4前缀的rd(route distinguisher)由pe路由器的vrf配置命令指定。mp bgp协议为vpn的每个vpn-ipv4前缀传递nlri(network layer reachability information)。bgp实体之间的通

32、信出现在两个地方，as内的ibgp和as间的ebgp，pe-pe和pe-rr(route reflector)之间为ibgp，pe-ce之间为ebgp。bgp协议通过bgp多协议扩展(bgp, multiprotocol extensions for bgp-4)来传递vpn-ipv4的路由可达性信息，多协议扩展的bgp采用的方法为限定bgp的peer只能从其它vpn的同伴处得到bgp路由。ip包经过mpls标签交换到其目标地址，其选路的基础是vrf路由表和vrf fib表。pe路由器为每一个从ce路由器学到的前缀产生一个label，然后将这个label附加到bgp更新中传递出去。当一个源pe

33、路由器从ce路由器处得到一个ip包，它使用从目标pe路由器学到的label将该ip包发送出去。当目标pe路由器得到这个labeled ip包后，将label从ip包中去除，作为一个纯ip包发送到ce路由器。当labeled ip包在核心骨干部分传递时，其基于label switching或traffic engineered path进行，一个用户的ip包在核心穿行时，携带了2层label：第一层label指示到正确的目标pe路由器；第二层label给目标pe路由器指示，到哪一个其连接的site链路。在mpls vpn技术体制中，mpls用以在骨干上转发包，bgp用以在骨干上分发路由信息。h3

34、c 遵从rfc2547 bgp/mpls vpn， rfc2547 bgp/mpls vpn也是基 于rfc2283 bgp-4的多协议扩展或mp-bgp。这些bgp的mpls vpn 扩展引入了 一些新 的功能及特性， 例如vpn-ipv4地址、路由器区分、路由目标和标记。在mpls/vpn的应用中，所有的pe路由器都是通过ibgp协议来交换不同vpn的vrf路由的。由于i-bgp只能支持点到点的连接方式，因此为了确保每个pe路由器都能够了解网络路由信息，就必需采用i-bgp网状拓扑的连接方式进行。当网络在不断的成长过程中，网络的规模变得较大时，太多的网状连接将对网络的设计和维护带来许多的不

35、便。为了解决这复杂性的fully mash连接，我们可以采用合理规划route reflector cluster（路由反射器束）来建立网络的所有节点间的i-bgp路由关系。在一般的情况下，一个fully mash的i-bgp网状连接中。每一个pe路由器都必将所有相对应的其它pe路由器配置成neighbor，这一种网状结构在网络扩展中将带来许多不便。当我们需要在现有的ibgp网状结构网络增加一台pe路由器时，我们需要在这一台新增路由器上配置peer到所有的现存的其它pe路由器，而且也必须同时在所有已运行中的pe路由器peer到新增的pe路由器上。 这种全网状的连接才能满足ibgp的全网路由表的

36、建立。从以上一般简单的路由器扩展，就需要如此复杂的配置，和增加了网络管理负荷。 其实要简化这一复杂的ibgp网络协议需求，我们可以通过bgp现有的route reflector这一概念，它是在同一个as自治系统区内i-bgp将所有的路由器区分为两类，一为route reflector 如上图的rr-1，另一类为route reflector client（路由反射客户端）如ra，rb，rc和rd。所有路由反射客户端们都必须将自己的路由表peer到route reflector路由器上。route reflector路由器收集并计算相关的路由，最后route reflector路由器会将所得的路

37、由宣告到它所属的路由反射客户端，这样所有的ibgp内的路由器就可以得到全部的网络路由信息。通过route reflector我们就可以大大地简化了网络配置拓扑结构，增加了网络拓扑的可管理性。在一个as自治系统区可以存在一个或多个route reflector（路由反射器），一个rr路由器同样可以和另一个或多个rr进行相对的peer，不同的rr可以属于一个cluster（客户组）或不同的cluster。从上图可以看到路由器ra，rb，rc和rd都同时peer到两个相同cluster的rr路由器上。这样一来，此路由拓扑设计就可以避免单点故障的问题，这种结构对于一个需要高稳定性和高可靠性的mpls网

38、络是极其重要的。rr server的路由转发处理原则：来自非client的路由，向cluster内所有client转发来自client的路由，向非client路由器和其它client转发来自ebgp peer的路由向所有client和非client转发了解到mpls/vpn服务的不断增长，ibgp的pe路由器会不断的跟据业务发展而增加。利用route reflector cluster这一安全可靠的设计模式，它提供了一个平稳而且高效的切割升级方案，如上图所示。从route reflector的网络设计，我们可以得到一个具有高稳定性，高可靠性和安全性的网络拓扑。3.3.4. 虚路由转发表的设计

39、在pe上为每个vpn设定了一个虚路由转发（vrf）表，这些vrf用来保存vpn用户的路由表，这样他们之间被隔离。一个和多个端口可被设定到一个vrf，前提是它们属于一个用户vpn。在h3c路由器中，vrf名为路由器中识别、引用特定vpn的字符串，其配置语句如下：ip vrf 。具有以下特点：字符串区别大小写；仅在本路由器有效；vrf为助记符，本身不参与协议过程。 我们建议为vrf使用标准传统命名方式如用户 id和接口名称。mpls vpn vrf名由福建xxx自由选择，但应能够反映业务性质、vpn用户的信息。 配置举例： h3c-7608display mpls ldp vpn-instance

40、h3c-7608display mpls ldp 3.3.5. 路由区分和路由目标的设定 3.3.5.1. 路由区分在mpls vpn中，路由区分（rd）是用来组成vpn 地址的。每个mp-bgp上承载的路由都是唯一的，即使不同vpn用户的ipv4地址相同。rd为64比特序列，旨在保证不同vpn间路由前缀（prefix）的唯一性，rd将在mp-bgp路由更新消息中附着在nlri之前一并送出。rfc2547为rd定义了两种格式： : : 以上格式中，首位的16比特类型域由格式决定，不能人为配置，可供配置的只有48比特。遵照国际惯例， bgp/mpls vpn采用的rd格式如下： asn : 其中

41、asn必须为as号码，福建xxx可以采用私有的as号码进行设置。 3.3.5.2. 路由目标rt也为64比特序列，属于mp-bgp扩展团体属性（extended community attribute）的一种。通过导出（export）、导入（import）不同的rt值，同一vpn 的不同pe间，甚至不同vpn的pe间可以控制路由前缀的接收，达到控制vpn节点（site）间逻辑拓扑的目的。特别注意：rt尽管在字段结构上与rd一样，但其数值的选择完全独立于rd数值的选择，二者取值可以完全不同。 建议mpls vpn rt采用的格式与rd一致，格式见上。 对网状vpn，vpn的所有现场都有相同的rt

42、，一个拓扑事例如下：对星形( hub-and-spoke) vpn, vpn的每个现场都有不同的rt，拓扑示例如下：3.3.5.3. rd/rt的使用及分配rd/rt分配如下： asn: 其中后32比特数字由福建xxx自行确定。 mpls vpn网rd、rt分配建议（1）对每个vrf为每个vrf设置一个rd，rd取值可以等于rt。（2）对于全网状mpls vpn，建议一个用户只设置一个rt，在每个节点都做如下设置：route-target import route-target export （3）对hub-spoke结构的mpls vpn，可以设置多个rt，具体数量根据用户需求而定。3.3.

43、6. pe 与 ce 间的路由 在mpls vpn中， h3c 支持pe与ce路由器间的多种路由协议，包括ebgp，ripv2，ospf和静态路由。请注意ce不需要支持mpls，同时任意的标准ip路由器都可以支持。（1）ebgp协议ce路由器通过ebgp把地址前缀通知给pe路由器。从技术的角度来看，这种方式是目前最好的运行模式。优势如下： 不需要pe运行多个路由算法来与多个ce设备进行联系。 bgp路由协议本身就具有在不同的管理域之间交换路由信息的能力。 如果ce连接多个pe，即ce路由器除了与pe路由器有bgp连接外，还同其它路由器发生bgp的连接，用bgp协议可以很好的解决这一问题。as号

44、码可以是取自私有地址空间，起始于64512 到65535。（2）静态路由协议 目前多数ce一般都采用静态路由的连接方式，这种实施最简单，而且对路由器的开销也小，维护方便。缺点是路由表固定不变，即便是网络发生故障。建议在pe、ce之间只有一条链路的时候采用静态路由。 配置一条到ce 所连网络的静态路由，与一般的静态路由不同的是，该静态路由中需要指明该路由属于哪个vpn ，并且指明到下一跳要经过哪个端口。 将pe 和ce 间的静态路由和直连路由分发到bgp 中，利用bgp 协议的扩展属性，将本地pe 上该vpn 的路由传播到其他pe 上对应的vpn 中。（3）rip协议在pe和ce路由器之间可以采

45、用rip协议。ce路由器通过rip把到达用户节点的一组地址前缀通告pe路由器。当在ce中设置rip之后，必需保证ce得到的pe路由器的地址前缀决不会再传播回pe（横向隔离原则）。（4）ospf协议pe和ce之间运行ospf协议。这时，节点属于一个单独的区域（area），ce路由器成为这个区域的abr，而pe却是另一个区域的abr。pe路由器除了向ce传送路由信息外，并不会向与ce同一区域内的其它路由设备广播路由信息。3.3.7. mpls vpn接入设计：3.3.7.1. 本地以太网接入由于mplsvpn网既是一个福建xxx的内部网络，同时也负担了部分福建xxx运营网络的某些方面的工作，如：o

46、a系统、计费信息收集等方面的工作。这些信息比较敏感，需要有相应的机制来保证这些数据的安全。所以，建议在mdcn网络中，通过mpls vpn的实现来保证不同种类的信息间的隔离。同时，通过mpls机制来保证不同数据，不同的带宽、时延等方面的需求。对于mpls vpn的具体实施，建议首期工程只做到中心节点到地市级节点间。对于三级节点到二级节点间，建议通过三级节点的交换机实现vlan，通过vlan trunk 到达三级节点的路由器10/100m网口，不同vlan子端口，对应三级节点串行链路的子端口，（为了防止用户非法的访问不同vlan的子端口，通过acl进行相应的隔离控制。）三级路由器串行链路的子端口

47、对应二级节点7500（或7206、3640路由器）的子端口，在7500上实现pe功能将不同的子端口的数据封装到不同的mpls vpn上（为了防止用户非法的访问不同的子端口，通过acl进行相应的隔离控制）。这样就能够实现整个mdcn上不同数据运行到不同mpls vpn的要求。对于大型的基于mpls的vpn专网，如mdcn中的oa办公网络，建议按照地市区域划分为区域性子网（二级网络），地市区域子网。地市区域子网通过mpls骨干网设置的vpn组成全省的应用系统专网。其中，路由协议以ospf为主，静态路由为辅。骨干网和地市二级节点采用ospf协议，地市节点向下的县级节点（三级网络）建议采用静态路由。mpls骨干网作为ospf的area 0，各地市区域子网作为ospf的area n。省公司节点是特例：省公司的7608向上包括7513为ospf的area 0；7608向下为ospf的area 1。vpn对应vlan在各个地市的区域节点，为节省pe路由器的接入端口，同时又保障可以实现多个vpn专网接入mpls，我们建议通过h3c catalyst 7608交换机作为v