IVE虚拟化技术介绍

1、 2008 IBM Corporation IBM IVE虚拟化技术介绍 王 泷 高级系统工程师 IBM 系统科技事业部 2007 IBM Corporation2 以太网卡的共享以太网卡的共享- SEA和和IVE两种方式的区别两种方式的区别 LPAR #2 LPAR VIOS LPAR #3 LPAR #1 Power Hypervisor VNET Packet Router Virtual Ethernet Switch Virtual Ethernet Driver Virtual Ethernet Driver Virtual Ethernet Driver LPAR #2 LPAR

2、 VIOS LPAR #3 LPAR #1 Power Hyper- visor VNET Packet Router Ethernet Driver Ethernet Driver Ethernet Driver IVE Adapter PortIVE Adapter Port SEAIVE Or 缺点缺点: 所有网络包通过所有网络包通过VIOS转发转发 需要需要VIOS上的配置上的配置 需要消耗需要消耗CPU时间时间 优点优点: 所有网络包直接通过网卡转发，所有网络包直接通过网卡转发， 不再需要不再需要VIOS转发转发 不再需要配置不再需要配置VIOS 拥有与独立网卡相当的性能拥有与独立网

3、卡相当的性能 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation3 HEA - Host Ethernet Adapter卡卡 VPD card 2 x 1Gb Eth Serial 2 Serial 1 VPD card Serial 2 10Gb Eth 10Gb Eth Base Offering: #5636 2 Serial, 2 1Gb Eth 10Gb Upgrade Offering: #5637 1 Serial, 2 10Gb Eth V

4、PD card 4 x 1Gb Eth Serial 2 4 x 1Gb Upgrade Offering: #5639 1 Serial, 4 1Gb Eth IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation4 HEA卡卡 IVE卡的共享卡的共享: Dual 1Gb: 2个个1GB的物理端口的物理端口; 1个个port group; 最多最多: 16 个逻辑端口个逻辑端口 Quad 1Gb: 4个个1GB的物理端口的物理端口; 2个个port group

5、;最多最多: 32 个逻辑端口个逻辑端口 Dual 10Gb: 2个个10GB的物理端口的物理端口;2个个port group; 最多最多: 32 个逻辑端口个逻辑端口 每个分区每个分区: 可以配置使用可以配置使用IVE 上的逻辑端口上的逻辑端口,与另外使用与另外使用IVE逻辑端口的分区共享一逻辑端口的分区共享一 个物理端口带宽个物理端口带宽;或者配置成使用独立的物理端口。或者配置成使用独立的物理端口。 Dual 1GbQuad 1GbDual 10Gb IBM System p Advanced Technical Support Integrated Virtual Ethernet (I

6、VE) 2007 IBM Corporation5 IVE逻辑端口的概念逻辑端口的概念 Logical L2 switch Physical Port Logical Ports PartitionPartition Partition HEA 对于分区来说, 1个IVE的逻辑端口和1快物理网 卡没有什么区别 每个IVE的逻辑端口拥有自己独立的MAC 地址，需 要配置自己的IP地址 配置在同一个物理端口上的IVE逻辑端口共享这块物 理网卡的网络带宽 IVE的逻辑端口可以分配给分区使用 不同的IVE端口必须分配给不同的分区 1个分区可以同时配置多个IVE的逻辑端口。但是属 于同一个分区的IVE逻

7、辑端口必须来自不同的物理端 口。也就是说，同一个物理端口上的IVE逻辑端口只 能分配给不同的分区使用 每一个物理端口都是一个逻辑的2层交换机。 即使这个物理端口没插网线，它上面的IVE逻辑端口 也是互相连通的。 不同物理端口上的IVE逻辑端口默认是没有连通的。 它们之间连通需要连接外部交换机 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation6 Integrated Virtual Ethernet (IVE) 名词术语名词术语 HEA Host Ether

8、net adapter,主要是指嵌入P5IOC2 IO控制器的板卡。一 共三种规格 (双口 1Gb, 四口1Gb, 和 双口 10Gb) Port Group 共享1个或者2个物理端口的逻辑端口组（具体的物理端口数 依赖于实际的IVE卡），任何一个IVE卡支持最大2个Port Group，每个 Port Group 支持最大16个逻辑端口数。 LHEA -物理HEA卡的逻辑表示 LHEA Port -逻辑端口. MCS Value Multi-core scaling value,通过MCS的设置，改变Port Group 的逻辑端口数 MDC manufacturing default co

9、nfiguration, IVE的出厂模式默认配置 Promiscuous Mode or Promiscuous LPAR 混合模式。允许某个分区独 占HEA上的一个物理网卡。 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation7 Host Ethernet Adapter (HEA) 规格规格 The Host Ethernet Adapter (HEA) 是一块集成的共享网络板卡 有以下三种规格: Dual 1Gb: 2个1GB的以太端口; 1个por

10、t group; 最多: 16 个逻辑端口 Quad 1Gb: 4个1GB的以太端口; 2个port group; 最多: 32 个逻辑端口 Dual 10Gb: 2个10GB的光纤端口; 2个port group; 最多: 32 个逻辑端口 每个 port group 最多拥有16个IVE逻辑端口 (取决于 MCS 值) 目前只支持Power 570, Power 560,Power 550以及Power 520机型。不同 CEC柜上的HEA卡可以是不同的类型。 IBM System p Advanced Technical Support Integrated Virtual Ethern

11、et (IVE) 2007 IBM Corporation8 Host Ethernet Adapter (HEA) 注意事项注意事项 同一个物理端口上的IVE逻辑端口只能分配给不同的分区使用 属于同一个分区的IVE逻辑端口必须来自不同的物理端口；一个分区上IVE 逻辑端口的数量不会超过物理端口的总数。 每个逻辑端口会有一个唯一的MAC地址，存于IVE卡的VPD芯片中。 每个逻辑端口只能属于一个物理端口和一个逻辑2层交换机 ，如果来自相 同Port Group的不同物理端口的两个逻辑端口，不会属于相同的逻辑2层 交换机。 跟使用物理网卡相比，使用IVE逻辑端口会消耗更多的内存。但减少了 CPU

12、的占用。 使用Live Partition mobility功能的分区不能使用IVE的逻辑端口。必须配置 成使用VIOS的SEA。 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation9 MCS 配置配置 (Multi-Core Scaling) MCS 有效值是 1, 2, 4, 8, 16 通过使用不同的处理器进行数据的接受处理，以提高IVE的性 能 基于每个port group设置MCS 值。不同的port group 可以有不 同的MCS值 MCS值越

13、高，单个IVE逻辑端口的性能也越高；但是 IVE逻辑 端口的数量将减少。 缺省 MCS 值是 4 在HMC（IVM)上可以修改MCS值。但是必须加电重启系统， 使MCS生效。 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation10 Multi-core Scaling (MCS) MCS Value Number of Available Logic Ports 116 28 44 82 161 目前，MCS 值修改不是立即生效. 系统必须加电重启，使MCS

14、生效。 Default IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation11 三种三种IVE卡配置详解卡配置详解 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation12 什么时候需要什么时候需要 SEA over IVE 当某个分区所需要的网卡个数超过了HEA上物理端口的数量 当需要使用IVE逻辑端口的分区数量超过了IV

15、E逻辑端口的数量 IVE逻辑端口的数量取决于HEA卡的类型以及MCS 值 分区的内存非常小 每个IVE逻辑端口需要使用 102 MB 系统内存 某种需要混合使用SEA, IVE, 和独立物理网卡的场合 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation13 物理端口混合模式物理端口混合模式(Promiscuous Mode) 当 VIO server使用HEA作为 SEA ，你必须配置VIO server使用 IVE的混合模式 当使用混合模式，每一个物理端口

16、只有一个逻辑端口，并且只 能分配给一个分区使用 使用混合模式的分区，可以使用这个物理网卡的所有网络流量 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation14 Promiscuous Mode（混合模式）（混合模式） IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation15 IVE的出厂模式（的出厂模式（MDC Mode）

17、MDC Manufacturer Default Configuration 全分区。没有HMC或者IVM管理 Promiscuous mode混合模式 1500 or 9000 MTU physical port setting (settable by the OS in MDC mode) Flow Control disabled (settable by the OS in MDC mode) Media speed (settable by the OS in MDC mode) Promiscuous mode混合模式 MCS 的默认值为4 全双工模式且速度设置为auto 允许V

18、LAN IBM System p Advanced Technical Support 2007 IBM Corporation 通过HMC配置 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation17 HMC Config IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation18 通过HMC配置HEA IBM System

19、p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation19 通过HMC配置HEA(Physical Ports) IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation20 通过HMC配置HEA(Physical Ports) IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation21 通过HMC配置HEA(Physical Ports) IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation22 通过HMC配置HEA逻辑端口逻辑端口 IBM System p Advanced Technical Support Integrated Virtual Ethernet (IVE) 2007 IBM Corporation23 当分区启动时当分区启动