Broadcom_多网卡聚合简要配置手册v1.1.doc

Windows环境 Broadcom多网卡聚合简要配置说明V1.1V1.0 Broadcom Control Suite2 配置说明V1.1 使用Broadcom Control Suite3界面说明配置步骤，增加主备网卡冗余配置说明一、 配置工具介质准备：配置前请针对所使用的IBM服务器型号，下载对应的Broadcom工具。运行Broadcom Control Suite 3时还需要准备 .Net Framework 2.0，否则无法正常进行配置，.Net Framework 2.0请到微软下载。n Broadcom网卡工具下载连接一（请注意支持机器型号）：/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-43815&brandind=5000008Supported systems:- IBM eServer 325, 326, 326m- IBM eServer xSeries 100, 205, 206m, 226- IBM eServer xSeries 235, 236, 255, 260- IBM eServer xSeries 225 (Type 8647)- IBM eServer xSeries 305, 306m, 335, 336- IBM eServer xSeries 346, 365,366, 440- IBM eServer xSeries 445, 450, 455, 460- IBM eServer xSeries MXE 460- IBM BladeCenter JS20 - IBM BladeCenter JS21 - IBM BladeCenter HS20 - IBM BladeCenter LS20- IBM System x3105 - IBM System x3200- IBM System x3200 M2 - IBM System x3250- IBM System x3250 M2 - IBM System x3350 - IBM System x3400 - IBM System x3400 - IBM System x3455 - IBM System x3500 - IBM System x3800 - IBM System x3850 - IBM System x3950 - IBM System x3950 E - IBM IntelliStation A Pro- IBM IntelliStation E Pro- IBM IntelliStation M Pro- IBM IntelliStation Z Pron Broadcom网卡工具下载连接二（请注意支持机器型号）：/systems/support/supportsite.wss/docdisplay?lndocid=MIGR-5078665&brandind=5000020Systems supported: - IBM BladeCenter HC10 (7996)- IBM BladeCenter HS21 (8853, 1885)- IBM BladeCenter HS21 XM (7995, 1915)- IBM BladeCenter LS21 (7971)- IBM BladeCenter LS22 (7901)- IBM BladeCenter LS41 (7972)- IBM BladeCenter LS42 (7902)- IBM System x3455 (7940, 7941)- IBM System x3550 (1913, 7978)- IBM System x3650 (1914, 7979)- IBM System x3655 (7943, 7985)- IBM System x3755 (7163, 8877)建议下载ISO文件，并烧录成CD，用CD运行。二、 安装软件n 运行Broadcom工具安装Broadcom Control Suite （下例为Broadcom Control Suite3）注意：安装Broadcom Control Suite前请确认.Net Framework 2.0i 已经在windows中安装三、 配置多网卡聚合n 从Windows控制面板启动管理程序Broadcom Control Suite 3n 选择到Team Management鼠标右击Teams选择ADD，进入Broadcom Teaming Wizard:选择Next:添加Team的名字，然后Next:选择 Team type为Smart Load Balancing(TM) and Failover(SLB)，然后Next从Available Adapters中选择两块网卡ADD到Team Members中，然后Next请选择Use the following member as a standby member：然后在下拉列表（这里的网卡是上一步添加到Team Members中的卡）中选择一块网卡设为备用网卡请不要Enable Auto-Fallback Disable modeDo not configure a standby member与Use the following member as a standby member的区别： Do not configure a standby member功能上是不分主备的多网卡冗余，例：Team是A（连接交换机1）、B（连接交换机2）两块网卡组成，假设正常情况下A路承担Team对外通信，一旦A路失效，Team对外工作由B路承担，等A路恢复正常后，Team对外工作仍是B路工作，不会回切到A路。 Use the following member as a standby member功能上是分主备的多网卡冗余，例：Team由A（连接交换机1）、B（连接交换机2）两块网卡组成，A是主网卡，承担正常情况下对外通信，B是备网卡，一旦A路失效，B路承担对外工作；等A路修复后，对外工作会自动回切回A路。这里要特别注意的是不能Enable Auto-Fallback Disable mode这个选项，如果Enable了，那就失去了自动回切功能。在Configure LiveLink一般情况选择No，然后NextVLANs一般不用配置Commit changes to system and Exit the wizard然后Finish完成以上配置后，在windows会新增一块Team1的网卡。n 对虚拟适配器（Team）进行网络配置n 进行连通性测试一般情况下，在冗余测试时，ping会一个丢包，这个是正常情况。1.编辑虚拟网络接口配置文件,指定网卡IPvi /etc/sysconfig/ network-scripts/ ifcfg-bond0rootrhas-13 root# cp /etc/sysconfig/network-scripts/ifcfg-eth0 ifcfg-bond02 #vi ifcfg-bond0将第一行改成 DEVICE=bond0# cat ifcfg-bond0DEVICE=bond0BOOTPROTO=staticIPADDR=3NETMASK=BROADCAST=54ONBOOT=yesTYPE=Ethernet这里要主意，不要指定单个网卡的IP 地址、子网掩码或网卡 ID。将上述信息指定到虚拟适配器(bonding)中即可。rootrhas-13 network-scripts# cat ifcfg-eth0DEVICE=eth0ONBOOT=yesBOOTPROTO=dhcprootrhas-13 network-scripts# cat ifcfg-eth1DEVICE=eth0ONBOOT=yesBOOTPROTO=dhcp3 # vi /etc/modules.conf编辑 /etc/modules.conf 文件，加入如下一行内容，以使系统在启动时加载bonding模块，对外虚拟网络接口设备为 bond0加入下列两行alias bond0 bondingoptions bond0 miimon=100 mode=1说明：miimon是用来进行链路监测的。 比如:miimon=100，那么系统每100ms监测一次链路连接状态，如果有一条线路不通就转入另一条线路；mode的值表示工作模式，他共有0，1,2,3四种模式，常用的为0,1两种。 mode=0表示load balancing (round-robin)为负载均衡方式，两块网卡都工作。 mode=1表示fault-tolerance (active-backup)提供冗余功能，工作方式是主备的工作方式,也就是说默认情况下只有一块网卡工作,另一块做备份.bonding只能提供链路监测，即从主机到交换机的链路是否接通。如果只是交换机对外的链路down掉了，而交换机本身并没有故障，那么bonding会认为链路没有问题而继续使用4 # vi /etc/rc.d/rc.local加入两行ifenslave bond0 eth0 eth1route add -net 54 netmask bond0到这时已经配置完毕重新启动机器.重启会看见以下信息就表示配置成功了.Bringing up interface bond0 OKBringing up interface eth0 OKBringing up interface eth1 OK.下面我们讨论以下mode分别为0,1时的情况mode=1工作在主备模式下,这时eth1作为备份网卡是no arp的rootrhas-13 network-scripts# ifconfig 验证网卡的配置信息bond0 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:3 Bcast:55 Mask: UP BROADCAST RUNNING MASTER MULTICAST MTU:1500 Metric:1 RX packets:18495 errors:0 dropped:0 overruns:0 frame:0 TX packets:480 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:0 RX bytes:1587253 (1.5 Mb) TX bytes:89642 (87.5 Kb)eth0 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:3 Bcast:55 Mask: UP BROADCAST RUNNING SLAVE MULTICAST MTU:1500 Metric:1 RX packets:9572 errors:0 dropped:0 overruns:0 frame:0 TX packets:480 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:833514 (813.9 Kb) TX bytes:89642 (87.5 Kb) Interrupt:11eth1 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:3 Bcast:55 Mask: UP BROADCAST RUNNING NOARP SLAVE MULTICAST MTU:1500 Metric:1 RX packets:8923 errors:0 dropped:0 overruns:0 frame:0 TX packets:0 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:753739 (736.0 Kb) TX bytes:0 (0.0 b) Interrupt:15 那也就是说在主备模式下,当一个网络接口失效时(例如主交换机掉电等),不回出现网络中断,系统会按照cat /etc/rc.d/rc.local里指定网卡的顺序工作,机器仍能对外服务,起到了失效保护的功能.在mode=0 负载均衡工作模式,他能提供两倍的带宽,下我们来看一下网卡的配置信息rootrhas-13 root# ifconfigbond0 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:3 Bcast:55 Mask: UP BROADCAST RUNNING MASTER MULTICAST MTU:1500 Metric:1 RX packets:2817 errors:0 dropped:0 overruns:0 frame:0 TX packets:95 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:0 RX bytes:226957 (221.6 Kb) TX bytes:15266 (14.9 Kb)eth0 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:3 Bcast:55 Mask: UP BROADCAST RUNNING SLAVE MULTICAST MTU:1500 Metric:1 RX packets:1406 errors:0 dropped:0 overruns:0 frame:0 TX packets:48 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:113967 (111.2 Kb) TX bytes:7268 (7.0 Kb) Interrupt:11eth1 Link encap:Ethernet HWaddr 00:0E:7F:25:D9:8B inet addr:3 Bcast:55 Mask: UP BROADCAST RUNNING SLAVE MULTICAST MTU:1500 Metric:1 RX packets:1411 errors:0 dropped:0 overruns:0 frame:0 TX packets:47 errors:0 dropped:0 overruns:0 carrier:0 collisions:0 txqueuelen:1000 RX bytes:112990 (110.3 Kb) TX bytes:7998 (7.8 Kb) Interrupt:15 在这种情况下出现一块网卡失效,仅仅会是服务器出口带宽下降,也不会影响网络使用. 通过查看bond0的工作状态查询能详细的掌握bonding的工作状态rootrhas-13 bonding# cat /proc/net/bonding/bond0bonding.c:v2.4.1 (September 15, 2003)Bonding Mode: load balancing (round-robin)MII Status: upMII Polling Interval (ms): 0Up Delay (ms): 0Down Delay (ms): 0Multicast Mode: all slavesSlave Interface: eth1MII Status: upLink Failure Count: 0Permanent HW addr: 00:0e:7f:25:d9:8aSlave Interface: eth0MII Status: upLink Failure Count: 0Permanent HW addr: 00:0e:7f:25:d9:8b Linux下通过网卡邦定技术既增加了服务器的可靠性,又增加了可用网络带宽,为用户提供不间断的关键服务。以上方法均在redhat的多个版本测试成功！如果安装rhel5.x(如rhel5.5)或者centos5.x(如centos 5.5)等比较低的版本，就没有针对新的机器（r620 r720等）网卡的驱动，就需要单独安装。对于dell620，其网卡是broadcom5720。下载网卡驱动地址