linux中bonding配置步骤详解.doc

本文介绍 linux 下的 bonding 技术，linux 2.4.x 的内核中采用了这种技术，利用 bonding 技术可以将多块网卡接口通过绑定虚拟成为一块网卡，在用户看来这个聚合起来的设备好像是一个单独的以太网接口设备，通俗点讲就是多块网卡具有相同的 IP 地址而并行连接聚合成一个逻辑链路工作。二、bond的几种算法Linux的bond支持7种工作模式,可以参考内核源码包文件： Documentation/networking/bonding.txt 。这里逐一介绍。模式1：mode=0 ，即：(balance-rr) Round-robin policy（平衡轮循策略）特点：传输数据包顺序是依次传输（即：第1个包走eth0，下一个包就走eth1.一直循环下去，直到最后一个传输完毕），此模式提供负载平衡和容错能力；但是我们知道如果一个连接或者会话的数据包从不同的接口发出的话，中途再经过不同的链路，在客户端很有可能会出现数据包无序到达的问题，而无序到达的数据包需要重新要求被发送，这样网络的吞吐量就会下降。模式2：mode=1，即： (active-backup) Active-backup policy（主-备份策略）特点：只有一个设备处于活动状态，当一个宕掉另一个马上由备份转换为主设备。mac地址是外部可见得，从外面看来，bond的MAC地址是唯一的，以避免switch(交换机)发生混乱。此模式只提供了容错能力；由此可见此算法的优点是可以提供高网络连接的可用性，但是它的资源利用率较低，只有一个接口处于工作状态，在有 N 个网络接口的情况下，资源利用率为1/N模式3：mode=2，即：(balance-xor) XOR policy（平衡策略）特点：基于指定的传输HASH策略传输数据包。缺省的策略是：(源MAC地址 XOR 目标MAC地址) % slave数量。其他的传输策略可以通过xmit_hash_policy选项指定，此模式提供负载平衡和容错能力。模式4：mode=3，即：broadcast（广播策略）特点：在每个slave接口上传输每个数据包，此模式提供了容错能力。模式5：mode=4，即：(802.3ad) IEEE 802.3adDynamic link aggregation（IEEE 802.3ad 动态链接聚合）特点：创建一个聚合组，它们共享同样的速率和双工设定。根据802.3ad规范将多个slave工作在同一个激活的聚合体下。外出流量的slave选举是基于传输hash策略，该策略可以通过xmit_hash_policy选项从缺省的XOR策略改变到其他策略。需要注意的是，并不是所有的传输策略都是802.3ad适应的，尤其考虑到在802.3ad标准43.2.4章节提及的包乱序问题。不同的实现可能会有不同的适应性。必要条件：条件1：ethtool支持获取每个slave的速率和双工设定条件2：switch(交换机)支持IEEE 802.3ad Dynamic link aggregation条件3：大多数switch(交换机)需要经过特定配置才能支持802.3ad模式模式6：mode=5，即：(balance-tlb) Adaptive transmit load balancing（适配器传输负载均衡）特点：不需要任何特别的switch(交换机)支持的通道bonding。在每个slave上根据当前的负载（根据速度计算）分配外出流量。如果正在接受数据的slave出故障了，另一个slave接管失败的slave的MAC地址。该模式的必要条件：ethtool支持获取每个slave的速率。模式7：mode=6，即：(balance-alb) Adaptive load balancing（适配器适应性负载均衡）特点：该模式包含了balance-tlb模式，同时加上针对IPV4流量的接收负载均衡(receive load balance, rlb)，而且不需要任何switch(交换机)的支持。接收负载均衡是通过ARP协商实现的。bonding驱动截获本机发送的ARP应答，并把源硬件地址改写为bond中某个slave的唯一硬件地址，从而使得不同的对端使用不同的硬件地址进行通信。平时经常用到的是mode=0、mode=1、mode=4、mode=6算法。三、bond配置A、centos/redhat下的配置11、dist.conf配置# vim /etc/modprobe.d/dist.conf# 编缉该配置文件，在行尾增加如下内容alias bond0 bondingoptions bond0 miimon=100 mode=1alias bond1 bondingoptions bond1 miimon=100 mode=1alias net-pf-10 off /这行是关闭ipv6支持,也可以不要说明：miimon 是用来进行链路监测的。如果miimon=100，那么系统每100ms 监测一次链路连接状态，如果有一条线路不通就转入另一条线路；mode 的值表示工作模式 。一些老的redhat/centos发行中已使用/etc/modprobe.conf配置文件。2、网卡配置# cat ifcfg-eth0DEVICE=eth0TYPE=EthernetONBOOT=yesBOOTPROTO=noneUSERCTL=noMASTER=bond1SLAVE=yes这里只列出了eth0网卡的配置。假设目前服务器有四快网卡，eth0、eth1配置为bond1，eth2、eth3配置为bond0 。参照上面的配置，同理eth1网卡只需复制一份eth0的配置，修改下设备名；再复制两份为eth2、eth3，需要修改DEVICE和MASTER bond名称即可。3、bond 网卡配置以bond1网卡为例：# cat ifcfg-bond1DEVICE=bond1TYPE=EthernetONBOOT=yesBOOTPROTO=staticUSERCTL=noIPADDR=10.211.89.202NETMASK=255.255.255.224#GATEWAY=10.211.89.193注：centos/redhat下有network和NetworkManager两个服务管理网卡，两个服务同时开启在配置bond生效后会有报错。可以通过以下配置命令关闭NetworkManager服务：# /etc/init.d/NetworkManager stop# chkconfig NetworkManager offB、centos/redhat下的配置2bond选择的配置也可以不配置在dist.conf文件，而直接配置在ifcfg-bond网卡接口中，具体如下：# vim /etc/sysconfig/network-scripts/ifcfg-bond0DEVICE=bond0BOOTPROTO=noneONBOOT=yesIPADDR=192.168.0.180NETMASK=255.255.255.0GATEWAY=192.168.0.1USERCTL=noBONDING_OPTS=mode=1 miimon=100C、sles（suse）下的配置suse类似于redhat/centos，即支持写到modprobe配置文件，也支持在bond网卡配置文件中增加。以下是在bond网卡中的配置（注意和上面使用BONDING参数项略有不同）：# vim /etc/sysconfig/network/ifcfg-bond0BOOTPROTO=staticIPADDR=10.211.0.21NETMASK=255.255.255.0STARTMODE=onbootBONDING_MASTER=yesBONDING_MODULE_OPTS=mode=1 miimon=200 use_carrier=1BONDING_SLAVE0=eth1BONDING_SLAVE1=eth2四、删除bonding设备如由于最初配置的bonding设备取名为bond0，而后改名为了bond1，造成了两个bonding设备的存在，现在需删除bond0 。先查看下网络设备：# ls /sys/class/netbond0 bond1 bonding_masters eth0 eth1 lo直接删除bond0，会提示无权限。可以通过bonding_masters文件删除bond设备：# cat bonding_mastersbond0 bond1直接编辑bonding_masters文件会提示权限问题# echo -bond0 bonding_mastersecho后的 - 号表示删除设备， + 号表示添加设备# cat bonding_mastersbond1# ls /proc/net/bondingbond1可以看出bond网口已经删除成功。把eth0加入bond(bond0)：# echo +eth0 /sys/class/net/bond0/bonding/slaves从bond(bond0)里移除eth0：# echo -eth0 /sys/class/net/bond0/bonding/slaves增加第一个bond，带有两个e1000接口，工作于active-backup模式，使用ARP监控，可以通过如下命令：# modprobe e1000# echo +bond1 /sys/class/net/bonding_masters# echo active-backup /sys/class/net/bond1/bonding/mode或echo 1 /sys/class/net/bond1/bonding/mode# ifconfig bond1 192.168.2.1 netmask 255.255.255.0 up增加arp目标地址：# echo +192.168.2.100 /sys/class/net/bond1/bonding/arp_ip_target# echo 2000 /sys/class/net/bond1/bonding/arp_interval# echo +eth2 /sys/class/net/bond1/bonding/slaves# echo +eth3 /sys/class/net/bond1/bonding/slaves查看bond接口信息：# cat /proc/net/bonding/bond1Ethernet Channel Bonding Driver: v3.6.0 (September 26, 2009)Bonding Mode: fault-tolerance (active-backup)Primary Slave: NoneCurrently Active Slave: eth0MII Status: upMII Polling Interval (ms): 100Up Delay (ms): 0Down Delay (ms): 0Slave Interface: eth0MII Status: upSpeed: 1000 MbpsDuplex: fullLink Failure Count: 0Permanent HW addr: a0:b3:cc:e5:97:68Slave queue ID: 0Slave Interface: eth1MII Status: upSpeed: 1000 MbpsDuplex: fullLink Failure Count: 0Permanent HW addr: a0:b3:cc:e5:97:6cSlave queue ID: 0五、ifensalve 工具ifensalve是一款linux下的负载均衡工具，使用ifensalve 配置bonding，如下：# mod