zoukankan      html  css  js  c++  java
  • 转:Linux 双网卡绑定测试

    先介绍一下情况,服务器A和服务器B都是CentOS 4.6的系统,现在要做HA Cluster,为了避免裂脑的发生,要提高心跳链路的可靠性,下图是现时的连接情况,服务器A的eth2、eth3分别和服务器B的eth2、eth3 相连(没有顺序关系),所有网卡都是千兆网卡,拓扑图如下所示:

    image

    在介绍一起硬件情况,

    服务器A是一台HP DL380 G5,两年多的服务器了,4核心8G内存,5块72GB的2.5寸硬盘做RAID5。

    服务期B是DELL 2950,几个月前刚购入的新机器,8核16G内存,3块3.5寸300G SAS硬盘做RAID5。

    业务交换机为DELL的千兆交换机,没做任何配置,仅当接入交换机使用。

    图中的蓝线用的是几年前的超五类非屏蔽双绞线。

    图中的红线用的是新购的六类非屏蔽双绞线。

    测试方法很简单,将一个3.4G的ISO从服务器A scp到服务器B中,对比传输的时间。

    数据走业务链路,没有使用bonding技术。
    ############## No Binding ##############

    [root@rac-node01 tmp]# time scp rhel-5.1-server-x86_64-dvd.iso 10.168.0.202:/tmp

    root@10.168.0.202's password:

    rhel-5.1-server-x86_64-dvd.iso 100% 3353MB 44.1MB/s 01:16



    real 1m20.105s

    user 0m34.752s

    sys 0m11.002s

    ############## 速度还是挺快的
    数据走心跳链路,使用了bonding技术,mode设置为6,即不需要交换机参与的负载均衡。

    令人奇怪的是该种模式下会丢一些数据包,也许是这种比较奇怪的拓扑结果造成的。

    ############## model=6 ##############

    [root@rac-node01 tmp]# time scp rhel-5.1-server-x86_64-dvd.iso 192.168.0.202:/tmp

    root@192.168.0.202's password:

    rhel-5.1-server-x86_64-dvd.iso 100% 3353MB 21.4MB/s 02:37



    real 2m47.812s

    user 0m34.965s

    sys 0m19.421s

    [root@rac-node01 tmp]# netstat -i #@ Receive

    Kernel Interface table

    Iface MTU Met RX-OK RX-ERR RX-DRP RX-OVR TX-OK TX-ERR TX-DRP TX-OVR Flg

    bond1 1500 0 5123831 2045 0 0 5138747 0 0 0 BMmRU

    eth0 1500 0 2847 0 0 0 703 0 0 0 BMRU

    eth2 1500 0 2562665 11 0 0 2569378 0 0 0 BMsRU

    eth3 1500 0 2561166 2034 0 0 2569369 0 0 0 BMsRU

    lo 16436 0 2261 0 0 0 2261 0 0 0 LRU

    ############## 有数据包丢失
    数据走心跳链路,使用了bonding技术,mode设置为0,即需要交换机参与的负载均衡。

    该模式下不像mode=6那样会丢包,而且eth2和eth3的流量几乎平均。下面测试数据中的 RX-ERR是上面测试数据遗留下来的。

    ############## model=0 ##############

    [root@rac-node01 tmp]# time scp rhel-5.1-server-x86_64-dvd.iso 192.168.0.202:/tmp

    root@192.168.0.202's password:

    rhel-5.1-server-x86_64-dvd.iso 100% 3353MB 38.1MB/s 01:28



    real 1m33.508s

    user 0m34.539s

    sys 0m19.363s

    [root@mailserver tmp]# netstat -i

    Kernel Interface table

    Iface MTU Met RX-OK RX-ERR RX-DRP RX-OVR TX-OK TX-ERR TX-DRP TX-OVR Flg

    bond1 1500 0 11133871 2045 0 0 11180462 0 0 0 BMmRU

    eth0 1500 0 1334477 0 0 0 2575981 0 0 0 BMRU

    eth2 1500 0 5567685 11 0 0 5590236 0 0 0 BMsRU

    eth3 1500 0 5566186 2034 0 0 5590226 0 0 0 BMsRU

    lo 16436 0 2270 0 0 0 2270 0 0 0 LRU

    ############## 没有丢包
    数据走心跳链路,使用了bonding技术,mode设置为1,即Active-Backup,FailOver模式。

    该模式存在一个问题,当服务器A的eth2和服务器B的eth3作为Active设备时,服务器A是不能和服务器B通过心跳链路通信的,此时拔掉其 中一根心跳线再插就好了。

    ############## model=1 ##############

    [root@rac-node01 ~]# time scp /tmp/rhel-5.1-server-x86_64-dvd.iso 192.168.0.202:/tmp/

    root@192.168.0.202's password:

    rhel-5.1-server-x86_64-dvd.iso 100% 3353MB 41.4MB/s 01:21



    real 1m24.162s

    user 0m35.007s

    sys 0m13.455s



    [root@mailserver ~]# netstat -i

    Kernel Interface table

    Iface MTU Met RX-OK RX-ERR RX-DRP RX-OVR TX-OK TX-ERR TX-DRP TX-OVR Flg

    bond1 1500 0 3436804 0 0 0 1774259 0 0 0 BMmRU

    eth0 1500 0 3962 0 0 0 773 0 0 0 BMRU

    eth2 1500 0 3436804 0 0 0 1774254 0 0 0 BMsRU

    eth3 1500 0 0 0 0 0 5 0 0 0 BMsRU

    lo 16436 0 3071 0 0 0 3071 0 0 0 LRU

    ############## 没有丢包,只走单网卡
    结论:

    从以上结果显示,单就速度来说的确不做绑定单网卡速度最快,但是没有容错能力。其次是绑定后的FailOver模式,但是该模式会存在一定的问题。 而mode=6的负载均衡模式会丢包,比较危险。

    mode=0的负载均衡模式貌似并不能加大带宽,但是对于提高最大的可用性来说是最好的选择了。

     

    mode=0表示load balancing (round-robin)为负载均衡方式,两块网卡都工作。
    mode=1表示fault-tolerance (active-backup)提供冗余功能,采用主从工作方式, 默认情况下只有一块网卡工作,另一块做备份.

     

     

     

     

    CetOS(RHEL) 5.3下网卡绑定设置指南 

    修改三类文件:

    /etc/sysconfig/network-scripts/下的ifcfg-*文件

    /etc/modprobe.conf文件

    /etc/init.d/rc.local文件


    设置方法:

    1. 环境:windows xp+vmware, centos 5.3, 4块网卡,做两组绑定。

    当前网卡:eth0-3

    绑定后虚拟网卡:bond0-1

    eth0、eth2绑定为bond0,eth1、eth3绑定为bond1,不同网段。


    2. 修改ifcfg-*文件

    增加ifcfg-bond0、ifcfg-bond1两个文件:

    文件内容:
    [root@localhost network-scripts]# cat ifcfg-bond0
    # Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
    DEVICE=bond0
    BOOTPROTO=none
    IPADDR=192.168.100.101
    NETMASK=255.255.255.0
    NETWORK=192.168.100.0
    ONBOOT=yes
    USERCTL=no
    TYPE=Ethernet
    GATEWAY=192.168.100.101


    [root@localhost network-scripts]# cat ifcfg-bond1
    # Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
    DEVICE=bond1
    BOOTPROTO=none
    IPADDR=172.16.0.1
    NETMASK=255.255.255.0
    NETWORK=172.16.0.0
    ONBOOT=yes
    USERCTL=no
    #TYPE=Ethernet
    TYPE=Ethernet


    修改ifcfg-eth0、ifcfg-eth1、ifcfg-eth2、ifcfg-eth3四个网卡配置文件:

    内容:

    [root@localhost network-scripts]# cat ifcfg-eth0
    # Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
    DEVICE=eth0
    BOOTPROTO=none
    ONBOOT=yes
    USERCTL=no
    MASTER=bond0
    SLAVE=yes
    TYPE=Ethernet

    [root@localhost network-scripts]# cat ifcfg-eth1
    # Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
    DEVICE=eth1
    BOOTPROTO=none
    ONBOOT=yes
    USERCTL=no
    MASTER=bond1
    SLAVE=yes
    TYPE=Ethernet

    [root@localhost network-scripts]# cat ifcfg-eth2
    # Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
    DEVICE=eth2
    BOOTPROTO=none
    ONBOOT=yes
    USERCTL=no
    MASTER=bond0
    SLAVE=yes
    TYPE=Ethernet

    [root@localhost network-scripts]# cat ifcfg-eth3
    # Advanced Micro Devices [AMD] 79c970 [PCnet32 LANCE]
    DEVICE=eth3
    BOOTPROTO=none
    ONBOOT=yes
    USERCTL=no
    MASTER=bond1
    SLAVE=yes
    TYPE=Ethernet

    3. 修改/etc/modprobe.conf文件

    [root@localhost network-scripts]# cat /etc/modprobe.conf
    alias eth0 pcnet32
    alias eth1 pcnet32
    alias scsi_hostadapter mptbase
    alias scsi_hostadapter1 mptspi
    alias scsi_hostadapter2 ata_piix
    alias eth2 pcnet32
    alias eth3 pcnet32
    alias bond0 bonding
    options bond0 miimon=100 mode=0
    alias bond1 bonding
    options bond1 miimon=100 mode=0
     

    4. 修改/etc/rc.d/rc.local文件
    [root@localhost network-scripts]# cat /etc/rc.d/rc.local 
    #!/bin/sh
    #
    # This script will be executed *after* all the other init scripts.
    # You can put your own initialization stuff in here if you don't
    # want to do the full Sys V style init stuff.
    touch /var/lock/subsys/local
    modprobe bonding miimon=100 mode=0 


    5. 测试

    方法1:检查网络配置是否正常,是否可启动
    /etc/init.d/network restart

    方法2:检查系统启动时虚拟网卡是否正常启动
    reboot

    方法3:检查绑定网卡是负载均衡模式,还是主备冗余模式
    cat /proc/net/bonding/bond0
    cat /proc/net/bonding/bond1


    6. 说明

    如果是主备冗余模式,需将
    options bond0 miimon=100 mode=0中

    mode 改为1

    其它改为
    options bond0 miimon=100 mode=1 primary=eth0 

    primary=eth0表示当前主网卡为eth0

    其它在/etc/rc.d/rc.local中也修改
    modprobe bonding miimon=100 mode=1


    Linux下双网卡绑定技术实现负载均衡和失效保护
    2011年12月08日 Linux基础 评论数 1

    最近由于工作的需求,所以在用linux实现了双网卡绑定来实现负载均衡和失效保护,在这里写个随笔,方便以后查看,其实早就想好好总结一下linux上双网卡绑定实现过程。
    保持服务器的高可用性是企业级 IT 环境的重要因素。其中最重要的一点是服务器网络连接的高可用性。网卡(NIC)绑定技术有助于保证高可用性特性并提供其它优势以提高网络性能。我们在这介绍的Linux双网卡绑定实现就是使用两块网卡虚拟成为一块网卡,这个聚合起来的设备看起来是一个单独的以太网接口设备,通俗点讲就是两块网卡具有相同的IP地址而并行链接聚合成一个逻辑链路工作。其实这项技术在Sun和Cisco中早已存在,被称为Trunking和Etherchannel技术,在Linux的2.4.x的内核中也采用这这种技术,被称为bonding。bonding技术的最早应用是在集群——beowulf上,为了提高集群节点间的数据传输而设计的。下面我们讨论一下bonding 的原理,什么是bonding需要从网卡的混杂(promisc)模式说起。我们知道,在正常情况下,网卡只接收目的硬件地址(MAC Address)是自身Mac的以太网帧,对于别的数据帧都滤掉,以减轻驱动程序的负担。但是网卡也支持另外一种被称为混杂promisc的模式,可以接收网络上所有的帧,比如说tcpdump,就是运行在这个模式下。bonding也运行在这个模式下,而且修改了驱动程序中的mac地址,将两块网卡的Mac地址改成相同,可以接收特定mac的数据帧。然后把相应的数据帧传送给bond驱动程序处理。更加详细的文档参考/usr/share/doc/iputils-20020927/README.bonding
    -------------------------------------------------------------------------------------------------------------
    硬件平台:两块Intel(R) PRO/100 e100网卡
    实验环境:CentOS release 4.3 (Final)
    网络设备:Cisco WS-C2960-48TC-L !!!网络设备需要支持LACP协议。
    网络拓扑如下:

    Linux 双网卡绑定测试 - zhuzhu - 五事九思 (大连Linux主机维护)
     
    1、检测内核是否bonding,自linux kernel 2.4后都可以支持bonding啦。
    [root@update ~]# uname -r
    2.6.9-34.EC
    [root@update ~]# modinfo /lib/modules/2.6.9-34.EC/kernel/drivers/net/bonding/bonding.ko
    filename: /lib/modules/2.6.9-34.EC/kernel/drivers/net/bonding/bonding.ko
    author: Thomas Davis, tadavis@lbl.gov and many others
    description: Ethernet Channel Bonding Driver, v2.6.1
    version: 2.6.1 E3356343C6EED02C8BC7C11
    license: GPL
    parm: arp_ip_target:arp targets in n.n.n.n form
    parm: arp_interval:arp interval in milliseconds
    parm: lacp_rate:LACPDU tx rate to request from 802.3ad partner (slow/fast)
    parm: primary:Primary network device to use
    parm: mode:Mode of operation : 0 for round robin, 1 for active-backup, 2 for xor
    parm: use_carrier:Use netif_carrier_ok (vs MII ioctls) in miimon; 0 for off, 1 for on (default)
    parm: downdelay:Delay before considering link down, in milliseconds
    parm: updelay:Delay before considering link up, in milliseconds
    parm: miimon:Link check interval in milliseconds
    parm: max_bonds:Max number of bonded devices
    depends:
    vermagic: 2.6.9-34.EC gcc-3.4
    2、配置bonding,修改/etc/modprobe.conf文件。
    [root@update ~]# vim /etc/modprobe.conf
    [root@update ~]# cat !$
    cat /etc/modprobe.conf
    alias eth0 e100
    alias eth1 e100
    alias scsi_hostadapter sym53c8xx
    alias usb-controller ohci-hcd
    alias bond0 bonding
    options bond0 miimon=100

    3、编辑虚拟网络接口配置文件,指定网卡IP
    [root@update ~]# cd /etc/sysconfig/network-scripts/
    [root@update network-scripts]# cp ifcfg-eth0 ifcfg-bond0
    [root@update network-scripts]# cat ifcfg-bond0
    DEVICE=bond0
    IPADDR=192.168.66.100
    NETMASK=255.255.255.0
    NETWORK=192.168.66.0
    BROADCAST=192.168.66.255
    BOOTPROTO=none
    ONBOOT=yes
    TYPE=Ethernet
    USERCTL=no
    [root@update network-scripts]# cat ifcfg-eth0
    DEVICE=eth0
    USERCTL=no
    ONBOOT=yes
    MASTER=bond0
    SLAVE=yes
    BOOTPROTO=none
    HWADDR=00:02:A5:42:99:4B
    TYPE=Ethernet
    [root@update network-scripts]# cat ifcfg-eth1
    DEVICE=eth1
    USERCTL=no
    ONBOOT=yes
    MASTER=bond0
    SLAVE=yes
    BOOTPROTO=none
    HWADDR=00:02:A5:42:99:92
    TYPE=Ethernet
    4、加入开机启动bond0
    [root@update ~]# cat /etc/rc.d/rc.local
    #!/bin/sh
    #
    # This script will be executed *after* all the other init scripts.
    # You can put your own initialization stuff in here if you don't
    # want to do the full Sys V style init stuff.

    touch /var/lock/subsys/local
    ifenslave bond0 eth0 eth1
    route add -net 0.0.0.0 netmask 0.0.0.0 gateway 192.168.66.1 bond0
    5、重新启动网卡,看bond0运行状态
    [root@update ~]# cat /proc/net/bonding/bond0
    Ethernet Channel Bonding Driver: v2.6.1 (October 29, 2004)

    Bonding Mode: load balancing (round-robin)
    MII Status: up
    MII Polling Interval (ms): 100
    Up Delay (ms): 0
    Down Delay (ms): 0

    Slave Interface: eth0
    MII Status: up
    Link Failure Count: 0
    Permanent HW addr: 00:02:a5:42:99:4b

    Slave Interface: eth1
    MII Status: up
    Link Failure Count: 0
    Permanent HW addr: 00:02:a5:42:99:92
    6、验证网卡信息
    [root@update ~]# /sbin/ifconfig
    bond0     Link encap:Ethernet  HWaddr 00:02:A5:42:99:4B
    inet addr:192.168.66.100  Bcast:192.168.66.255  Mask:255.255.255.0
    inet6 addr: fe80::200:ff:fe00:0/64 Scope:Link
    UP BROADCAST RUNNING MASTER MULTICAST  MTU:1500  Metric:1
    RX packets:26866 errors:0 dropped:0 overruns:0 frame:0
    TX packets:4338 errors:0 dropped:0 overruns:0 carrier:0
    collisions:0 txqueuelen:0
    RX bytes:6309392 (6.0 MiB)  TX bytes:2865551 (2.7 MiB)

    eth0      Link encap:Ethernet  HWaddr 00:02:A5:42:99:4B
    inet6 addr: fe80::202:a5ff:fe42:994b/64 Scope:Link
    UP BROADCAST RUNNING SLAVE MULTICAST  MTU:1500  Metric:1
    RX packets:13403 errors:0 dropped:0 overruns:0 frame:0
    TX packets:2174 errors:0 dropped:0 overruns:0 carrier:0
    collisions:0 txqueuelen:1000
    RX bytes:3052051 (2.9 MiB)  TX bytes:1433832 (1.3 MiB)

    eth1      Link encap:Ethernet  HWaddr 00:02:A5:42:99:4B
    inet6 addr: fe80::202:a5ff:fe42:994b/64 Scope:Link
    UP BROADCAST RUNNING SLAVE MULTICAST  MTU:1500  Metric:1
    RX packets:13471 errors:0 dropped:0 overruns:0 frame:0
    TX packets:2176 errors:0 dropped:0 overruns:0 carrier:0
    collisions:0 txqueuelen:1000
    RX bytes:3257821 (3.1 MiB)  TX bytes:1433583 (1.3 MiB)

    lo        Link encap:Local Loopback
    inet addr:127.0.0.1  Mask:255.0.0.0
    inet6 addr: ::1/128 Scope:Host
    UP LOOPBACK RUNNING  MTU:16436  Metric:1
    RX packets:1645 errors:0 dropped:0 overruns:0 frame:0
    TX packets:1645 errors:0 dropped:0 overruns:0 carrier:0
    collisions:0 txqueuelen:0
    RX bytes:1996926 (1.9 MiB)  TX bytes:1996926 (1.9 MiB)
    7、查看路由信息
    [root@update ~]# route -n
    Kernel IP routing table
    Destination     Gateway     Genmask            Flags      Metric      Ref     Use      Iface
    192.168.66.0    0.0.0.0      255.255.255.0     U             0             0        0         bond0
    169.254.0.0      0.0.0.0      255.255.0.0         U             0             0        0          bond0
    0.0.0.0              192.168.66.1 0.0.0.0            UG          0              0        0          bond0
    以上是个人零星总结,如有错误,望大家指正。


    CentOS5.5 双网卡绑定



    Linux双网卡绑定实现就是使用两块网卡虚拟成为一块网卡,这个聚合起来的设备看起来是一个单独的以太网接口设备,通俗点讲就是两块网卡具有相同的IP地址而并行链接聚合成一个逻辑链路工作。


    首先要看linux是否支持bonding,RHEL4已经默认支持了。


    [root@localhost ~]# modinfo bonding


    filename:       /lib/modules/2.6.18-238.9.1.el5/kernel/drivers/net/bonding/bonding.ko

    author:         Thomas Davis, tadavis@lbl.gov and many others

    description:    Ethernet Channel Bonding Driver, v3.4.0-1

    version:        3.4.0-1

    license:        GPL

    srcversion:     358EAAF5610876F44387AEF

    depends:        ipv6

    vermagic:       2.6.18-238.9.1.el5 SMP mod_unload gcc-4.1


    ………………


    ………………


    如果有类似上面的信息输出,说明已经支持了。


    绑定步骤:


    1.修改/etc/sysconfig/network-scripts/ifcfg-eth0 配置文档


    修改后的内容如下:


      DEVICE=eth0


      ONBOOT=yes              #系统启动时自动启用该设备


      BOOTPROTO=none       #启动时不使用任何协议


    2.修改/etc/sysconfig/network-scripts/ifcfg-eth1 配置文档


    修改后的内容如下:


      DEVICE=eth1


      ONBOOT=yes              #系统启动时自动启用该设备


      BOOTPROTO=none       #启动时不使用任何协议


    3.创建一个绑定网络口的配置文档/etc/sysconfig/network-scripts/ifcfg-bond0


    内容如下:


      DEVICE=bond0            #虚拟网卡名称


      BOOTPROTO=static


      IPADDR=192.168.0.2   #IP地址


      NETMASK=255.255.255.0   #子网掩码


      GATEWAY=192.168.0.1     #网关


      BORADCAST=192.168.0.255 #广播地址


      ONBOOT=yes


      TYPE=Ethernet


    也可这样配置:


    (1)编辑虚拟网络接口配置文件(bond0),并指定网卡IP

    vi   /etc/sysconfig/network-scripts/ifcfg-bond0

    DEVICE=bond0

    ONBOOT=yes

    BOOTPROTO=static

    IPADDR=192.168.0.254

    BROADCAST=192.168.0.255

    NETMASK=255.255.255.0

    NETWORK=192.168.0.0

    GATEWAY=192.168.0.1

    USERCTL=no

    TYPE=Ethernet

    注意:建议不要指定MAC地址


    vi   /etc/sysconfig/network-scripts/ifcfg-eth0

    DEVICE=eth0

    BOOTPROTO=none

    ONBOOT=yes

    USERCTL=no

    MASTER=bond0

    SLAVE=yes

    注意:建议不要指定MAC地址


    vi   /etc/sysconfig/network-scripts/ifcfg-eth1

    DEVICE=eth1

    BOOTPROTO=none

    ONBOOT=yes

    USERCTL=no

    MASTER=bond0

    SLAVE=yes

    注意:建议不要指定MAC地址


    这样配置完就不需要第5步了。


    4.修改/etc/modprobe.conf,配置绑定模型


    加入以下内容:


      alias bond0 bonding


      options bond0 millmon=100 mode=0


         说明: 

         miimon=100 

         miimon是指多久时间要检查网路一次,单位是ms(毫秒) 

         这边的100,是100ms,即是0.1秒

         意思是假设其中有一条网路断线,会在0.1秒内自动备援

         mode共有七种(0~6) 

         mode=0:平衡负载模式,有自动备援,但需要"Switch"支援及设定。 

         mode=1:自动备援模式,其中一条线若断线,其他线路将会自动备援。 


         mode=6:平衡负载模式,有自动备援,不必"Switch"支援及设定。


    需要说明的是如果想做成mode 0的负载均衡,仅仅设置这里options bond0 miimon=100 mode=0是不够的,与网卡相连的交换机必须做特殊配置(这两个端口应该采取聚合方式),因为做bonding的这两块网卡是使用同一个MAC地址.

    从原理分析一下(bond运行在mode 0下):

    mode 0下bond所绑定的网卡的IP都被修改成相同的mac地址,如果这些网卡都被接在同一个交换机,那么交换机的arp表里这个mac地址对应的端口就有多 个,那么交换机接受到发往这个mac地址的包应该往哪个端口转发呢?正常情况下mac地址是全球唯一的,一个mac地址对应多个端口肯定使交换机迷惑了。

    所以mode0下的bond如果连接到交换机,交换机这几个端口应该采取聚合方式(cisco称为 ethernetchannel,foundry称为portgroup),因为交换机做了聚合后,聚合下的几个端口也被捆绑成一个mac地址.我们的解 决办法是,两个网卡接入不同的交换机即可。


    mode6模式下无需配置交换机,因为做bonding的这两块网卡是使用不同的MAC地址。


    PS:RHEL4 (centos4)及以下的版本options加在/etc/modprobe.conf中;

    RHEL5 (centos5)可以在ifcfg-bond0中加BONDING_OPTS="mode=1 arp_interval=100 arp_ip_target=192.168.0.1"


    5.修改/etc/rc.local,负责在系统启动时将虚拟网卡和两张物理网卡相绑定


    增加以下内容:


      ifenslave bond0 eth0 eth1


    这样配置完成,重启机器,就可以看到有一张bond0的新网卡。


    可以查看bond0来得知当前状态:


    [root@localhost ~]# cat /proc/net/bonding/bond0

    Ethernet Channel Bonding Driver: v3.4.0-1 (October 7, 2008)


    Bonding Mode: load balancing (round-robin)

    MII Status: up

    MII Polling Interval (ms): 100

    Up Delay (ms): 0

    Down Delay (ms): 0


    Slave Interface: eth0

    MII Status: up

    Speed: 100 Mbps

    Duplex: full

    Link Failure Count: 0

    Permanent HW addr: 00:24:XXXXXXXX


    Slave Interface: eth1

    MII Status: up

    Speed: 100 Mbps

    Duplex: full

    Link Failure Count: 1

    Permanent HW addr: 00:24:XXXXXXXX


    [ubuntu 10.04配置]


    apt-get install ifenslave-2.6


    vi /etc/network/interfaces


    auto bond0

        iface bond0 inet static

        address 192.168.xx.xx

        gateway 192.168.x.x

        netmask 255.255.255.0

       slaves eth1 eth2

    ##slaves eth0 eth1 eth2 eth3 eth4

        bond-mode 0

        bond-miimon 100




    如果要绑定全部网卡, 用slaves all


    七种bond模式说明:


    第一种模式:mod=0 ,即:(balance-rr) Round-robin policy(平衡抡循环策略)

    特点:传输数据包顺序是依次传输(即:第1个包走eth0,下一个包就走eth1....一直循环下去,直到最后一个传输完毕), 此模式提供负载平衡和容错能力;但是我们知道如果一个连接或者会话的数据包从不同的接口发出的话,中途再经过不同的链路,在客户端很有可能会出现数据包无序到达的问题,而无序到达的数据包需要重新要求被发送,这样网络的吞吐量就会下降


    第二种模式:mod=1,即: (active-backup) Active-backup policy(主-备份策略)

    特点:只有一个设备处于活动状态,当一个宕掉另一个马上由备份转换为主设备。mac地址是外部可见得,从外面看来,bond的MAC地址是唯一的,以避免switch(交换机)发生混乱。此模式只提供了容错能力;由此可见此算法的优点是可以提供高网络连接的可用性,但是它的资源利用率较低,只有一个接口处于工作状态,在有 N 个网络接口的情况下,资源利用率为1/N


    第三种模式:mod=2,即:(balance-xor) XOR policy(平衡策略)

    特点:基于指定的传输HASH策略传输数据包。缺省的策略是:(源MAC地址 XOR 目标MAC地址) % slave数量。其他的传输策略可以通过xmit_hash_policy选项指定,此模式提供负载平衡和容错能力


    第四种模式:mod=3,即:broadcast(广播策略)

    特点:在每个slave接口上传输每个数据包,此模式提供了容错能力


    第五种模式:mod=4,即:(802.3ad) IEEE 802.3ad Dynamic link aggregation(IEEE 802.3ad 动态链接聚合)

    特点:创建一个聚合组,它们共享同样的速率和双工设定。根据802.3ad规范将多个slave工作在同一个激活的聚合体下。

    外出流量的slave选举是基于传输hash策略,该策略可以通过xmit_hash_policy选项从缺省的XOR策略改变到其他策略。需要注意的是,并不是所有的传输策略都是802.3ad适应的,尤其考虑到在802.3ad标准43.2.4章节提及的包乱序问题。不同的实现可能会有不同的适应性。

    必要条件:

    条件1:ethtool支持获取每个slave的速率和双工设定

    条件2:switch(交换机)支持IEEE 802.3ad Dynamic link aggregation

    条件3:大多数switch(交换机)需要经过特定配置才能支持802.3ad模式


    第六种模式:mod=5,即:(balance-tlb) Adaptive transmit load balancing(适配器传输负载均衡)

    特点:不需要任何特别的switch(交换机)支持的通道bonding。在每个slave上根据当前的负载(根据速度计算)分配外出流量。如果正在接受数据的slave出故障了,另一个slave接管失败的slave的MAC地址。

    该模式的必要条件:ethtool支持获取每个slave的速率


    第七种模式:mod=6,即:(balance-alb) Adaptive load balancing(适配器适应性负载均衡)

    特点:该模式包含了balance-tlb模式,同时加上针对IPV4流量的接收负载均衡(receive load balance, rlb),而且不需要任何switch(交换机)的支持。接收负载均衡是通过ARP协商实现的。bonding驱动截获本机发送的ARP应答,并把源硬件地址改写为bond中某个slave的唯一硬件地址,从而使得不同的对端使用不同的硬件地址进行通信。

    来自服务器端的接收流量也会被均衡。当本机发送ARP请求时,bonding驱动把对端的IP信息从ARP包中复制并保存下来。当ARP应答从对端到达时,bonding驱动把它的硬件地址提取出来,并发起一个ARP应答给bond中的某个slave。使用ARP协商进行负载均衡的一个问题是:每次广播 ARP请求时都会使用bond的硬件地址,因此对端学习到这个硬件地址后,接收流量将会全部流向当前的slave。这个问题可以通过给所有的对端发送更新(ARP应答)来解决,应答中包含他们独一无二的硬件地址,从而导致流量重新分布。当新的slave加入到bond中时,或者某个未激活的slave重新激活时,接收流量也要重新分布。接收的负载被顺序地分布(round robin)在bond中最高速的slave上

    当某个链路被重新接上,或者一个新的slave加入到bond中,接收流量在所有当前激活的slave中全部重新分配,通过使用指定的MAC地址给每个 client发起ARP应答。下面介绍的updelay参数必须被设置为某个大于等于switch(交换机)转发延时的值,从而保证发往对端的ARP应答不会被switch(交换机)阻截。

    必要条件:

    条件1:ethtool支持获取每个slave的速率;

    条件2:底层驱动支持设置某个设备的硬件地址,从而使得总是有个slave(curr_active_slave)使用bond的硬件地址,同时保证每个bond 中的slave都有一个唯一的硬件地址。如果curr_active_slave出故障,它的硬件地址将会被新选出来的 curr_active_slave接管

    其实mod=6与mod=0的区别:mod=6,先把eth0流量占满,再占eth1,....ethX;而mod=0的话,会发现2个口的流量都很稳定,基本一样的带宽。而mod=6,会发现第一个口流量很高,第2个口只占了小部分流量

  • 相关阅读:
    mysql 执行计划 explain
    深度学习论文翻译解析(二十):YOLOv4: Optimal Speed and Accuracy of Object Detection
    卷积神经网络学习笔记——轻量化网络MobileNet系列(V1,V2,V3)
    OpenCV计算机视觉学习(13)——图像特征点检测(Harris角点检测,sift算法)
    人工智能必备数学基础:概率论与数理统计(2)
    人工智能必备数学基础:概率论与数理统计(1)
    深度学习论文翻译解析(十九):Searching for MobileNetV3
    深度学习论文翻译解析(十八):MobileNetV2: Inverted Residuals and Linear Bottlenecks
    深度学习论文翻译解析(十七):MobileNets: Efficient Convolutional Neural Networks for Mobile Vision Applications
    卷积神经网络学*笔记——SENet
  • 原文地址:https://www.cnblogs.com/jjkv3/p/2769850.html
Copyright © 2011-2022 走看看