LVS之DR模式

目录：

• 网络环境
• LVS服务器网络配置
• LVS服务器添加ipvs规则
• RS服务器配置
• 访问验证
• 抓包分析
• 注意事项

---

【网络环境】

网络拓扑结构如下表：

服务器	类型	网卡	IP	MAC	说明
v_mechine2	client	ens32	192.168.237.132	00:0c:29:ff:f9:ca	客户端ip
v_mechine1	lvs_vip lvs_dip	ens35 ens32	192.168.237.141 192.168.237.131	00:0c:29:33:72:59 00:0c:29:33:72:45	对外vip 对内dip
v_mechine3	rs1_vip rs1_rip	lo:0 ens33	192.168.237.141 192.168.237.171	00:0c:29:4e:33:cb	虚拟网口vip，无mac 内部rip
v_mechine4	rs2_vip rs2_rip	lo:0 ens33	192.168.237.141 192.168.237.172	00:0c:29:ae:a1:bb	虚拟网口vip，无mac 内部rip

【LVS服务器网络配置】

配置双网卡，均在同一网段上：

[root@v_machine1 ~]# ip a
: lo: <LOOPBACK,UP,LOWER_UP> mtu  qdisc noqueue state UNKNOWN qlen
    link/loopback ::::: brd :::::
    inet 127.0.0.1/ scope host lo
       valid_lft forever preferred_lft forever
    inet6 ::/ scope host
       valid_lft forever preferred_lft forever
: ens32: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu  qdisc pfifo_fast state UP qlen
    link/ether 00:0c:29:33:72:45 brd ff:ff:ff:ff:ff:ff
    inet 192.168.237.131/ brd 192.168.237.255 scope global ens32
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe33:/ scope link
       valid_lft forever preferred_lft forever
: ens34: <BROADCAST,MULTICAST> mtu  qdisc pfifo_fast state DOWN qlen
    link/ether :0c::::4f brd ff:ff:ff:ff:ff:ff
: ens35: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu  qdisc pfifo_fast state UP qlen
    link/ether 00:0c:29:33:72:59 brd ff:ff:ff:ff:ff:ff
    inet 192.168.237.141/ brd 192.168.237.255 scope global ens35
       valid_lft forever preferred_lft forever
    inet6 fe80::20c:29ff:fe33:/ scope link
       valid_lft forever preferred_lft forever

路由设置如下：

[root@v_machine1 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.237.2   0.0.0.0         UG                   ens32
169.254.0.0     0.0.0.0         255.255.0.0     U                 ens32
169.254.0.0     0.0.0.0         255.255.0.0     U                 ens35
192.168.237.0   0.0.0.0         255.255.255.0   U                    ens32
192.168.237.0   0.0.0.0         255.255.255.0   U                    ens35

开启路由转发：

临时开启路由转发：
# echo  > /proc/sys/net/ipv4/ip_forward
或使用
# sysctl -w net.ipv4.ip_forward=
永久开启路由转发：
修改/etc/systcl.conf参数如下
# cat /etc/sysctl.conf | 'net.ipv4.ip_forward'
net.ipv4.ip_forward=
配置生效命令
# sysctl -p
tips：0关闭，1开启

【LVS服务器添加ipvs规则】

添加服务和规则

[root@v_machine1 ~]# ipvsadm -A -t 192.168.237.141: -s wrr
[root@v_machine1 ~]# ipvsadm -a -t 192.168.237.141: -r 192.168.237.171: -g -w
[root@v_machine1 ~]# ipvsadm -a -t 192.168.237.141: -r 192.168.237.172: -g -w 

查看ipvs规则，已添加成功

[root@v_machine1 ~]# ipvsadm -Ln
IP Virtual Server version 1.2. (size=)
Prot LocalAddress:Port Scheduler Flags
  -> RemoteAddress:Port           Forward Weight ActiveConn InActConn
TCP  192.168.237.141: wrr
  -> 192.168.237.171:           Route
  -> 192.168.237.172:           Route                   

【RS服务器配置】

两台RS服务器均添加虚拟网卡lo:0（也可使用其它虚拟网口，如ens33:0）

[root@v_machine3 network-scripts]# ifconfig lo: 192.168.237.141 netmask 255.255.255.255 up
[root@v_machine3 segments_dr]# ifconfig
ens33: flags=<UP,BROADCAST,RUNNING,MULTICAST>  mtu
        inet 192.168.237.171  netmask 255.255.255.0  broadcast 192.168.237.255
        inet6 fe80::20c:29ff:fe4e:33cb  prefixlen   scopeid 0x20<link>
        ether 00:0c:29:4e:33:cb  txqueuelen   (Ethernet)
        RX packets   bytes  (571.6 KiB)
        RX errors   dropped   overruns   frame
        TX packets   bytes  (362.4 KiB)
        TX errors   dropped  overruns   carrier   collisions 

lo: flags=<UP,LOOPBACK,RUNNING>  mtu
        inet 127.0.0.1  netmask 255.0.0.0
        inet6 ::  prefixlen   scopeid 0x10<host>
        loop  txqueuelen   (Local Loopback)
        RX packets   bytes  (3.7 KiB)
        RX errors   dropped   overruns   frame
        TX packets   bytes  (3.7 KiB)
        TX errors   dropped  overruns   carrier   collisions 

lo:0: flags=<UP,LOOPBACK,RUNNING>  mtu
        inet 192.168.237.141  netmask 255.255.255.255
        loop  txqueuelen   (Local Loopback)

路由设置如下：

[root@v_machine3 ~]# route -n
Kernel IP routing table
Destination     Gateway         Genmask         Flags Metric Ref    Use Iface
0.0.0.0         192.168.237.2   0.0.0.0         UG                   ens33
169.254.0.0     0.0.0.0         255.255.0.0     U                 ens33
192.168.237.0   0.0.0.0         255.255.255.0   U                    ens33

【访问验证】

客户端上curl访问lvs服务器的vip

[root@v_machine2 ~]# curl 192.168.237.141 -w "对端ip：%{remote_ip}\n"
hello,192.168.237.171
对端ip：192.168.237.141
[root@v_machine2 ~]# curl 192.168.237.141 -w "对端ip：%{remote_ip}\n"
hello,192.168.237.172
对端ip：192.168.237.141
[root@v_machine2 ~]# curl 192.168.237.141 -w "对端ip：%{remote_ip}\n"
hello,192.168.237.172
对端ip：192.168.237.141

可见，lvs已按照加权轮询方式处理客户端访问请求

【抓包分析】

在客户机上对lvs的vip进行访问，然后分别在4台服务器上抓包

lvs服务器抓取数据包client2vip1st_vmachine1.pacp

http数据流：

arp数据流：

可见DS收到client的访问请求后直接将请求转给了后端RS

在RS2服务器上抓取数据包client2vip1st_vmachine4.pacp

http数据流，收包：

http数据流，回包：

从收包，可以看出RS收到的数据包，源ip为客户机ip，目的ip为vip；但是源mac地址是lvs的mac地址，可见该包是从lvs转发过来的；

从回包，可以看到RS将数据包直接回给cip，而不是dip;

 

在client服务器上抓取数据包client2vip1st_vmachine2.pacp

从client上的收包中，可以看到数据是直接从RS2返回给client的

由上述数据分析可以得出以下数据流程图：

数据包pcap文件：

链接：https://pan.baidu.com/s/1FnV3jL_p5ohbsrPpyek4JQ 
提取码：85oy

【注意事项】

在DR工作模式下，由于每台RS服务器均配置了vip。因此需要设置服务器拒绝arp广播的响应。