部署LVS-DR集群
使用LVS实现DR模式的集群调度服务器,为用户提供Web服务
- 客户端IP地址为192.168.4.10
- LVS调度器VIP地址为192.168.4.15
- LVS调度器DIP地址设置为192.168.4.5
- 真实Web服务器地址分别为192.168.4.100、192.168.4.200
- 使用加权轮询调度算法,权重可以任意
CIP是客户端的IP地址;
VIP是对客户端提供服务的IP地址;
RIP是后端服务器的真实IP地址;
DIP是调度器与后端服务器通信的IP地址(VIP必须配置在虚拟接口)
1台作为客户端、1台作为Director调度器、2台作为Real Server
为什么本实验中web1和web2要采用4网段IP
LVS NAT实验请求数据包从LVS调度器进,web的相应数据包也从LVS调度器出,那么LVS调度器就需要承载所有数据的压力,会成为整个集群的瓶颈!!
本实验LVS DR模式的核心需求是希望web1和web2可以不走调度器返回数据!
但是如图-4所示,如果web1和web2采用2.100和2.200这样2网段的IP,又不希望给4.10回复数据走LVS调度器(也就是不给web1和web2配置默认网关为2.5),最后是无法跨网段通讯的!!!
怎么办?核心需求是希望web1和web2可以直接返回数据给客户端!!!
想让web1和web2可以直接返回数据给客户端,可以给web1和web2配置4网段IP
这样就可以了吗?答案是否定的!!!网络中的基本原则是A访问B,必须是B返回数据给A,现在4.10访问4.5,最终4.100给4.10返回网页数据,所有数据包都会被丢弃!!!
那怎么办呢?地址欺骗!
我们给web1和web2再额外添加一个伪装的IP地址,这个IP地址因为是用来做地址欺骗用的,假的就是假的,不能暴露(必须配置在lo本地回环网卡上面)。
lo网卡上面默认配置的IP是127.0.0.1。
步骤
CIP是客户端的IP地址;
VIP是对客户端提供服务的IP地址(本案例为192.168.4.15);
VIP必须配置在虚拟接口(目的是防止地址冲突);
RIP是后端服务器的真实IP地址(本案例为192.168.4.100和192.168.4.200);
DIP是调度器与后端服务器通信的IP地址(本案例为192.168.4.5)。
配置实验网络环境
设置Proxy服务器的VIP和DIP
注意:为了防止冲突,VIP必须要配置在网卡的虚拟接口,网卡名称需要查看后进行配置!!!
- [root@proxy ~]# cd /etc/sysconfig/network-scripts/
- [root@proxy ~]# cp ifcfg-eth0 ifcfg-eth0:0
- [root@proxy ~]# vim ifcfg-eth0:0
TYPE=Ethernet #网卡类型为:以太网卡
BOOTPROTO=none #none手动配置IP,或者dhcp自动配置IP
NAME=eth0:0 #网卡名称
DEVICE=eth0:0 #设备名称
ONBOOT=yes #开机时是否自动激活该网卡
IPADDR=192.168.4.15 #IP地址
PREFIX=24 #子网掩码
- [root@proxy ~]# systemctl restart network #重启网络服务如果无法重启见常见问题
- [root@proxy ~]# ip a s #会看到一个网卡下面有两个IP地址
常见问题:RHEL7和Centos7系统中有两个管理网络的服务,有可能冲突
解决方法:关闭NetworkManager服务后重启network即可
设置Web1服务器网络参数(网卡名称ip a s 进行查看)
[root@web2 ~]# nmtui
也可以使用
- [root@web1 ~]# nmcli connection modify eth0 ipv4.method manual ipv4.addresses 192.168.4.100/24 connection.autoconnect yes
- [root@web1 ~]# nmcli connection up eth0 #开启网卡
给web1配置VIP地址
这里的子网掩码必须是32(也就是全255),网络地址与IP地址一样,广播地址与IP地址也一样
- [root@web1 ~]# cd /etc/sysconfig/network-scripts/
- [root@web1 ~]# cp ifcfg-lo ifcfg-lo:0
- [root@web1 ~]# vim ifcfg-lo:0
- DEVICE=lo:0 #设备名称
- IPADDR=192.168.4.15 #IP地址
- NETMASK=255.255.255.255 #子网掩码
- NETWORK=192.168.4.15 #网络地址
- BROADCAST=192.168.4.15 #广播地址
- ONBOOT=yes #开机是否激活本网卡
- NAME=lo:0 #网卡名称
防止地址冲突的问题:
这里因为web1也配置与调度器一样的VIP地址,默认肯定会出现地址冲突;
sysctl.conf文件写入这下面四行的主要目的就是访问192.168.4.15的数据包,只有调度器会响应,其他主机都不做任何响应,这样防止地址冲突的问题
- [root@web1 ~]# vim /etc/sysctl.conf #文件末尾手动写入如下4行内容,ignore(忽略、忽视),announce(宣告、广播通知)
- net.ipv4.conf.all.arp_ignore = 1
- net.ipv4.conf.lo.arp_ignore = 1
- net.ipv4.conf.lo.arp_announce = 2
- net.ipv4.conf.all.arp_announce = 2
- #当有arp广播问谁是192.168.4.15时,本机忽略该ARP广播,不做任何回应(防止进站冲突)
- #本机不要向外宣告自己的lo回环地址是192.168.4.15(防止出站冲突)
- [root@web1 ~]# sysctl -p
重启网络服务
- [root@web1 ~]# systemctl restart network #重启网络服务
- [root@web1 ~]# ip a s #会看到一个网卡下面有两个IP地址
常见错误:如果重启网络后未正确配置lo:0,有可能是NetworkManager和network服务有冲突,关闭NetworkManager后重启network即可。(非必须的操作)
- [root@web1 ~]# systemctl stop NetworkManager
- [root@web1 ~]# systemctl restart network
web2配置VIP地址
这里的子网掩码必须是32(也就是全255),网络地址与IP地址一样,广播地址与IP地址也一样
- [root@web2 ~]# cd /etc/sysconfig/network-scripts/
- [root@web2 ~]# cp ifcfg-lo ifcfg-lo:0
- [root@web2 ~]# vim ifcfg-lo:0
- DEVICE=lo:0 #设备名称
- IPADDR=192.168.4.15 #IP地址
- NETMASK=255.255.255.255 #子网掩码
- NETWORK=192.168.4.15 #网络地址
- BROADCAST=192.168.4.15 #广播地址
- ONBOOT=yes #开机是否激活该网卡
- NAME=lo:0 #网卡名称
防止地址冲突的问题:
这里因为web1也配置与调度器一样的VIP地址,默认肯定会出现地址冲突;
sysctl.conf文件写入这下面四行的主要目的就是访问192.168.4.15的数据包,只有调度器会响应,其他主机都不做任何响应,这样防止地址冲突的问题。
- [root@web2 ~]# vim /etc/sysctl.conf #手动写入如下4行内容,ignore(忽略、忽视),announce(宣告、广播通知)
- net.ipv4.conf.all.arp_ignore = 1
- net.ipv4.conf.lo.arp_ignore = 1
- net.ipv4.conf.lo.arp_announce = 2
- net.ipv4.conf.all.arp_announce = 2
- #当有arp广播问谁是192.168.4.15时,本机忽略该ARP广播,不做任何回应(防止进站冲突)
- #本机不要向外宣告自己的lo回环地址是192.168.4.15(防止出站冲突)
- [root@web2 ~]# sysctl -p
重启网络服务
- [root@web2 ~]# systemctl restart network #重启网络服务
- [root@web2 ~]# ip a s #会看到一个网卡下面有两个IP地址
常见错误:如果重启网络后未正确配置lo:0,有可能是NetworkManager和network服务有冲突,关闭NetworkManager后重启network即可。(非必须的操作)
- [root@web1 ~]# systemctl stop NetworkManager
- [root@web1 ~]# systemctl restart network
proxy调度器安装软件并部署LVS-DR模式调度器
安装软件(如果已经安装,此步骤可以忽略)
[root@proxy ~]# yum -y install ipvsadm
清理之前实验的规则,创建新的集群服务器规则
[root@proxy ~]# ipvsadm -C #清空所有规则
[root@proxy ~]# ipvsadm -A -t 192.168.4.15:80 -s wrr
- # -A(add)是创建添加虚拟服务器集群
- # -t(tcp)后面指定集群VIP的地址和端口,协议是tcp协议
- # -s后面指定调度算法,如rr(轮询)、wrr(加权轮询)、lc(最少连接)、wlc(加权最少连接)等等
添加真实服务器(-g参数设置LVS工作模式为DR模式,-w设置权重)
- [root@proxy ~]# ipvsadm -a -t 192.168.4.15:80 -r 192.168.4.100 -g -w 1
- [root@proxy ~]# ipvsadm -a -t 192.168.4.15:80 -r 192.168.4.200 -g -w 1
- #-a(add)往虚拟服务器集群中添加后端真实服务器IP,指定往-t 192.168.4.15:80这个集群中添加
- #-r(real)后面跟后端真实服务器的IP和端口,这里不写端口默认是80端口
- #-w(weight)指定服务器的权重,权重越大被访问的次数越多,weight(重量,分量)
- #-m指定集群工作模式为NAT模式,如果是-g则代表使用DR模式,-i代表TUN模式
查看规则列表(L代表list查看规则,n代表number数字格式显示)
- [root@proxy ~]# ipvsadm -Ln
- TCP 192.168.4.15:80 wrr
- -> 192.168.4.100:80 Route 1 0 0
- -> 192.168.4.200:80 Route 1 0 0
客户端测试
客户端使用curl命令反复连接http://192.168.4.15,查看访问的页面是否会轮询到不同的后端真实服务器。
注意:本实验不可以在proxy主机(LVS调度器)使用curl访问网页验证!!!
[root@client ~]# curl http://192.168.4.15
192.168.2.100
[root@client ~]# curl http://192.168.4.15
192.168.2.200
proxy调度器安装软件并部署LVS-DR模式调度器
安装软件
[root@proxy ~]# yum -y install ipvsadm
清理之前实验的规则,创建新的集群服务器规则
- [root@proxy ~]# ipvsadm -C #清空所有规则
- [root@proxy ~]# ipvsadm -A -t 192.168.4.15:80 -s wrr
- # -A(add)是创建添加虚拟服务器集群
- # -t(tcp)后面指定集群VIP的地址和端口,协议是tcp协议
- # -s后面指定调度算法,如rr(轮询)、wrr(加权轮询)、lc(最少连接)、wlc(加权最少连接)等等
添加真实服务器(-g参数设置LVS工作模式为DR模式,-w设置权重)
- [root@proxy ~]# ipvsadm -a -t 192.168.4.15:80 -r 192.168.4.100 -g -w 1
- [root@proxy ~]# ipvsadm -a -t 192.168.4.15:80 -r 192.168.4.200 -g -w 1
- #-a(add)往虚拟服务器集群中添加后端真实服务器IP,指定往-t 192.168.4.15:80这个集群中添加
- #-r(real)后面跟后端真实服务器的IP和端口,这里不写端口默认是80端口
- #-w(weight)指定服务器的权重,权重越大被访问的次数越多,weight(重量,分量)
- #-m指定集群工作模式为NAT模式,如果是-g则代表使用DR模式,-i代表TUN模式
查看规则列表(L代表list查看规则,n代表number数字格式显示)
- [root@proxy ~]# ipvsadm -Ln
- TCP 192.168.4.15:80 wrr
- -> 192.168.4.100:80 Route 1 0 0
- -> 192.168.4.200:80 Route 1 0 0
客户端使用curl命令反复连接http://192.168.4.15,查看访问的页面是否会轮询到不同的后端真实服务器。
注意:本实验不可以在proxy主机(LVS调度器)使用curl访问网页验证!!!
默认LVS不带健康检查功能,需要自己手动编写动态检测脚本,实现该功能
- [root@proxy ~]# vim check.sh
- #!/bin/bash
- VIP=192.168.4.15:80
- RIP1=192.168.4.100
- RIP2=192.168.4.200
- while :
- do
- for IP in $RIP1 $RIP2
- do
- curl -s http://$IP &>/dev/null
- if [ $? -eq 0 ];then
- ipvsadm -Ln |grep -q $IP || ipvsadm -a -t $VIP -r $IP
- else
- ipvsadm -Ln |grep -q $IP && ipvsadm -d -t $VIP -r $IP
- fi
- done
- sleep 1
- done