LVS负载均衡集群
实验一:负载均衡集群企业级应用实战-LVS-nat模式:
一、环境准备:一台centos系统做DR、两台实现过基于LNMP的电子商务网站
机器名称 IP配置服务角色备注
lvs-server VIP:172.17.252.91 负载均衡器开启路由功能(VIP桥接、DIP仅主机)
DIP:192.168.59.131
lnmp-server01 RIP:192.168.59.133 后端服务器 网关指向DIP(仅主机)
lnmp-server02 RIP:192.168.58.134 后端服务器 网关指向DIP(仅主机)
先测试一下两台后端服务器都可以正常打开网站
二、安装步骤:
1.yum install ipvsadm -y #在LVS-server安装lvs管理软件
2、grep -i -C 10 "ipvs" /boot/config-VERSION-RELEASE.x86_64,#查看内核是否支持ipvs模块
3、iptables -F && setenforing 清空防火墙策略,关闭selinux
三、配置基于NAT模式的LVS负载均衡集群:
lvs-server配置
1、ipvsadm -A -t 172.17.252.91:80 -s wrr
#开启一个基于80端口的虚拟服务,调度方式为wrr
2、ipvsadm -a -t 172.17.252.91:80 -r 192.168.59.133:80 -m -w 1
#配置web服务后端realserver01为nat工作方式 权重为1
3、ipvsadm -a -t 172.17.252.91:80 -r 192.168.59.134:80 -m -w 1
#配置web服务后端realserver02为nat工作方式 权重为1
配完之后可以用ipvsadm-L -n查看一下
4、修改内核配置,开启路由转发
vim/etc/sysctl.conf 编辑配置文件,添加net.ipv4.ip_forward=1
保存退出后,运行sysctl -p 使其生效
real server配置
配置网关指向192.168.59.131,开启web、php-fpm、mysql服务
route add default gw 192.168.59.131
server01、server02都配上这句代码
四、LVS集群部署和验证
1、可分别在rs1和rs2建立2个不同内容,统一路径的test.html测试文件,测试负载均衡功能
2、打开http://VIP/index.php ,并在director上用ipvsadm -L -n观察访问连接
3、用另外一台测试机,用ab压力测试工具,测试经过负载均衡后的服务器容量
4、总结整体实验过程,并写成博客
实验二:负载均衡集群企业级应用实战-LVS-DR模式:
一、环境准备:一台centos系统做DR、三台实现过基于LNMP的电子商务网站
机器名称 IP配置服务角色备注
lvs-server VIP:172.17.250.121 负载均衡器开启路由功能(VIP桥接、DIP仅主机)
DIP:192.168.59.131
lnmp-server01 RIP:172.17.251.179 后端服务器 网关指向DIP(桥接)
lo:VIP:172.17.250.121
lnmp-server02 RIP:172.17.253.73 后端服务器 网关指向DIP(桥接)
lo:VIP:172.17.250.121
二、安装步骤:
1.yum install ipvsadm -y #在LVS-server安装lvs管理软件
2、grep -i -C 10 "ipvs"/boot/config-VERSION-RELEASE.x86_64,#查看内核是否支持ipvs模块
3、iptables -F && setenforing 清空防火墙策略,关闭selinux
三、配置基于DR模式的LVS负载均衡集群:
lvs-server配置:
1、配置VIP到本地网卡别名
ifconfigens33:0 172.17.250.121 broadcast 172.17.252.91 netmask 255.255.255.255 up
#配置VIP到本地网卡eth0:0上,并只广播自己
routeadd -host 172.17.250.121 dev ens33:0
#配置VIP路由
2、ipvsadm -A -t 172.17.250.121:80 -s wrr
#开启一个基于80端口的虚拟服务,调度方式为wrr
3、ipvsadm -a -t 172.17.250.121:80 -r172.17.251.179:80-g -w 1
#配置web服务后端realserver 为DR工作方式 权重为1
4、ipvsadm -a -t 172.17.250.121:80 -r172.17.253.73:80-g -w 1
#配置web服务后端realserver 为DR工作方式 权重为1
配完之后可以用ipvsadm-L -n查看一下
5、修改内核配置,开启路由转发
#vim /etc/sysctl.conf 修改 net.ipv4.ip_forward=1
#sysctl -p 使其生效
real server配置(两台都一样):
ifconfiglo:0 172.17.250.121 broadcast 172.17.250.121 netmask 255.255.255.255 up
#配置VIP到本地回环网卡lo上,并只广播自己
routeadd -host 172.17.250.121 lo:0
#配置本地回环网卡路由
echo"1" >/proc/sys/net/ipv4/conf/lo/arp_ignore
#1 只回答目标IP地址是来访网络接口本地地址的ARP查询请求
echo"2" >/proc/sys/net/ipv4/conf/lo/arp_announce
#2 对查询目标使用最适当的本地地址.在此模式下将忽略这个IP数据包的源地址并尝试选择与能与该地址通信的本地地址.
echo"1" >/proc/sys/net/ipv4/conf/all/arp_ignore
echo"2" >/proc/sys/net/ipv4/conf/all/arp_announce
#关闭arp应答
1: 仅在请求的目标IP配置在本地主机的接收到请求报文的接口上时,才给予响应
2:必须避免将接口信息向非本网络进行通告
开启web、php-fpm、mysql服务
四、LVS集群部署和效果验证
1、可分别在rs1和rs2建立2个不同内容,统一路径的test.html测试文件,测试负载均衡功能
2、打开http://VIP/index.php ,并在director上用ipvsadm -L -n观察访问连接
3、用另外一台测试机,用ab压力测试工具,测试经过负载均衡后的服务器容量
实现LVS持久连接
功能:无论ipvs使用何种scheduler,其都能够实现在指定时间范围内始终将来自同一个ip地址的请求发往同一个RS;此功能是通过lvs持久连接模板实现,其与调度方法无关;
(在上一个DR实验的基础上:)
iptables -t mangle -APREROUTING -d 172.17.250.121 -p tcp --dport 80 -j MARK--set-mark 99
#在iptables打上标记,把80端口标记为99
iptables -t mangle -APREROUTING -d 172.17.250.121 -p tcp --dport 443 -j MARK--set-mark 99
#在iptables打上标记,把443端口标记为99
ipvsadm -A -f99 -s wrr -p
#在lvs上建立基于99号标记的虚拟服务
ipvsadm -a -f99 -r 172.17.251.179 -g
ipvsadm -a -f99 -r 172.17.253.73 -g
#设置后端服务地址
配完可以查看一下
实现LVS健康状态监测功能
ldirectord:监控和控制LVS守护进程,可管理LVS规则
软件包名称:ldirectord-3.9.6-0rc1.1.1.x86_64.rpm
先下载安装包
将软件包本地安装
软件包组成:
/etc/ha.d/ldirectord.cf 主配置文件
/usr/share/doc/ldirectord-3.9.6/ldirectord.cf 配置模版
/usr/lib/systemd/system/ldirectord.service 服务
/usr/sbin/ldirectord 主程序
/var/log/ldirectord.log 日志
/var/run/ldirectord.ldirectord.pid pid文件
首先在两个realserver上分别建立ok页面:
然后安装ldirectord,安装好之后查看一下
将模板拷贝到/etc/ha.d/下
然后编辑配置文件
Ldirectord配置文件详解
checktimeout=3 #超时时间 单位是秒
checkinterval=1 #检查频率
autoreload=yes # 此项用来定义ldirectord是否每隔一段时间检查此配置文件是否发生改变并自动重新加载;
logfile=“/var/log/ldirectord.log“ #日志文件
quiescent=no #down时yes权重为0,no为删除
virtual=172.16.0.1 #指定VS的FWM或IP:port
real=172.16.0.7:80gate 2
real=172.16.0.8:80gate 1
fallback=127.0.0.1:80gate #sorry server
service=http
scheduler=wrr
checktype=negotiate #ldirectord进程用于监控RealServer的方法
checkport=80 #检查端口
request="index.html" #检查页面
receive=“Test" #检查内容
清空之前的ipvsadm,然后启动服务
查看一下ipvsadm:
访问ok页面
那现在我们将lnmp-server01的服务停止
再看一下ipvsadm,自动将那个服务器踢出去了
查看日志
然后我们再把服务启动起来
查看一下ipvsadm,又自动加回来了