一、环境说明:
系统环境:ubuntu14.04
lvs服务器:10.36.1.55/10.36.1.56
真实服务器:10.36.1.55/10.36.1.56 在这里也充当mysql和zabbix角色
VIP:10.36.1.101
部署目的:
1、访问VIP的3306端口,可以将请求报文转发至10.36.1.55-56上进行负载
2、zabbix agent向VIP的10051端口上报采集数据的时候,可以将请求报文转发至10.36.1.55-56上进行负载
3、向VIP访问80端口(zabbix web管理界面)的时候,可以将请求报文转发至10.36.1.55-56上进行负载
二、安装LVS(两台服务器都要安装)
apt-get -y install ipvsadm
查看版本
ipvsadm -v
查看是否已加载进内核模块中
lsmod | grep ip_vs
#查看lvs规则
ipvsadm -L -n
#查看连接情况
ipvsadm -L -c
三、配置LVS VIP服务
说明:-A是添加一条虚拟服务器记录,即VIP。此处配置要选择算法
ipvsadm -A -t 10.36.1.101 -s wrr -p 300 #代理转发所有去往该IP TCP的报文,-s指定算法wrr为加权轮询算法,-p会话保持时间(默认值是300s)
ipvsadm -A -t 10.36.1.101:80 -s wrr -p 20 #代理转发去往该IP TCP80端口的报文
ipvsadm -A -t 10.36.1.101:3306 -s wrr -p 20
ipvsadm -A -t 10.36.1.101:10051 -s wrr -p 20
四、VIP维护
使用-E修改VIP设置
例:ipvsadm -E -t 10.36.1.101 -s wrr -p 40 #可修改会话保持时间与算法。
使用-D删除VIP设置
例:ipvsadm -D -t 10.36.1.101 #删除该条VIP
五、配置LVS RIP规则
-a是添加VIP要对哪些真实服务器IP(即RIP)进行负载(默认是DR模式即-g)。
我这里的LVS服务器也充当了真是服务器
ipvsadm -a -t 10.36.1.101 -r 10.36.1.55 -g -w 1 #-r指定真实服务器IP,-g为选择DR模式(-m为NAT模式,-t为tunnel模式),-w选择权重。
ipvsadm -a -t 10.36.1.101 -r 10.36.1.56 -g -w 1
#如果只对tcp 80端口进行负载,可使用如下命令:
ipvsadm -a -t 10.36.1.101:80 -r 10.36.1.55:80 -g -w 1
ipvsadm -a -t 10.36.1.101:80 -r 10.36.1.56:80 -g -w 1
ipvsadm -a -t 10.36.1.101:3306 -r 10.36.1.55:3306 -g -w 1
ipvsadm -a -t 10.36.1.101:3306 -r 10.36.1.56:3306 -g -w 1
ipvsadm -a -t 10.36.1.101:10051 -r 10.36.1.55:10051 -g -w 1
ipvsadm -a -t 10.36.1.101:10051 -r 10.36.1.56:10051 -g -w 1
RIP维护:
使用-e修改RIP配置
例:ipvsadm -e -t 10.36.1.101 -r 10.36.1.55 -g -w 4 #修改这条RIP规则的权重。
使用-d删除RIP配置
例:ipvsadm -d -t 10.36.1.101 -r 10.36.1.55 -g -w 1 #删除该条RIP配置
六、在真实服务器上配置VIP
在两台真实服务器上都配置上VIP,即10.36.1.101地址。
ifconfig lo:0 10.36.1.101 netmask 255.255.255.255
七、在真实服务器上关闭ARP响应
关闭真实服务器上loop口的arp回应,其它口的无须关闭。
默认arp_ignore和arp_announce的参数都是0,即回应所有目的IP是本机的arp请求。
在所有真实服务器上进行如下操作:
echo "1">/proc/sys/net/ipv4/conf/all/arp_ignore #只回答目标IP地址是来访网络接口本地地址的ARP查询请求。
echo "2">/proc/sys/net/ipv4/conf/all/arp_announce #对查询目标使用最适当的本地地址。
#此处可以进行测试,在测抑制arp前,能ping通VIP地址。在抑制arp后,在前端交换机上清掉arp缓存,再ping VIP就不通了。但物理eth0网卡IP还是能通的。
arp含义参考地址:http://www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
接下来在lvs上配置VIP:
ifconfig lo:0 10.36.1.101 netmask 255.255.255.255 (注意,我这里是LVS和业务服务器都跑一起了,所以配置一次即可)
八、开启内核转发功能
在lvs上开启内核转发功能。
echo 'net.ipv4.ip_forward=1' >>/etc/sysctl.conf
sysctl -p #查看配置
9、LVS测试
#查看lvs规则
ipvsadm -L -n
#查看连接情况
ipvsadm -L -c
至此lvs搭建成功。
说明:以上配置系统重启以后无效,需重新配置一遍
10、配置好后,那么目前的lvs面临有哪些问题呢?
1、自身无法对真实服务器保活,如果出现服务器down情况,还会向down的服务器转发请求。解决方法是keepalived或自已写脚本来监测连通性再清除相应规则。
系统环境:ubuntu14.04
lvs服务器:10.36.1.55/10.36.1.56
真实服务器:10.36.1.55/10.36.1.56 在这里也充当mysql和zabbix角色
VIP:10.36.1.101
部署目的:
1、访问VIP的3306端口,可以将请求报文转发至10.36.1.55-56上进行负载
2、zabbix agent向VIP的10051端口上报采集数据的时候,可以将请求报文转发至10.36.1.55-56上进行负载
3、向VIP访问80端口(zabbix web管理界面)的时候,可以将请求报文转发至10.36.1.55-56上进行负载
二、安装LVS(两台服务器都要安装)
apt-get -y install ipvsadm
查看版本
ipvsadm -v
查看是否已加载进内核模块中
lsmod | grep ip_vs
#查看lvs规则
ipvsadm -L -n
#查看连接情况
ipvsadm -L -c
三、配置LVS VIP服务
说明:-A是添加一条虚拟服务器记录,即VIP。此处配置要选择算法
ipvsadm -A -t 10.36.1.101 -s wrr -p 300 #代理转发所有去往该IP TCP的报文,-s指定算法wrr为加权轮询算法,-p会话保持时间(默认值是300s)
ipvsadm -A -t 10.36.1.101:80 -s wrr -p 20 #代理转发去往该IP TCP80端口的报文
ipvsadm -A -t 10.36.1.101:3306 -s wrr -p 20
ipvsadm -A -t 10.36.1.101:10051 -s wrr -p 20
四、VIP维护
使用-E修改VIP设置
例:ipvsadm -E -t 10.36.1.101 -s wrr -p 40 #可修改会话保持时间与算法。
使用-D删除VIP设置
例:ipvsadm -D -t 10.36.1.101 #删除该条VIP
五、配置LVS RIP规则
-a是添加VIP要对哪些真实服务器IP(即RIP)进行负载(默认是DR模式即-g)。
我这里的LVS服务器也充当了真是服务器
ipvsadm -a -t 10.36.1.101 -r 10.36.1.55 -g -w 1 #-r指定真实服务器IP,-g为选择DR模式(-m为NAT模式,-t为tunnel模式),-w选择权重。
ipvsadm -a -t 10.36.1.101 -r 10.36.1.56 -g -w 1
#如果只对tcp 80端口进行负载,可使用如下命令:
ipvsadm -a -t 10.36.1.101:80 -r 10.36.1.55:80 -g -w 1
ipvsadm -a -t 10.36.1.101:80 -r 10.36.1.56:80 -g -w 1
ipvsadm -a -t 10.36.1.101:3306 -r 10.36.1.55:3306 -g -w 1
ipvsadm -a -t 10.36.1.101:3306 -r 10.36.1.56:3306 -g -w 1
ipvsadm -a -t 10.36.1.101:10051 -r 10.36.1.55:10051 -g -w 1
ipvsadm -a -t 10.36.1.101:10051 -r 10.36.1.56:10051 -g -w 1
RIP维护:
使用-e修改RIP配置
例:ipvsadm -e -t 10.36.1.101 -r 10.36.1.55 -g -w 4 #修改这条RIP规则的权重。
使用-d删除RIP配置
例:ipvsadm -d -t 10.36.1.101 -r 10.36.1.55 -g -w 1 #删除该条RIP配置
六、在真实服务器上配置VIP
在两台真实服务器上都配置上VIP,即10.36.1.101地址。
ifconfig lo:0 10.36.1.101 netmask 255.255.255.255
七、在真实服务器上关闭ARP响应
关闭真实服务器上loop口的arp回应,其它口的无须关闭。
默认arp_ignore和arp_announce的参数都是0,即回应所有目的IP是本机的arp请求。
在所有真实服务器上进行如下操作:
echo "1">/proc/sys/net/ipv4/conf/all/arp_ignore #只回答目标IP地址是来访网络接口本地地址的ARP查询请求。
echo "2">/proc/sys/net/ipv4/conf/all/arp_announce #对查询目标使用最适当的本地地址。
#此处可以进行测试,在测抑制arp前,能ping通VIP地址。在抑制arp后,在前端交换机上清掉arp缓存,再ping VIP就不通了。但物理eth0网卡IP还是能通的。
arp含义参考地址:http://www.cnblogs.com/lgfeng/archive/2012/10/16/2726308.html
接下来在lvs上配置VIP:
ifconfig lo:0 10.36.1.101 netmask 255.255.255.255 (注意,我这里是LVS和业务服务器都跑一起了,所以配置一次即可)
八、开启内核转发功能
在lvs上开启内核转发功能。
echo 'net.ipv4.ip_forward=1' >>/etc/sysctl.conf
sysctl -p #查看配置
9、LVS测试
#查看lvs规则
ipvsadm -L -n
#查看连接情况
ipvsadm -L -c
至此lvs搭建成功。
说明:以上配置系统重启以后无效,需重新配置一遍
10、配置好后,那么目前的lvs面临有哪些问题呢?
1、自身无法对真实服务器保活,如果出现服务器down情况,还会向down的服务器转发请求。解决方法是keepalived或自已写脚本来监测连通性再清除相应规则。
2、一台LVS服务器会出现单点故障,需要有备份LVS服务器,解决方法是keepalived来进行LVS故障接管。
本文转自 TtrToby 51CTO博客,原文链接:http://blog.51cto.com/freshair/1880919