AI 助理
备案控制台
开发者社区 开发与运维 文章 正文

ldirectord 结合ipvsadm 配置nat,dr模型

2018-02-28 1442
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
公网NAT网关，每月750个小时 15CU
简介： ldirectord ipvsadm nat dr linux 高可用

title: ldirectord+ipvsadm之nat/dr模型的实现
date: 2017-10-26 15:37:29

tags:

ldirectord 结合ipvsadm 配置nat,dr模型

一、nat模型

  • drector
# wget ftp://172.16.0.1/pub/Sources/7.x86_64/crmsh/ldirectord-3.9.6-0rc1.1.1.x86_64.rpm
# yum -y install nginx (同时用于做为sorry主机)
# yum -y install ldirectord-3.9.6-0rc1.1.1.x86_64.rpm
# echo “sorry, the service is down for maintenance, is recovering” > /usr/share/nginx/html/index.html

主机为两块网卡， 一个是桥接，一个仅主机 (其中仅主机的配置静态地址为192.16.0.5)

  • 开启核心转发功能
# echo 1 > /proc/sys/net/ipv4/ip_forward 
nodeff1
# yum -y install httpd 
# echo “<h1>RS1</h1>” > /var/www/html/index.html

主机为一块网卡，仅主机（配置静态地址为192.16.0.2）

网关指向 192.16.0.5

# route add default gw 192.16.0.5 
node2   
# yum -y install nginx 
# echo “<h1>RS2</h1>” > /var/www/html/index.html

主机为一块网卡，仅主机（配置静态地址为192.16.0.3）

网关指向 192.16.0.5

# route add default gw 192.16.0.5

directory 此时:可以在drector主机上进行测试，

# curl 192.16.0.2 返回RS1 
# curl 192.16.0.3 返回RS2

directory 使用ipvsadm指定调度算法及调度主机；

# ipvsadm -A -t 172.16.250.89:80 -wrr 
# ipvsadm -a -t 172.16.250.89:80 -r 192.16.0.2:80 -m -w 3 
# ipvsadm -a -t 172.16.250.89:80 -r 192.16.0.3:80 -m -w 1

在别的主机中测试结果

# for i in {1..4} ; do curl 172.16.250.89; done 
<h1>RS1</h1>
<h1>RS2</h2>
<h1>RS1</h1>
<h1>RS1</h1>
# 将规则保存 ipvsadm -S > /etc/sysconfig/ipvsadm
  • directory 配置ldirectord
# cp /usr/share/doc/ldirectord-3.9.6/ldirectord.cf /etc/ha.d/ldirectord.cf 
# vim /etc/ha.d/ldirectord.cf 
checktimeout=3
checkinterval=1
fallback=127.0.0.1:80
autoreload=yes
logfile=”/var/log/ldirectord.log”
quiescent=no
virtual=172.16.250.89:80 
real=192.16.0.2:80 masq 1
real=192.16.0.3:80 masq 3
fallback=127.0.0.1:80 masq
service=http
scheduler=wrr
protocol=tcp
checktype=negotiate
checkport=80

注：virtual:172.16.250.89:80 ，后面需要指定端口，否则protocol=tcp指定启动时会报错

real=192.16.0.2:80 masq 因为上面配置的为nat模型，所以此处使用masq

fallback=172.0.0.1:80 此处便是nginx的sorry server,但所有结点都停掉时，会向用户提供一个sorry server

# systemctl start ldirectord 
# ipvsadm -Ln 查看结点 
在别的主机中测试 
#for i in {1..4} ; do curl 172.16.250.89; done 
<h1>RS2</h2>
<h1>RS1</h1>
<h1>RS2</h2>
<h1>RS2</h2>
node1,node2 将两个结点手动停掉
# systemctl stop httpd  在测试主机中会返回sorry信息

二、dr 模型

  • directory ,node1 ,node2 三台主机都是一块网块， 并且网卡都为桥接，且node1,nod2，不需要指定网关

编写脚本

#vim setkp.sh 
#!/bin/bash 
vip=172.16.252.166
mask=255.255.255.255
interface=’lo:0′
eth=’eno16777736:0′ 
case $1 in 
start) 
echo 1 > /proc/sys/net/ipv4/conf/all/arp_ignore
echo 1 > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo 2 > /proc/sys/net/ipv4/conf/all/arp_announce
echo 2 > /proc/sys/net/ipv4/conf/lo/arp_announce
ifconfig $interface $vip netmask $mask broadcast $vip up 
route add -host $vip dev $interface 
;; 
dstart) 
ifconfig $eth $vip/32 netmask $mask broadcast $vip up
;;
dstop)
ifconfig $eth down
;;
stop)
ifconfig $interface down 
echo 0 > /proc/sys/net/ipv4/conf/all/arp_ignore
echo 0 > /proc/sys/net/ipv4/conf/lo/arp_ignore
echo 0 > /proc/sys/net/ipv4/conf/all/arp_announce
echo 0 > /proc/sys/net/ipv4/conf/lo/arp_announce
;; 
status) 
ifconfig 
cat /proc/sys/net/ipv4/conf/all/arp_ignore
cat /proc/sys/net/ipv4/conf/lo/arp_ignore
cat /proc/sys/net/ipv4/conf/all/arp_announce
cat /proc/sys/net/ipv4/conf/lo/arp_announce
;; 
*)
echo “Usage: $(basename $0) {dstart|dstop|start|stop}”
exit 1 
esac

在director主机中执行

# sh setkp.sh dstart 
# sh setkp.sh status 查看状态
# scp setkp.sh 172.16.251.232:/root
# scp setkp.sh 172.16.251.191:/root 
# ipvsadm -A -t 172.16.252.166:http -s wrr
# ipvsadm -a -t 172.16.252.166:http -r 172.16.251.232:http -g -w 1
# ipvsadm -a -t 172.16.252.166:http -r 172.16.251.191:http -g -w 3
# systemctl start nginx 
# echo “Sorry Page” > /usr/share/nginx/html/index.html

在node1主机中执行

# sh setkp.sh start 
# sh setkp.sh status 
# systemctl start httpd 
echo “<h1>NODE1</h1>” > /var/www/html/index.html

在node2主机中执行

# sh setkp.sh start
# sh setkp.sh status 
# systemctl start httpd 
echo “<h2>NODE2</h2>” > /var/www/html/index.html

在其它主机中进行测试

#for i in {1..4} ; do curl 172.16.252.166; done 
<h1>RS1</h2>
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>
  • ldirectord配置
# cat /etc/ha.d/ldirectord.cf | grep -v  “^[[:space:]]*#” | grep -v “^[[:space:]]*$” 
# vim /etc/ha.d/ldirectord.cf 
checktimeout=3
checkinterval=1
fallback=127.0.0.1:80
autoreload=yes
logfile=”/var/log/ldirectord.log”
quiescent=no
virtual=172.16.252.166:80
real=172.16.251.191:80 gate 1
real=172.16.251.232:80 gate 3
fallback=127.0.0.1:80 gate
service=http
scheduler=wrr
protocol=tcp
checktype=negotiate
checkport=80
# systemctl start ldirectord

在其它主机中进行测试

# for i in {1..4} ; do curl 172.16.252.166; done 
<h1>RS1</h2>
<h1>RS1</h2>
<h1>RS2</h2>
<h1>RS1</h2>
当主机所有结点都停止服务时 （node1,node2）
# systemctl stop httpd 
# for i in {1..4} ; do curl 172.16.252.166; done 
Sorry Page
Sorry Page
Sorry Page
Sorry Page
  • 借助防火墙标记来分类报文,而后标记定义集群服务，这样不同的服务可以使用一个集群进行调度,并启用持久连接
  • 将两台node结点启动
# systemctl start httpd

在director主机中配置

# iptables -t mangle -A PREROUTING -d 172.16.252.166 -p tcp -m multiport –dport 80,443 -j MARK –set-mark 10 为端口打标记 
# ipvsadm -A -f 10 -s rr -p 360
# ipvsadm -a -f 10 -r 172.16.251.191:0 -g -w 1
# ipvsadm -a -f 10 -r 172.16.251.232:0 -g -w 1

在其它主机中进行测试

# for i in {1..5} ; do curl 172.16.252.166; done 
<h1>RS1</h2>
<h1>RS1</h2>
<h1>RS1</h2>
<h1>RS1</h2>
<h1>RS1</h2>

在两台node结点上建立https服务

nod1 
# mkdir /etc/httpd/cacert 
# cd /etc/httpd/cacert 
# (umask 066;openssl genrsa -out httpd.key 1024)
# openssl req -new -key httpd.key  -out httpd.crt -days 7200
# scp httpd.csr 172.16.252.162:/root

在director主机中生成自签证书

# echo 01 > /etc/pki/CA/serial
# touch /etc/pki/CA/index.txt 
# cd /etc/pki/CA/
# (umask 077; openssl genrsa -out /etc/pki/CA/private/cakey.pem 2048)
# openssl req -new -x509 -key /etc/pki/CA/private/cakey.pem -days 7300 -out /etc/pki/CA/cacert.pem
# openssl ca -in /root/httpd.csr  -out /tmp/httpd.crt
# scp /tmp/httpd.crt  172.16.251.232:/root
# scp /etc/pki/CA/cacert.pem  172.16.250.69:/root
node2  
# mkdir /etc/httpd/cacert
node1  
# cd /etc/httpd/cacert/ && scp * 172.16.251.191:/etc/httpd/cacert/ 
nod1,node1 
# vim /etc/httpd/conf.d/ssl.conf  
修改 : SSLCertificateFile /etc/httpd/cacert/httpd.crt
SSLCertificateKeyFile /etc/httpd/cacert/httpd.key 
# systemctl restart httpd

在其它主机中进行测试:

# vim /etc/hosts 
加入 : 172.16.252.166  www.rj.com

测试https与http的持久连接

# for i in {1..4} ;do curl –cacert /root/cacert.pem https://www.rj.com && curl http://www.rj.com ; done 
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>
<h1>RS2</h2>

在 ldirectord 中实现

driector  
# vim /etc/ha.d/ldirectord.cf 
checktimeout=3
checkinterval=1
fallback=127.0.0.1:80
autoreload=yes
logfile=”/var/log/ldirectord.log”
quiescent=no
virtual=10
real=172.16.251.191:80 gate 1
real=172.16.251.232:80 gate 3
fallback=127.0.0.1:80 gate
service=http
scheduler=wrr
checktype=negotiate
checkport=80
# systemctl start ldirectord
# ipvsadm -Ln

在其它主机中进行测试

# for i in {1..4} ;do curl –cacert /root/cacert.pem https://www.rj.com && curl http://www.rj.com ; done 
<h1>RS1</h2>
<h1>RS2</h2>
<h1>RS1</h2>
<h1>RS1</h2>
<h1>RS1</h2>
<h1>RS2</h2>
<h1>RS1</h2>
<h1>RS1</h2>
文章标签：
NAT网关
Shell
测试技术
应用服务中间件
索引
Web App开发
关键词：
NAT网关配置
NAT网关模型
配置NAT网关
NAT网关dr
NAT网关dr模型
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发，帮助IT从业者们通过“阿里云Web应用上云解决方案”，了解一个企业级Web应用上云的常见架构，了解如何构建一个高可用、可扩展的企业级应用架构。
ssjinyao
目录
相关文章
土木林森
|
11天前
|
存储 网络协议 安全
30 道初级网络工程师面试题，涵盖 OSI 模型、TCP/IP 协议栈、IP 地址、子网掩码、VLAN、STP、DHCP、DNS、防火墙、NAT、VPN 等基础知识和技术，帮助小白们充分准备面试，顺利踏入职场
本文精选了 30 道初级网络工程师面试题，涵盖 OSI 模型、TCP/IP 协议栈、IP 地址、子网掩码、VLAN、STP、DHCP、DNS、防火墙、NAT、VPN 等基础知识和技术，帮助小白们充分准备面试，顺利踏入职场。
土木林森
36 2
可惜已不在
|
1月前
|
网络协议 安全 网络安全
Cisco-网络端口地址转换NAPT配置
Cisco-网络端口地址转换NAPT配置
可惜已不在
52 1
hy151217
|
6月前
|
Linux 虚拟化
VMware workstation 中centos7虚拟机在nat模式下怎么配置网卡，指定我想要的IP并且可以联网
https://blog.csdn.net/2302_78534730/article/details/132825156?spm=1001.2014.3001.5502
hy151217
308 0
工程师阿龙
|
3月前
|
安全 网络安全 数据安全/隐私保护
手把手教你用eNSP模拟器配置防火墙源NAT
手把手教你用eNSP模拟器配置防火墙源NAT
工程师阿龙
415 4
游客mldfis24krfue
|
3月前
|
负载均衡 算法 Linux
在Linux中，LVS-NAT模型的特性是什么？
在Linux中，LVS-NAT模型的特性是什么？
游客mldfis24krfue
40 0
爱你三千遍斯塔克
|
4月前
|
Linux 网络安全 虚拟化
Ngnix04系统环境准备-上面软件是免费版的，下面是收费版的，他更快的原因使用了epoll模型，查看当前Linux系统版本, uname -a，VMWARE建议使用NAT，PC端电脑必须使用网线连接
Ngnix04系统环境准备-上面软件是免费版的，下面是收费版的，他更快的原因使用了epoll模型，查看当前Linux系统版本, uname -a，VMWARE建议使用NAT，PC端电脑必须使用网线连接
爱你三千遍斯塔克
38 0
神秘泣男子
|
6月前
ENSP Nat地址转换（配置命令 ）
ENSP Nat地址转换（配置命令 ）
神秘泣男子
187 1
神秘泣男子
|
6月前
|
安全 数据安全/隐私保护 网络架构
ensp中nat地址转换(静态nat 动态nat NAPT 和Easy IP)配置命令
ensp中nat地址转换(静态nat 动态nat NAPT 和Easy IP)配置命令
神秘泣男子
609 0
qrhd2xnviwjz6
|
6月前
|
弹性计算 Linux 网络安全
三步搭建VPC专有网络NAT网关，配置SNAT和DNAT规则（补充版）
申明：该文档参考于用户 “帅宝宝”的文档进行的优化，新增永久生效的方式
qrhd2xnviwjz6
609 1
我是koten
|
弹性计算 运维 网络架构
【运维知识进阶篇】用阿里云配置NAT网关配置
【运维知识进阶篇】用阿里云配置NAT网关配置
我是koten
480 0