AI 助理
备案控制台注册登录
开发者社区 开发与运维 文章 正文

nginx+keepalived双主高可用负载均衡

2017-11-13 1005
版权
举报
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
应用型负载均衡 ALB，每月750个小时 15LCU
网络型负载均衡 NLB，每月750个小时 15LCU
传统型负载均衡 CLB，每月750个小时 15LCU
简介：

实验环境及软件版本：
CentOS版本： 6.6(2.6.32.-504.el6.x86_64)
nginx版本： nginx-1.6.3
keepalived版本：keepalived-1.2.7

主LB1：LB-110-05

主LB2：LB-111-06

 

一、安装准备及依赖（用SecureCRT的交互窗口同时对两台LB操作，只贴出LB1的操作过程在此）

[root@LB-110-05 ~]# mkdir tools

[root@LB-110-05 ~]# mkdir /application

[root@LB-110-05 ~]# yum -y install pcre pcre-devel openssl openssl-devel gcc gcc-c++ make automake popt-devel

[root@LB-110-05 ~]# cd tools

[root@LB-110-05 tools]# tar xf nginx-1.6.3.tar.gz

二、Nginx+keepalived安装实战（用SecureCRT的交互窗口同时对两台LB操作，只贴出LB1的操作过程在此）

1. 安装nginx

[root@LB-110-05 tools]# cd nginx-1.6.3

[root@LB-110-05 nginx-1.6.3]# useradd nginx -s /sbin/nologin -M

[root@LB-110-05 nginx-1.6.3]# ./configure --prefix=/application/nginx-1.6.3 --with-http_stub_status_module --with-http_ssl_module --user=nginx --group=nginx

[root@LB-110-05 nginx-1.6.3]# echo $?   #检查上一步操作是否正确，正确返回结果为0，反之为1
0

[root@LB-110-05 nginx-1.6.3]# make && make install

[root@LB-110-05 nginx-1.6.3]# ln -s /application/nginx-1.6.3 /application/nginx

[root@LB-110-05 nginx-1.6.3]# /application/nginx/sbin/nginx -t  #检查nginx的语法是否正确和测试是否成功
nginx: the configuration file /application/nginx-1.6.3/conf/nginx.conf syntax is ok
nginx: configuration file /application/nginx-1.6.3/conf/nginx.conf test is successful

[root@LB-110-05 nginx-1.6.3]# /application/nginx/sbin/nginx   #启动nginx服务

[root@LB-110-05 nginx-1.6.3]# netstat -tunlp|grep 80   #检查nginx服务是否启动成功

tcp              0              0 0.0.0.0:80              0.0.0.0:*             LISTEN            4329/nginx

2. 安装keepalived

[root@LB-110-05 nginx-1.6.3]# cd..

[root@LB-110-05 tools]# tar xf keepalived-1.2.7.tar.gz

[root@LB-110-05 tools]# cd keepalived-1.2.7

[root@LB-110-05 keepalived-1.2.7]# ./configure

[root@LB-110-05 keepalived-1.2.7]# make && make install

[root@LB-110-05 keepalived-1.2.7]# cp /usr/local/etc/rc.d/init.d/keepalived /etc/rc.d/init.d/

[root@LB-110-05 keepalived-1.2.7]# cp /usr/local/etc/sysconfig/keepalived /etc/sysconfig/

[root@LB-110-05 keepalived-1.2.7]# mkdir /etc/keepalived

[root@LB-110-05 keepalived-1.2.7]# cp /usr/local/etc/keepalived/keepalived.conf /etc/keepalived/

[root@LB-110-05 keepalived-1.2.7]# cp /usr/local/sbin/keepalived /usr/sbin/

3. 加入开机启动

[root@LB-110-05 ~]# cat >>/etc/rc.local<<EOF
> /usr/local/nginx/sbin/nginx
> /etc/init.d/keepalived start
> EOF

[root@LB-110-05 ~]# cat /etc/rc.local
#!/bin/sh
#
# This script will be executed *after* all the other init scripts.
# You can put your own initialization stuff in here if you don't
# want to do the full Sys V style init stuff.

touch /var/lock/subsys/local
/application/nginx/sbin/nginx
/etc/init.d/keepalived start

三、配置nginx+keepalived

1. 配置nginx

[root@LB-110-05 ~]# cd /application/nginx/conf

[root@LB-110-05 conf]# cp nginx.conf nginx.conf.bak

[root@LB-110-05 conf]# vi nginx.conf

user nginx nginx;
worker_processes 1;
events {
           worker_connections 1024;
     }

http {
        include mime.types;
        default_type application/octet-stream;
        sendfile on;
        keepalive_timeout 65;

upstream myserver{
                      ip_hash;       #用ip哈希算法保持会话
                      server 10.0.0.7:80 max_fails=3 fail_timeout=20s;
                      server 10.0.0.8:80 max_fails=3 fail_timeout=20s;
            }
server {
           listen 80;
           server_name 192.168.0.110;
           location / {
           index index.php index.htm index.html;
           proxy_redirect off;
           proxy_set_header Host host;proxysetheaderX−Real−IPremote_addr;
           proxy_next_upstream http_500 http_502 http_503 error timeout invalid_header;
           proxy_set_header X-Forwarded-For $remote_addr;
           proxy_pass http://myserver;
             }
      }
}

保存退出，把LB1的nginx.conf配置文件用scp推送到LB2的/application/nginx/conf目录下就行。

[root@LB-110-05 conf]# /application/nginx/sbin/nginx -t  
nginx: the configuration file /application/nginx-1.6.3/conf/nginx.conf syntax is ok
nginx: configuration file /application/nginx-1.6.3/conf/nginx.conf test is successful

[root@LB-110-05 conf]# /application/nginx/sbin/nginx -s reload  #平滑重启nginx,不影响服务使用，提高用户体验

[root@LB-110-05 conf]# ps -ef|grep nginx|grep -v grep   #检查nginx服务是否启动成功
root 4329 1 0 17:08 ? 00:00:00 nginx: master process /application/nginx/sbin/nginx
nginx 6330 4329 0 18:01 ? 00:00:00 nginx: worker process

 

2. 配置keepalived

2.1 LB1的keepalived配置

[root@LB-110-05 ~]# cp /etc/keepalived/keepalived.conf /etc/keepalived/keepalived.conf.bak

[root@LB-110-05 ~]# vi /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
     notification_email {
         acassen@firewall.loc
         failover@firewall.loc
         sysadmin@firewall.loc
         }
     notification_email_from Alexandre.Cassen@firewall.loc
     smtp_server 192.168.200.1
     smtp_connect_timeout 30
     router_id Nginx_DEVEL
}

vrrp_instance Nginx_HA1 {
      state MASTER
      interface eth1
      virtual_router_id 51
      priority 100
      advert_int 1
      authentication {
          auth_type PASS
          auth_pass 1111
      }
      virtual_ipaddress {
             192.168.0.110/24 dev eth1
       }
}
vrrp_instance Nginx_HA2 {
      state BACKUP
      interface eth1
      virtual_router_id 52
      priority 99
      advert_int 1
      authentication {
            auth_type PASS
            auth_pass 1111
      }
      virtual_ipaddress {
         192.168.0.111/24 dev eth1
      }
}

2.2 LB2的keepalived配置

[root@LB-111-06 ~]# vi /etc/keepalived/keepalived.conf
! Configuration File for keepalived

global_defs {
        notification_email {
        acassen@firewall.loc
        failover@firewall.loc
        sysadmin@firewall.loc
        }
        notification_email_from Alexandre.Cassen@firewall.loc
        smtp_server 192.168.200.1
        smtp_connect_timeout 30
        router_id Nginx_DEVEL
}

vrrp_instance Nginx_HA1 {
      state BACKUP
      interface eth2
      virtual_router_id 51
      priority 99
      advert_int 1
      authentication {
             auth_type PASS
             auth_pass 1111
       }
       virtual_ipaddress {
               192.168.0.110/24 dev eth2
       }
}
vrrp_instance Nginx_HA2 {
      state MASTER
      interface eth2
      virtual_router_id 52
      priority 100
      advert_int 1
      authentication {
              auth_type PASS
              auth_pass 1111
      }
      virtual_ipaddress {
               192.168.0.111/24 dev eth2
      }
}

3. 启动keepalived

[root@LB-110-05~]# /etc/init.d/keepalived start   #先启动主LB1

[root@LB-111-06 ~]# /etc/init.d/keepalived start  #随后再启动主LB2

四、查看服务启动成功后的结果

[root@LB-110-05 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host 
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:5c:2d:57 brd ff:ff:ff:ff:ff:ff
inet 192.168.0.110/24 brd 192.168.0.255 scope global eth0
inet6 fe80::20c:29ff:fe5c:2d57/64 scope link 
valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:5c:2d:61 brd ff:ff:ff:ff:ff:ff
inet 10.0.0.5/24 brd 10.0.0.255 scope global eth1
inet 192.168.0.110/24 scope global eth1
inet6 fe80::20c:29ff:fe5c:2d61/64 scope link 
valid_lft forever preferred_lft forever

[root@LB-111-06 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host 
valid_lft forever preferred_lft forever
2: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:50:8e:3a brd ff:ff:ff:ff:ff:ff
inet 192.168.0.111/24 brd 192.168.0.255 scope global eth1
inet6 fe80::20c:29ff:fe50:8e3a/64 scope link 
valid_lft forever preferred_lft forever
3: eth2: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:50:8e:44 brd ff:ff:ff:ff:ff:ff
inet 10.0.0.6/24 brd 10.0.0.255 scope global eth2
inet 192.168.0.111/24 scope global eth2
inet6 fe80::20c:29ff:fe50:8e44/64 scope link 
valid_lft forever preferred_lft forever

五、测试高可用

[root@LB-111-06 ~]# /etc/init.d/keepalived stop
Stopping keepalived: [ OK ]
[root@LB-111-06 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host 
valid_lft forever preferred_lft forever
2: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:50:8e:3a brd ff:ff:ff:ff:ff:ff
inet 192.168.0.111/24 brd 192.168.0.255 scope global eth1
inet6 fe80::20c:29ff:fe50:8e3a/64 scope link 
valid_lft forever preferred_lft forever
3: eth2: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:50:8e:44 brd ff:ff:ff:ff:ff:ff
inet 10.0.0.6/24 brd 10.0.0.255 scope global eth2
inet6 fe80::20c:29ff:fe50:8e44/64 scope link 
valid_lft forever preferred_lft forever

[root@LB-110-05 ~]# ip a
1: lo: <LOOPBACK,UP,LOWER_UP> mtu 65536 qdisc noqueue state UNKNOWN 
link/loopback 00:00:00:00:00:00 brd 00:00:00:00:00:00
inet 127.0.0.1/8 scope host lo
inet6 ::1/128 scope host 
valid_lft forever preferred_lft forever
2: eth0: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:5c:2d:57 brd ff:ff:ff:ff:ff:ff
inet 192.168.0.110/24 brd 192.168.0.255 scope global eth0
inet6 fe80::20c:29ff:fe5c:2d57/64 scope link 
valid_lft forever preferred_lft forever
3: eth1: <BROADCAST,MULTICAST,UP,LOWER_UP> mtu 1500 qdisc pfifo_fast state UP qlen 1000
link/ether 00:0c:29:5c:2d:61 brd ff:ff:ff:ff:ff:ff
inet 10.0.0.5/24 brd 10.0.0.255 scope global eth1
inet 192.168.0.110/24 scope global eth1
inet 192.168.0.111/24 scope global secondary eth1
inet6 fe80::20c:29ff:fe5c:2d61/64 scope link 
valid_lft forever preferred_lft forever


本文转自 linuxzkq 51CTO博客，原文链接:http://blog.51cto.com/linuxzkq/1688272

文章标签：
负载均衡
应用服务中间件
nginx
负载均衡
关键词：
Nginx keepalived
Nginx负载均衡
keepalived负载均衡
负载均衡nginx
Nginx高可用
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发，帮助IT从业者们通过“阿里云Web应用上云解决方案”，了解一个企业级Web应用上云的常见架构，了解如何构建一个高可用、可扩展的企业级应用架构。
负载均衡入门与产品使用指南
负载均衡（Server Load Balancer）是对多台云服务器进行流量分发的负载均衡服务，可以通过流量分发扩展应用系统对外的服务能力，通过消除单点故障提升应用系统的可用性。 本课程主要介绍负载均衡的相关技术以及阿里云负载均衡产品的使用方法。
科技小能手
+关注
23653文章
目录
打赏
0
0
0
0
347
分享
相关文章
jsjsjjs
|
6月前
|
负载均衡 网络协议 算法
一文读懂什么是Nginx？它能否实现IM的负载均衡？
Nginx（及其衍生产品）是目前被大量使用的服务端反向代理和负载均衡方案，从某种意义上来讲，Nginx几乎是低成本、高负载Web服务端代名词。 如此深入人心的Nginx，很多人也想当然的认为，在IM或消息推送等场景下是否也能使用Nginx来解决负载均衡问题？ 另外，即时通讯网的论坛和QQ群里也经常有人问起，Nginx是否能支持TCP、UDP、WebSocket的负载
jsjsjjs
141 4
蓝易云
|
3月前
|
负载均衡 前端开发 JavaScript
LVS-DR模式、keepalived、Nginx与Tomcat合作，打造动静分离，高效负载均衡与高可用性
为了采用这样的架构，你需要对LVS-DR、Keepalived、Nginx与Tomcat有一定的理解和掌握，同时也需要投入一些时间去研究和配置，但是一旦你把它运行起来，你将会发现，这一切都是值得的。
蓝易云
146 11
蓝易云
|
3月前
|
负载均衡 Java 应用服务中间件
Tomcat与Nginx的负载均衡与动静分离技巧
总的来说，Tomcat和Nginx各有各的优点，在负载均衡和动静分离这两方面它们都有很好的应用。灵活使用这两个工具能够让Web应用具有更好的扩展性和用户体验。
蓝易云
111 14
蓝易云
|
3月前
|
负载均衡 前端开发 应用服务中间件
Tomcat的负载均衡和动静分离（与nginx联动）
总的来说，负载均衡和动静分离是提高Web应用性能的两个重要手段。通过合理的配置和使用，我们可以让Web应用更好地服务于用户。
蓝易云
133 21
游客cjle3qpbn6lw6
|
5月前
|
负载均衡 应用服务中间件 nginx
如何使用nginx实现负载均衡？
如何使用nginx实现负载均衡？
游客cjle3qpbn6lw6
234 0
CiiLii西里网
|
5月前
|
负载均衡 算法 应用服务中间件
Nginx长连接负载均衡详细说明以及案例
本文详细介绍了Nginx长连接负载均衡的配置与原理。长连接（Keepalive）允许客户端和服务器保持连接，减少建立和关闭连接的开销。Nginx支持多种负载均衡算法，如轮询、IP哈希等。通过在Nginx配置文件中使用`upstream`模块和`keepalive`指令，可以实现长连接负载均衡，从而提高系统的性能和响应速度。示例配置展示了如何设置后端服务器组、长连接数及HTTP/1.1协议，确保连接复用，降低延迟。
CiiLii西里网
340 5
Jack_hrx
|
缓存 负载均衡 算法
解读 Nginx：构建高效反向代理和负载均衡的秘密
解读 Nginx：构建高效反向代理和负载均衡的秘密
Jack_hrx
217 2
Echo_Wish
|
8月前
|
负载均衡 前端开发 应用服务中间件
负载均衡指南：Nginx与HAProxy的配置与优化
负载均衡指南：Nginx与HAProxy的配置与优化
Echo_Wish
554 3
香吧香
|
负载均衡 算法 应用服务中间件
nginx自定义负载均衡及根据cpu运行自定义负载均衡
nginx自定义负载均衡及根据cpu运行自定义负载均衡
香吧香
277 1
yuanzhengme
|
运维 负载均衡 算法
SLB与NGINX的异同是什么
SLB与NGINX的异同是什么
yuanzhengme
1416 2

热门文章

最新文章

  • 1
    配置Nginx以支持Websocket连接的方法。
    44
  • 2
    电商API接口性能优化技术揭秘：缓存策略与负载均衡详解
    13
  • 3
    使用Nginx免费版与Keepalived实现高可用性High Availablity方案
    21
  • 4
    nginx_笔记分享_1_安装篇(nginx-1.0.5+php-fpm5.3.6+mysql) 推荐
    1
  • 5
    如何区分计算机策略
    1
  • 6
    iBATIS配置文件的特殊使用方法
    3
  • 7
    Build 3D Environment
    4
  • 8
    关于移动CRM的学习(一)
    1
  • 9
    【翻译】Emmet (ZenCoding) 缩写语法
    1
  • 10
    escape()、encodeURI()、encodeURIComponent()区别详解
    541
  • 1
    负载均衡算法
    94
  • 2
    （四）网络编程之请求分发篇：负载均衡静态调度算法、平滑轮询加权、一致性哈希、最小活跃数算法实践！
    250
  • 3
    Serverless 应用引擎使用问题之如何将应用部署到多个实例中，并利用SLB来分发请求负载
    125
  • 4
    nginx自定义负载均衡及根据cpu运行自定义负载均衡
    277
  • 5
    消息队列 MQ使用问题之如何在grpc客户端中设置负载均衡器
    214
  • 6
    Ribbon 负载均衡源码解读
    116
  • 7
    Spring cloud gateway 如何在路由时进行负载均衡
    1540
  • 8
    Feign 进行rpc 调用时使用ribbon负载均衡源码解析
    137
  • 9
    云上负载均衡：构建高可用、高性能的网络应用架构
    435
  • 10
    建设云上稳定性问题之通过SLB转发和健康检查策略后，系统发布过程中的可用性有何改善
    111

    • 相关课程

    更多
  • 阿里云负载均衡SLB实战演练
  • Nginx企业级Web服务实战
  • Linux Web服务器Nginx搭建与配置
  • LVS负载均衡实战
  • 超大流量网站的负载均衡
  • 负载均衡入门与产品使用指南

    • 相关电子书

    更多
  • 《应用型负载均衡ALB产品解读》
  • 阿里云网络-SLB负载均衡产品介绍
  • 负载均衡SLB热点问题解答

    • 相关实验场景

    更多
  • 日志服务之使用Nginx模式采集日志
    • 下一篇
    用阿里云对象存储OSS搭建个人网盘或企业网盘的方法
    AI助理

    你好，我是AI助理

    可以解答问题、推荐解决方案等

    登录插画

    登录以查看您的控制台资源

    管理云资源
    状态一览
    快捷访问
    快捷注册登录阿里云