Puppet利用Nginx多端口实现负载均衡

简介:

随着公司应用需求的增加,需要不断的扩展,服务器数量也随之增加,当服务器数量不断增加,我们会发现一台puppetmaster压力大,解析缓慢,而且时不时出“Timeout”之类的报错,那这时有什么优化的办法吗?我们在Puppet官网上找寻解决方案,发现puppetmaster可以配置多端口,结合WEB代理(推荐轻量级的负载均衡器Nginx),这样puppetmaster承受能力至少可以提升数倍以上,相当于在很大程度上优化了puppet的处理能力。

1.遵循前面的环境设定,我们这里的服务器环境及软件版本分别为:

服务器系统:CentOS5.8 x86_64

Ruby版本:ruby-1.8.5

Puppet版本:puppet-2.7.9

Nginx版本:nginx-0.8.46

2.Mongrel安装

要使用puppet多端口配置,需要指定mongrel类型,默认没有安装,需要安装:

1
yum  install  -yrubygem-mongrel

3.配置puppetmaster

/etc/sysconfig/puppetmaster文件末尾添加如下两行,分别代表多端口、mongrel类型,内容如下所示:

1
2
PUPPETMASTER_PORTS=(8141 8142 8143 81448145)
PUPPETMASTER_EXTRA_OPTS= "--servertype=mongrel--ssl_client_header=HTTP_X_SSL_SUBJECT"

4.安装Nginx服务

安装之前请确保系统已经安装pcre-devel正则库,然后再编译安装Nginx,需要添加SSL模块参数支持,Nginx的安装过程如下所示:

1
2
3
4
5
6
7
yum -y  install  pcre-devel
cd  /usr/local/src
wgethttp: //nginx .org /download/nginx-0 .8.46. tar .gz
tar  zxvf nginx-0.8.46. tar .gz
cd  nginx-0.8.46
. /configure  --prefix= /usr/local/nginx--with-http_ssl_module
make  &&  make  install  &&  cd ../

添加www用户组及用户,命令如下所示:

1
2
groupadd www
useradd  -g www www

5.我们依据puppet需求来修改配置文件nginx.conf,内容如下所示:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
user www;
worker_processes    8;
events {
        worker_connections    65535;
}
http {
        include             mime.types;
        default_type   application /octet-stream ;
        sendfile                on;
        tcp_nopush         on;
        keepalive_timeout    65;
        #定义puppet客户端访问puppet-server端日志格式
        log_format main  '$remote_addr - $remote_user [$time_local]"$request" $request_length $request_time $time_local'
                                                 '$status $body_bytes_sent$bytes_sent $connection $msec "$http_referer" '
                                                '"$http_user_agent" $http_x_forwarded_for$upstream_response_time $upstream_addr $upstream_status ' ;
        access_log    /usr/local/nginx/logs/access .log   main;
        upstream puppetmaster {
                 server 127.0.0.1:8141;
                 server 127.0.0.1:8142;
                 server 127.0.0.1:8143;
                 server 127.0.0.1:8144;
                 server 127.0.0.1:8145;
                 }
        server {
        listen 8140;
        root  /etc/puppet ;
        ssl on;
        ssl_session_timeout 5m;
        #如下为puppetmaster服务器端证书地址
        ssl_certificate  /var/lib/puppet/ssl/certs/server .cn7788.com.pem;
        ssl_certificate_key /var/lib/puppet/ssl/private_keys/server .cn7788.com.pem;
        ssl_client_certificate  /var/lib/puppet/ssl/ca/ca_crt .pem;
        ssl_crl  /var/lib/puppet/ssl/ca/ca_crl .pem;
        ssl_verify_client optional;
        #File sections
        location  /production/file_content/files/  {
        types { }
        default_type application /x-raw ;
        #定义puppet推送路径别名
        alias  /etc/puppet/files/ ;
        }
        # Modules files sections
        location ~  /production/file_content/modules/ .+/ {
        root  /etc/puppet/modules ;
        types { }
        default_type application /x-raw ;
        rewrite ^ /production/file_content/modules/ (.+)/(.+)$ /$1 /files/ $2  break ;
        }
        location / {
        ##设置跳转到puppetmaster负载均衡
        proxy_pass http: //puppetmaster ;
        proxy_redirect off;
        proxy_set_header Host $host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Client-Verify $ssl_client_verify;
        proxy_set_header X-SSL-Subject $ssl_client_s_dn;
        proxy_set_header X-SSL-Issuer $ssl_client_i_dn;
        proxy_buffer_size 10m;
        proxy_buffers 1024 10m;
        proxy_busy_buffers_size 10m;
        proxy_temp_file_write_size 10m;
        proxy_read_timeout 120;
     }
}
}

6.修改完nginx.conf文件以后,我们要启动nginxpuppet-server,这时应该如何操作呢?

我们首先关闭puppetmaster进程,然后先启动nginx,不然nginx是会启动失败的,命令如下所示:

1
/usr/local/nginx/sbin/nginx

nginx占用puppetmaster默认的8140端口后,我们可以用如下命令来检查8140端口是否被nginx接管,如下所示:

1
lsof  -i:8140

此命令显示结果表明8140nginx进程接管,如下所示:

1
2
3
COMMAND   PID    USER     FD    TYPE DEVICE SIZE /OFF  NODE NAME
nginx    4121    root        6u   IPv4    20668            0t0    TCP *:8140 (LISTEN)
nginx    4122    www    6u   IPv4    20668            0t0    TCP *:8140 (LISTEN)

我们再启动puppetmaster,命令如下所示:

1
service puppetmaster start

如果ruby版本为1.8.5的话,等会运行puppetmaster会有如下警告,如下所示:

1
2
3
4
5
6
7
8
9
10
11
Starting puppetmaster:
Port: 8141** Ruby version is not up-to- date ;loading cgi_multipart_eof_fix
                                                                                                                                                                                                                                         [        OK        ]
Port: 8142** Ruby version is notup-to- date ; loading cgi_multipart_eof_fix
                                                                                                                                                                                                                                       [        OK        ]
Port: 8143** Ruby version is notup-to- date ; loading cgi_multipart_eof_fix
                                                                                                                                                                                                                                         [        OK        ]
Port: 8144** Ruby version is notup-to- date ; loading cgi_multipart_eof_fix
                                                                                                                                                                                                                                        [        OK        ]
Port: 8145** Ruby version is notup-to- date ; loading cgi_multipart_eof_fix
                                                                                                                                                                                                                                       [        OK        ]

这段警告值的意思为

1
2
It's just a warning. Mongrel wants a Rubyversion of at least 1.8.6.
But it still runs just fine with previousversions. Just ignore the warning.

翻译为中文的意思是:

Mongrel需要ruby至少是1.8.6以上的版本,但它仍然在当前版本运行,请忽咯当前警告,为了保证整个puppet运行环境的稳定,我这里选择还是沿用1.8.5版本的ruby,大家有任何疑问,欢迎随时通过此技术博客或电子邮箱yuhongchun027@163.com与抚琴煮酒进行交流。









本文转自 抚琴煮酒 51CTO博客,原文链接:http://blog.51cto.com/yuhongchun/1291908,如需转载请自行联系原作者
相关实践学习
每个IT人都想学的“Web应用上云经典架构”实战
本实验从Web应用上云这个最基本的、最普遍的需求出发,帮助IT从业者们通过“阿里云Web应用上云解决方案”,了解一个企业级Web应用上云的常见架构,了解如何构建一个高可用、可扩展的企业级应用架构。
目录
相关文章
|
负载均衡 算法 搜索推荐
Nginx 常用的负载均衡算法
【10月更文挑战第17天】在实际应用中,我们需要根据具体的情况来选择合适的负载均衡算法。同时,还可以结合其他的优化措施,如服务器健康检查、动态调整权重等,来进一步提高负载均衡的效果和系统的稳定性。
423 59
|
负载均衡 网络协议 算法
一文读懂什么是Nginx?它能否实现IM的负载均衡?
Nginx(及其衍生产品)是目前被大量使用的服务端反向代理和负载均衡方案,从某种意义上来讲,Nginx几乎是低成本、高负载Web服务端代名词。 如此深入人心的Nginx,很多人也想当然的认为,在IM或消息推送等场景下是否也能使用Nginx来解决负载均衡问题? 另外,即时通讯网的论坛和QQ群里也经常有人问起,Nginx是否能支持TCP、UDP、WebSocket的负载
328 4
|
10月前
|
负载均衡 前端开发 应用服务中间件
Tomcat的负载均衡和动静分离(与nginx联动)
总的来说,负载均衡和动静分离是提高Web应用性能的两个重要手段。通过合理的配置和使用,我们可以让Web应用更好地服务于用户。
324 21
|
10月前
|
负载均衡 Java 应用服务中间件
Tomcat与Nginx的负载均衡与动静分离技巧
总的来说,Tomcat和Nginx各有各的优点,在负载均衡和动静分离这两方面它们都有很好的应用。灵活使用这两个工具能够让Web应用具有更好的扩展性和用户体验。
314 14
|
10月前
|
负载均衡 前端开发 JavaScript
LVS-DR模式、keepalived、Nginx与Tomcat合作,打造动静分离,高效负载均衡与高可用性
为了采用这样的架构,你需要对LVS-DR、Keepalived、Nginx与Tomcat有一定的理解和掌握,同时也需要投入一些时间去研究和配置,但是一旦你把它运行起来,你将会发现,这一切都是值得的。
412 11
|
缓存 负载均衡 算法
如何配置Nginx反向代理以实现负载均衡?
如何配置Nginx反向代理以实现负载均衡?
1298 152
|
负载均衡 算法 应用服务中间件
Nginx长连接负载均衡详细说明以及案例
本文详细介绍了Nginx长连接负载均衡的配置与原理。长连接(Keepalive)允许客户端和服务器保持连接,减少建立和关闭连接的开销。Nginx支持多种负载均衡算法,如轮询、IP哈希等。通过在Nginx配置文件中使用`upstream`模块和`keepalive`指令,可以实现长连接负载均衡,从而提高系统的性能和响应速度。示例配置展示了如何设置后端服务器组、长连接数及HTTP/1.1协议,确保连接复用,降低延迟。
700 5
|
缓存 负载均衡 应用服务中间件
Nginx 实现一个端口代理多个前后端服务
【10月更文挑战第19天】Nginx 的强大功能不仅限于此,它还可以与其他技术和工具相结合,为我们的应用提供更强大的支持和保障。在不断发展的互联网时代,掌握 Nginx 的使用技巧将为我们的工作和生活带来更多的便利和效益。
|
负载均衡 监控 应用服务中间件
除了 Nginx,还有以下一些常见的负载均衡工具
【10月更文挑战第17天】这些负载均衡工具各有特点和优势,在不同的应用场景中发挥着重要作用。选择合适的负载均衡工具需要综合考虑性能、功能、稳定性、成本等因素。
2118 56
|
12月前
|
负载均衡 应用服务中间件 nginx
如何使用nginx实现负载均衡?
如何使用nginx实现负载均衡?

推荐镜像

更多