Haproxy负载均衡集群(下)

本文涉及的产品
传统型负载均衡 CLB,每月750个小时 15LCU
网络型负载均衡 NLB,每月750个小时 15LCU
EMR Serverless StarRocks,5000CU*H 48000GB*H
简介: 一、常见的Web集群调度器目前常见的Web集群调度器分为软件和硬件:软件通常使用开源的LVS、Haproxy、 Nginx


3)添加haproxy系统服务(把haproxy加入系统服务管理中)

#做个软链接,将haproxy的可执行文件放入环境PATH的目录下
 ln -s /usr/local/sbin/haproxy /usr/sbin/
 #将haproxy.init文件复制到/etc/init.d/目录下,并改名为haproxy
 cp /opt/haproxy-1.5.19/examples/haproxy.init /etc/init.d/haproxy
 cd /etc/init.d/
 chmod +x haproxy                          #增加文件的执行权限
 chkconfig --add /etc/init.d/haproxy       #把haproxy加入系统服务管理中
 #启动haproxy
 service haproxy start 或 /etc/init.d/haproxy start
复制代码


网络异常,图片无法展示
|


7.3 客户端访问测试

客户端地址:192.168.72.192

浏览器输入Haproxy负载调度器地址:192.168.72.10

第一次访问:

网络异常,图片无法展示
|


第二次访问:

网络异常,图片无法展示
|


八、日志管理

默认haproxy的日志是输出到系统的syslog中,查看起来不是非常方便,为了更好的管理haproxy的日志,要将haproxy的info及notice日志分别记录到不同的日志文件中。(其他级别的日志仍记录在系统日志/var/log/messages中;因为error日志较少,故一般不做分离)

需要修改rsyslog配置,为了便于管理。将haproxy相关的配置独立定义到haproxy.conf,并放到/etc/rsyslog.d/下,rsyslog启动时会自动加载此目录下的所有配置文件。


方法一:

使用rainerscript语言编写,适用于复杂环境

1、#修改配置文件
 vim /etc/haproxy/haproxy.cfg
 global
     1og /dev/log local0 info      #修改这两行,定义haproxy日志输出设备和日志级别
     log /dev/log local0 notice
 service haproxy restart     #重启haproxy服务
 2、#需要修改rsyslog配置,为了便于管理。将haproxy相关的配置独立定义到haproxy.conf,并放到/etc/rsyslog.d/目录下,rsyslog启动时会自动加载此目录下的所有配置文件。
 cd /var/log/
 mkdir haproxy   #创建haproxy日志文件的存放目录/var/log/haproxy
 vim /etc/rsyslog.d/haproxy.conf
 if ($programname == 'haproxy' and $syslogseverity-text == 'info')
 then -/var/log/haproxy/haproxy-info.log
 &~
 if ($programname == 'haproxy' and $syslogseverity-text == 'notice')
 then -/var/log/haproxy/haproxy-notice.log
 &~
 #说明:
 这部分配置是将haproxy的info日志记录到/var/log/haproxy/haproxy-info.log中;
 将notice日志记录到/var/log/haproxy/haproxy-notice.log中。
 "&~"表示当日志写入到日志文件后,rsyslog停止处理这个信息。
 3. # 重启日志服务
 systemctl restart rsyslog.service 
 4. #查看haproxy的访问请求日志信息
 访问网页后查看日志
 tail -f /var/log/haproxy/haproxy-info.log
复制代码


网络异常,图片无法展示
|


网络异常,图片无法展示
|


网络异常,图片无法展示
|


网络异常,图片无法展示
|


方法二:

1、#修改配置文件
 vim /etc/haproxy/haproxy.cfg
 global
     1og /dev/log local0 info      #将info日志存放到local0对应的路径中
     log /dev/log local6 notice    #将notice日志存放到local6对应的路径中
 2、#设置local0和local6对应的日志路径
 mkdir /var/log/haproxy   #创建haproxy日志文件的存放目录/var/log/haproxy
 vim /etc/rsyslog.d/haproxy.conf
 local0.*        /var/log/haproxy/haproxy-info.log
 local1.*        /var/log/haproxy/haproxy-notice.log
 #如果不加下面的的配置则除了在/var/log/haproxy/中写入日志外,也会写入messages文件。
 vim /etc/sysconfig/rsyslog
 SYSLOGD_OPTIONS="-r -m 0 -c 2"    #-r 开启远程日志;-m 0 标记时间戳,单位是分钟,为0时,表示禁用该功能;-c 2 使用兼容模式,默认是 -c 5
 3、#重启haproxy服务和日志服务
 systemctl restart rsyslog.service 
 service haproxy restart
 4、#查看haproxy的访问请求日志信息
 访问网页后查看日志
 tail -f /var/log/haproxy/haproxy-info.log
复制代码


总结

1、对比集群调度工具Haproxy、LVS和Nginx的区别

区别:

  • LVS基于Linux操作系统内核实现软负载均衡,而HAProxy和Nginx是基于第三方应用实现的软负载均衡;
  • LVS是可实现4层的IP负载均衡技术,但不支持正则处理,无法实现基于目录、URL的转发。而HAProxy 和Nginx都可以实现4层和7层技术,HAProxy可提供TCP和HTTP应用的负载均衡综合解决方案;
  • LVS性能最好,但搭建相对复杂,成本较高。一般在100台左右web主机的集群中使用。
  • nginx做负载均衡调度器,配置简单,管理方便,但并发量不高,且没有主动健康检查。性能没有Haproxy好。可用于并发量不高的场景。

2、HTTP请求的两种方式

方式: GET、POST方式

区别: GET把参数包含在URL中,POST通过request body传递参数

  • GET: 产生一个TCP数据包
  • POST: 产生两个TCP数据包

3、haproxy配置文件重要参数说明:

全局配置: global 作用: 用于设定义全局参数,属于进程级的配置,通常与操作系统配置有关。

  • maxconn 4096 #进程最大连接数,需考虑"ulimit -n"的限制,推荐使用10240
  • daemon #守护进程模式。可以使用非守护进程模式,在生产环境中建议使用守护进程模式
  • nbproc 1 #并发进程数,建议与当前服务器CPU核数相等或为其2倍

默认配置: defaults  作用: 配置默认参数,一般会被应用组件继承。

  • retries 3 #检查节点服务器失败次数,连续3次失败,则认为节点不可用
  • redispatch #当服务器负载很高时,自动结束当前队列处理比较久的连接
  • maxconn 2000 #最大连接数,"defaults"中 的值不能超过“global"段中的定义
  • timeout http-request 10s #默认http请求超时时间。建议设置时间为5~10s,增加http连接释放的速度
  • timeout http-keep-alive 10s #默认长连接超时时间
  • timeout check 10s #设置心跳检查超时时间

应用组件配置: listen 作用: 一般配置应用模块参数

  • option httpchk GET /index. html #检查服务器的index.html文件。发送http的GET请求检查index.html文件,返回2xx、3xx表示正常;返回4xx/5xx表示异常,则隔离该节点。
  • balance roundrobin #负载均衡调度算法使用轮询算法roundrobin
  • server inst1 192.168.72.30:80 check inter 2000 rise 2 fall 3 #定义在线节点
  • server inst2 192.168.72.40:80 check inter 2000 rise 2 fall 3 #定义在线节点
  • #server inst2 192.168.72.50:80 check inter 2000 rise 2 fall 3 backup #定义备份节点

haproxy支持的最大并发量=并发进程数×每个进程最大连接数,即"nbproc的值 × maxconn的值"


4、日志消息的级别:

级号 消息 级别 说明
0 EMERG 紧急 会导致主机系统不可用的情况
1 ALERT 警告 必须马上采取措施解决的问题
2 CRIT 严重 比较严重的情况
3 ERR 错误 运行出现错误
4 WARNING 提醒 可能会影响系统功能的事件
5 NOTICE 注意 不会影响系统但值得注意
6 INFO 信息 一般信息
7 DEBUG 调试 程序或系统调试信息等
相关实践学习
SLB负载均衡实践
本场景通过使用阿里云负载均衡 SLB 以及对负载均衡 SLB 后端服务器 ECS 的权重进行修改,快速解决服务器响应速度慢的问题
负载均衡入门与产品使用指南
负载均衡(Server Load Balancer)是对多台云服务器进行流量分发的负载均衡服务,可以通过流量分发扩展应用系统对外的服务能力,通过消除单点故障提升应用系统的可用性。 本课程主要介绍负载均衡的相关技术以及阿里云负载均衡产品的使用方法。
相关文章
|
2月前
|
负载均衡 算法 应用服务中间件
负载均衡技术在Web服务器集群中的应用
【8月更文第28天】随着互联网的发展和用户对Web服务需求的增长,单台服务器很难满足大规模访问的需求。为了提高系统的稳定性和扩展性,通常会采用Web服务器集群的方式。在这种架构中,负载均衡器扮演着至关重要的角色,它能够合理地分配客户端请求到不同的后端服务器上,从而实现资源的最优利用。
94 2
|
2月前
|
负载均衡 算法 关系型数据库
MySQL集群如何实现负载均衡?
【8月更文挑战第16天】MySQL集群如何实现负载均衡?
107 6
|
2月前
|
负载均衡 算法 前端开发
HAProxy 和负载均衡概念简介
HAProxy 和负载均衡概念简介
68 3
|
2月前
|
负载均衡 网络协议
使用LVS搭建集群实现负载均衡(二)安装使用
【8月更文挑战第8天】使用LVS搭建集群实现负载均衡(二)安装使用
50 5
|
2月前
|
存储 负载均衡 算法
使用LVS搭建集群实现负载均衡(一)
【8月更文挑战第8天】使用LVS搭建集群实现负载均衡
113 5
|
3月前
|
消息中间件 负载均衡 算法
【RocketMQ系列十二】RocketMQ集群核心概念之主从复制&生产者负载均衡策略&消费者负载均衡策略
【RocketMQ系列十二】RocketMQ集群核心概念之主从复制&生产者负载均衡策略&消费者负载均衡策略
95 2
|
4月前
|
缓存 负载均衡 NoSQL
Redis系列学习文章分享---第十四篇(Redis多级缓存--封装Http请求+向tomcat发送http请求+根据商品id对tomcat集群负载均衡)
Redis系列学习文章分享---第十四篇(Redis多级缓存--封装Http请求+向tomcat发送http请求+根据商品id对tomcat集群负载均衡)
76 1
|
5月前
|
负载均衡 Kubernetes 网络协议
如何在集群的负载均衡过程保留请求源IP
本文探讨了在Kubernetes (k8s)集群中如何确保服务获取到请求的源IP。通常,源IP可能会因网络地址转换(NAT)和代理服务器而丢失。为保留源IP,文章建议在代理服务器层添加HTTP头`X-REAL-IP`字段。在K8s中,通过设置`externalTrafficPolicy: Local`可保留源IP,但这会牺牲负载均衡。使用Ingress时,可通过配置Ingress Controller的`use-forwarded-headers`并调整ConfigMap来同时保留源IP和实现负载均衡。文章适用于对网络和K8s感兴趣的读者。
130 3
|
4月前
|
负载均衡 运维 监控
负载均衡与容错性:集群模式在分布式系统中的应用
本文由小米分享,解释了分布式系统中的集群模式。集群模式是通过组合多个服务器节点,共同提供服务,实现高可用性、负载均衡和扩展性。文章介绍了主控节点的角色及其高可用性策略,如主备模式和选举机制,并以Zookeeper为例详细阐述了其工作机制。集群模式的优势在于高可用性、负载均衡、扩展性和数据一致性,但也面临节点通信、数据一致性、故障检测和管理等挑战。最后,作者鼓励读者讨论和交流相关技术问题。
274 5
|
5月前
|
负载均衡 算法 网络协议
LVS、Nginx和HAProxy负载均衡器对比总结
LVS、Nginx和HAProxy负载均衡器对比总结

热门文章

最新文章