通过Etcd+Confd自动管理Haproxy(多站点)

简介:

当网站业务量急剧增大的时候,机器的扩容缩容就是家常便饭,Haproxy作为负载均衡器的变更频率就急剧加大,特别是Docker的出现,这个时候再也不能通过vim修改配置文件的形式去对业务进行变更。


etcd:k/v形式的键值存储,用于存放配置

confd:根据从etcd中获取的配置,对haproxy进行修改

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
#confd的安装
wget https: //github .com /kelseyhightower/confd/releases/download/v0 .11.0 /confd-0 .11.0-linux-amd64
mv  confd*  /usr/local/bin/confd  
chmod  +x  /usr/local/bin/confd  
/usr/local/bin/confd  -version
 
#etcd的安装
wget https: //github .com /coreos/etcd/releases/download/v3 .1.1 /etcd-v3 .1.1-linux-amd64. tar .gz
tar  zxf etcd-v3.1.1-linux-amd64. tar .gz
cd  etcd-v3.1.1-linux-amd64
cp  etcd*  /bin/
/bin/etcd  -version
 
#etcd的启动
mkdir  /data/etcd
etcd --name etcdserver --data- dir  /data/dir  --listen-peer-urls  'http://192.168.2.202:2380'  --listen-client-urls  'http://192.168.2.202:2379,http://127.0.0.1:2379'  --initial-advertise-peer-urls  'http://192.168.2.202:2380'  --advertise-client-urls  'http://192.168.2.202:2379,http://127.0.0.1:2379'   &
 
 
#confg的配置
mkdir  -p  /etc/confd/ {conf.d,templates}
 
vim  /etc/confd/conf .d /haproxy .toml
[template]  
src =  "haproxy.cfg.tmpl"  
dest =  "/etc/haproxy/haproxy.cfg"  
keys = [  
   "/web" ,  
]  
reload_cmd =  "/etc/init.d/haproxy reload"
 
 
/etc/confd/templates/haproxy .cfg.tmpl
global
         log 127.0.0.1 local3
         maxconn 5000
         uid 99
         gid 99
         daemon
 
defaults
         #log 127.0.0.1 local3
         mode http
         option dontlognull
         retries 3
         option redispatch
         maxconn 2000
         timeout connect  5000
         timeout client  50000
         timeout server  50000
frontend webin
bind :80
mode http
{{ $domains := lsdir  "/web" }}
{{range $domain := $domains}}
acl {{$domain}} hdr(host) -i {{$domain}}
`end`
{{range $domain := $domains}}
use_backend {{$domain}}_cluster  if  {{$domain}}
`end`
{{range $domain := $domains}}
backend {{$domain}}_cluster
         option httpchk HEAD  /health .html HTTP /1 .1\r\nHost:{{$domain}}
         cookie SERVERID insert indirect nocache
{{$servers :=  printf  "/web/%s/*"  $domain}}{{range gets $servers}}
         server {{base .Key}} ``.`Value` cookie {{base .Key}} check inter 5000 rise 2 fall 3 weight 1
`end`
`end`
 
#启动confd
/usr/local/bin/confd  -interval 5 -node  '192.168.2.202:2379'  -confdir  /etc/confd  &

注册服务器

1
2
3
curl -XPUT http: //192 .168.2.202:2379 /v2/keys/web/www . test .com /prickly_blackwell  -d value= "192.168.2.201:49162" 
curl -XPUT http: //192 .168.2.202:2379 /v2/keys/web/bbs . test .com /prickly_blackwell  -d value= "192.168.2.201:49162"
curl -XPUT http: //192 .168.2.202:2379 /v2/keys/web/admin . test .com /prickly_blackwell  -d value= "192.168.2.201:49162"

etcd注册格式

http://192.168.2.202:2379/v2/keys/web/DOMAIN_NAME/SERVER_NAME -d value="IP:PORT"

http://192.168.2.202:2379/v2/keys/web/域名/服务器名   -d value="IP:端口"


查看/etc/haproxy/haproxy.cfg

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
global  
         log 127.0.0.1 local3  
         maxconn 5000  
         uid 99  
         gid 99  
         daemon  
   
defaults  
         log 127.0.0.1 local3  
         mode http  
         option dontlognull  
         retries 3  
         option redispatch  
         maxconn 2000  
         contimeout  5000  
         clitimeout  50000  
         srvtimeout  50000 
frontend webin
bind :80
mode http
 
acl is_admin. test .com hdr(host) -i admin. test .com
acl is_bbs. test .com hdr(host) -i bbs. test .com
acl is_www. test .com hdr(host) -i www. test .com
 
use_backend admin. test .com_cluster  if  is_admin. test .com
use_backend bbs. test .com_cluster  if  is_bbs. test .com
use_backend www. test .com_cluster  if  is_www. test .com
 
backend admin. test .com_cluster
         option httpchk HEAD  /health .html HTTP /1 .1\r\nHost:admin. test .com
         cookie SERVERID insert indirect nocache
         server prickly_blackwell 192.168.2.201:49162 cookie prickly_blackwell check inter 5000 rise 2 fall 3 weight 1
 
backend bbs. test .com_cluster
         option httpchk HEAD  /health .html HTTP /1 .1\r\nHost:bbs. test .com
         cookie SERVERID insert indirect nocache
         server prickly_blackwell 192.168.2.201:49162 cookie prickly_blackwell check inter 5000 rise 2 fall 3 weight 1
 
backend 
         option httpchk HEAD  /health .html HTTP /1 .1\r\nHost:www. test .com 
         cookie SERVERID insert indirect nocache
         server prickly_blackwell 192.168.2.201:49162 cookie prickly_blackwell check inter 5000 rise 2 fall 3 weight 1



本文参考:

http://blog.liuts.com/post/242/

https://yq.aliyun.com/articles/8708

在此感谢!


本文转自 rong341233 51CTO博客,原文链接:http://blog.51cto.com/fengwan/1899964


相关文章
|
存储 关系型数据库 数据库
用Patroni配置PostgreSQL高可用集群
Patroni是Zalando开发的数据库高可用管理软件,用于编排和自动化PostgreSQL集群的管理过程。Patroni 需要一系列其他组件的支持,通过利用第三方分布式一致性软件,组建并实现数据库高可用方案。
用Patroni配置PostgreSQL高可用集群
|
监控 数据可视化 关系型数据库
PostgreSQL主备库搭建
pg主备库的搭建,首先需在2个节点安装pg软件,然后依次在2个节点配置主备。 本文采用os为CentOS7.6,pg版本使用14.2,以下为详细部署步骤。
1785 0
|
关系型数据库 数据库 文件存储
|
2月前
|
存储 人工智能 Java
2026 爆火的「本体」:给大模型装上业务世界观
本体是业务的标准化语法,定义领域概念、关系与规则,解决多系统语义不一致难题。2026年因AI落地刚需、大模型降本增效及Palantir示范效应而爆发,成企业级AI基础设施。
1411 1
|
3月前
|
存储 缓存 安全
解读 Cordis:dsh 一切皆插件背后的运行时设计
Cordis提出“时空可组合性”:时间维(Temporal)确保插件卸载时副作用可完整回滚;空间维(Spatial)保障依赖动态响应与隔离。通过可逆Effect与响应式Coeffect,实现运行时安全热插拔。
441 0
解读 Cordis:dsh 一切皆插件背后的运行时设计
|
6月前
|
人工智能 IDE API
阿里云百炼Coding Plan产品简介:支持模型、收费标准及购买和使用常见问题解答
阿里云百炼Coding Plan是面向开发者和团队的AI编程订阅服务,采用固定月费模式,Pro套餐200元/月提供9万次调用额度,整合千问、Kimi、GLM、MiniMax等顶级模型,全面兼容Claude Code、OpenClaw、Cursor等主流编程工具。额度采用5小时滚动恢复、每周及每月定期重置机制,兼顾开发连续性与成本可控性。其折算成本远低于按量计费,并通过多层级额度设计和华北2地域绑定有效防范欠费风险。适合日常代码生成、智能体开发及IDE插件集成等场景,是开发者以可预期预算拥抱AI编程的高性价比选择。
阿里云百炼Coding Plan产品简介:支持模型、收费标准及购买和使用常见问题解答
|
8月前
|
存储 人工智能 自然语言处理
全生命周期管理:开源知识库的技术架构升级
企业知识管理数字化转型中,传统知识库存在结构化低、检索弱、AI融合浅等痛点。AI驱动的开源知识库系统以大模型赋能为核心,依托模块化架构、全栈AI集成、多源异构数据处理等技术,为多场景知识管理提供端到端解决方案。本文从技术框架、功能实现、跨领域案例、使用心得四大维度,结合非技术领域实践,剖析开源知识库系统的工程化设计本质,补充核心技术框架与专业术语。
1074 3
|
11月前
|
机器学习/深度学习 人工智能 自然语言处理
NeurIPS 2025 | Code Graph Model (CGM):图融合架构重塑代码大模型,探索AI代码研发新范式
代码图模型(CGM)通过专用适配器将仓库代码图集成到LLM的注意力机制中,在 SWE-Bench Lite 基准上实现了44.00%的问题解决率,相比先前开源方法提升了12.33%
1314 9
|
关系型数据库 API 数据库
基于Patroni的PostgreSQL高可用环境部署
在部署PostgreSQL到生产环境中时,选择适合的高可用方案是一项必不可少的工作。本文介绍基于Patroni的PostgreSQL高可用的部署方法,供大家参考。
8683 153