Docker swarm部署控制

简介: 还记得我之前写过一篇文章叫做《Docker快速部署项目,极速搭建分布式》,在那里讲述了如何去使用docker swarm,如何构建自己的私人镜像仓库。随着最近的业务量的增长,机子加多。对于docker swarm管理难度有上升的趋势。主要的问题有以下几个

还记得我之前写过一篇文章叫做《Docker快速部署项目,极速搭建分布式》,在那里讲述了如何去使用docker swarm,如何构建自己的私人镜像仓库。随着最近的业务量的增长,机子加多。对于docker swarm管理难度有上升的趋势。主要的问题有以下几个


  • 物理机配置不同(比如 CPU、内存等)


  • 部署着不同类型的服务(比如 Web服务、Job服务等)


  • Swarm 集群中的节点跨机房,为了内部服务间通信更快,该如何分组部署


  • 。。。


为了解决以上问题,以求更合理、更科学的管理部署所以有了今天这篇文章。

docker 节点的部署调度一共有三种机制,随机部署、平衡部署、先满部署


随机部署:active中随机选择


平衡部署:尽可能先平均填满所有的节点


先满部署:与平衡部署相反,先部署至上限,然后在部署对应的


名称可能不对


那么该如何管理呢?下面我介绍几种方式,如下


  • NodeId


  • HOSTNAME


  • Node role


  • node labels


  • engine.labels


首先我们查看一下节点列表信息,直接使用docker node ls,即可


image.gif640 (1).jpg


首先我们先解读一下,docker 的限制指令


1# docker service create --help
2--constraint list                    Placement constraints
3--container-label list               Container labels


他们的 后面跟随的参数都是list,具体使用如以下示例


NodeId


根据NodeId来指定部署节点,以下以搭建私人镜像仓库为示例。


docker service


1docker service create \
2--name registry \
3--publish published=5000,target=5000 \
4--constraint node.id==ytsyvuhfs60spr361y6irpynm \
5registry:2


640 (2).jpg


命令解读


1# 在docker swarm中创建服务
2docker service create     \
3# --name 服务别名
4# 指定node的id,ytsyvuhfs60spr361y6irpynm这个是我这里的node.id,你使用的时候需按照需求替换即可
5--constraint node.id==ytsyvuhfs60spr361y6irpynm \
6# 暴露公开的接口,可以让节点中的其他node可以访问
7--publish published=5000,target=5000    \
8# 镜像名:版本号
9registry:2


这样我们就实现了指定节点的部署,是不是很简单呢。


docker stack


1# docker-compose.yaml 
 2version: '3'
 3services:
 4    registry:
 5         registry:2
 6         ports:
 7           - target: 8080
 8           - published: 8080
 9           - protocol: tcp
10           - mode: ingress
11         deploy:
12           mode: global
13           placement:
14              constraints:                      # 添加条件约束
15                - node.id==ytsyvuhfs60spr361y6irpynm
16           restart_policy:
17             condition: on-failure
18             max_attempts: 3


HOSTNAME


除此之外我们还可以指定hostname 去将应用部署到指定的hostname上,操作与以上差不多。那让我们来实现一下,首先我们需要查看对应节点的信息,在manager节点上使用docker node ls查看,如下


640 (3).jpg


docker service


创建命令如下,以nginx为例


1docker service create \
2--name nginx \
3--constraint node.hostname==ecs-dc8a-0003 \
4-p 80:80 nginx


640 (4).jpg


这样我们就将nginx服务部署至对应的节点了,并且扩容也仅会在此节点进行部署。示例如下


1docker service scale nginx=3


640 (5).jpg


docker stack


1# docker-compose.yaml 
 2version: '3'
 3services:
 4    nginx:
 5         image: nginx
 6         ports:
 7           - target: 80
 8           - published: 80
 9           - protocol: tcp
10           - mode: ingress
11         deploy:
12           mode: global
13           placement:
14              constraints:                      # 添加条件约束
15                - node.hostname==ecs-dc8a-0003
16           restart_policy:
17             condition: on-failure
18             max_attempts: 3


Node role


前面我们了解到了根据node.id,node.hostname进行指定节点的部署,但指定的却是唯一的。那么该如何实现同一类进行随机的部署呢?到这里我们继续深入了解,更具节点关系的进行约束。可部署节点中的关系有leader,work。


例如,我想实现不在主节点上部署,虽然我们可以使用使用限制中的条件,避开。例如这样


1# 示例
2docker service create \
3--name registry \
4--publish published=5000,target=5000 \
5--constraint node.id!=ytsyvuhfs60spr361y6irpynm \ # 修改处
6registry:2


只需要将==,改为!=,即可。


docker service


但终究还是感觉很不喜欢,其实我们也可以这样,根据节点关系进行约束部署,示例如下


1docker service create \
2--name nginx \
3--publish published=80,target=80 \
4--constraint node.role!=manager nginx


docker stack


1# docker-compose.yaml 
 2version: '3'
 3services:
 4    nginx:
 5         image: nginx
 6         ports:
 7           - target: 80
 8           - published: 80
 9           - protocol: tcp
10           - mode: ingress
11         deploy:
12           mode: global
13           placement:
14              constraints:                      # 添加条件约束
15                - node.role!=manager
16           restart_policy:
17             condition: on-failure
18             max_attempts: 3


Node lables


讲了这么多,照顾新手的就已经过去了,接下来我们晚点更常用的部署,更具lables,来部署。只要是同一个lable,就会可以被部署到,切后续还可以根据label进行更得心应手的管理,例如加入一个label,进行节点驱逐、然后在新加入lables,扩容


添加标签与检查标签


1# 添加标签
2docker node update --label-add role=web hostname
3# 检查标签
4docker node inspect hostname 
5# 删除标签
6docker node update --label-rm role hostname


输出如下


1"ID": "ttdku9ch37pknxu7b9sxknimb",                                                                                   
 2        "Version": {                                                                                                         
 3            "Index": 852                                                                                                     
 4        },                                                                                                                   
 5        "CreatedAt": "2020-12-08T11:10:53.322771866Z",                                                                       
 6        "UpdatedAt": "2020-12-13T13:24:57.009816659Z",                                                                       
 7        "Spec": {                                                                                                            
 8            "Labels": {                                                                                                      
 9                "role": "web"              # 这样我们就实现了添加标签                                                                                  
10            },                                                                                                               
11            "Role": "manager",                                                                                               
12            "Availability": "active"                                                                                         
13        },                 
14        # 略


docker Service


1docker service create \
2  --name nginx_2 \
3  --constraint 'node.labels.role == web' \
4  nginx


docker Stack


1version: '3'
 2services:
 3    mycat:
 4         image: nginx
 5         ports:
 6           - target: 8080
 7             published: 8080
 8             protocol: tcp
 9             mode: ingress
10         deploy:
11           mode: global
12           placement:
13              constraints:                      # 添加条件约束
14                - node.labels.role==web
15           restart_policy:
16             condition: on-failure
17             max_attempts: 3


constraints 为数组,填写多个约束时,它们之间的关系是 AND。也就是说我们可以进行组合使用


更多请参考下表


node attribute matches example
node.id Node ID node.id==2ivku8v2gvtg4
node.hostname Node hostname node.hostname!=node-2
node.role Node role (manager/worker) node.role==manager
node.platform.os Node operating system node.platform.os==windows
node.platform.arch Node architecture node.platform.arch==x86_64
node.labels User-defined node labels node.labels.security==high
engine.labels Docker Engine’s labels engine.labels.operatingsystem==ubuntu-14.04


推荐阅读


此部分的官方文档

Payne
+关注
目录
打赏
0
0
0
0
2
分享
相关文章
Docker部署RocketMQ5.2.0集群
本文详细介绍了如何使用Docker和Docker Compose部署RocketMQ 5.2.0集群。通过创建配置文件、启动集群和验证容器状态,您可以快速搭建起一个RocketMQ集群环境。希望本文能够帮助您更好地理解和应用RocketMQ,提高消息中间件的部署和管理效率。
282 91
Docker 部署 Redis
在使用 Docker 部署 Redis 时,为实现数据持久化,需正确挂载容器内的数据目录到宿主机。推荐命令如下: ``` docker run -d --name redis -v /mnt/data/redis:/data -p 6379:6379 redis ``` 该命令将宿主机的 `/mnt/data/redis` 目录挂载到容器的 `/data` 目录,确保 Redis 数据持久化。此路径更通用,适合大多数场景。避免使用不匹配的挂载路径,如 `/var/lib/redis` 或 `/mnt/data/redis` 到非默认目录,以防止数据无法正确持久化。
大模型文件Docker镜像化部署技术详解
大模型文件Docker镜像化部署技术详解
58 2
美团面试:MySQL为什么 不用 Docker部署?
45岁老架构师尼恩在读者交流群中分享了关于“MySQL为什么不推荐使用Docker部署”的深入分析。通过系统化的梳理,尼恩帮助读者理解为何大型MySQL数据库通常不使用Docker部署,主要涉及性能、管理复杂度和稳定性等方面的考量。文章详细解释了有状态容器的特点、Docker的资源隔离问题以及磁盘IO性能损耗,并提供了小型MySQL使用Docker的最佳实践。此外,尼恩还介绍了Share Nothing架构的优势及其应用场景,强调了配置管理和数据持久化的挑战。最后,尼恩建议读者参考《尼恩Java面试宝典PDF》以提升技术能力,更好地应对面试中的难题。
|
15天前
|
在Docker上部署Ollama+AnythingLLM完成本地LLM Agent部署
通过以上步骤,您可以成功在Docker上部署Ollama和AnythingLLM,实现本地LLM Agent的功能。在部署过程中,确保环境和配置正确,以避免不必要的问题。希望本文能够帮助您顺利完成部署,并在本地环境中高效地使用LLM模型。
355 8
Stirling-PDF:51.4K Star!用Docker部署私有PDF工作站,支持50多种PDF操作,从此告别在线工具
Stirling-PDF 是一款基于 Docker 的本地化 PDF 编辑工具,支持 50 多种 PDF 操作,包括合并、拆分、转换、压缩等,同时提供多语言支持和企业级功能,满足个人和企业用户的多样化需求。
119 6
Stirling-PDF:51.4K Star!用Docker部署私有PDF工作站,支持50多种PDF操作,从此告别在线工具
如何通过pm2以cluster模式多进程部署next.js(包括docker下的部署)
通过这些步骤,可以确保您的Next.js应用在多核服务器上高效运行,并且在Docker环境中实现高效的容器化管理。
248 44
docker快速部署OS web中间件 数据库 编程应用
通过Docker,可以轻松地部署操作系统、Web中间件、数据库和编程应用。本文详细介绍了使用Docker部署这些组件的基本步骤和命令,展示了如何通过Docker Compose编排多容器应用。希望本文能帮助开发者更高效地使用Docker进行应用部署和管理。
64 19
Linux服务器部署docker windows
在当今软件开发中,Docker成为流行的虚拟化技术,支持在Linux服务器上运行Windows容器。流程包括:1) 安装Docker;2) 配置支持Windows容器;3) 获取Windows镜像;4) 运行Windows容器;5) 验证容器状态。通过这些步骤,你可以在Linux环境中顺利部署和管理Windows应用,提高开发和运维效率。
96 1
Docker——阿里云服务器使用Docker部署python项目全程小记
本文记录了我在阿里云服务器上使用Docker部署python项目(flask为例)的全过程,在这里记录和分享一下,希望可以给大家提供一些参考。