备案控制台
开发者社区 云原生 容器服务 文章 正文

实战Docker容器调度（一）

2022-05-14 452
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
容器镜像服务 ACR，镜像仓库100个 不限时长
简介： 实战Docker容器调度（一）

一、前言#

为什么还学Docker的容器编排？

kubernetes几年前就是容器编排的龙头老大了，感觉上想学容器编排，是不是可以直接去学学k8s了呢？

其实我是学了一阵k8s之后折回头实践使用一下Docker容器编排的，因为在学k8s的过程中难免总是和Docker的容器编排做对比。所以不学学Docker Swarm，怎么知道K8S才是最好用、最强大的容器编排工具呢？

所以整理笔记 记录实战Docker Compose和Docker Swarm


二、Docker Compose#

2.1、简介#


Docker Compose 是Docker提供的定义、运行多个Docker应用容器的工具，我们通过Docker Compose定义配置好应用服务后，通过一条简单的命令就能根据这个配置创建出配置中描述的容器。

Docker Compose可以运行在生产环境、测试环境和开发环境中。


使用Docker Compose需要有这三个基础的步骤：

  1. 使用Dockerfile定义你的应用环境。
  2. 编写docker-compose.yml 定义你的服务，目的是为了让Dockerfile定义的容器可以一起运行。


version: '2.0'
services: # 描述我们的应用
  web:  
    build: .
    ports:
    - "5000:5000"
    volumes:
    - .:/code
    - logvolume01:/var/log
    links: # 在启动前先启动redis
    - redis
  redis:
    image: redis
volumes: # 持久化相关挂载卷
  logvolume01: {}


  1. 执行docker-compose up命令，Compose就会开始运行你描述的整个app。

参考：官方文档：https://docs.docker.com/compose/


2.2、下载安装#


# 将docker-compose下载安装到 /usr/local/bin 目录下
curl -L https://github.com/docker/compose/releases/download/1.25.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose



# docker-compse是一个二进制可执行的文件，所以给他可执行权限
sudo chmod +x /usr/local/bin/docker-compose



2.3、小实验#


在这个小实验中，我们将使用Docker Compose安装一个简单的Java Web应用。

Java Web使用SpringBoot极速构建，提供一个Restful方法如下：

每次调用它都将redis里面的key=money的值+1后返回～



编写Dockerfile，这个dockerfile可以让我们将应用都jar包打包成 docker image



编写docker compose。这个描述文件就是在告诉docker-compose按照什么都规则去启动构建容器。



将 Dockerfile、docker-compose.yml、jar包都上传到服务器上～



为什么这里写服务名，而不写ip？


因为docker容器启动后会随机分配给它ip，举个例子：比如你有两个镜像A、B，那先如果先启动A，那他的ip可能是：172.16.0.2 。再启动B他的ip就可能是 172.16.0.3。 反之：如果你先启动的是容器B，那他的ip可能是172.16.0.3，而不是我们一开始说的172.16.0.2


所以这里写服务名是一个明智的选择，因为如果我们在这里固定写一个ip的话，万一哪天这个容器挂了，被重新拉起之后他的ip变了，那我们的web应用岂不是找不到这个redis了？所以用不会服务名替换ip。很明智。


容器启动后，同属一个网络下（默认一般是桥接）的容器彼此能根据对方的name彼此ping通。

使用docker-compose时，他会为我们新创建一个虚拟网卡。app中的容器启动后都会加入这个虚拟网络中。

对这块知识有疑问，可以看看这篇笔记：https://www.cnblogs.com/ZhuChangwu/p/13689736.html


web项目的配置文件如下图：

redis的host并不是某一个ip哦，而是一个服务名～



构建启动：应用服务

这其实是一个比较激动人心的事情。可以想一下，原来学docker的时候，我们直接从docker-hub上下载镜像，然后： docker run 使用镜像。

后来我们学着通过volume将容器中应用的配置文件挂载到宿主机实现简单的定制化配置，然后docker run 启动容器

再后来我们学习了Dockerfile，自定义镜像，实现了将我们本地打包好的应用做成镜像，然后docker run 启动容器。

到现在，我们下载安装好docker后，不用手动下载任何镜像，只要编写Dockerfile描述我们打包好后到程序应该做成什么镜像，通过docker-compose.yml 描述组成app的各个容器（可以是Dockerfile描述的镜像、本地已经存在的镜像、或者远程仓库中的镜像）之间有什么依赖关系。谁先启动，谁后启动。然后执行 docker-compose up命令，一键部署app。


# 一键部署
[root@VM-0-6-centos myServer]# docker-compose up
# docker-compose为我们创建了一叫做： myserver_default的网络
Creating network "myserver_default" with the default driver
# 构建web模块时，发现他depend_on redis，所以先拉去redis镜像
Pulling redis (redis:)...
latest: Pulling from library/redis
d121f8d1c412: Pull complete
2f9874741855: Pull complete
d92da09ebfd4: Pull complete
bdfa64b72752: Pull complete
e748e6f663b9: Pull complete
eb1c8b66e2a1: Pull complete
Digest: sha256:1cfb205a988a9dae5f025c57b92e9643ec0e7ccff6e66bc639d8a5f95bba928c
Status: Downloaded newer image for redis:latest
# 开始构建docker-compose.yml中指定的web模块
Building web
Step 1/5 : FROM java:8
8: Pulling from library/java
5040bd298390: Pull complete
fce5728aad85: Pull complete
76610ec20bf5: Pull complete
60170fec2151: Pull complete
e98f73de8f0d: Pull complete
11f7af24ed9c: Pull complete
49e2d6393f32: Pull complete
bb9cdec9c7f3: Pull complete
Digest: sha256:c1ff613e8ba25833d2e1940da0940c3824f03f802c449f3d1815a66b7f8c0e9d
Status: Downloaded newer image for java:8
 ---> d23bdf5b1b1b
Step 2/5 : COPY *.jar /app.jar
 ---> 15421d081257
Step 3/5 : EXPOSE 8888
 ---> Running in 18f52319a82d
Removing intermediate container 18f52319a82d
 ---> 86cb853b5711
Step 4/5 : CMD ["--server.port=8888"]
 ---> Running in 147d797d5848
Removing intermediate container 147d797d5848
 ---> 323a85aa9c61
Step 5/5 : ENTRYPOINT  ["java","-jar","/app.jar"]
 ---> Running in 6988142d65d4
Removing intermediate container 6988142d65d4
 ---> 245e7675226d
Successfully built 245e7675226d
Successfully tagged myserver_web:latest
WARNING: Image for service web was built because it did not already exist. To rebuild this image you must use `docker-compose build` or `docker-compose up --build`.
# 为我们的webapp成功创建了两个容器
Creating myserver_redis_1 ... done
Creating myserver_web_1   ... done
Attaching to myserver_redis_1, myserver_web_1
# 先启动redis
redis_1  | 1:C 21 Sep 2020 12:27:54.827 # oO0OoO0OoO0Oo Redis is starting oO0OoO0OoO0Oo
redis_1  | 1:C 21 Sep 2020 12:27:54.827 # Redis version=6.0.8, bits=64, commit=00000000, modified=0, pid=1, just started
redis_1  | 1:C 21 Sep 2020 12:27:54.827 # Warning: no config file specified, using the default config. In order to specify a config file use redis-server /path/to/redis.conf
redis_1  | 1:M 21 Sep 2020 12:27:54.828 * Running mode=standalone, port=6379.
redis_1  | 1:M 21 Sep 2020 12:27:54.828 # WARNING: The TCP backlog setting of 511 cannot be enforced because /proc/sys/net/core/somaxconn is set to the lower value of 128.
redis_1  | 1:M 21 Sep 2020 12:27:54.828 # Server initialized
redis_1  | 1:M 21 Sep 2020 12:27:54.828 # WARNING overcommit_memory is set to 0! Background save may fail under low memory condition. To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then reboot or run the command 'sysctl vm.overcommit_memory=1' for this to take effect.
redis_1  | 1:M 21 Sep 2020 12:27:54.828 # WARNING you have Transparent Huge Pages (THP) support enabled in your kernel. This will create latency and memory usage issues with Redis. To fix this issue run the command 'echo madvise > /sys/kernel/mm/transparent_hugepage/enabled' as root, and add it to your /etc/rc.local in order to retain the setting after a reboot. Redis must be restarted after THP is disabled (set to 'madvise' or 'never').
redis_1  | 1:M 21 Sep 2020 12:27:54.828 * Ready to accept connections
# 启动SpringBoot
web_1    |
web_1    |   .   ____          _            __ _ _
web_1    |  /\\ / ___'_ __ _ _(_)_ __  __ _ \ \ \ \
web_1    | ( ( )\___ | '_ | '_| | '_ \/ _` | \ \ \ \
web_1    |  \\/  ___)| |_)| | | | | || (_| |  ) ) ) )
web_1    |   '  |____| .__|_| |_|_| |_\__, | / / / /
web_1    |  =========|_|==============|___/=/_/_/_/
web_1    |  :: Spring Boot ::        (v2.3.4.RELEASE)
web_1    |
web_1    | 2020-09-21 12:27:56.777  INFO 1 --- [           main] com.changwu.DemoApplication              : Starting DemoApplication v0.0.1-SNAPSHOT on b66d5414a322 with PID 1 (/app.jar started by root in /)
web_1    | 2020-09-21 12:27:56.780  INFO 1 --- [           main] com.changwu.DemoApplication              : No active profile set, falling back to default


服务启动后可以验证一下 docker-compose up命令是否构建起了我们的服务



停止服务：

  • 在yml文件所在目录执行：docker-compose stop
  • CTRL + C


docker-compose up 运行起所有的容器后，我们得到的是一个project，注意这里的这个project依然是一个单机的应用，相对于拆分前来说，现在的project是一个容器化后的单机应用。 （Docker提供的集群化部署方案在下面的章节～）

官方Demo：https://docs.docker.com/compose/gettingstarted/


2.4、小实验的细节#


docker-compose up 成功执行后，可以看到他根据我们配置文件描述，为我们自动下载了redis镜像、java镜像、以及根据Dockerfile创建镜像



查看当前正在运行的容器（通过 docker-compose up 为我们自动运行起来的容器）：

正在运行的容器的命名规则：目录名_镜像名_副本数



docker-compose up 命令还为我们创建了一个叫做 composetest_default的网络，整个项目中的容器都加入到这个网络中，这个网络支持我们使用 服务名访问到容器。是实现负载均衡的前提。



查看网络的详情：下面的两个容器在同一个网络下，



在同一个网络下的容器，彼此是可以通过对方的服务名访问到对方，如下：



2.5、Compose file的编写规则#


参考：https://docs.docker.com/compose/compose-file/


文章标签：
容器服务Kubernetes版
云数据库 Redis 版
Java
容器
测试技术
NoSQL
负载均衡
Docker
Kubernetes
Redis
调度
关键词：
Docker实战
Docker容器
容器docker
容器实战
实战Docker
相关实践学习
容器服务Serverless版ACK Serverless 快速入门：在线魔方应用部署和监控
通过本实验，您将了解到容器服务Serverless版ACK Serverless 的基本产品能力，即可以实现快速部署一个在线魔方应用，并借助阿里云容器服务成熟的产品生态，实现在线应用的企业级监控，提升应用稳定性。
云原生实践公开课
课程大纲 开篇：如何学习并实践云原生技术 基础篇： 5 步上手 Kubernetes 进阶篇：生产环境下的 K8s 实践 相关的阿里云产品：容器服务 ACK 容器服务 Kubernetes 版（简称 ACK）提供高性能可伸缩的容器应用管理能力，支持企业级容器化应用的全生命周期管理。整合阿里云虚拟化、存储、网络和安全能力，打造云端最佳容器化应用运行环境。 了解产品详情: https://www.aliyun.com/product/kubernetes
uzl2tcffzmkty
目录
相关文章
桃李春风一杯酒
|
2天前
|
存储 安全 数据安全/隐私保护
【Docker 专栏】Docker 容器化应用的备份与恢复策略
【5月更文挑战第9天】本文探讨了Docker容器化应用的备份与恢复策略，强调了备份在数据保护、业务连续性和合规要求中的关键作用。内容涵盖备份的重要性、内容及方法，推荐了Docker自带工具和第三方工具如Portainer、Velero。制定了备份策略，包括频率、存储位置和保留期限，并详细阐述了恢复流程及注意事项。文章还提及案例分析和未来发展趋势，强调了随着技术发展，备份与恢复策略将持续演进，以应对数字化时代的挑战。
桃李春风一杯酒
22 1
【Docker 专栏】Docker 容器化应用的备份与恢复策略
桃李春风一杯酒
|
2天前
|
监控 Kubernetes Docker
【Docker 专栏】Docker 容器内应用的健康检查与自动恢复
【5月更文挑战第9天】本文探讨了Docker容器中应用的健康检查与自动恢复，强调其对应用稳定性和系统性能的重要性。健康检查包括进程、端口和应用特定检查，而自动恢复则涉及重启容器和重新部署。Docker原生及第三方工具（如Kubernetes）提供了相关功能。配置检查需考虑检查频率、应用特性和监控告警。案例分析展示了实际操作，未来发展趋势将趋向更智能和高效的检查恢复机制。
桃李春风一杯酒
28 4
【Docker 专栏】Docker 容器内应用的健康检查与自动恢复
周盛欢
|
1天前
|
测试技术 持续交付 Docker
Docker in Docker原理与实战
Docker in Docker原理与实战
周盛欢
4 0
周盛欢
|
1天前
|
NoSQL Redis Docker
Mac上轻松几步搞定Docker与Redis安装：从下载安装到容器运行实测全程指南
Mac上轻松几步搞定Docker与Redis安装：从下载安装到容器运行实测全程指南
周盛欢
10 0
桃李春风一杯酒
|
2天前
|
缓存 关系型数据库 数据库
【Docker 专栏】Docker 与容器化数据库的集成与优化
【5月更文挑战第9天】本文探讨了Docker与容器化数据库集成的优势，如快速部署、环境一致性、资源隔离和可扩展性，并列举了常见容器化数据库（如MySQL、PostgreSQL和MongoDB）。讨论了集成方法、注意事项、优化策略，包括资源调整、缓存优化和监控告警。此外，强调了数据备份、恢复测试及性能评估的重要性。未来，随着技术发展，二者的集成将更紧密，为数据管理带来更多可能性。掌握此技术将应对数字化时代的机遇与挑战。
桃李春风一杯酒
20 3
【Docker 专栏】Docker 与容器化数据库的集成与优化
桃李春风一杯酒
|
2天前
|
存储 安全 数据库
【Docker 专栏】Docker 容器内应用的状态持久化
【5月更文挑战第9天】本文探讨了Docker容器中应用状态持久化的重要性，包括数据保护、应用可用性和历史记录保存。主要持久化方法有数据卷、绑定挂载和外部存储服务。数据卷是推荐手段，可通过`docker volume create`命令创建并挂载。绑定挂载需注意权限和路径一致性。利用外部存储如数据库和云服务可应对复杂需求。最佳实践包括规划存储策略、定期备份和测试验证。随着技术发展，未来将有更智能的持久化解决方案。
桃李春风一杯酒
17 2
【Docker 专栏】Docker 容器内应用的状态持久化
桃李春风一杯酒
|
2天前
|
机器学习/深度学习 监控 Kubernetes
【Docker 专栏】Docker 容器内服务的自动扩展与缩容
【5月更文挑战第9天】本文探讨了Docker容器服务的自动扩展与缩容原理及实践，强调其在动态业务环境中的重要性。通过选择监控指标（如CPU使用率）、设定触发条件和制定扩展策略，实现资源的动态调整。方法包括云平台集成和使用Kubernetes等框架。实践中，电商平台和实时数据处理系统受益于此技术。注意点涉及监控数据准确性、扩展速度和资源分配。未来，智能算法将提升扩展缩容的效率和准确性，成为关键技术支持。
桃李春风一杯酒
20 1
【Docker 专栏】Docker 容器内服务的自动扩展与缩容
桃李春风一杯酒
|
2天前
|
Java 数据库连接 Docker
【Docker 专栏】Docker 容器内环境变量的管理与使用
【5月更文挑战第9天】本文介绍了Docker容器中环境变量的管理与使用，环境变量用于传递配置信息和设置应用运行环境。设置方法包括在Dockerfile中使用`ENV`指令或在启动容器时通过`-e`参数设定。应用可直接访问环境变量或在脚本中使用。环境变量作用包括传递配置、设置运行环境和动态调整应用行为。使用时注意变量名称和值的合法性、保密性和覆盖问题。理解并熟练运用环境变量能提升Docker技术的使用效率和软件部署质量。
桃李春风一杯酒
21 0
【Docker 专栏】Docker 容器内环境变量的管理与使用
默不会开发
|
3天前
|
运维 安全 Linux
深入理解Docker自定义网络：构建高效的容器网络环境
深入理解Docker自定义网络：构建高效的容器网络环境
默不会开发
31 6
默不会开发
|
3天前
|
存储 弹性计算 运维
Docker数据集与自定义镜像：构建高效容器的关键要素
Docker数据集与自定义镜像：构建高效容器的关键要素
默不会开发
23 8
云原生

容器服务

热门文章

最新文章

  • 1
    Docker CE 镜像源站
  • 2
    OpenKruise v1.6 版本解读：增强多域管理能力
  • 3
    Docker学习路线图 (持续更新中)
  • 4
    Docker常见故障排查指南 - 阿里云容器服务
  • 5
    如何解决Docker容器和宿主机时间同步问题
  • 6
    Maven Docker镜像使用技巧
  • 7
    利用阿里云容器服务打通TensorFlow持续训练链路
  • 8
    Docker改名啦？什么是 Moby Project
  • 9
    树莓派 + Docker - 轻松实现人脸识别应用
  • 10
    当Docker遇到数据库：在阿里云容器服务中使用RDS
  • 1
    Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker 避坑
    316
  • 2
    Kubernetes（K8s）与虚拟GPU（vGPU）协同：实现GPU资源的高效管理与利用
    372
  • 3
    OpenKruise v1.6 版本解读：增强多域管理能力
    164742
  • 4
    云计算与大数据：合作与创新
    314
  • 5
    Serverless 成本再优化：Knative 支持抢占式实例
    92674
  • 6
    在 ECS 上启动 minikube 失败的解决办法
    455
  • 7
    一文带你快速学会SpringBoot工程下MaBatis对数据的增删改查功能！
    396
  • 8
    享道出行：容器弹性技术驱动下的智慧出行稳定性实践
    58511
  • 9
    高光回眸：阿里云容器服务如何全面助力精彩亚运
    65441
  • 10
    【Docker系列】Docker-核心概念/常用命令与项目部署实践
    451

    • 相关课程

    更多
  • 深入解析Docker容器化技术
  • 基于Docker与Jenkins实现自动化部署
  • Docker 快速入门
  • Docker完全自学手册图文教程
  • AI开发者的Docker实践
  • Docker 入门

    • 相关电子书

    更多
  • 应用 Docker 进行持续交付：用技术改变交付路程
  • 从Docker到容器服务
  • 构建基因数据应用生态系统—— docker in Bio/informatics

    • 相关实验场景

    更多
  • 通过容器镜像仓库与容器服务快速部署spring-hello应用
  • 基于ACK Serverless实现容器应用弹性伸缩
  • 通过Ingress进行容器应用灰度发布
  • Docker Compose部署案例
  • Docker Compose入门
  • 容器中的volume卷

    • 推荐镜像

    更多
  • docker-ce
  • docker-toolbox
  • pouch
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）