docker+awk=无敌?!

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
任务调度 XXL-JOB 版免费试用,400 元额度,开发版规格
简介: docker+awk=无敌?!

前言

当今软件开发的世界充满了数据,而 Docker 则是许多开发者首选的容器化解决方案。但是,要从这些数据中提取有用的信息并不容易。这就是为什么我们需要 Awk 这样的工具。Awk 是一种强大的文本处理工具,具有灵活的语法和强大的功能,能够轻松地处理和转换文本数据。结合 Docker 和 Awk,您可以构建出高效的数据处理管道,从而在开发和运维过程中更加游刃有余。

需求分析

我需要使用docker来部署一个springboot+vue的项目,其中我需要用到的镜像有springboot项目镜像、vue项目镜像、redis镜像、zookeeper镜像,并且我需要完成以下几点

  • springboot项目配置redis和zookeeper时候使用namespace,也就是说host=test-redis这种,主要是为了防止ip会变化(下面会讲解决办法)
  • 容器之间可以互相访问,通过namespace,也可以说是容器名称
  • 脚本一键部署项目(需满足自动拉取最新的镜像,自动run一个容器,停止并删除老版本的容器,删除之前存在的镜像)

容器间通过容器名称访问

  1. 首先我们要创建一个网络,其实类似于docker-compose
docker network create --subnet=172.19.0.0/16 my_network
  1. 这条命令创建了一个名为my_network的 Docker 网络,并指定了子网为172.19.0.0/16。让我解释一下每个部分的含义:
  • docker network create: 这是 Docker 命令行工具中用于创建新网络的命令。它告诉 Docker 创建一个新的网络。
  • --subnet=172.19.0.0/16: 这个选项指定了网络的子网。子网用于划分 IP 地址范围。在这个例子中,子网是 172.19.0.0/16,这意味着这个网络可以分配 172.19.0.0172.19.255.255 之间的 IP 地址给容器使用。这样做是为了确保在这个网络中的容器可以使用属于这个子网的 IP 地址。
  • my_network: 这是网络的名称。它指定了要创建的网络的名称为 my_network。这个名称可以用来在后续的 Docker 命令中引用这个网络,比如将容器连接到这个网络或者查看这个网络的信息。
  1. 创建容器的时候指定在这个网络下
docker run -d -p 6399:6379 --name test-redis --net my_network redis
  1. 这条命令运行了一个 Redis 容器,并将其命名为test-redis,同时将该容器连接到名为my_network的 Docker 网络中。具体参数的含义如下:
  • docker run: 这是 Docker 命令行工具中用于运行容器的命令。
  • -d: 这个选项表示以后台(detached)模式运行容器,即在后台运行容器,并且不会阻塞当前终端。
  • -p 6399:6379: 这个选项将容器的端口 6379 映射到主机的端口 6399。这样可以让主机上的其他程序通过主机的 6399 端口来访问 Redis 服务。在这个例子中,Redis 服务在容器内的 6379 端口上运行,但是外部程序可以通过主机的 6399 端口来访问。
  • --name test-redis: 这个选项为容器指定一个名称,即 test-redis。这个名称可以用来在后续的 Docker 命令中引用这个容器。
  • --net my_network: 这个选项将容器连接到名为 my_network 的 Docker 网络中。这样做可以让 test-redis 容器与该网络中的其他容器进行通信,而不是与默认的桥接网络进行通信。
  1. 这样就可以实现容器中互相通信了
# springboot中配置redis的信息就可以这样写
redis.host=test-redis

当然上面的仅仅是其中一种实现的方式,还有别的很多的实现方式,比如我可以用docker-compose来写,比如我可以使用docker于宿主机共享网络和端口等等

脚本实现一键部署

#!/bin/bash
# 检查是否传递了一个参数
if [ "$#" -ne 1 ]; then
    echo "错误:需要传递一个参数"
    exit 1
fi
# 启动 Redis 和 Zookeeper 容器
echo "启动 Redis 容器"
docker start test-redis
echo "启动 Zookeeper 容器"
docker start test-zookeeper
# 提取参数,vue表明前端项目,dasmart表明后端项目
prefix="$1"
vue="${prefix}-vue"
dasmart="${prefix}-dasmart"
# 使用curl获取数据,并提取第一条数据
image_vue_tag=$(curl -u "$HARBOR_NAME:$HARBOR_PASSWORD" https://harbor.com/api/v2.0/projects/acowbo/repositories/"$vue"/artifacts/ | grep -o '"name":"[^"]*"' | sed 's/"name":"\([^"]*\)"/\1/' | head -n 1)
image_dasmart_tag=$(curl -u "$HARBOR_NAME:$HARBOR_PASSWORD" https://harbor.com/api/v2.0/projects/acowbo/repositories/"$dasmart"/artifacts/  | grep -o '"name":"[^"]*"' | sed 's/"name":"\([^"]*\)"/\1/' | head -n 1)
# 检查是否成功获取到数据
if [ -z "$image_vue_tag" ] || [ -z "$image_dasmart_tag" ]; then
    echo "未能获取到镜像标签"
    exit 1
fi
# 查找并停止匹配到的容器
container_ids=$(docker ps -a | grep -E "$vue|$dasmart" | awk '{print $1}')
if [ -n "$container_ids" ]; then
    echo "找到匹配的容器,停止并删除它们:"
    echo "$container_ids" | xargs docker stop
    echo "$container_ids" | xargs docker rm
else
    echo "没有找到匹配的容器,不执行停止和删除操作。"
fi
# 查找并删除匹配到的镜像
image_ids=$(docker images | grep "$prefix" | awk '{print $3}')
if [ -n "$image_ids" ]; then
    echo "找到匹配的镜像,删除它们:"
    echo "$image_ids" | xargs docker rmi
else
    echo "没有找到匹配的镜像,不执行删除操作。"
fi
echo "拉取并运行 $prefix dasmart 容器"
docker pull harbor.com/acowbo/"$dasmart":"$image_dasmart_tag"
docker run -d -p 31342:11025 --name bridge-dasmart --net redis_network harbor.com/acowbo/"$dasmart":"$image_dasmart_tag"
echo "拉取并运行 $prefix vue 容器"
docker pull harbor.com/acowbo/"$vue":"$image_vue_tag"
docker run -d -p 31344:8080 --name bridge-vue harbor.com/acowbo/"$vue":"$image_vue_tag"
echo "脚本执行完成"

命令解释

这个命令的作用是从 Harbor 仓库中获取具有指定名称的项目下特定镜像仓库(repository)的最新构建(artifact)的名称。

让我们逐步解释这个命令:

  1. curl -u "$HARBOR_NAME:$HARBOR_PASSWORD" https://harbor.com/api/v2.0/projects/acowbo/repositories/"$vue"/artifacts/
  • curl 是一个用于发送 HTTP 请求的命令行工具。
  • -u "$HARBOR_NAME:$HARBOR_PASSWORD" 选项指定了使用 Basic 认证,并提供了 Harbor 用户名和密码。
  • https://harbor.com/api/v2.0/projects/acowbo/repositories/"$vue"/artifacts/ 是要访问的 API 端点,其中 $vue 是变量,表示所需镜像仓库的名称。该命令会向 Harbor 发送一个 API 请求,以获取指定项目中指定仓库的所有构建信息。
  1. grep -o '"name":"[^"]*"'
  • grep 是一个用于在文本中搜索匹配模式的工具。
  • -o 选项表示只输出匹配到的内容。
  • '"name":"[^"]*"' 是一个正则表达式,用于匹配形如 "name":"..." 格式的字符串。这样可以从 API 返回的数据中提取出构建的名称。
  1. sed 's/"name":"\([^"]*\)"/\1/'
  • sed 是一个流式文本编辑器,用于对文本进行处理。
  • 's/"name":"\([^"]*\)"/\1/' 是一个替换命令,将匹配到的字符串中的 "name":"..." 部分替换为其中的名称。
  • \([^"]*\) 是一个捕获组,用于匹配双引号之间的任意字符,即构建的名称。
  • \1 是一个反向引用,表示捕获组中匹配到的内容。
  1. head -n 1
  • head 是一个命令,用于显示文件的前几行。
  • -n 1 选项表示只输出第一行。

综上所述,这个命令的最终效果是从 Harbor 仓库中获取指定项目下指定镜像仓库的最新构建的名称,并将其输出到标准输出。

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
打赏
0
0
0
0
48
分享
相关文章
Docker与DevOps的无敌组合,引爆你的创新潜能
Docker与DevOps的无敌组合,引爆你的创新潜能
267 0
Docker网关冲突导致容器启动网络异常解决方案
当执行`docker-compose up`命令时,服务器网络可能因Docker创建新网桥导致IP段冲突而中断。原因是Docker默认的docker0网卡(172.17.0.1/16)与宿主机网络地址段重叠,引发路由异常。解决方法为修改docker0地址段,通过配置`/etc/docker/daemon.json`调整为非冲突段(如192.168.200.1/24),并重启服务。同时,在`docker-compose.yml`中指定网络模式为`bridge`,最后通过检查docker0地址、网络接口列表及测试容器启动验证修复效果。
【赵渝强老师】数据库不适合Docker容器化部署的原因
本文介绍了在Docker中部署MySQL数据库并实现数据持久化的方法,同时分析了数据库不适合容器化的原因。通过具体步骤演示如何拉取镜像、创建持久化目录及启动容器,确保数据安全存储。然而,由于数据安全性、硬件资源争用、网络带宽限制及额外隔离层等问题,数据库服务并不完全适合Docker容器化部署。文中还提到数据库一旦部署通常无需频繁升级,与Docker易于重构和重新部署的特点不符。
204 18
【赵渝强老师】数据库不适合Docker容器化部署的原因
在Docker容器中部署GitLab服务器的步骤(面向Ubuntu 16.04)
现在,你已经成功地在Docker上部署了GitLab。这就是我们在星际中的壮举,轻松如同土豆一样简单!星际旅行结束,靠岸,打开舱门,迎接全新的代码时代。Prepare to code, astronaut!
94 12
获取Docker基础使用方法:让容器化变得轻松。
对于Docker的初学者来说,了解这些基础知识点就足够了。实践是最好的老师,越是动手操作,对Docker的理解会越深。祝阅读这篇文章的开发者们一切顺利,愿你在Docker的海洋中航行顺利!
110 17
Docker容器的实战讲解
这只是Docker的冰山一角,但是我希望这个简单的例子能帮助你理解Docker的基本概念和使用方法。Docker是一个强大的工具,它可以帮助你更有效地开发、部署和运行应用。
155 27
docker容器为啥会开机自启动
通过配置适当的重启策略,Docker容器可以在主机系统重启后自动启动。这对于保持关键服务的高可用性和自动恢复能力非常有用。选择适合的重启策略(如 `always`或 `unless-stopped`),可以确保应用程序在各种情况下保持运行。理解并配置这些策略是确保Docker容器化应用可靠性的关键。
561 93
zabbix7.0.9安装-以宝塔安装形式-非docker容器安装方法-系统采用AlmaLinux9系统-最佳匹配操作系统提供稳定运行环境-安装教程完整版本-优雅草卓伊凡
zabbix7.0.9安装-以宝塔安装形式-非docker容器安装方法-系统采用AlmaLinux9系统-最佳匹配操作系统提供稳定运行环境-安装教程完整版本-优雅草卓伊凡
221 30
容器技术实践:在Ubuntu上使用Docker安装MySQL的步骤。
通过以上的操作,你已经步入了Docker和MySQL的世界,享受了容器技术给你带来的便利。这个旅程中你可能会遇到各种挑战,但是只要你沿着我们划定的路线行进,你就一定可以达到目的地。这就是Ubuntu、Docker和MySQL的灵魂所在,它们为你开辟了一条通往新探索的道路,带你亲身感受到了技术的力量。欢迎在Ubuntu的广阔大海中探索,用Docker技术引领你的航行,随时准备感受新技术带来的震撼和乐趣。
195 16
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等