玩转 Docker 部署

本文涉及的产品
云原生内存数据库 Tair,内存型 2GB
云数据库 Redis 版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: 相信很多人都很头疼 Docker 的部署,我自己也是。最近发现一个很有意思的现象:一个人想学某样技术的时候,当学会了之后,但是这时出现了一个问题需要学习另一门技术时,无论这个人前面学得多么刻苦,用功,到这一步有 99% 的概率都会放弃。我愿称这种现象为 “学习窗口”。写一个网站、学会 Vue.js 是很多人的“学习窗口”,只要离开了这个“学习窗口”,他们就不想学了:我都学这么多了,草,怎么最后还要学部署啊。所以,这篇文章就跟大家分享一下关于 Docker 部署的那些事。

image.png


前言


相信很多人都很头疼 Docker 的部署,我自己也是。

最近发现一个很有意思的现象:一个人想学某样技术的时候,当学会了之后,但是这时出现了一个问题需要学习另一门技术时,无论这个人前面学得多么刻苦,用功,到这一步有 99% 的概率都会放弃。我愿称这种现象为 “学习窗口”


写一个网站、学会 Vue.js 是很多人的“学习窗口”,只要离开了这个“学习窗口”,他们就不想学了:我都学这么多了,草,怎么最后还要学部署啊。

所以,这篇文章就跟大家分享一下关于 Docker 部署的那些事。


需求


按照国际惯例,先从一个非常简单的需求入手,这个需求只完成几件事:


  • 显示待办事项列表 + 添加一个待办事项
  • 记录网站的访问量


上面就是一个经典到不能再经典的 Todo List 应用。

image.png

分析一下需求:待办事项列表需要用到 数据库 完成,记录网站访问量则要用到高速读取的 缓存 来完成。


技术选型


目前我前端技术栈是 React.js,所以前端用 React.js

由于 Express 有自己的脚手架,所以,后端采用 Express

数据库方面,因为我自己用的是 M1 的 Mac,所以 mysql 镜像无法拉取,暂时用 mariadb 来代替。


缓存大家都很熟悉了,直接用 redis 搞定。


前端实现


关于前端的实现非常简单,发请求使用 axios

interface Todo {
  id: number;
  title: string;
  status: 'todo' | 'done';
}
const http = axios.create({
  baseURL: 'http://localhost:4200',
})
const App = () => {
  const [newTodoTitle, setNewTodoTitle] = useState<string>('');
  const [count, setCount] = useState(0);
  const [todoList, setTodoList] = useState<Todo[]>([]);
  // 添加 todo
  const addTodo = async () => {
    await http.post('/todo', {
      title: newTodoTitle,
      status: 'todo',
    })
    await fetchTodoList();
  }
  // 获取访问量,并添加一个访问量
  const fetchCount = async () => {
    await http.post('/count');
    const { data } = await http.get('/count');
    setCount(data.myCount);
  }
  // 获取 todo 列表
  const fetchTodoList = async () => {
    const { data } = await http.get('/todo');
    setTodoList(data.todoList);
  }
  useEffect(() => {
    fetchCount().then();
    fetchTodoList().then();
  }, []);
  return (
    <div className="App">
      <header>网站访问量:{count}</header>
      <ul>
        {todoList.map(todo => (
          <li key={todo.id}>{todo.title} - {todo.status}</li>
        ))}
      </ul>
      <div>
        <input value={newTodoTitle} onChange={e => setNewTodoTitle(e.target.value)} type="text"/>
        <button onClick={addTodo}>提交</button>
      </div>
    </div>
  );
}
复制代码


后端实现


后端稍微麻烦了一点,要解决的问题有:


  • 跨域
  • 数据库连接
  • Redis 连接

先在 main.ts 里配置好路由:

var cors = require('cors')
var indexRouter = require('./routes/index');
var usersRouter = require('./routes/count');
var todosRouter = require('./routes/todo');
var app = express();
// 解决跨域
app.use(cors());
// 业务路由
app.use('/', indexRouter);
app.use('/count', usersRouter);
app.use('/todo', todosRouter);
...
module.exports = app;
复制代码


访问量路由需要用到 redis 来实现高速读写:

const express = require('express');
const Redis = require("ioredis");
const router = express.Router();
// 连接 redis
const redis = new Redis({
  port: 6379,
  host: "127.0.0.1",
});
router.get('/', async (req, res, next) => {
  const count = Number(await redis.get('myCount')) || 0;
  res.json({ myCount: count })
});
router.post('/', async (req, res) => {
  const count = Number(await redis.get('myCount'));
  await redis.set('myCount', count + 1);
  res.json({ myCount: count + 1 })
})
module.exports = router;
复制代码


todo 路由里使用 sequelize 这个库来实现数据库连接和初始化:

const { Sequelize, DataTypes} = require('sequelize');
const express = require("express");
const router = express.Router();
// 连接数据库
const sequelize = new Sequelize({
  host: 'localhost',
  database: 'docker_todo',
  username: 'root',
  password: '123456',
  dialect: 'mariadb',
});
// 定义 todo model
const Todo = sequelize.define('Todo', {
  id: {
    type: Sequelize.INTEGER,
    autoIncrement: true,
    primaryKey: true
  },
  title: { type: DataTypes.STRING },
  status: { type: DataTypes.STRING }
}, {});
// 同步数据库结构
sequelize.sync({ force: true }).then(() => {
  console.log('已同步');
});
router.get('/', async (req, res) => {
  // 获取 todo list
  const todoList = await Todo.findAll();
  res.json({ todoList });
})
router.post('/', async (req, res, next) => {
  const { title, status } = req.body;
  // 创建一个 todo
  const newTodo = await Todo.create({
    title,
    status: status || 'todo',
  });
  res.json({ todo: newTodo })
});
module.exports = router;
复制代码


本地运行


本来使用以下命令就可以跑本地应用了:

# 前端
cd client && npm run start
# 后端
cd server && npm run start
复制代码

然而,我们本地并没有 mariadb 和 redis,这就有点难受了。


启动容器


如果是在以前,我一般会在 Mac 上用下面的命令安装一个 mariadb 和 redis:

brew install mariadb
brew install redis
复制代码

然后在 自己电脑 里一通配置(username, password...),最后才能在本地跑项目,非常麻烦。而且一旦配置错了,草,又要重装。。。


而 Docker 其中一个作用就是将上面 mariadb 和 redis 都打成不同 image(镜像),使用 DockerHub 统一管理,使用 Docker 就可以快速配置一个服务。


以前只能一个电脑装一个 MySQL,现在我能同时跑 8 个 MySQL 容器(不同端口),想删谁删谁,想装谁装谁。遇事不决,先把容器重启,重启不行,再用镜像构建一个容器,构建不行,再拉一个 latest 的镜像,再构建一次,非常的带劲。


废话不多说,先来把 redis 启动:

docker run --name docker-todo-redis -p 6379:6379 -d redis
复制代码


然后再把 mariadb 启动:

docker run -p 127.0.0.1:3306:3306  --name docker-todo-mariadb -e MARIADB_ROOT_PASSWORD=123456 MARIADB_DATABASE=docker_todo -d mariadb
复制代码


解释一下参数 -p 是端口映射:本机:容器-e 指定环境变量,-d 表示后台运行。

再次运行:

# 前端
cd client && npm run start
# 后端
cd server && npm run start
复制代码


可以在 http://localhost:3000 看到页面:

image.png

貌似一切都很 OK 的样子~


docker-compose


试想一下,如果现在给你一个机器,请问你要怎么部署?你要先跑上面两条 docker 命令,再跑下面两条 npm 的命令,麻烦。


能不能一键拉起 mariadb, redis 2 个容器呢?这就是 docker-compose.yml 的由来。创建一个 dev-docker-compose.yml 文件:

version: '3'
services:
  mariadb:
    image: mariadb
    container_name: 'docker-todo-mariadb'
    environment:
      MARIADB_ROOT_PASSWORD: '123456'
      MARIADB_DATABASE: 'docker_todo'
    ports:
      - '3306:3306'
    restart: always
  redis:
    image: redis
    container_name: 'docker-todo-redis'
    ports:
      - '6379:6379'
    restart: always
复制代码

这个 yml 文件描述的内容其实就等同于上面两条 docker 命令。好处有两个:


  • 不用写一串长长长长长长长长长长长长长长得让人受不了的命令
  • 把部署命令记到小本本 docker-compose.yml 文件里。问:怎么部署?答:自己看 docker-compose.yml
  • 一键拉起相关服务


以后,一键跑本地服务的时候就可以一键启动 mariadb 和 redis 了:

docker-compose -f dev-docker-compose.yml up -d
复制代码


Dockerfile


不过,在生产环境时每次都要跑 npm 这两条命令还是很烦,能不能把这两行也整全到 docker-compose 里呢?


注意:生产环境应该要用 npm run build 构建应用,然后再跑构建出来的 JS 才是正常开发流程,这里为了简化流程,就以 npm run start 来做例子说明。


既然 docker-compose 是通过 image 创建容器的,那么我们的 React App 和 Express App 也打成两个 image,然后用 docker-compose 分别创建容器不就 OK 了么?

构建容器说白了就是我们常说的 “CICD 或者构建流水线”,只不过这个 “流水线” 关键的只有一条 npm run start。描述 “流水线” 的叫 Dockerfile (注意这里不是驼峰写法)。


注意:正常的镜像构建和启动应该是整个项目 CICD 其中的一环,这里只是打个比方。项目的 CICD 除了跑命令,构建应用,还会有代码检查、脱敏检查、发布消息推送等步骤,是更为繁杂的一套流程。


先把 React 的 Dockerfile 整了:

# 使用 node 镜像
FROM node
# 准备工作目录
RUN mkdir -p /app/client
WORKDIR /app/client
# 复制 package.json
COPY package*.json /app/client/
# 安装目录
RUN npm install
# 复制文件
COPY . /app/client/
# 开启 Dev
CMD ["npm", "run", "start"]
复制代码


非常的简单,需要注意的是容器也可以看成一个电脑里的电脑,所以把自己电脑的文件复制到 “容器电脑” 里是非常必要的一步。


Express App 的 Dockerfile 和上面的几乎一毛一样:

# 使用 node 镜像
FROM node
# 初始化工作目录
RUN mkdir -p /app/server
WORKDIR /app/server
# 复制 package.json
COPY package*.json /app/server/
# 安装依赖
RUN npm install
# 复制文件
COPY . /app/server/
# 开启 Dev
CMD ["npm", "run", "start"]
复制代码


那么现在再来改造一个 prod-docker-compose.yml 文件:

version: '3'
services:
  client:
    build:
      context: ./client
      dockerfile: Dockerfile
    container_name: 'docker-todo-client'
    # 暴露端口
    expose:
      - 3000
    # 暴露端口
    ports:
      - '3000:3000'
    depends_on:
      - server
    restart: always
  server:
    # 构建目录
    build:
      context: ./server
      dockerfile: Dockerfile
    # 容器名
    container_name: 'docker-todo-server'
    # 暴露端口
    expose:
      - 4200
    # 端口映射
    ports:
      - '4200:4200'
    restart: always
    depends_on:
      - mariadb
      - redis
  mariadb:
    image: mariadb
    container_name: 'docker-todo-mariadb'
    environment:
      MARIADB_ROOT_PASSWORD: '123456'
      MARIADB_DATABASE: 'docker_todo'
    ports:
      - '3306:3306'
    restart: always
  redis:
    image: redis
    container_name: 'docker-todo-redis'
    ports:
      - '6379:6379'
    restart: always
复制代码


上面的配置应该都不难理解,不过,还是有一些细节需要注意:


  • 端口都要暴露出来,也要做映射,不然本地也访问不了 3000 和  4200 端口
  • depends_on 的作用是等 maraidb 和 redis 两个容器起来了再启动当前容器


然后运行下面命令,一键启动:

docker-compose -f prod-docker-compose.yml up -d --build
复制代码


后面 --build 是指每次跑时都构建一次镜像。

然而,Boom:

image.png


ConnectionRefusedError: connect ECONNREFUSED 127.0.0.1:3306
...
复制代码

怎么连不上了?


解决连不上的问题


连不上的原因是我们这里用了 localhost127.0.0.1


虽然每个容器都在我们主机 127.0.0.1 网络里,但是容器之间是需要通过对方的 IP 地址来交流和访问的,按照官网的介绍 通过 Container Name 就可得知对方容器的 IP。

image.png


因此,Express App 里的 host 不能写 127.0.0.1,而要填 docker-todo-redis 和 docker-todo-mariadb。下面用环境变量 NODE_ENV 来区分是否以 Docker 启动 App。


修改 mariadb 的连接:

// 连接数据库
const sequelize = new Sequelize({
  host: process.env.NODE_ENV === 'docker' ? 'docker-todo-mariadb' : "127.0.0.1" ,
  database: 'docker_todo',
  username: 'root',
  password: '123456',
  dialect: 'mariadb',
});
复制代码


再修改 redis 的连接:

const redis = new Redis({
  port: 6379,
  host: process.env.NODE_ENV === 'docker' ? 'docker-todo-redis' : "127.0.0.1" ,
});
复制代码


然后在 /server/Dockerfile 里添加 NODE_ENV=docker

# 使用 node 镜像
FROM node
# 初始化工作目录
RUN mkdir -p /app/server
WORKDIR /app/server
# 复制 package.json
COPY package*.json /app/server/
ENV NODE_ENV=docker
# 安装依赖
RUN npm install
# 复制文件
COPY . /app/server/
# 开启 Dev
CMD ["npm", "run", "start"]
复制代码


现在继续运行我们的 “一键启动” 命令,就能启动我们的生产环境了:

docker-compose -f prod-docker-compose.yml up -d --build
复制代码


总结


一句话总结,Dockerfile 是用于构建 Docker 镜像的,跟我们平常接触的 CICD 或者流水线有点类似。而 docker-compose 的作用则是 “一键拉起” N 个容器。

上面整个例子放在 Github 这里了,可以 Clone 下来自己捣鼓玩玩。




相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore &nbsp; &nbsp; ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库&nbsp;ECS 实例和一台目标数据库&nbsp;RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&amp;RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
11天前
|
Kubernetes Java Docker
利用(K8S)配合Docker部署jar包
通过Docker打包并部署到Kubernetes(K8S)集群的过程。首先,通过SpringBoot生成jar包,接着在K8S环境中创建并编辑Dockerfile文件。随后构建Docker镜像,并将其推送到镜像仓库。最后,通过一系列kubectl命令(如get pods、get svc、logs等),展示了如何在K8S中管理应用,包括查看Pod状态、服务信息、Pod日志以及重启Pod等操作。
59 2
|
14天前
|
NoSQL 关系型数据库 MySQL
docker部署jumpserver及入门
docker部署jumpserver及入门
|
16天前
|
Kubernetes Devops 持续交付
DevOps实践:使用Docker和Kubernetes实现持续集成和部署网络安全的守护盾:加密技术与安全意识的重要性
【8月更文挑战第27天】本文将引导读者理解并应用DevOps的核心理念,通过Docker和Kubernetes的实战案例,深入探讨如何在现代软件开发中实现自动化的持续集成和部署。文章不仅提供理论知识,还结合真实示例,旨在帮助开发者提升效率,优化工作流程。
|
9天前
|
Docker 容器
Docker自建仓库之Harbor高可用部署实战篇
关于如何部署Harbor高可用性的实战教程,涵盖了从单机部署到镜像仓库同步的详细步骤。
40 15
Docker自建仓库之Harbor高可用部署实战篇
|
9天前
|
NoSQL 关系型数据库 Redis
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
mall在linux环境下的部署(基于Docker容器),docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongodb、minio详细教程,拉取镜像、运行容器
mall在linux环境下的部署(基于Docker容器),Docker安装mysql、redis、nginx、rabbitmq、elasticsearch、logstash、kibana、mongo
|
8天前
|
虚拟化 Docker Windows
window 10专业版部署docker环境
本文介绍了如何在Windows 10专业版上部署Docker环境,包括安装步骤、配置镜像加速以及可能遇到的错误处理。
25 2
window 10专业版部署docker环境
|
9天前
|
存储 关系型数据库 MySQL
使用Docker快速部署Mysql服务器
本文介绍了如何使用Docker快速部署MySQL服务器,包括下载官方MySQL镜像、启动容器、设置密码、连接MySQL服务器以及注意事项。
73 18
|
9天前
|
存储 测试技术 数据安全/隐私保护
Docker自建仓库之Harbor部署实战
关于如何部署和使用Harbor作为Docker企业级私有镜像仓库的详细教程。
30 12
|
9天前
|
运维 数据安全/隐私保护 Docker
Docker自建仓库之Docker Registry部署实战
关于如何使用Docker Registry镜像搭建本地私有Docker仓库的实战教程,包括了下载镜像、创建授权目录和用户名密码、启动Registry容器、验证端口和容器、测试登录仓库、上传和下载镜像的详细步骤。
43 5
|
14天前
|
物联网 Serverless API
函数计算产品使用问题之怎么部署Docker镜像进行lora训练
函数计算产品作为一种事件驱动的全托管计算服务,让用户能够专注于业务逻辑的编写,而无需关心底层服务器的管理与运维。你可以有效地利用函数计算产品来支撑各类应用场景,从简单的数据处理到复杂的业务逻辑,实现快速、高效、低成本的云上部署与运维。以下是一些关于使用函数计算产品的合集和要点,帮助你更好地理解和应用这一服务。