安装Docker
安装Docker Compose (一个完整项目的运行需要安装这个)
这篇文档笔记主要记录自己开始学习部署Docker过程。文章后面有开源项目部署,基于Docker和Docker Compose。活到老,学到老,保持一种空杯心态,用心学知识,学技能。我是一名前端程序员,喜欢折腾新东西,新事物,有兴趣的可以关注我的个人网站( 猿视野)。
文章后面会手把手的教你用Docker部署SpringBoot+Vue+MySQL+Nginx开源项目。利用Docker部署项目,主要是为了节约我们有限的时间。开源项目源码:https://github.com/cloudfavorites/favorites-web 待会等我们安装好了docker环境,就带大家一起来部署这个开源项目。
前提条件
- 一台CentOS7的服务器。我这里用的是阿里云的服务器,选的是CentOS7版本系统
- 使用xshell6类似的远程连接工具连接到服务器。参考文章:使用xshell6远程连接Linux服务器
- 如何需要域名访问Docker部署的项目,需要先拥有一个域名哦。我这里演示用的域名是在阿里云申请的。详见阿里云域名注册。
安装命令
建议在linux环境下安装Docker,window环境搭建比较复杂且容易出错,使用Centos7+yum来安装Docker环境很方便。
Docker 软件包已经包括在默认的 CentOS-Extras 软件源里。因此想要安装 docker,只需要运行下面的 yum 命令:
yum install docker
启动Docker服务
安装完成后,使用下面的命令来启动 docker 服务,并将其设置为开机启动:
service docker start
chkconfig docker on
测试Docker安装成功
测试
docker version
输入上述命令,返回docker的版本相关信息,证明docker安装成功。
设置国内镜像
通过vim修改docker为国内镜像地址: https://registry.docker-cn.com
因为国内连接 Docker 的官方仓库很慢,因此我们在日常使用中会使用Docker 中国加速器。通过 Docker 官方镜像加速,中国区用户能够快速访问最流行的 Docker 镜像。该镜像托管于中国大陆,本地用户现在将会享受到更快的下载速度和更强的稳定性,从而能够更敏捷地开发和交付 Docker 化应用。
Docker 中国官方镜像加速可通过registry.docker-cn.com访问。该镜像库只包含流行的公有镜像,私有镜像仍需要从美国镜像库中拉取。
修改系统中docker对应的配置文件即可,如下:
vi /etc/docker/daemon.json
#添加后
{
"registry-mirrors": ["https://registry.docker-cn.com"],
"live-restore": true
}
演示Hello World程序
//运行下面的命令,将 image 文件从仓库抓取到本地。
docker pull library/hello-world
//上面代码中,docker image pull是抓取 image 文件的命令。
//library/hello-world是 image 文件在仓库里面的位置,
//其中library是 image 文件所在的组,hello-world是 image 文件的名字。
docker images
//现在,运行这个 image 文件。
docker run hello-world
输出这段提示以后,hello world就会停止运行,容器自动终止。有些容器不会自动终止,因为提供的是服务,比如Mysql镜像等。
安装Docker Compose
通过 Docker-Compose 用户可以很容易地用一个配置文件定义一个多容器的应用,然后使用一条指令安装这个应用的所有依赖,完成构建。Docker-Compose 解决了容器与容器之间如何管理编排的问题。Dockerfile 可以让用户管理一个单独的应用容器;而 Compose 则允许用户在一个模板(YAML 格式)中定义一组相关联的应用容器(被称为一个 project,即项目),例如一个 Web 服务容器再加上后端的数据库服务容器等。
Docker Compose 是 Docker 的独立产品,因此需要安装 Docker 之后在单独安装 Docker Compose .
#下载
sudo curl -L https://github.com/docker/compose/releases/download/1.20.0/docker-compose-`uname -s`-`uname -m` -o /usr/local/bin/docker-compose
#安装
chmod +x /usr/local/bin/docker-compose
#查看版本
docker-compose version
常用命令
除过以上我们使用的Docker命令外,Docker还有一些其它常用的命令
拉取docker镜像
docker pull image_name
查看宿主机上的镜像,Docker镜像保存在/var/lib/docker目录下:
docker images
删除镜像
docker rmi docker.io/tomcat:7.0.77-jre7 或者 docker rmi b39c68b7af30
查看当前有哪些容器正在运行
docker ps
查看所有容器
docker ps -a
启动、停止、重启容器命令:
docker start container_name/container_id
docker stop container_name/container_id
docker restart container_name/container_id
后台启动一个容器后,如果想进入到这个容器,可以使用attach命令:
docker attach container_name/container_id
删除容器的命令:
docker rm container_name/container_id
删除所有停止的容器:
docker rm $(docker ps -a -q)
查看当前系统Docker信息
docker info
从Docker hub上下载某个镜像:
docker pull centos:latest
docker pull centos:latest
查找Docker Hub上的nginx镜像
docker search nginx
执行docker pull centos会将Centos这个仓库下面的所有镜像下载到本地repository。
部署项目演示(云收藏)
部署SpringBoot项目---云收藏
地址: https://github.com/cloudfavorites/favorites-web
-bash: unzip: 未找到命令
说明未安装过, 只需执行如下命令即可. 同样适用 Unix 内核系统.
yum install -y unzip zip
下拉项目:
wget https://github.com/cloudfavorites/favorites-web/archive/favorites-1.3.0.zip
解压
unzip favorites-1.3.0.zip
进入目录
cd favorites-web-favorites-1.3.0/
修改文件application-docker.properties
vi app/src/main/resources/application-docker.properties
修改内容如下
favorites.base.path=http://xx.xxx.xx.xx/
forgotpassword.url=http://xx.xxx.xx.xx/newPassword
地址为部署服务器的地址
部署命令:
docker-compose up --build
或者
docker-compose up -d
org.springframework.beans.factory.BeanCreationException: Error creating bean with name 'userController': Injection of autowired dependencies failed; nested exception is java.lang.IllegalArgumentException: Could not resolve placeholder 'forgotpassword.url' in value "${forgotpassword.url}"
app_1 | at org.springframework.beans.factory.annotation.AutowiredAnnotationBeanPostProcessor.postProcessPropertyValues(AutowiredAnnotationBeanPostProcessor.java:379) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.populateBean(AbstractAutowireCapableBeanFactory.java:1344) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.doCreateBean(AbstractAutowireCapableBeanFactory.java:582) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.AbstractAutowireCapableBeanFactory.createBean(AbstractAutowireCapableBeanFactory.java:502) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.AbstractBeanFactory.lambda$doGetBean$0(AbstractBeanFactory.java:312) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.DefaultSingletonBeanRegistry.getSingleton(DefaultSingletonBeanRegistry.java:228) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.AbstractBeanFactory.doGetBean(AbstractBeanFactory.java:310) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.RELEASE]
app_1 | at org.springframework.beans.factory.support.AbstractBeanFactory.getBean(AbstractBeanFactory.java:200) ~[spring-beans-5.0.4.RELEASE.jar:5.0.4.
修改项目配置文件:
favorites.base.path=http://公网ip/
forgotpassword.url=http://公网ip/newPassword
项目启动成功:
访问ip: http://47.100.188.105/ 查看项目首页
数据备份与恢复
mysql数据备份(shell脚本定时备份mysql数据)
标准格式:
docker exec [mysql-container-name] /usr/bin/mysqldump -u [user] --password=[password] [database-name] > [backup-file-name]
docker exec CONTAINER /usr/bin/mysqldump -u username --password=xxx DATABASE > backup.sql
案例:
docker exec c7f1b671c57f /usr/bin/mysqldump -u ***** --password=***** favorites | gzip > /root/data_backup/database_name_2021_05_08.sql.gz
上面的备份命令会提示警告:mysqldump: [Warning] Using a password on the command line interface can be insecure.
下面的备份命令不会出现警告。
docker exec -it c7f1b671c57f mysqldump -uroot -p***** favorites | gzip > /root/data_backup/database_name_2021_05_07.sql.gz 【放入shell脚本会执行失败,shell命令行执行有效】
脚本定时备份:
#!/bin/bash
echo '##########################################'
echo '###### The database is automatically backed up at 01:00 am every day ######'
echo '##########################################'
# Setting environment variables
DATE=$(date +%Y_%m_%d_%H_%M_%S)
# $(date +%Y%m%d)
# 数据库用户名
USERNAME=root
# 密码
PASSWORD=****
# 要备份的数据库
DB=favorites
# Docker容器ID
DOCKERID=c7f1b671c57f
#DB1=xxxx
# ubuntu 系统非 root 用户,要将备份产生的文件放到 xxx 用户所在的目录下,否则必须使用 sudo 输入管理员密码执行此脚本。
DIR=/root/data_backup
echo 'Get system date: ' $DATE
if [ ! -d "$DIR" ]; then
mkdir $DIR
fi
cd $DIR
echo 'backup started...' $(date "+%Y-%m-%d %H:%M:%S")
# 备份 docker 容器中的数据库
# docker exec -it 容器名称 mysqldump -u用户名 -p密码 要备份的数据库名称 | gzip > 要打包到的文件名称
# docker exec -it $DOCKERID mysqldump -u$USERNAME -p$PASSWORD $DB > /root/data_backup/database_name_$DATE.sql
# 上面的备份命令无效,请改为下面的备份数据库命令。
docker exec $DOCKERID /usr/bin/mysqldump -u $USERNAME --password=$PASSWORD $DB | gzip > /root/data_backup/database_name_$DATE.sql.gz
# 备份 直接安装在 linux 系统中的数据库
# /usr/bin/mysqldump -u$USERNAME -p$PASSWORD $DB2 | gzip > xxx_$DATE.sql.gz
# just backup the latest 7 days
# find ${DIR} -name "database_name_*.sql.gz" -type f -mtime +7 -exec rm {} \; > /dev/null 2>&1
# find ${DIR} -name "database_name_*.sql.gz" -type f -mtime +7 -exec rm {} \; > /dev/null 2>&1
#保留最新的几份文件
ReservedNum=5
date=$(date "+%Y%m%d-%H%M%S")
FileNum=$(ls -l $DIR|grep ^- |wc -l)
while(( $FileNum > $ReservedNum))
do
OldFile=$(ls -rt $DIR| head -1)
echo $date "Delete File:"$OldFile
rm -rf $DIR/$OldFile
let "FileNum--"
done
# mysql数据备份结束!
echo 'backup completed!' $(date "+%Y-%m-%d %H:%M:%S")
我这里采用宝塔面板的定时任务,定时执行shell脚本任务:
查看FinalShell文件备份目录:
mysql数据恢复:
cat backup.sql | docker exec -i CONTAINER /usr/bin/mysql -u username --password=xxx DATABASE
cat database_name_2021_05_08_18_30_01.sql | docker exec -i 6e64fa337312 /usr/bin/mysql -u 用户名 --password=用户密码 数据库名称
如果修改了mysql my.cnf配置文件的内容,Docker需要重新构建:docker-compose up --build 否则配置文件无法生效。
#进入某个容器内部
docker exec -it c7f1b671c57f /bin/bash
# 进入mysql命令行
mysql -uroot -p
# 查看max_allowed_packet。该参数设置过小,会导致备份sql恢复失败。默认4MB,设置200MB
show variables like '%max_allowed_packet%';
# 查找mysql配置文件位置
mysql --help | grep my.cnf
/etc/my.cnf /etc/mysql/my.cnf /usr/etc/my.cnf ~/.my.cnf
# 查看docker mysql文件配置
cat /etc/my.cnf
本人在备份数据库以后,恢复备份的sql数据到Docker mysql容器时候,报了一个错误:
ERROR 1153 (08S01) at line 50: Got a packet bigger than 'max_allowed_packet'
其间,我试过很多方法,都没有改成功。后面经过不断反复尝试,终于改成功了。需要重新构建Docker项目,才能让mysql配置文件修改生效。而不是简单的重启docker容器。
配置修改成功。
然后就是mysql备份数据恢复正常。终于解决了这个小问题了。
注:其中
CONTAINER:容器别名或者容器id:c7f1b671c57f
DATABASE:需要操作的数据库名称:favorites
username:数据库登录的用户名:*
xxx:数据库登录的密码:
执行之后 会有 提示 风险;
导入导出成功后 dos 会 进入正常输入状态
Docker安装phpmyadmin
安装这个主要是为了在线管理mysql数据库
步骤:
# 下载最新版本的phpmyadmin
docker pull phpmyadmin/phpmyadmin
# 启动容器
docker run -d --name myadmin -e PMA_HOST=公网ip -e PMA_PORT=3306 -p 888:80 phpmyadmin/phpmyadmin
命令说明:
-e PMA_HOST=192.168.206.132 数据库的IP地址
-e PMA_PORT=3307 数据库的端口
-p 8283:80 将容器80端口映射到主机的8283端口
--name myadmin 将容器命名为myadmin
浏览器访问:http://公网ip:888/ 在线访问phpmyadmin
报错问题记录
--initialize specified but the data directory has files in it. Aborting.
某段时间重启docker之后,无法启动项目的mysql容器,mysql容器一直处于重启状态,mysql容器启动不了,项目当然也无法正常访问了。继续马上解决。查看日志命令,发现报上面这个错误。
volumes:
- ./mysql_data:/var/lib/mysql
其中:mysql_data目录为linux硬盘挂载目录。映射到了docker容器目录 /var/lib/mysql
把mysql_data目录下的文件删除就可以,如果数据重要,请先备份,再删除。
解决方法:找到docker mysql datadir挂载目录的具体位置,把这个目录里面的文件先备份一下,然后删除,重新用docker-compose up -d build命令打包启动项目,就能正确的启动mysql容器了。关键的原因是:datadir硬盘挂载的目录里面存在文件,并且遭到了损坏,导致docker mysql容器无法重启。
参考资料:使用Docker快速搭建Mysql,并进行数据卷分离
docker logs 容器id
查看容器启动,运行日志
#获取正在运行的docker容器列表,找到具体的容器id
docker ps
docker logs 容器id
启动docker-compose和停止docker-compose
# docker-compose属于指编排好了的项目多个容器的指令
# 停止项目docker
docker-compose stop
# 重新编译代码和启动项目docker容器
docker-compose up -- build