Docker 与 K8S学习笔记(十一)—— 容器的存储

本文涉及的产品
容器镜像服务 ACR,镜像仓库100个 不限时长
简介: Docker为容器提供了两种存储数据的方式: Storage Driver即存储驱动 Data Volume即数据卷 本节我们分别讨论下它们的应用。 一、Storage Driver 前面讲过容器是由一个可写的容器层加若干个只读的镜像层组成,这样的设计带来如下效果: 新数据直接写在容器层中; 修改现

Docker 与 K8S学习笔记(十一)—— 容器的存储


Docker为容器提供了两种存储数据的方式:


  • Storage Driver即存储驱动


  • Data Volume即数据卷


本节我们分别讨论下它们的应用。

 

一、Storage Driver


前面讲过容器是由一个可写的容器层加若干个只读的镜像层组成,这样的设计带来如下效果:


  • 新数据直接写在容器层中;


  • 修改现有的数据时会将镜像层数据复制到容器层,修改后的数据直接存储在容器层中,原有镜像层数据不变;


  • 如果多个层中存在同名文件,用户只能看到最顶层中的文件。


这些都要归功于Storage Driver,正是它实现了多层数据的堆叠并为用户提供单一的合并之后的统一视图。


Docker支持多种存储驱动,包括:AUFS、Device Mapper、Btrfs、OverlayFS、VFS和ZFS。它们都能实现分层存储,但各自又有其特性,以适用于不同场景,想把每一种存储驱动的特性都搞明白并不容易,所以Docker在安装时会根据当前系统的配置选择默认存储驱动,我们通过docker info可以看到当前host中docker使用的存储驱动是哪一种:


$ sudo docker info
...
Server:
 Containers: 1
  Running: 1
  Paused: 0
  Stopped: 0
 Images: 20
 Server Version: 20.10.8
 Storage Driver: overlay2
 ...


对于一些无状态的应用比如busybox,将数据放在由storage driver维护的层中是比较合理的,这类应用他不需要在持久化其他数据了,我们每次都只是用它提供的工具用完便销毁容器。

 

二、Data Volume


Data Volume本质上是Docker Host文件系统中的目录或文件,能够直接被挂在到容器的文件系统中,Data Volume有以下特点:


  • Data Volume是文件或目录而非没有格式化的磁盘;


  • 容器可以读写Data Volume的数据;


  • Data Volume的数据可以永久保存,即使容器被销毁。


在具体使用时,docker提供两种类型的volume:bind volume和docker managed volume。

 

三、bind volume


bind volume是将host上已存在的目录或文件mount到容器,例如,我们在host上创建htdocs目录并增加一个index.html:


$ mkdir htdocs
$ vim htdocs/index.html

我们的index.html内容如下:


<html>
  <head>
    <title>demo index</title>
  </head>
  <body>
    <h1>this is demo page</h1>
    <p>hahahahahahaha</p>
  </body>
</html>


接着我们启动httpd容器,并挂载我们创建的htdocs目录,然后我们访问下主页看看效果:


$ sudo docker run -d -p 80:80 -v ~/htdocs:/usr/local/apache2/htdocs httpd
fe00b987c8b7c5e37fe0898007f924da440c9ed5db8809c377566eef860b3402
$ curl http://127.0.0.1:80
<html>
  <head>
    <title>demo index</title>
  </head>
  <body>
    <h1>this is demo page</h1>
    <p>hahahahahahaha</p>
  </body>
</html>


我们可以看到,curl的结果确实返回的是我们放在host上的页面内容,这里我们需要注意-v参数的格式:<host path>:<container path>。


如果我们修改host中的index,会有什么效果呢?我们来试一下:


$ echo "<h1>update page</h1>" > htdocs/index.html
$ curl http://127.0.0.1:80
<h1>update page</h1>


我们在host中的修改生效了,bind mount可以让host与容器共享数据,这在管理上非常方便。


我们删除httpd容器看看host上的index文件是否还存在:


$ sudo docker stop fe00b987c8b7
fe00b987c8b7
$ sudo docker rm fe00b987c8b7
fe00b987c8b7
$ cat htdocs/index.html
<h1>update page</h1>


可见,即使容器删除了,bind mount仍然存在,这是合理的,毕竟这些数据是host的,它只是借给容器使用,哪能随便就被干掉呢。


bind mount还可以指定数据读写权限,缺省情况下是可读可写,那我们如果指定为只读会有什么效果呢?


$ sudo docker run -d -p 80:80 -v ~/htdocs:/usr/local/apache2/htdocs:ro httpd
49bd7caad83860e11f9aae7c3c6e6d20231a0efbf6ddf226188b6001f5eea00a
$ sudo docker exec -it 49bd7caad8386 bash
root@49bd7caad838:/usr/local/apache2# echo "change index" > htdocs/index.html
bash: htdocs/index.html: Read-only file system


我们通过ro参数设置了只读权限,这样在容器内便无法修改bind mount的数据,从而增加了安全性。


bind mount除了可以挂载目录外,也可以挂载单个文件,用法跟指定目录一样,需要注意的是,所挂载的文件在host中必须存在,不然docker会将其作为目录挂载到容器,这里就不再进行演示。


bind mount使用起来简单直观,易于理解,但它也有不足的地方:bind mount需要明确指定host文件具体路径,这就限制了容器的可移植性,当需要将容器迁移到其它host时,就容易存在问题,所以接下来我们看看移植性更好的docker managed volume。

 

四、docker managed volume


docker managed volume与bind mount相比最大的特点是-v参数中不用指定host path,仅指定container path即可。


$ sudo docker run -d -p 80:80 -v /usr/local/apache2/htdocs httpd
caaf4e3f39ac44f49161efb707a196ca243a0768af67a266dbb9e342655fe569


我们通过-v参数告诉docker需要一个data volume,并挂载到容

/usr/local/apache2/htdocs目录下,那这个data volume在哪呢?这就需要使用docker inspect命令了:


$ sudo docker inspect caaf4e3f39ac44f49161efb707a196ca243a0768af67a266dbb9e342655fe569
[
   ...
        "Mounts": [
            {
                "Type": "volume",
                "Name": "a08419633c66a3cf522f3628b1920d8f48c4d7115a93c33f04db398945350e0b",
                "Source": "/var/lib/docker/volumes/a08419633c66a3cf522f3628b1920d8f48c4d7115a93c33f04db398945350e0b/_data",
                "Destination": "/usr/local/apache2/htdocs",
                "Driver": "local",
                "Mode": "",
                "RW": true,
                "Propagation": ""
            }
],
   ...
]


我们通过Mounts这部分信息可以看出来,


"Source": "/var/lib/docker/volumes/a08419633c66a3cf522f3628b1920d8f48c4d7115a93c33f04db398945350e0b/_data"

source就是在host上的目录,也就是说,当容器需要docker managed volume时,docker都会在host下的/var/lib/docker/volumes/目录下创建一个子目录,并将其挂载到容器中。

我们来看看这个目录下有什么东西:


$ sudo ls -l /var/lib/docker/volumes/a08419633c66a3cf522f3628b1920d8f48c4d7115a93c33f04db398945350e0b/_data
total 4
-rw-r--r-- 1 504 staff 45 Jun 11  2007 index.html


我们发现这个目录下index.html和容器中的是一样的,这是为什么呢?这是因为,如果挂载的是已存在的的目录,容器中原有数据会拷贝到volume中,但是要明确一点,此时/usr/local/apache2/htdocs已经不再是由storage driver管理的层数据,它已经是一个data volume


最后我们简单对比下bind mount和docker managed volume:


相同点:二者都是将host文件系统中某个路径挂载到容器。


不同点


  bind mount docker managed volume
volume位置 可任意指定 由docker指定
对挂载点影响 隐藏并替换为volume 原有数据拷贝到volume
支持单个文件 支持 不支持
权限控制 可配置 均为读写权限
移植性 移植性弱 移植性强

 

分类: 容器技术

相关实践学习
通过Ingress进行灰度发布
本场景您将运行一个简单的应用,部署一个新的应用用于新的发布,并通过Ingress能力实现灰度发布。
容器应用与集群管理
欢迎来到《容器应用与集群管理》课程,本课程是“云原生容器Clouder认证“系列中的第二阶段。课程将向您介绍与容器集群相关的概念和技术,这些概念和技术可以帮助您了解阿里云容器服务ACK/ACK Serverless的使用。同时,本课程也会向您介绍可以采取的工具、方法和可操作步骤,以帮助您了解如何基于容器服务ACK Serverless构建和管理企业级应用。 学习完本课程后,您将能够: 掌握容器集群、容器编排的基本概念 掌握Kubernetes的基础概念及核心思想 掌握阿里云容器服务ACK/ACK Serverless概念及使用方法 基于容器服务ACK Serverless搭建和管理企业级网站应用
相关文章
|
13天前
|
人工智能 弹性计算 运维
ACK Edge与IDC:高效容器网络通信新突破
本文介绍如何基于ACK Edge以及高效的容器网络插件管理IDC进行容器化。
|
16天前
|
监控 NoSQL 时序数据库
《docker高级篇(大厂进阶):7.Docker容器监控之CAdvisor+InfluxDB+Granfana》包括:原生命令、是什么、compose容器编排,一套带走
《docker高级篇(大厂进阶):7.Docker容器监控之CAdvisor+InfluxDB+Granfana》包括:原生命令、是什么、compose容器编排,一套带走
153 77
|
24天前
|
监控 Docker 容器
在Docker容器中运行打包好的应用程序
在Docker容器中运行打包好的应用程序
|
2天前
|
存储 Kubernetes 开发者
容器化时代的领航者:Docker 和 Kubernetes 云原生时代的黄金搭档
Docker 是一种开源的应用容器引擎,允许开发者将应用程序及其依赖打包成可移植的镜像,并在任何支持 Docker 的平台上运行。其核心概念包括镜像、容器和仓库。镜像是只读的文件系统,容器是镜像的运行实例,仓库用于存储和分发镜像。Kubernetes(k8s)则是容器集群管理系统,提供自动化部署、扩展和维护等功能,支持服务发现、负载均衡、自动伸缩等特性。两者结合使用,可以实现高效的容器化应用管理和运维。Docker 主要用于单主机上的容器管理,而 Kubernetes 则专注于跨多主机的容器编排与调度。尽管 k8s 逐渐减少了对 Docker 作为容器运行时的支持,但 Doc
19 5
容器化时代的领航者:Docker 和 Kubernetes 云原生时代的黄金搭档
|
8天前
|
关系型数据库 应用服务中间件 PHP
实战~如何组织一个多容器项目docker-compose
本文介绍了如何使用Docker搭建Nginx、PHP和MySQL的环境。首先启动Nginx容器并查看IP地址,接着启动Alpine容器并安装curl测试连通性。通过`--link`方式或`docker-compose`配置文件实现服务间的通信。最后展示了Nginx配置文件和PHP代码示例,验证了各服务的正常运行。
28 3
实战~如何组织一个多容器项目docker-compose
|
14天前
|
人工智能 运维 监控
阿里云ACK容器服务生产级可观测体系建设实践
本文整理自2024云栖大会冯诗淳(花名:行疾)的演讲,介绍了阿里云容器服务团队在生产级可观测体系建设方面的实践。冯诗淳详细阐述了容器化架构带来的挑战及解决方案,强调了可观测性对于构建稳健运维体系的重要性。文中提到,阿里云作为亚洲唯一蝉联全球领导者的容器管理平台,其可观测能力在多项关键评测中表现优异,支持AI、容器网络、存储等多个场景的高级容器可观测能力。此外,还介绍了阿里云容器服务在多云管理、成本优化等方面的最新进展,以及即将推出的ACK AI助手2.0,旨在通过智能引擎和专家诊断经验,简化异常数据查找,缩短故障响应时间。
阿里云ACK容器服务生产级可观测体系建设实践
|
2天前
|
Unix Linux Docker
CentOS停更沉寂,RHEL巨变限制源代:Docker容器化技术的兴起助力操作系统新格局
操作系统是计算机系统的核心软件,管理和控制硬件与软件资源,为用户和应用程序提供高效、安全的运行环境。Linux作为开源、跨平台的操作系统,具有高度可定制性、稳定性和安全性,广泛应用于服务器、云计算、物联网等领域。其发展得益于庞大的社区支持,多种发行版如Ubuntu、Debian、Fedora等满足不同需求。
15 4
|
14天前
|
运维 Kubernetes 调度
阿里云容器服务 ACK One 分布式云容器企业落地实践
阿里云容器服务ACK提供强大的产品能力,支持弹性、调度、可观测、成本治理和安全合规。针对拥有IDC或三方资源的企业,ACK One分布式云容器平台能够有效解决资源管理、多云多集群管理及边缘计算等挑战,实现云上云下统一管理,提升业务效率与稳定性。
|
17天前
|
数据建模 应用服务中间件 nginx
docker替换宿主与容器的映射端口和文件路径
通过正确配置 Docker 的端口和文件路径映射,可以有效地管理容器化应用程序,确保其高效运行和数据持久性。在生产环境中,动态替换映射配置有助于灵活应对各种需求变化。以上方法和步骤提供了一种可靠且易于操作的方案,帮助您轻松管理 Docker 容器的端口和路径映射。
59 3
|
2天前
|
Kubernetes 网络协议 应用服务中间件
Kubernetes Ingress:灵活的集群外部网络访问的利器
《Kubernetes Ingress:集群外部访问的利器-打造灵活的集群网络》介绍了如何通过Ingress实现Kubernetes集群的外部访问。前提条件是已拥有Kubernetes集群并安装了kubectl工具。文章详细讲解了Ingress的基本组成(Ingress Controller和资源对象),选择合适的版本,以及具体的安装步骤,如下载配置文件、部署Nginx Ingress Controller等。此外,还提供了常见问题的解决方案,例如镜像下载失败的应对措施。最后,通过部署示例应用展示了Ingress的实际使用方法。
16 2

相关产品

  • 容器服务Kubernetes版