解决Linux中/var/lib/docker/磁盘空间过大及k8s存储卷磁盘空间使用率过高的问题

简介: 解决Linux中/var/lib/docker/磁盘空间过大及k8s存储卷磁盘空间使用率过高的问题

前言

在使用k8s存储卷的过程中,磁盘空间使用率突然快速上涨,没几天时间disk使用率直接飙红(大概89%左右),甚至本地的docker镜像也被驱逐了大部分,类似如此事件没有办法给客户解释清楚的话都是给自己埋雷呀。

从我自己的使用角度来说,我感觉k8s中的pv或者pvc都是日志系统挂载的存储卷,还有几个prometheus-db的存储卷,占用磁盘空间的大小应该不会快速增长,出现上述情况属实意外,在百度了一些资料并进行了尝试以后,有一点小收获,记录一下~


1. 查看文件系统硬盘使用情况

df -h

我的/var/lib/docker/占了有364G磁盘空间,到底是什么文件这么占磁盘,需要查一下,

ps~幸好我稳住了,没有盲目手快的删掉整个overlay2或者containers文件夹中的内容。

2. du命令查看指定目录或文件所占用的磁盘空间

#查看/var/lib/docker/文件夹的大小
[root@master containers]# du -hs /var/lib/docker/
255G    /var/lib/docker/
#查看/var/lib/docker/下一个层级目录各个文件夹的大小
#参数提示:
#-d:显示目录层级数
[root@master containers]# du -d 1 /var/lib/docker/

#结果

12564   /var/lib/docker/containerd

244215732       /var/lib/docker/containers

0       /var/lib/docker/plugins

21349984        /var/lib/docker/overlay2

38272   /var/lib/docker/image

1092692 /var/lib/docker/volumes

0       /var/lib/docker/trust

1408    /var/lib/docker/network

0       /var/lib/docker/swarm

1216    /var/lib/docker/buildkit

0       /var/lib/docker/tmp

0       /var/lib/docker/runtimes

266711868       /var/lib/docker/

#查看/var/lib/docker/下一个层级目录各个文件夹的大小,以MB显示
#参数提示:
#-k:以KB为单位显示文件大小
#-m:以MB为单位显示文件大小,我用的-m
[root@master containers]# du -d 1 -m /var/lib/docker/

#结果

13      /var/lib/docker/containerd

238492  /var/lib/docker/containers

0       /var/lib/docker/plugins

20850   /var/lib/docker/overlay2

38      /var/lib/docker/image

1068    /var/lib/docker/volumes

0       /var/lib/docker/trust

2       /var/lib/docker/network

0       /var/lib/docker/swarm

2       /var/lib/docker/buildkit

0       /var/lib/docker/tmp

0       /var/lib/docker/runtimes

260461  /var/lib/docker/

#既然/var/lib/docker/containers占用的磁盘空间大,那就看看该文件夹下各个子目录都有多大
[root@master containers]# du -d 1 -m /var/lib/docker/containers

可以看到cec2b7的容器占了233G的磁盘空间,进入到目录中查看一下具体的文件,发现一个*-json.log的文件有两百多G大小,于是选中它并进行删除。再次查看/var/lib/docker/占用的磁盘空间大小:

[root@master containers]# du -hs /var/lib/docker/
22G     /var/lib/docker/

3. 重启主机

reboot

重新查看文件系统硬盘使用情况:df -h

可以看到磁盘空间的使用率已经降下来了,同时k8s的存储卷的使用率也同步降下来啦,非常开心解决了一个问题,继续努力哦~

另外:关于pv或pvc内存过高的情况,也可以在主机挂载的目录删除一些占用内存的文件或文件夹,也有一些效果的。

相关实践学习
通过Ingress进行灰度发布
本场景您将运行一个简单的应用,部署一个新的应用用于新的发布,并通过Ingress能力实现灰度发布。
容器应用与集群管理
欢迎来到《容器应用与集群管理》课程,本课程是“云原生容器Clouder认证“系列中的第二阶段。课程将向您介绍与容器集群相关的概念和技术,这些概念和技术可以帮助您了解阿里云容器服务ACK/ACK Serverless的使用。同时,本课程也会向您介绍可以采取的工具、方法和可操作步骤,以帮助您了解如何基于容器服务ACK Serverless构建和管理企业级应用。 学习完本课程后,您将能够: 掌握容器集群、容器编排的基本概念 掌握Kubernetes的基础概念及核心思想 掌握阿里云容器服务ACK/ACK Serverless概念及使用方法 基于容器服务ACK Serverless搭建和管理企业级网站应用
目录
相关文章
|
1月前
|
消息中间件 Linux RocketMQ
在Red Hat Enterprise Linux 9上使用Docker快速安装并部署
通过以上步骤,你可以在Red Hat Enterprise Linux 9上使用Docker快速安装并部署RocketMQ。这种方法不仅简化了安装过程,还提供了一个灵活的环境来管理和扩展消息队列系统。RocketMQ作为一款高性能的分布式消息系统,通过Docker可以实现快速部署和高效管理。
65 2
|
1月前
|
消息中间件 Linux RocketMQ
在Red Hat Enterprise Linux 9上使用Docker快速安装并部署
通过以上步骤,你可以在Red Hat Enterprise Linux 9上使用Docker快速安装并部署RocketMQ。这种方法不仅简化了安装过程,还提供了一个灵活的环境来管理和扩展消息队列系统。RocketMQ作为一款高性能的分布式消息系统,通过Docker可以实现快速部署和高效管理。
37 3
|
2月前
|
关系型数据库 MySQL Linux
基于阿里云服务器Linux系统安装Docker完整图文教程(附部署开源项目)
基于阿里云服务器Linux系统安装Docker完整图文教程(附部署开源项目)
314 3
|
2月前
|
缓存 运维 Docker
容器化运维:Docker Desktop 占用磁盘空间过大?教你轻松解决!
Windows Docker Desktop 使用过程中,因镜像、容器数据及构建缓存的累积,可能导致磁盘空间占用过高。通过删除无用镜像与容器、压缩磁盘以及清理构建缓存等方法,可有效释放空间。具体步骤包括关闭WSL、使用`diskpart`工具压缩虚拟磁盘、执行`docker buildx prune -f`清理缓存等。这些操作能显著减少磁盘占用,提升系统性能。
423 4
|
2月前
|
存储 Linux Docker
使用Docker存储驱动
【10月更文挑战第9天】
23 3
|
2月前
|
存储 Kubernetes Docker
|
2月前
|
Linux 开发工具 Docker
各个类linux服务器安装docker教程
各个类linux服务器安装docker教程
68 0