Shell脚本删除自动清理超过大小的文件

简介: Shell脚本删除自动清理超过大小的文件

目的:Linux下删除超过指定大小的文件

思路:

       使用dd命令来创建不同大小的文件

       使用不同的方式列出目录下的所有文件

       提取文件的大小,名称

       判断进行处理删除

1,使用dd命令来模拟实验环境

格式:dd if=块文件存放位置  of=存放目录 bs=大小 count=个数

[root@localhost ~]# mkdir /file/
[root@localhost ~]# dd if=/dev/zero of=/file/1.txt bs=1M count=1
记录了1+0 的读入
记录了1+0 的写出
1048576字节(1.0 MB)已复制,0.000853269 秒,1.2 GB/秒
[root@localhost ~]# dd if=/dev/zero of=/file/2.txt bs=1M count=2
记录了2+0 的读入
记录了2+0 的写出
2097152字节(2.1 MB)已复制,0.00110556 秒,1.9 GB/秒
[root@localhost ~]# dd if=/dev/zero of=/file/3.txt bs=1M count=3
记录了3+0 的读入
记录了3+0 的写出
3145728字节(3.1 MB)已复制,0.00140054 秒,2.2 GB/秒
[root@localhost ~]# dd if=/dev/zero of=/file/4.txt bs=1M count=4
记录了4+0 的读入
记录了4+0 的写出
4194304字节(4.2 MB)已复制,0.0016842 秒,2.5 GB/秒
[root@localhost ~]# dd if=/dev/zero of=/file/5.txt bs=1M count=5
记录了5+0 的读入
记录了5+0 的写出
5242880字节(5.2 MB)已复制,0.0024222 秒,2.2 GB/秒
[root@localhost ~]# dd if=/dev/zero of=/file/6.txt bs=1M count=6
记录了6+0 的读入
记录了6+0 的写出
6291456字节(6.3 MB)已复制,0.00287438 秒,2.2 GB/秒
[root@localhost ~]# du -sh /file/*
1.0M  /file/1.txt
2.0M  /file/2.txt
3.0M  /file/3.txt
4.0M  /file/4.txt
5.0M  /file/5.txt
6.0M  /file/6.txt
[root@localhost ~]# ll -h /file/*
-rw-r--r--. 1 root root 1.0M 7月   7 07:55 /file/1.txt
-rw-r--r--. 1 root root 2.0M 7月   7 07:55 /file/2.txt
-rw-r--r--. 1 root root 3.0M 7月   7 07:55 /file/3.txt
-rw-r--r--. 1 root root 4.0M 7月   7 07:55 /file/4.txt
-rw-r--r--. 1 root root 5.0M 7月   7 07:55 /file/5.txt
-rw-r--r--. 1 root root 6.0M 7月   7 07:55 /file/6.txt

方法1:使用du -sh -b来计算大小进行处理:

dd 选项:

-s:仅计算总数

-h: 以K,M,G为单位

-b:显示目录或文件以byte为单位

       1T=1024G

       1G=1024M

       1M=1024K

       1K=1024B(字节)

#提取文件的大小
[root@localhost ~]# du -sh -b /file/* | awk '{print $1}'
1048576
2097152
3145728
4194304
5242880
6291456
#提取文件的名称
[root@localhost ~]# du -sh /file/* | awk '{print $2}' | awk -F/ '{print $3}'
1.txt
2.txt
3.txt
4.txt
5.txt
6.txt

编写脚本:

       思路:循环将第一个提取处理的大小赋予size变量,循环提取这个值的文件名,判断此文件的大小是否大于3MB,如果大于将此文件删除,给file变量赋予空值,嵌套循环结束,开始判断第二个文件,依次类推

#!/bin/bash
for size in $(du -sh -b /file/* | awk '{print $1}' )
do
        for file in $(du -sh -b /file/* | grep ${size} | awk '{print $2}' | awk -F/ '{print $3}')
        do
                if [ $size -gt 3145728 ] ; then
                        rm -rf /file/${file}
                        echo "${file}${size}"
                        echo "" >> $file
                fi
        done
done

方法2:使用ls -l语句进行过滤删除文件

-l:长格式列出文件

同等于:ll

[root@localhost ~]# ls -l /file
总用量 18432
-rw-r--r--. 1 root root 1048576 7月   7 07:55 1.txt
-rw-r--r--. 1 root root 2097152 7月   7 07:55 2.txt
-rw-r--r--. 1 root root 3145728 7月   7 07:55 3.txt
-rw-r--r--. 1 root root 4194304 7月   7 08:59 4.txt
-rw-r--r--. 1 root root 4194304 7月   7 08:59 5.txt
-rw-r--r--. 1 root root 4194304 7月   7 08:59 6.txt
[root@localhost ~]# ls -l /file | awk '{print $5}' | grep -v "^$"
1048576
2097152
3145728
4194304
4194304
4194304
[root@localhost ~]# ls -l /file | awk '{print $9}' | grep -v "^$"
1.txt
2.txt
3.txt
4.txt
5.txt
6.txt

思路:和方法1相似,ls提取处理的会开头有一个多余的空行,可以过滤一下(grep -v '^$')其余基本相同

#!/bin/bash
for size in $(ls -l /file/* | awk '{print $5}' | grep -v "^$")
do
        for file in $(ls -l /file/* |grep $size | awk '{print $9}'|awk -F/ '{print $3}' | grep -v '^$')
        do
                if [ $size -gt 3145728 ] ; then
                        rm -rf /file/${file}
                        echo "${file}${size}"
                        echo "" > $file
                fi
        done
done

方法3:使用find命令提取

-size:查找大小(KB|MB|GB)

1. #!/bin/bash
2. for i in $(find /file -size +3M);
3. do
4. rm -rf $i
5. done

最后:使用crontab定时任务自动清理

> /dev/null:将正确信息丢弃

2> /var/delete:将错误信息报错到文件内,方便管理员查看

[root@localhost ~]# crontab -l
0 5 * * 7 /bin/bash /脚本目录/脚本名称 > /dev/null 2>/var/delete.errer
目录
相关文章
|
3月前
|
Shell
Shell 文件包含
10月更文挑战第5天
41 4
|
3月前
|
Shell
一个用于添加/删除定时任务的shell脚本
一个用于添加/删除定时任务的shell脚本
127 1
|
2月前
|
Shell Linux 测试技术
6种方法打造出色的Shell脚本
6种方法打造出色的Shell脚本
74 2
6种方法打造出色的Shell脚本
|
2月前
|
XML JSON 监控
Shell脚本要点和难点以及具体应用和优缺点介绍
Shell脚本在系统管理和自动化任务中扮演着重要角色。尽管存在调试困难、可读性差等问题,但其简洁高效、易于学习和强大的功能使其在许多场景中不可或缺。通过掌握Shell脚本的基本语法、常用命令和函数,并了解其优缺点,开发者可以编写出高效的脚本来完成各种任务,提高工作效率。希望本文能为您在Shell脚本编写和应用中提供有价值的参考和指导。
82 1
|
2月前
|
Ubuntu Shell 开发工具
ubuntu/debian shell 脚本自动配置 gitea git 仓库
这是一个自动配置 Gitea Git 仓库的 Shell 脚本,支持 Ubuntu 20+ 和 Debian 12+ 系统。脚本会创建必要的目录、下载并安装 Gitea,创建 Gitea 用户和服务,确保 Gitea 在系统启动时自动运行。用户可以选择从官方或小绿叶技术博客下载安装包。
76 2
|
3月前
|
监控 网络协议 Shell
ip和ip网段攻击拦截系统-绿叶结界防火墙系统shell脚本
这是一个名为“小绿叶技术博客扫段攻击拦截系统”的Bash脚本,用于监控和拦截TCP攻击。通过抓取网络数据包监控可疑IP,并利用iptables和firewalld防火墙规则对这些IP进行拦截。同时,该系统能够查询数据库中的白名单,确保合法IP不受影响。此外,它还具备日志记录功能,以便于后续分析和审计。
69 6
|
2月前
|
运维 监控 Shell
深入理解Linux系统下的Shell脚本编程
【10月更文挑战第24天】本文将深入浅出地介绍Linux系统中Shell脚本的基础知识和实用技巧,帮助读者从零开始学习编写Shell脚本。通过本文的学习,你将能够掌握Shell脚本的基本语法、变量使用、流程控制以及函数定义等核心概念,并学会如何将这些知识应用于实际问题解决中。文章还将展示几个实用的Shell脚本例子,以加深对知识点的理解和应用。无论你是运维人员还是软件开发者,这篇文章都将为你提供强大的Linux自动化工具。
|
3月前
|
监控 Unix Shell
shell脚本编程学习
【10月更文挑战第1天】shell脚本编程
90 12
|
3月前
|
存储 运维 监控
自动化运维:使用Shell脚本简化日常任务
【9月更文挑战第35天】在IT运维的日常工作中,重复性的任务往往消耗大量的时间。本文将介绍如何通过编写简单的Shell脚本来自动化这些日常任务,从而提升效率。我们将一起探索Shell脚本的基础语法,并通过实际案例展示如何应用这些知识来创建有用的自动化工具。无论你是新手还是有一定经验的运维人员,这篇文章都会为你提供新的视角和技巧,让你的工作更加轻松。
98 2
|
3月前
|
存储 Shell Linux
【Linux】shell基础,shell脚本
Shell脚本是Linux系统管理和自动化任务的重要工具,掌握其基础及进阶用法能显著提升工作效率。从简单的命令序列到复杂的逻辑控制和功能封装,Shell脚本展现了强大的灵活性和实用性。不断实践和探索,将使您更加熟练地运用Shell脚本解决各种实际问题
45 0