logrotate linux 系统日志备份压缩工具

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
日志服务 SLS,月写入数据量 50GB 1个月
简介:

logrotate 是作为linux系统日志的管理工具存在。它可以轮换、压缩、邮件系统日志文件。

默认的 logrotate 被加入 cron 的 /etc/cron.daily 中作为每日任务执行。
/etc/logrotate.conf 为其默认配置文件指定每个日志文件的默认规则。
/etc/logrotate.d/* 为 /etc/logrotate.conf 默认包含的目录,其中文件也会被 logrotate 读取。指明每个日志文件的特定规则。
/var/lib/logrotate.status中默认记录logrotate上次轮询日志文件的时间

日志文件的管理:
1、logrotate 配置
2、使用 include 选项读取其他配置文件及覆盖缺省配置
3、include 的几个实例

一、logrotate 配置

logrotate 程序是一个日志文件管理工具。用来把旧的日志文件删除,并创建新的日志文件,我们把它叫做”转储”。我们可以根据日志文件的大小,也可以根据其天数来转储,这个过程一般通过cron程序来执行。

logrotate 程序还可以用于压缩日志文件,以及发送日志到指定的E-mail。

logrotate 的配置文件是 /etc/logrotate.conf , 下面是主要配置参数:

compress : 通过gzip压缩转储以后的日志
nocompress : 不需要压缩时,用这个参数
copytruncate : 用于还在打开中的日志文件,把当前日志备份并截断
nocopytruncate : 备份日志文件但是不截断
create mode owner group : 转储文件,使用指定的文件模式创建新的日志文件
nocreate : 不建立新的日志文件
delaycompress : 和 compress 一起使用时,转储的日志文件到下一次转储时才压缩
nodelaycompress : 覆盖delaycompress 选项,转储同时压缩
errors address : 转储时的错误信息发送到指定的Email地址
ifempty : 即使是空文件也转储,这个是 logrotate 的缺省选项
noifempty : 如果是空文件的话,不转储
mail address : 把转储的日志文件发送到指定的E-mail地址
nomail : 转储时不发送日志文件
olddir directory : 转储后的日志文件放入指定的目录,必须和当前日志文件在同一个文件系统
noolddir : 转储后的日志文件和当前日志文件放在同一个目录下
prerotate/endscript : 在转储以前需要执行的命令可以放入这个对,这两个关键字必须单独成行
postrotate/endscript : 在转储以后需要执行的命令可以放入这个对,这两个关键字必须单独成行
daily : 指定转储周期为每天
weekly : 指定转储周期为每周
monthly : 指定转储周期为每月
rotate count : 指定日志文件删除之前的转储的次数,0值没有备份,15指保留15个备份
size size : 当日志文件到达指定的大小时才转储,Size可以指定bytes或者MB

二、使用include 选项读取其他配置文件

include 选项允许系统管理员把分散的几个文件的转储信息,集中到一个重要的配置文件。当 logrotate 从 logrotate.conf 读到 include 选项时,会从指定文件读入配置信息,就好像他们已经在 /etc/logrotate.conf 中一样

include 选项十分重要,一些应用把日志转储参数存放在 /etc/logrotate.d/ 下面

典型的应用有: cups dracut numad psacct sssd syslog yum

三、include 的几个实例

1、tomcat 日志备份处理

cat /etc/logrotate.d/tomcat

/usr/local/tomcats/*/logs/catalina.out
{
        rotate 14      # 指定日志文件删除之前的转储次数,14表示保留14次备份
        daily          # 指定转储周期为每天
        dateext        # 使用日期为转储文件的后缀
        copytruncate   # 用于还在打开中的日志文件,把当前日志备份并截断
        compress       # 通过gzip压缩转储以后的日志
        ifempty        # 即使是空文件也转储,这个是logrotate的缺省选项
        missingok      # 如果日志不存在则忽略该警告信息


        postrotate     # postrotate/endscript,在转储以后需要执行的命令可以放入这个对,这两个关键字必须单独成行
        find /usr/local/tomcats/*/logs \( -name "*.txt" -o -name "*.log" \) -mtime +0 -exec rm -rf {} \;
        endscript
}
AI 代码解读

下面是 tomcat 压缩后的日志:
这里写图片描述


2、redis 日志备份压缩

cat /etc/logrotate.d/redis

{
        rotate 14
        daily
        dateext
        copytruncate
        compress
        ifempty
        missingok
        postrotate
        find /var/log/redis \( -name "*.txt" -o -name "*.log" \) -mtime +0 -exec rm -rf {} \;
        endscript
}
AI 代码解读

下面是 redis 压缩后的日志:
这里写图片描述


3、vsftpd 日志备份压缩

那 vsftpd log 文件则不会写入那么频繁,所以使用 /etc/logrotate.conf 配置文件中的参数,每周压缩一次

cat /etc/logrotate.d/vsftpd

/var/log/vsftpd.log {
    # ftpd doesn't handle SIGHUP properly
    nocompress
    missingok
}

/var/log/xferlog {
    # ftpd doesn't handle SIGHUP properly
    nocompress
    missingok
}
AI 代码解读

由于 vsftpd 配置为nocompress ,并没有压缩,并且间隔也没有配置,所以继承 /etc/logrotate.conf 配置的全局属性,备份间隔为一周。所以日志为下面类型:
这里写图片描述


如果需要自行手动执行,则可以在终端输入下列命令
/usr/sbin/logrotate /etc/logrotate.conf 命令执行

logrotate 每天都是在凌晨3点多执行,如果需要每天0点0分自动执行,压缩昨天日志,则是如下操作:
centos 配置在/etc/cron.daily/logrotate,注释掉它

crontab -e
0 0 * * * /usr/sbin/logrotate -f /etc/logrotate.conf >/dev/null 2>&1
AI 代码解读
相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
HarmonyOS Next的HiLog日志系统完全指南:从入门到精通
本文深入解析HarmonyOS Next的HiLog日志系统,涵盖日志级别、核心API、隐私保护与高级回调功能,助你从入门到精通掌握这一重要开发工具。
59 1
|
20天前
|
深入理解GNU/Linux系统构成
GNU/Linux系统是开源软件环境的卓越典范,以其强大的内核为基础,通过系统库提供了软硬件之间的沟通,用户空间工具提供了丰富的软件生态,而图形界面又大大提高了其可用性。它的灵活性体现在通过多种多样的发行版定制化,来满足不同用户的需求。Understanding the composition of GNU/Linux systems requires diving into multiple layers, which are fundamental for its versatility and strength as an operating system.
164 74
使用Linux系统的mount命令挂载远程服务器的文件夹。
如此一来,你就完成了一次从你的Linux发车站到远程服务器文件夹的有趣旅行。在这个技术之旅中,你既探索了新地方,也学到了如何桥接不同系统之间的距离。
94 21
|
23天前
|
Linux系统中使用df命令详解磁盘使用情况。
`df`命令是Linux系统管理员和用户监控和管理磁盘空间使用的重要工具。掌握它的基本使用方法和选项可以帮助在必要时分析和解决空间相关问题。简洁但功能丰富,`df`命令确保了用户可以快速有效地识别和管理文件系统的空间使用情况。
114 13
|
2月前
|
Linux系统之tree命令的基本使用
Linux系统之tree命令的基本使用
245 3
Linux系统之tree命令的基本使用
WGLOG日志管理系统可以采集网络设备的日志吗
WGLOG日志审计系统提供开放接口,支持外部获取日志内容后发送至该接口,实现日志的存储与分析。详情请访问:https://www.wgstart.com/wglog/docs9.html
linux系统查看硬盘序列号
本文介绍在Linux系统中查看硬盘信息的三种方法:1) 使用`hdparm`工具,通过`sudo hdparm -i /dev/sda`获取硬盘序列号和型号;2) 使用`smartctl`工具,不仅可查序列号和型号,还能了解硬盘健康状态;3) 使用`lshw`命令显示存储设备拓扑信息。此外,提供通用技巧如用`lsblk`确认磁盘标识,及注意事项,例如管理员权限和云主机可能隐藏物理序列号等。
在Linux系统中安装JDK、Tomcat、MySQL以及部署J2EE后端接口
校验时,浏览器输入:http://[your_server_IP]:8080/myapp。如果你看到你的应用的欢迎页面,恭喜你,一切都已就绪。
301 17
服务器数据恢复—Linux系统服务器数据恢复案例
服务器数据恢复环境: linux操作系统服务器中有一组由4块SAS接口硬盘组建的raid5阵列。 服务器故障: 服务器工作过程中突然崩溃。管理员将服务器操作系统进行了重装。 用户方需要恢复服务器中的数据库、办公文档、代码文件等。
Linux系统中的cd命令:目录切换技巧
踏过千山,越过万水,人生就是一场不断前行的旅程,总充满了未知与挑战。然而,“cd”命令如同你的旅伴,会带你穿梭在如棋盘一般的文件系统中,探索每一处未知。希望你能从“cd”命令中找到乐趣,像是掌控了一种络新妙的魔法,去向未知进发,开始你的探索之旅。
169 24

热门文章

最新文章

AI助理
登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问

你好,我是AI助理

可以解答问题、推荐解决方案等