WAL文件回收

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: WAL文件回收

         checkpoint执行大致分为四步:1)刷写脏页,即将整个share buffer的所有脏页都刷盘;2)生成checkpoint wal记录,并插入WAL BUFFER;3)将checkpoint前的所有wal全部刷盘;4)回收WAL文件。这里主要介绍回收文件时需要注意的一点。尤其是磁盘空间比较紧张的场景下。

     本文介绍WAL文件回收时,需要注意的一个点。回收由函数RemoveOldXlogFiles函数完成。这个函数进行回收的时候,跳过时间线进行比较。如果_logSegNo日志号,即当前日志号减去变量控制需要保留的文件数后,得到的日志文件号。比这个日志文件号小的文件都会被删除,即RemoveXlogFile函数的工作。

      首先需要判断是否done文件,done文件下才会进入删除。删除前先保存下来删除的文件到共享内存即XLogCtl->lastRemovedSegNo = segno。

      如果一直进行promote的话,即使有很多WAL文件,也可能因为日志号在保留的范围内,从而导致不能被删除。这种情况对于不太稳定的环境尤其需要注意。即使及时执行checkpoint,也可能会因为这些WAL文件而撑爆磁盘空间。

     

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
目录
相关文章
|
1月前
|
存储 监控 固态存储
如何监控和优化 WAL 日志文件的存储空间使用?
如何监控和优化 WAL 日志文件的存储空间使用?
|
6月前
|
弹性计算 运维 Shell
清理日志文件
【4月更文挑战第29天】
48 1
|
Java
四、理解GC日志、内存分配与回收策略
最前面的数字“33.125:”和“100.667”代表了GC发生的时间,这个数字的含义是从Java虚拟机启动以来经过的秒数 GC日志开头的“[GC” "[FullGC"说明了这次垃圾收集的停顿类型,而不是用来区分新生代GC还是老年代GC的,如果有“Full”,说明这次GC是发生了stop-the-world的。 接下来“[DefNew”、"[Tenured" “[Perm”标识GC发生的区域,这里显示的区域名称与使用的GC收集器是密切相关的,例如上面样例所使用的Serial收集器中的新生代名为“Default New Generation”,所以显示为“DefNew”。如果是ParNew收
103 0
|
分布式数据库 Hbase 存储
如何清理磁盘
我们的电脑在使用的过程当中会出现很多的垃圾占用内存,我们每天使用电脑之后清理一下比较好
如何清理磁盘
|
关系型数据库 Unix Oracle