Redis——持久化之AOF

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
日志服务 SLS,月写入数据量 50GB 1个月
简介: Redis——持久化之AOF

1.AOF是什么?


日志的形式来记录每个写操作(增量保存),Redis执行过的所有写指令记录下来(读操作不记录)只许追加文件但不可以改写文件redis启动之初会读取该文件重新构建数据,换言之,redis 重启的话就根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作。


1.1 AOF持久化流程

1)客户端的请求写命令会被append追加到AOF缓冲区内;

2AOF缓冲区根据AOF持久化策略[always,everysec,no]将操作sync同步到磁盘的AOF文件中;

3AOF文件大小超过重写策略或手动重写时,会对AOF文件rewrite重写,压缩AOF文件容量;

4Redis服务重启时,会重新load加载AOF文件中的写操作达到数据恢复的目的;

AOF默认不开启:可以在redis.conf中配置文件名称,默认为appendonly.aofAOF文件的保存路径,同RDB的路径一致。

AOFRDB同时开启,redis听谁的?AOFRDB同时开启,系统默认取AOF的数据(数据不会存在丢失)


1.2 AOF的优势/劣势


优势:

1.    备份机制更稳健,丢失数据概率更低。

2.    可读的日志文本,通过操作AOF稳健,可以处理误操作。

劣势:

1.    比起RDB占用更多的磁盘空间。

2.    恢复备份速度要慢。

3.    每次读写都同步的话,有一定的性能压力。

4.    存在个别Bug,造成恢复不能。


1.3 RDB和AOF用哪个好?


官方推荐两个都启用。

如果对数据不敏感,可以选单独用RDB

不建议单独用 AOF,因为可能会出现Bug

如果只是做纯内存缓存,可以都不用。

1.    RDB持久化方式能够在指定的时间间隔能对你的数据进行快照存储

2.    AOF持久化方式记录每次对服务器写的操作,当服务器重启的时候会重新执行这些命令来恢复原始的数据,AOF命令以redis协议追加保存每次写的操作到文件末尾.

3.    Redis还能对AOF文件进行后台重写,使得AOF文件的体积不至于过大

4.    只做缓存:如果你只希望你的数据在服务器运行的时候存在,你也可以不使用任何持久化方式.

5.    同时开启两种持久化方式

6.    在这种情况下,redis重启的时候会优先载入AOF文件来恢复原始的数据, 因为在通常情况下AOF文件保存的数据集要比RDB文件保存的数据集要完整.

7.    RDB的数据不实时,同时使用两者时服务器重启也只会找AOF文件。那要不要只使用AOF呢?

8.    建议不要,因为RDB更适合用于备份数据库(AOF在不断变化不好备份)快速重启,而且不会有AOF可能潜在的bug,留着作为一个万一的手段。


1.4 AOF启动——正常恢复

AOF的备份机制和性能虽然和RDB不同,但是备份和恢复的操作同RDB一样,都是拷贝备份文件,需要恢复时再拷贝到Redis工作目录下,启动系统即加载。

首先,修改redis.conf配置文件中的 appendonly no,改为yes

然后,重启redis服务,就可以看到 appendonly.aof 文件已经生成了。


现在我向redis中写入4个数据,之后查看aof文件的大小。

 

下面,我先将appendonly.aof文件备份一份,然后将redisshutdown

之后,将原先AOF持久化的文件给删掉,将appendonly2.aof文件改名为appendonly.aof


之后,我们重启redis,看看其中都有哪些数据。可以看到之前设置的4key仍然是存在的。这是因为redis重启之后,会去加载aof文件中的内容。


1.5 AOF启动——异常恢复

首先我们 vim appendonly.aof 这个文件,再最后一行加一个 hello,确保这个文件被修改了(即aof文件已损坏)。

然后重启redis


在上图中可以看到,redis启动失败了。这是因为,redis在启动的时候会去加载你的aof文件,而我们刚刚将aof文件进行了随意修改,也就是说aof文件已经损坏了,那么此时redis就无法正常启动了。

解决方法:使用redis-check-aof --fix appendonly.aof 命令对该文件进行修复。


可以看到,修复完成之后,我们再次重启redis就成功了,并且其中的数据仍然存在。


1.6 AOF同步频率设置

appendfsync always:始终同步,每次Redis的写入都会立刻记入日志;性能较差但数据完整性比较好

appendfsync everysec:每秒同步,每秒记入日志一次,如果宕机,本秒的数据可能丢失。

appendfsync noredis不主动进行同步,把同步时机交给操作系统


1.7 AOF Rewrite压缩

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
13天前
|
监控 NoSQL 测试技术
【赵渝强老师】Redis的AOF数据持久化
Redis 是内存数据库,提供数据持久化功能,支持 RDB 和 AOF 两种方式。AOF 以日志形式记录每个写操作,支持定期重写以压缩文件。默认情况下,AOF 功能关闭,需在 `redis.conf` 中启用。通过 `info` 命令可监控 AOF 状态。AOF 重写功能可有效控制文件大小,避免性能下降。
|
13天前
|
存储 监控 NoSQL
【赵渝强老师】Redis的RDB数据持久化
Redis 是内存数据库,提供数据持久化功能以防止服务器进程退出导致数据丢失。Redis 支持 RDB 和 AOF 两种持久化方式,其中 RDB 是默认的持久化方式。RDB 通过在指定时间间隔内将内存中的数据快照写入磁盘,确保数据的安全性和恢复能力。RDB 持久化机制包括创建子进程、将数据写入临时文件并替换旧文件等步骤。优点包括适合大规模数据恢复和低数据完整性要求的场景,但也有数据完整性和一致性较低及备份时占用内存的缺点。
|
1月前
|
存储 缓存 NoSQL
大数据-45 Redis 持久化概念 RDB AOF机制 持久化原因和对比
大数据-45 Redis 持久化概念 RDB AOF机制 持久化原因和对比
39 2
大数据-45 Redis 持久化概念 RDB AOF机制 持久化原因和对比
|
2月前
|
存储 缓存 NoSQL
Redis中的rdb和aof
本文深入探讨了Redis的持久化机制,包括RDB和AOF两种方式。详细解释了RDB的工作原理、优势和劣势,以及AOF的实现原理、配置选项、文件重写机制和三种数据同步方式,还介绍了AOF文件修复工具redis-check-aof的使用,并通过实例展示了如何开启和配置AOF持久化方式。
Redis中的rdb和aof
|
1月前
|
消息中间件 分布式计算 NoSQL
大数据-41 Redis 类型集合(2) bitmap位操作 geohash空间计算 stream持久化消息队列 Z阶曲线 Base32编码
大数据-41 Redis 类型集合(2) bitmap位操作 geohash空间计算 stream持久化消息队列 Z阶曲线 Base32编码
27 2
|
1月前
|
存储 缓存 NoSQL
大数据-46 Redis 持久化 RDB AOF 配置参数 混合模式 具体原理 触发方式 优点与缺点
大数据-46 Redis 持久化 RDB AOF 配置参数 混合模式 具体原理 触发方式 优点与缺点
59 1
|
2月前
|
存储 NoSQL Redis
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
Redis持久化、RDB和AOF方案、Redis主从集群、哨兵、分片集群、散列插槽、自动手动故障转移
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
|
2月前
|
存储 缓存 NoSQL
Redis 大 Key 对持久化的影响及解决方案
Redis 大 Key 对持久化的影响及解决方案
46 1
|
3月前
|
缓存 NoSQL Linux
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
130 1
【Azure Redis 缓存】Windows和Linux系统本地安装Redis, 加载dump.rdb中数据以及通过AOF日志文件追加数据
|
2月前
|
存储 NoSQL 安全
8)详解 Redis 的配置文件以及数据持久化
8)详解 Redis 的配置文件以及数据持久化
39 0