真枪实弹,Redis 的 RDB 配置和数据恢复

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: 真枪实弹,Redis 的 RDB 配置和数据恢复

真枪实弹,Redis 的 RDB 配置和数据恢复

RDB 配置解释

在 redis.conf 文件中,默认有 RDB 持久化配置:

save 900 1
save 300 10
save 60 10000

解释:

  • 这些配置称为检查点。
  • 每隔 900s,如果有至少 1 个 key发生了变更,就生成一个新的 dump.rdb 文件,这个 dump.rdb 文件就是 redis 内存中完整的数据快照,也叫做 snapshotting。
  • 同上,每隔 300s,检查是否有 10 个key 发生了变更,或者每隔 60s,检查是否有 10000个 key 发生了变更,如果有,则生成 dump.rdb 文件。
  • 可以配置多项检查点。
  • 可以移除所有检查点,只需要这样配置即可:save "",或者移除所有配置项。

RDB 持久化的工作流程

(1)Redis 根据配置尝试生成 rdb 快照文件。

(2)Redis fork 一个子进程。

(3)子进程尝试将数据 dump 到一个临时的 RDB 快照文件中。

(4)完成快照后,就把临时文件替换掉之前生成的 RDB 文件。

RDB 实验

实验(1)测试 Redis 被 shutdown 时,Redis 是否会丢失数据。

首先重启 Redis,让检查点的时间窗口重置。

redis-cli shutdown
cd /etc/init.d
./redis_6379 start
ps -ef | grep redis

然后往 Redis 中插入几条数据:

redis-cli
set key1 abc
set key2 222
get key1
get key2

目前只设置了 2 个 key,且还没有到 900 s,所以不会触发自动生成 RDB 快照。

这个时候我们可以猜测下重启 redis 后,刚刚插入的两个 key 是否被持久化到 dump 文件中了。

我们来测试下:

重启 Redis,获取 key1 和 key2:

redis-cli shutdown
cd /etc/init.d
./redis_6379 start
ps -ef | grep redis
redis-cli
get key1
get key2

会看到 Redis 重启后还是存在 key1 和 key2,并不会丢失。

另外还可以找下 dump.rdb 文件,更新时间更新为 shutdown 的时间。

结论:shutdown 时,Redis 不会丢失丢失,会将内存中的数据立即生成一份完整 RDB 快照。

实验(2)用 kill -9 直接干掉 Redis,模拟 Redis 故障,验证数据是否会丢失。

首先插入几条新数据

redis-cli
set key3 333
set key4 444
get key3
get key4

mark

然后获取 Redis 的进程 id

ps -ef | grep redis

Redis PID=1485,然后用 kill -9 干掉 Redis 进程:

kill -9 1485

然后重启 Redis

cd /var/run
rm -rf redis_6379.pid
cd /etc/init.d
./redis_6379 start

然后获取 key3 和 key4,发现没有这两个 key。

get key3
get key4

我们也可以查看下 dump.rdb 文件的更新时间是否有改变:

如果我们想要保证减少 Redis 故障导致的数据丢失,可以通过设置一个频率更高的检查点,每 5s 检查一次,如果有至少一条数据更新,则进行 RDB 快照。如下所示的配置:

save 5 1

但是如果故障正好发生在快照之前,那么变更的数据就没有生成到 RDB 文件中了。

而且生成的 RDB 的频率过高,而且变更的数据量很大的话,生成 RDB 的文件也会很大,操作 IO 的时间也会变长,长时间占用磁盘 IO 会造成性能问题。

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
1月前
|
存储 监控 NoSQL
【赵渝强老师】Redis的RDB数据持久化
Redis 是内存数据库,提供数据持久化功能以防止服务器进程退出导致数据丢失。Redis 支持 RDB 和 AOF 两种持久化方式,其中 RDB 是默认的持久化方式。RDB 通过在指定时间间隔内将内存中的数据快照写入磁盘,确保数据的安全性和恢复能力。RDB 持久化机制包括创建子进程、将数据写入临时文件并替换旧文件等步骤。优点包括适合大规模数据恢复和低数据完整性要求的场景,但也有数据完整性和一致性较低及备份时占用内存的缺点。
|
1月前
|
存储 SQL 关系型数据库
2024Mysql And Redis基础与进阶操作系列(1)作者——LJS[含MySQL的下载、安装、配置详解步骤及报错对应解决方法]
Mysql And Redis基础与进阶操作系列(1)之[MySQL的下载、安装、配置详解步骤及报错对应解决方法]
|
2月前
|
存储 缓存 NoSQL
大数据-45 Redis 持久化概念 RDB AOF机制 持久化原因和对比
大数据-45 Redis 持久化概念 RDB AOF机制 持久化原因和对比
43 2
大数据-45 Redis 持久化概念 RDB AOF机制 持久化原因和对比
|
2月前
|
存储 NoSQL Redis
Redis 配置
10月更文挑战第14天
30 1
|
3月前
|
存储 缓存 NoSQL
Redis中的rdb和aof
本文深入探讨了Redis的持久化机制,包括RDB和AOF两种方式。详细解释了RDB的工作原理、优势和劣势,以及AOF的实现原理、配置选项、文件重写机制和三种数据同步方式,还介绍了AOF文件修复工具redis-check-aof的使用,并通过实例展示了如何开启和配置AOF持久化方式。
Redis中的rdb和aof
|
2月前
|
存储 缓存 NoSQL
大数据-46 Redis 持久化 RDB AOF 配置参数 混合模式 具体原理 触发方式 优点与缺点
大数据-46 Redis 持久化 RDB AOF 配置参数 混合模式 具体原理 触发方式 优点与缺点
70 1
|
3月前
|
存储 NoSQL Redis
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
Redis持久化、RDB和AOF方案、Redis主从集群、哨兵、分片集群、散列插槽、自动手动故障转移
SpringCloud基础7——Redis分布式缓存,RDB,AOF持久化+主从+哨兵+分片集群
|
2月前
|
消息中间件 NoSQL Kafka
大数据-116 - Flink DataStream Sink 原理、概念、常见Sink类型 配置与使用 附带案例1:消费Kafka写到Redis
大数据-116 - Flink DataStream Sink 原理、概念、常见Sink类型 配置与使用 附带案例1:消费Kafka写到Redis
187 0
|
2月前
|
NoSQL Ubuntu Linux
redis的基本安装配置启动使用
redis的基本安装配置启动使用
39 0
|
2月前
|
缓存 NoSQL 数据处理
原生php实现redis缓存配置和使用方法
通过上述步骤,你可以在PHP项目中配置并使用Redis作为高性能的缓存解决方案。合理利用Redis的各种数据结构和特性,可以有效提升应用的响应速度和数据处理效率。记得在实际应用中根据具体需求选择合适的缓存策略,如设置合理的过期时间,以避免内存过度消耗。
59 0