单机版Redis

本文涉及的产品
云数据库 RDS MySQL,集群系列 2核4GB
推荐场景:
搭建个人博客
RDS MySQL Serverless 基础系列,0.5-2RCU 50GB
云数据库 RDS MySQL,高可用系列 2核4GB
简介: 【10月更文挑战第3天】

单机版Redis

假设现在有一个业务应用,需要引入Redis来提高应用的性能,此时可以选择部署一个单机版的Redis来使用

业务应用可以把Redis当作缓存来使用,从MySQL里查询数据,然后写入Redis中,之后业务应用再从Redis里读取数据,因为Redis的数据都是存储在内存里的,所以整体的速度很快。

随着业务的不断发展,Redis里存储的数据也越来越多,此时业务应用对Redis的依赖也越来越重,突然有一天Redis宕机了,这时候所有的业务流量,都会打到MySQL上,这时候MySQL的压力剧增,严重的话甚至会把MySQL打挂。

这时候需要怎么办呢?肯定是需要重启Redis,可以继续让它提供服务。但是因为Redis的数据都在内存里,即使重启也会丢失,Redis中依旧没有数据,业务流量还是会打到MySQL上,依旧解决不了问题。

那我们能不能把数据额外写一份到磁盘上呢?当Redis重启的时候,可以把磁盘中的数据快速恢复到内存中,这样就可以继续正常提供服务了。

数据持久化

把内存数据写到磁盘上的过程,就是数据持久化

那么持久化具体应该怎么做呢?很容易能够想到的一个方案是:Redis每一次执行写操作的时候,既写到内存上,同时也写一份到磁盘上。

这个方案的问题在于:客户端的每次写操作,既需要写内存,又需要写磁盘,而写磁盘的耗时比写内存要多很多,肯定会影响到Redis的性能

那么如何避免这个问题呢?

可以借助多线程的思想,Redis写内存由主线程来做,写内存完成后就给客户端返回结果,然后用另一个线程去写磁盘,这样可以避免主线程写磁盘对性能的影响。

除此之外,还可以结合Redis的适用场景来考虑怎么做持久化。Redis一般用于缓存,尽管Redis中没有保存全量数据,对于不在缓存里的数据,依旧可以通过查询数据库得到结果,对业务的结果没影响,所以可以用数据快照的方式做持久化

Redis的数据快照,就是记录某一时刻下Redis中的数据,然后只需要把这个数据快照写入磁盘就可以了。

优点在于:只在需要持久化的时候把数据一次性写入磁盘,其他时间都不需要操作磁盘。

所以第二个方案就是:定时给Redis做数据快照,把数据持久化到磁盘上。

刚刚说的这两个方案,对应Redis的RDB和AOF,他们的区别如下:

  • RDB

    • 创建一个子进程,持久化某一时刻的数据快照到磁盘上

    • 采用二进制和数据压缩的方式写入磁盘,这样文件体积小,数据恢复速度快

  • AOF

    • 每一次写操作都持久化到磁盘,主线程写入到内存,根据配置决定是主线程还是子线程进行数据持久化的操作

    • 记录每一次写命令,数据全,但是文件体积大,数据恢复速度慢

对于持久化方案的选择,可以遵循以下规则:

  • 业务对于数据丢失不敏感,选择RDB

  • 业务对数据完整性要求较高,采用AOF

假设选择的是AOF方案,又会遇到以下问题:

  • AOF记录的是每一次写操作,随着时间增长,AOF的文件体积会越来越大

  • 体积大的AOF文件,在数据恢复的时候变得很慢

那怎么样缩小文件体积,提升恢复速度呢?

可以从AOF的特点入手,AOF文件记录的是每一次的写操作,对于同一个key来说,可能会发生多次修改,我们只保留最后一次被修改的值就可以了。这就是AOF rewrite 。通过对AOF文件定期rewrite,避免这个文件体积持续膨胀,在恢复时就可以缩短恢复时间了

思考一下还有没有办法继续缩小AOF文件,回顾下RDB和AOF各自的特点,可以做混合持久化,当AOF rewrite的时候,Redis先以RDB格式在AOF文件里写入一个数据快照,再把在这期间产生的每一个写命令,追加到AOF文件里。因为RDB文件是二进制压缩产生的,AOF的文件体积就变得更小了。

Redis 4.0 以上才支持混合持久化

相关实践学习
如何在云端创建MySQL数据库
开始实验后,系统会自动创建一台自建MySQL的 源数据库 ECS 实例和一台 目标数据库 RDS。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
2天前
|
编解码 Java 程序员
写代码还有专业的编程显示器?
写代码已经十个年头了, 一直都是习惯直接用一台Mac电脑写代码 偶尔接一个显示器, 但是可能因为公司配的显示器不怎么样, 还要接转接头 搞得桌面杂乱无章,分辨率也低,感觉屏幕还是Mac自带的看着舒服
|
4天前
|
存储 缓存 关系型数据库
MySQL事务日志-Redo Log工作原理分析
事务的隔离性和原子性分别通过锁和事务日志实现,而持久性则依赖于事务日志中的`Redo Log`。在MySQL中,`Redo Log`确保已提交事务的数据能持久保存,即使系统崩溃也能通过重做日志恢复数据。其工作原理是记录数据在内存中的更改,待事务提交时写入磁盘。此外,`Redo Log`采用简单的物理日志格式和高效的顺序IO,确保快速提交。通过不同的落盘策略,可在性能和安全性之间做出权衡。
1540 5
|
1月前
|
弹性计算 人工智能 架构师
阿里云携手Altair共拓云上工业仿真新机遇
2024年9月12日,「2024 Altair 技术大会杭州站」成功召开,阿里云弹性计算产品运营与生态负责人何川,与Altair中国技术总监赵阳在会上联合发布了最新的“云上CAE一体机”。
阿里云携手Altair共拓云上工业仿真新机遇
|
7天前
|
人工智能 Rust Java
10月更文挑战赛火热启动,坚持热爱坚持创作!
开发者社区10月更文挑战,寻找热爱技术内容创作的你,欢迎来创作!
585 22
|
4天前
|
存储 SQL 关系型数据库
彻底搞懂InnoDB的MVCC多版本并发控制
本文详细介绍了InnoDB存储引擎中的两种并发控制方法:MVCC(多版本并发控制)和LBCC(基于锁的并发控制)。MVCC通过记录版本信息和使用快照读取机制,实现了高并发下的读写操作,而LBCC则通过加锁机制控制并发访问。文章深入探讨了MVCC的工作原理,包括插入、删除、修改流程及查询过程中的快照读取机制。通过多个案例演示了不同隔离级别下MVCC的具体表现,并解释了事务ID的分配和管理方式。最后,对比了四种隔离级别的性能特点,帮助读者理解如何根据具体需求选择合适的隔离级别以优化数据库性能。
201 3
|
10天前
|
JSON 自然语言处理 数据管理
阿里云百炼产品月刊【2024年9月】
阿里云百炼产品月刊【2024年9月】,涵盖本月产品和功能发布、活动,应用实践等内容,帮助您快速了解阿里云百炼产品的最新动态。
阿里云百炼产品月刊【2024年9月】
|
11天前
|
Linux 虚拟化 开发者
一键将CentOs的yum源更换为国内阿里yum源
一键将CentOs的yum源更换为国内阿里yum源
581 5
|
23天前
|
存储 关系型数据库 分布式数据库
GraphRAG:基于PolarDB+通义千问+LangChain的知识图谱+大模型最佳实践
本文介绍了如何使用PolarDB、通义千问和LangChain搭建GraphRAG系统,结合知识图谱和向量检索提升问答质量。通过实例展示了单独使用向量检索和图检索的局限性,并通过图+向量联合搜索增强了问答准确性。PolarDB支持AGE图引擎和pgvector插件,实现图数据和向量数据的统一存储与检索,提升了RAG系统的性能和效果。
|
7天前
|
XML 安全 Java
【Maven】依赖管理,Maven仓库,Maven核心功能
【Maven】依赖管理,Maven仓库,Maven核心功能
235 3
|
9天前
|
存储 人工智能 搜索推荐
数据治理,是时候打破刻板印象了
瓴羊智能数据建设与治理产品Datapin全面升级,可演进扩展的数据架构体系为企业数据治理预留发展空间,推出敏捷版用以解决企业数据量不大但需构建数据的场景问题,基于大模型打造的DataAgent更是为企业用好数据资产提供了便利。
328 2