Redis管道

本文涉及的产品
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
云数据库 Tair(兼容Redis),内存型 2GB
简介: Redis管道

Redis管道

面试题目

如何优化频繁的命令往返造成的性能瓶颈?


Redis是一种基于 客户端-服务器端模型以及请求/响应协议的TCP服务,一个请求会遵循一下的步骤:


客户端向服务端发送命令分四步(发送命令➡➡命令排队➡➡命令执行➡➡返回结果),并监听Socket返回,通常以阻塞的模式等待服务端响应。

服务端处理命令,并将结果返回给客户端。

上述两步称为 Round Trip Time (简称 RTT,数据包往返两端的时间)

+67.png

如果同时执行大量的命令,那么就要等待上一条命令答应后再执行,这中间会有很多的RTT,而且会频繁的调用系统IO,发送网络请求,同时需要redis调用多条 read() 和 write() 系统方法,系统方法会将数据从用户态转移到内核态,这样就会对进程上下文有较大的影响,性能降低。


如何解决上面这个问题呢?


下面将使用redis管道来解决这个问题


什么是管道

管道(pipeline)可以一次性发送多条命令给服务端,服务端依次处理完毕后,通过一条响应一次性将结果返回,通过减少客户端与redis的通信次数来实现降低往返延时时间。管道实现的原理是队列,先进先出特性就保证了数据的顺序。

+68.png

pipeline是为了解决RTT往返时,仅仅是将命令一次性打包发送,对整个redis的执行不造成任何影响

redis管道是批处理命令的变种优化措施,类似redis的原生命令(mget 和 mset)

案例

先创建一个文件 cmd.txt,写入下面的命令

set k100 v100
set k200 v200
hset k300 name hhhh
hset k300 age 20
hset k300 gender male

使用管道命令

cat cmd.txt | redis-cli -a 1234 --pipe

+69.png
总结

pipeline与原生批量命令对比

原生批量命令是原子性的(如:mset、mget),pipeline是非原子性的。

原生批量命令一次只能执行一种命令,pipeline支持批量执行不同的命令。

原生批量命令是服务端实现,而pipeline需要服务端与客户端共同完成。

pipeline与事务对比

事务具有原子性,管道不具有原子性

管道一次性将多条命令发送到服务器,事务是一条一条的发送,事务只有在接收到exec命令后才会执行,管道不会。

执行事务时会阻塞其他命令的执行,而执行管道中的命令时不会。

pipeline注意事项

pipeline缓冲的指令只是会一次执行,不保证原子性,如果执行中指令发生异常,将会继续执行后续的指令

使用pipeline组装的命令个数不能太多,不然数据量过大客户端阻塞的时间可能过久,同时服务端此时也被迫回复一个队列答复,占用很多内存。


相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
缓存 NoSQL 网络协议
Redis之管道解读
Redis之管道解读
|
9天前
|
移动开发 NoSQL 网络协议
Redis 管道技术
10月更文挑战第21天
12 3
|
2月前
|
存储 NoSQL Redis
Redis 管道技术
【9月更文挑战第16天】Redis 管道技术通过批量发送命令并一次性读取响应,显著提升了与 Redis 服务器交互的性能。其工作原理包括命令缓冲、批量发送、响应接收与处理。管道技术减少了网络往返次数,提高了资源利用效率,并使代码更简洁。适用于批量操作、高并发环境及复杂业务逻辑等场景,是优化 Redis 应用性能的强大工具。
|
2月前
|
存储 NoSQL Redis
10)Redis 的管道技术
10)Redis 的管道技术
42 0
|
3月前
|
NoSQL Java 调度
Lettuce的特性和内部实现问题之Redis的管道模式提升性能的问题如何解决
Lettuce的特性和内部实现问题之Redis的管道模式提升性能的问题如何解决
|
3月前
|
NoSQL 网络协议 安全
Lettuce的特性和内部实现问题之Lettuce天然地使用管道模式与Redis交互的问题如何解决
Lettuce的特性和内部实现问题之Lettuce天然地使用管道模式与Redis交互的问题如何解决
|
5月前
|
缓存 NoSQL Redis
redis管道操作(节省网络IO开销)
pipeline中发送的每个command都会被server立即执行,如果执行失败,将会在此后的响应中得到信息;也就是pipeline并不是表达“所有command都一起成功”的语义,管道中前面命令失败,后面命令不会有影响,继续执行。
47 1
|
5月前
|
NoSQL Redis
加速 Redis 操作:掌握管道技术提升性能与效率
加速 Redis 操作:掌握管道技术提升性能与效率
|
4月前
|
监控 NoSQL Redis
Redis事务和Redis管道
Redis事务和Redis管道
61 0
|
6月前
|
监控 NoSQL 关系型数据库
Redis 事务 与 管道
Redis 事务 与 管道
42 0