Redis的高级特性与应用场景(一)

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
简介: Redis的高级特性与应用场景(一)

Redis的高级特性与应用场景(一)

 

巧用expire

redis 中可以使用 expire 命令设置一个键的生存时间,到期后 redis 会自动删除他

  • 过期时间可以设置为秒或者毫秒精度。
  • 过期时间分辨率总是 1 毫秒。
  • 过期信息被复制和持久化到磁盘,当 Redis 停止时时间仍然在计算 (也就是说 Redis 保存了过期时间)。

应用场景

  • 限时优惠活动
  • 网站热数据缓存
  • 积分排行榜
  • 手机验证码
  • 访客访问频率限制(例如:1分钟最多访问10次)

数据排序-sort

排序可以说是 redis 里面比较复杂的一个操作了

sort 命令可以对列表类型,集合类型和有序集合类型,以及hash类型键进行排序

# 命令格式
sort key [BY pattern] [LIMIT offset count] [GET pattern [GET pattern ...]] [ASC|DESC] [ALPHA] [STORE destination]

举个例子: 列表里面存储用户id, 正常键值可以存储对应用户id的分数,根据对应分数进行排序,并将排序的操作保存到新的列表里面

lpush list-t 1
lpush list-t 2
lpush list-t 3
set user:1 20
set user:2 10
set user:3 30
# 对list-t进行排序 根据user:id 的值进行排序 进行分页  将查询结果写入新的列表 list-new
sort list-t by user:* get user:* limit 0 2 store list-new

sort使用不好很容易成为性能瓶颈,所以一般都会把排序后的结果写入新的缓存

发布订阅

  • 发布:publish
  • 订阅:subscribe
  • 取消订阅:unsubscribe
  • 按照规则订阅:psubscribe
  • 按照规则取消订阅:punsubscribe

注意:使用punsubscribe命令只能退订通过psubscribe 订阅的频道。

这个场景基本不用多说,一个操作对应多个操作就可以使用


任务队列

任务队列:使用lpushrpop(brpop)可以实现普通的任务队列。brpop是列表的阻塞式(blocking)弹出原语。

它是 RPOP 命令的阻塞版本,当给定列表内没有任何元素可供弹出的时候,连接将被 BRPOP 命令阻塞,直到等待超时或发现可弹出元素为止。

当给定多个 key 参数时,按参数 key 的先后顺序依次检查各个列表,弹出第一个非空列表的尾部元素。

  • 优先级队列:
brpop key1 key2 key3 timeout

利用redis的这个机制可以制作一个轻量级队列

限制网站访客访问频率

进行各种数据统计的用途是非常广泛的,比如想知道什么时候封锁一个IP地址。INCRBY命令让这些变得很容易,通过原子递增保持计数;GETSET用来重置计数器;过期属性expire用来确认一个关键字什么时候应该删除。

这里的getset 命令使获取和修改操作具有原子性,才能保证程序正常,如果使用先get,在set是会出现意外情况的.

例子

function checkIp($ip)
{
    $value = (int) $redis->get($ip);
    if ($value) {
        // 设置初始访问值
        $redis->set($ip, 1);
        //设置IP的生存时间为60秒,60秒内IP的访问次数由程序控制
        $redis->expire($ip, 60);
    } else {
        //如果60秒内IP的访问次数超过10,返回false,实现了超过10次禁止
        if ($value > 10) {
            return false;
        } else {
            //如果没有10次,可以自增
            $redis->incr($ip);
        }
    }
    return true;
}

巧用缓存

  • 商品维度计数

喜欢数,评论数,鉴定数,浏览数

hset good:1 visit 1
hincrby good:1 visit 1
hgetall good:1
  • 用户维度计数

动态数、关注数、粉丝数、喜欢商品数、发帖数 等

  • 存储社交关系

譬如将用戶的好友/粉丝/关注,可以存在一个sorted set中,score可以是timestamp,这样求两个人的共同好友的操作,可能就只需要用求交集命令即可。

  • 灵活运用计数实现反 spam(垃圾)

登录次数限制,支付次数限制,一分钟评论不能超过2次 可以根据业务设计很多规则

采用sorted set将最近一天用户操作记录起来(为什么不全部记录?节省memory,全部操作会记录到log,后续利用hadoop进行更全面分析统计)

日志可以持续增量到es 或者 数据库

  • 排行榜

这里采用RedisList数据结构或sorted set 结构, 方便实现最新列表or排行榜 等业务场景。

redis调优

  • 精简键名和键值

键名:尽量精简,但是也不能单纯为了节约空间而使用不易理解的键名。

键值:对于键值的数量固定的话可以使用0和1这样的数字来表示

  • SLOWLOG 和mysql一样 记录慢操作命令
slowlog-log-slower-than  //它决定要对执行时间大于多少微秒(microsecond,1秒 = 1,000,000 微秒)的命令进行记录
slowlog-max-len   //它决定 slowlog 最多能保存多少条日志
  • 限制redis的内存大小

通过redisinfo命令查看内存使用情况,如果不设置maxmemory或者设置为0,64位系统不限制内存,32位系统最多使用3GB内存。

maxmemory:最大内存
maxmemory-policy:内存不足时,数据清除策略

如果数据不可预估的情况下,还是需要设置一下最大使用内存,不然会抛出错误导致服务停止工作

  • 缓存技巧

尽可能的使用Hash数据结构。因为Redis在储存小于100个字段的Hash结构上,其存储效率是非常高的。所以在不需要集合(set)操作或listpush/pop操作的时候,尽可能的使用Hash结构。比如,在一个web应用程序中,需要存储一个对象表示用户信息,使用单个key表示一个用户,其每个属性存储在Hash的字段里,这样要比给每个属性单独设置一个key-value要高效的多。 通常情况下倘若有数据使用string结构,用多个key存储时,那么应该转换成单key多字段的Hash结构。 如上述例子中介绍的Hash结构应包含,单个对象的属性或者单个用户各种各样的资料。

尽可能设置key的生存时间,并指定阀值去限制Redis使用的最大内存。

若是启用了Redis快照功能,应该设置maxmemory值为系统可使用内存的45%,因为快照时需要一倍的内存来复制整个数据集,也就是说如果当前已使用45%,在快照期间会变成95%(45%+45%+5%),其中5%是预留给其他的开销。 如果没开启快照功能,maxmemory最高能设置为系统可用内存的95%

多命令使用管道 pipeline,这个下篇文章会说明

  • 好文学习

好文

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
目录
相关文章
|
4月前
|
存储 缓存 监控
Redis设计与实现——Redis命令参考与高级特性
Redis 是一个高性能的键值存储系统,支持丰富的数据类型(字符串、列表、哈希、集合等)和多种高级功能。本文档涵盖 Redis 的核心命令分类,包括数据类型操作、事务与脚本、持久化、集群管理、系统监控等。特别介绍了事务的原子性特性、Lua 脚本的执行方式及优势、排序机制、发布订阅模型以及慢查询日志和监视器工具的使用方法。适用于开发者快速掌握 Redis 常用命令及其应用场景,优化系统性能与可靠性。
|
6月前
|
canal NoSQL 关系型数据库
Redis应用—7.大Value处理方案
本文介绍了一种用于监控Redis大key的方案设计及其实现步骤。主要内容包括:方案设计、安装与配置环境、binlog数据消费者。
246 29
Redis应用—7.大Value处理方案
|
2月前
|
NoSQL Java Redis
Redis基本数据类型及Spring Data Redis应用
Redis 是开源高性能键值对数据库,支持 String、Hash、List、Set、Sorted Set 等数据结构,适用于缓存、消息队列、排行榜等场景。具备高性能、原子操作及丰富功能,是分布式系统核心组件。
333 2
|
3月前
|
NoSQL 网络协议 Java
【Azure Redis】Redis服务端的故障转移(Failover)导致客户端应用出现15分钟超时问题的模拟及解决
在使用 Azure Cache for Redis 服务时,因服务端维护可能触发故障转移。Linux 环境下使用 Lettuce SDK 会遇到超时 15 分钟的已知问题。本文介绍如何通过重启 Primary 节点主动复现故障转移,并提供多种解决方案,包括调整 TCP 设置、升级 Lettuce 版本、配置 TCP_USER_TIMEOUT 及使用其他 SDK(如 Jedis)来规避此问题。
129 1
|
6月前
|
缓存 NoSQL Java
Redis应用—6.热key探测设计与实践
热key问题在高并发系统中可能导致数据层和服务层的严重瓶颈,如Redis集群瘫痪和用户体验下降。为解决此问题,京东开发了JdHotkey热key探测框架,具备实时性、准确性、集群一致性和高性能等特点。该框架由etcd集群、Client端jar包、Worker端集群和Dashboard控制台组成,通过分布式计算快速识别热key并推送至应用内存,有效减轻数据层负载,提升服务性能。JdHotkey适用于多种场景,安装部署简便,支持毫秒级热key探测和集群一致性维护。
305 61
Redis应用—6.热key探测设计与实践
|
4月前
|
NoSQL 算法 安全
redis分布式锁在高并发场景下的方案设计与性能提升
本文探讨了Redis分布式锁在主从架构下失效的问题及其解决方案。首先通过CAP理论分析,Redis遵循AP原则,导致锁可能失效。针对此问题,提出两种解决方案:Zookeeper分布式锁(追求CP一致性)和Redlock算法(基于多个Redis实例提升可靠性)。文章还讨论了可能遇到的“坑”,如加从节点引发超卖问题、建议Redis节点数为奇数以及持久化策略对锁的影响。最后,从性能优化角度出发,介绍了减少锁粒度和分段锁的策略,并结合实际场景(如下单重复提交、支付与取消订单冲突)展示了分布式锁的应用方法。
318 3
|
4月前
|
消息中间件 NoSQL Unix
Redis的基本特性以及其基础命令用法
这只是冰山一角,Redis的强大功能和简洁的操作方法值得我们深入了解和掌握,是复杂数据问题解决的有力工具。所以,来一场有趣的Redis冒险吧!
155 6
|
11月前
|
监控 NoSQL Java
场景题:百万数据插入Redis有哪些实现方案?
场景题:百万数据插入Redis有哪些实现方案?
141 1
场景题:百万数据插入Redis有哪些实现方案?
|
10月前
|
NoSQL 安全 测试技术
Redis游戏积分排行榜项目中通义灵码的应用实战
Redis游戏积分排行榜项目中通义灵码的应用实战
232 4
|
4月前
|
存储 NoSQL Java
从扣减库存场景来讲讲redis分布式锁中的那些“坑”
本文从一个简单的库存扣减场景出发,深入分析了高并发下的超卖问题,并逐步优化解决方案。首先通过本地锁解决单机并发问题,但集群环境下失效;接着引入Redis分布式锁,利用SETNX命令实现加锁,但仍存在死锁、锁过期等隐患。文章详细探讨了通过设置唯一标识、续命机制等方法完善锁的可靠性,并最终引出Redisson工具,其内置的锁续命和原子性操作极大简化了分布式锁的实现。最后,作者剖析了Redisson源码,揭示其实现原理,并预告后续关于主从架构下分布式锁的应用与性能优化内容。
225 0