AI 助理
备案控制台
开发者社区 数据库 文章 正文

Redis开发运维实践开发设计规范之内存考虑

2017-05-08 1496
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
Redis 开源版，标准版 2GB
推荐场景：
搭建游戏排行榜
云数据库 Tair（兼容Redis），内存型 2GB
推荐场景：
通过缓存加速数据库访问
简介：

4.4 内存考虑

  1. 只要有可能的话，就尽量使用散列键而不是字符串键来储存键值对数据，因为散列键管理方便、能够避免键名冲突、并且还能够节约内存。

    具体实例： 节约内存：Instagram的Redis实践 blog.nosqlfan.com/html/3379.html

  2. 如果将redis作为cache进行频繁读写和超时删除等，此时应该避免设置较大的k-v，因为这样会导致redis的 内存碎片增加，导致rss占用较大，最后被操作系统OOM killer干掉。一个很具体的issue例子请见：https://github.com/antirez/redis/issues/2136

  3. 如果采用序列化考虑通用性，请采用json相关的库进行处理，如果对内存大小和速度都很关注的，推荐使用messagepack进行序列化和反序列化

  4. 如果需要计数器，请将计数器的key通过天或者小时分割，比如下边的设计:

    需要修改为：

    更好的一个设计是采用hash：

  5. 各种数据结构及其占用内存的benchmark测试

set个数 每个set的元素总数 内存占用 Key大小 Value大小
100 100 1.88M 7 36
100 1000 10.75M 7 36
100 10000 111.12M 7 36
1000 100 11.59M 8 36
1000 1000 100.35M 8 36
1000 10000 1.08G 8 36
10000 100 108.71M 9 36
10000 1000 996.23M 9 36
zset个数 每个zset的元素总数 内存占用 Key大小 Value大小
100 100 1.62M 8 49
100 1000 15.91M 8 49
100 10000 162.06M 8 49
1000 100 8.71M 9 49
1000 1000 151.87M 9 49
1000 10000 1.58G 9 49
10000 100 79.83M 10 49
10000 1000 1.48G 10 49
hash个数 每个hash的元素总数 内存占用 Key大小 Value大小
100 100 1.63M 8 49
100 1000 6.29M 8 49
100 10000 156.91M 8 49
1000 100 8.71M 9 49
1000 1000 55.59M 9 49
1000 10000 1.52G 9 49
10000 100 79.83M 10 49
10000 1000 548.58M 10 49
list个数 每个list的元素总数 内存占用 Key大小 Value大小
100 100 1.23M 8 36
100 1000 10.00M 8 36
100 10000 92.40M 8 36
1000 100 4.83M 9 36
1000 1000 92.52M 9 36
1000 10000 916.47M 9 36
10000 100 40.76M 10 36
10000 1000 917.69M 10 36
string个数 内存占用 Key大小 Value大小
100 846.79K 13 36
1000 966.29K 13 36
10000 2.16M 13 36
100000 130.88M 13 36

Redis开发运维实践指南 本文为《Redis开发运维实践指南》内容，该书作者为黄鹏程，已授权云栖社区转载。
文章标签：
云数据库 Tair（兼容 Redis）
Web App开发
NoSQL
Redis
运维
关键词：
运维实践
云数据库 Tair（兼容 Redis）内存
云数据库 Tair（兼容 Redis）实践
开发内存
运维开发
相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务，基于高可靠双机热备架构及可无缝扩展的集群架构，满足高读写性能场景及容量需弹性变配的业务需求。 产品详情：https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验：数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引，您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接，领取免费ECS&RDS资源，30分钟完成数据库上云实战！https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
微雨入寒窗
目录
相关文章
追逐时光者
|
20天前
|
存储 运维
.NET开发必备技巧：使用Visual Studio分析.NET Dump，快速查找程序内存泄漏问题！
.NET开发必备技巧：使用Visual Studio分析.NET Dump，快速查找程序内存泄漏问题！
追逐时光者
34 2
小王老师呀
|
18天前
|
消息中间件 NoSQL Go
PHP转Go系列 | ThinkPHP与Gin框架之Redis延时消息队列技术实践
【9月更文挑战第7天】在从 PHP 的 ThinkPHP 框架迁移到 Go 的 Gin 框架时，涉及 Redis 延时消息队列的技术实践主要包括：理解延时消息队列概念，其能在特定时间处理消息，适用于定时任务等场景；在 ThinkPHP 中使用 Redis 实现延时队列；在 Gin 中结合 Go 的 Redis 客户端库实现类似功能；Go 具有更高性能和简洁性，适合处理大量消息。迁移过程中需考虑业务需求及系统稳定性。
小王老师呀
32 0
小王老师呀
|
1月前
|
Swift iOS开发
iOS开发-属性的内存管理
【8月更文挑战第12天】在iOS开发中，属性的内存管理至关重要，直接影响应用性能与稳定性。主要策略包括：`strong`（强引用），不维持对象生命期，可用于解除循环引用；`assign`（赋值），适用于基本数据类型及非指针对象属性；`copy`，复制对象而非引用，确保对象不变性。iOS采用引用计数管理内存，ARC（自动引用计数）自动处理引用增减，简化开发。为避免循环引用，可利用弱引用或Swift中的`[weak self]`。最佳实践包括：选择恰当的内存管理策略、减少不必要的强引用、及时释放不再使用的对象、注意block内存管理，并使用Xcode工具进行内存分析。
小王老师呀
40 1
嘟嘟嘟嘟嘟嘟
|
2月前
|
编解码 NoSQL Redis
c++开发redis module问题之想实现Redis命令，如何解决
c++开发redis module问题之想实现Redis命令，如何解决
嘟嘟嘟嘟嘟嘟
26 1
Ant.Dream
|
1月前
|
Java 开发工具 Android开发
Android经典面试题之开发中常见的内存泄漏，以及如何避免和防范
本文介绍Android开发中内存泄漏的概念及其危害，并列举了四种常见泄漏原因：静态变量持有Context、非静态内部类、资源未释放及监听器未注销。提供了具体代码示例和防范措施，如使用ApplicationContext、弱引用、适时释放资源及利用工具检测泄漏。通过遵循这些建议，开发者可以有效提高应用稳定性和性能。
Ant.Dream
39 0
嘟嘟嘟嘟嘟嘟
|
2月前
|
运维 NoSQL Redis
c++开发redis module问题之module根据Redis的角色采取不同的行为，如何解决
c++开发redis module问题之module根据Redis的角色采取不同的行为，如何解决
嘟嘟嘟嘟嘟嘟
53 0
嘟嘟嘟嘟嘟嘟
|
2月前
|
NoSQL Redis C++
c++开发redis module问题之对于写命令，进行主备复制和写AOF，如何解决
c++开发redis module问题之对于写命令，进行主备复制和写AOF，如何解决
嘟嘟嘟嘟嘟嘟
31 0
嘟嘟嘟嘟嘟嘟
|
2月前
|
NoSQL Linux Redis
c++开发redis module问题之避免在fork后子进程中发生死锁，如何解决
c++开发redis module问题之避免在fork后子进程中发生死锁，如何解决
嘟嘟嘟嘟嘟嘟
22 0
aliyun6365824167
|
1月前
|
存储 编译器 C语言
【C语言篇】数据在内存中的存储（超详细）
浮点数就采⽤下⾯的规则表⽰，即指数E的真实值加上127（或1023），再将有效数字M去掉整数部分的1。
aliyun6365824167
151 0
听风de歌
|
2月前
|
存储 分布式计算 Hadoop
HadoopCPU、内存、存储限制
【7月更文挑战第13天】
听风de歌
206 14

热门文章

最新文章

  • 1
    spring mvc redis消息队列
  • 2
    玩转redis-延时消息队列
  • 3
    铁打的云流水的价 阿里云ECS、Redis最高降幅35%
  • 4
    redis之（八）redis的有序集合类型的命令
  • 5
    Redis 如何实现库存扣减操作和防止被超卖？
  • 6
    【最佳实践】Elastic stack 实时分析下你的Redis slowlog
  • 7
    Redis 事件简述
  • 8
    Redis学习之基础命令
  • 9
    Redis学习
  • 10
    Mac安装、配置redis
  • 1
    如何在 Linux 上清除 RAM 内存缓存、缓冲区和交换空间？
    132
  • 2
    3.默认值不一样【重点】 局部变量:没有默认值，如果要想使用，必须手动进行赋值 成员变量:如果没有赋值，会有默认值，规则和数组一样 4.内存的位置不一样(了解) 局部变量:位于栈内存 成员变量:位于堆内存 5生命周期不一样(了解)
    43
  • 3
    Spark是一个基于内存的通用数据处理引擎，可以进行大规模数据处理和分析
    95
  • 4
    阿里云服务器CPU内存配置详细指南，如何选择合适云服务器配置？
    818
  • 5
    构建高效Android应用：采用Kotlin进行内存优化
    198
  • 6
    深入理解操作系统内存管理：策略与实现基于深度学习的图像识别技术在自动驾驶系统中的应用
    76
  • 7
    构建未来：以云原生为基石的分布式系统架构深入理解操作系统的内存管理机制
    80
  • 8
    为对象分配内存TLAB
    41
  • 9
    深入理解操作系统：内存管理与虚拟内存
    65
  • 10
    深入理解操作系统内存管理：分页与分段的融合
    381

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第二阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • Redis入门实战演练
  • 云数据库 Redis 版使用教程
  • Redis数据库入门

    • 相关电子书

    更多
  • ApsaraDB for Redis——与创客同行
  • 微博的Redis定制之路
  • 云数据库Redis版的开源之路

    • 相关实验场景

    更多
  • 体验PolarDB-X透明分布式
  • MySQL数据库快速部署实践
  • 基于生命周期管理的存储成本优化
  • 使用操作系统智能助手OS Copilot解锁操作系统运维与编程
  • 每个IT人都想学的“Web应用上云经典架构”实战
  • 云原生场景自动化响应ECS系统事件
    • 下一篇
    使用OSS上传下载文件