Redis配置和持久性

本文涉及的产品
云数据库 Tair(兼容Redis),内存型 2GB
Redis 开源版,标准版 2GB
推荐场景:
搭建游戏排行榜
日志服务 SLS,月写入数据量 50GB 1个月
简介:

redis是一种K/V结构的非关系型数据库,多应用于分布式场景


redis的配置文件在上篇文章中提到过,接下来看一下此配置文件的内容

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
grep  ^ ### /etc/redis.conf                   
################################## INCLUDES ###################################   //
################################## NETWORK #####################################  //网络配置段
################################# GENERAL #####################################   //通用配置段  
################################ SNAPSHOTTING  ################################   //快照配置段,持久性
################################# REPLICATION #################################   //复制配置段
################################## SECURITY ###################################   //安全配置段,如密码认证
################################### LIMITS ####################################   //资源限制配置段,对连接数量、时间等的限定
############################## APPEND ONLY MODE ###############################   //AOF,持久化
################################ LUA SCRIPTING  ###############################   //lua脚本配置段
################################ REDIS CLUSTER  ###############################   //redis集群配置段
################################## SLOW LOG ###################################   //慢日志配置段
################################ LATENCY MONITOR ##############################   //
############################# EVENT NOTIFICATION ##############################   //事件通知配置段
############################### ADVANCED CONFIG ###############################   //高级配置段

GENERAL配置段

1
2
3
4
5
6
7
daemonize no   #默认不以守护进程方式运行
supervised no
pidfile  /var/run/redis/redis .pid   #进程文件
loglevel notice                    #日志级别是提醒
logfile  /var/log/redis/redis .log   #日志文件的存放路径
databases 16
#设定数据库数量,默认为16个,每个数据库的名字均为整数,从0开始编号,默认操作的数据库为0

NETWORK配置段

1
2
3
4
5
6
bind 127.0.0.1    #绑定的ip地址,建议修改为对外提供服务的ip地址,0.0.0.0表示监听本机所有地址
port 6379    #默认监听端口
protected-mode  yes   #开启保护模式,即在为指定bind地址且未设置auth认证时启动保护模式
tcp-backlog 511
timeout 0    #连接的空闲超时时长,0表示不限时长
tcp-keepalive 300    #tcp连接的保持时长,单位是秒

SECURITY配置段

1
2
3
4
5
6
7
8
9
10
11
12
requirepass centos
#默认requirepass是注释的,我们把注释去掉,启动认证功能,示例如下:
 
redis-cli
127.0.0.1:6379> SELECT 14
(error) NOAUTH Authentication required.
127.0.0.1:6379> AUTH centos
OK
127.0.0.1:6379> SELECT 14
OK
127.0.0.1:6379[14]> 
#配置了认证后,必须认证成功才能进行后续的操作

LIMITS配置段

1
2
3
4
  maxclients 10000    #最大并发连接数,一旦达到此值redis就会关闭所有的新连接的请求
  maxmemory <bytes>    #最大内存使用空间,根据实际场景操作,单位是字节。redis是基于内存存储的,所以此字段应当引起重视
  maxmemory-policy noeviction    #当超出最大内存空间时采取的动作,默认是提示错误并不再写入。除了noeviction还有其他淘汰策略如volatile-lru, allkeys-lru
  maxmemory-samples 5

SLOW LOG配置段

1
2
slowlog-log-slower-than 10000    #单位是微秒,即当redis响应时间比此值低时就会记录到慢日志中
slowlog-max-len 128    #慢日志记录的最大条目

ADVANCED CONFIG配置段

1
2
3
4
5
6
hash -max-ziplist-entries 512    #hash类型的键的最大条目
hash -max-ziplist-value 64    #hash类型的子键的最大存储空间,单位是字节
#以上两个字段保持默认即可
client-output-buffer-limit normal 0 0 0    #全0表示不做硬限制和软限制,normal是普通客户
client-output-buffer-limit slave 256mb 64mb 60    #硬限制是256mb,软限制是64mb,软限制的宽限期是60s,slave是从节点
client-output-buffer-limit pubsub 32mb 8mb 60    #如果达到硬限制或者达到软限制并且过了宽限时间,redis就会关闭此连接,pubsub是队列

以上是redis配置文件的配置项的说明,下面一起来看下redis的持久化特性


redis的数据是存储在内存中的,但是当设备重启时还得从磁盘读取数据并重构redis数据库,这就要用到redis的持久化功能

两种持久化的实现:

RDB snapshotting 

特点:

二进制格式;按事先定制的策略,周期性地将数据从内存同步至磁盘;数据文件默认为dump.rdb

AOF ppend Only File, fsync

特点:

记录每次写操作至指定的文件尾部实现的持久化;当redis重启时,可通过重新执行文件中的命令在内存中重建出数据库;


RDB的相关配置 :SNAPSHOTTING配置段

1
2
3
4
5
6
7
8
9
10
11
12
13
14
save <seconds> <changes>
save 900 1    #在900秒内如果有1次键值发生改变则会触发一次快照
save 300 10   #在300秒内如果有10次键值发生变化则触发一次快照
save 60 10000    #在60秒内如果键值发生10000次变化则触发一次快照
#所以RDB是按照事先制定的策略,周期性将数据从内存同步至磁盘
stop-writes-on-bgsave-error  yes    #当bgsave出现错误时就会禁止新的写入操作请求,bgsave后面会解释
rdbcompression  yes    #压缩功能
rdbchecksum  yes    #校验完整性
dbfilename dump.rdb    #指定rdb文件,即快照到磁盘的文件
dir  /var/lib/redis    #指定存放数据库文件的目录,可以将此目录挂载到固态磁盘上以提高IO性能
 
客户端显式使用SAVE或BGSAVE命令来手动启动快照保存机制;
                 SAVE:同步,即在主线程中保存快照,此时会阻塞所有客户端请求,直到此步骤结束;
                 BGSAVE:异步;backgroud,也可以理解为后台执行,不会阻塞新的用户请求

AOF配置:APPEND ONLY MODE配置段

1
2
3
4
5
6
appendonly no   
appendfilename  "appendonly.aof"    #aof文件名称
appendfsync everysec    #多长时间进行一次aof文件的写入,默认是每秒写入一次,这样最多也就失去1秒钟的数据,但缺点就是写入频繁增加了IO压力
no-appendfsync-on-rewrite no    #是否在后台执行aof重写期间不调用fsync,默认为no,表示调用。
auto-aof-rewrite-percentage 100    #当键值变化量达到当前键值量的100%时执行重写到aof文件操作,即原键值数据为100mb,当增加的键值数据也达到100mb才会触发重写aof
auto-aof-rewrite-min-size 64mb    #重写aof文件的最小值,即每次追加aof文件的大小至少要达到64mb

总结二者区别:

1)RDB与AOF不会同时进行,如果同时开启则优先选择AOF;

2)RDB根据既定策略,周期性执行从内存同步到磁盘的操作,缺点就是不能做到时间点还原;

3)AOF在每次写操作或者每秒钟将内存数据追加到指定文件尾部,可以做到时间点还原,缺点就是频繁的IO操作;


注意:持久机制本身不能取代备份;应该制订备份策略,对redis库定期备份;


结束



本文转自  a_pan  51CTO博客,原文链接:http://blog.51cto.com/panpangao/1982301


相关文章
|
10天前
|
缓存 负载均衡 监控
135_负载均衡:Redis缓存 - 提高缓存命中率的配置与最佳实践
在现代大型语言模型(LLM)部署架构中,缓存系统扮演着至关重要的角色。随着LLM应用规模的不断扩大和用户需求的持续增长,如何构建高效、可靠的缓存架构成为系统性能优化的核心挑战。Redis作为业界领先的内存数据库,因其高性能、丰富的数据结构和灵活的配置选项,已成为LLM部署中首选的缓存解决方案。
|
3月前
|
NoSQL 安全 Linux
设置Redis在CentOS7上的自启动配置
这些步骤总结了在CentOS 7系统上设置Redis服务自启动的过程。这些命令提供了一个直接且明了的方式,确保Redis作为关键组件在系统启动时能自动运行,保障了依赖于Redis服务的应用的稳定性和可用性。
393 9
|
7月前
|
NoSQL Ubuntu 网络安全
在 Ubuntu 20.04 上安装和配置 Redis
在 Ubuntu 20.04 上安装和配置 Redis 的步骤如下:首先更新系统包,然后通过 `apt` 安装 Redis。安装后,启用并启动 Redis 服务,检查其运行状态。可选配置包括修改绑定 IP、端口等,并确保防火墙设置允许外部访问。最后,使用 `redis-cli` 测试 Redis 功能,如设置和获取键值对。
290 1
|
9月前
|
存储 监控 NoSQL
NoSQL与Redis配置与优化
通过合理配置和优化Redis,可以显著提高其性能和可靠性。选择合适的数据结构、优化内存使用、合理设置持久化策略、使用Pipeline批量执行命令、以及采用分布式集群方案,都是提升Redis性能的重要手段。同时,定期监控和维护Redis实例,及时调整配置,能够确保系统的稳定运行。希望本文对您在Redis的配置与优化方面有所帮助。
161 23
|
9月前
|
存储 监控 NoSQL
NoSQL与Redis配置与优化
通过合理配置和优化Redis,可以显著提高其性能和可靠性。选择合适的数据结构、优化内存使用、合理设置持久化策略、使用Pipeline批量执行命令、以及采用分布式集群方案,都是提升Redis性能的重要手段。
166 7
|
11月前
|
存储 SQL 关系型数据库
2024Mysql And Redis基础与进阶操作系列(1)作者——LJS[含MySQL的下载、安装、配置详解步骤及报错对应解决方法]
Mysql And Redis基础与进阶操作系列(1)之[MySQL的下载、安装、配置详解步骤及报错对应解决方法]
|
12月前
|
存储 NoSQL Redis
Redis 配置
10月更文挑战第14天
189 1
|
12月前
|
存储 缓存 NoSQL
大数据-46 Redis 持久化 RDB AOF 配置参数 混合模式 具体原理 触发方式 优点与缺点
大数据-46 Redis 持久化 RDB AOF 配置参数 混合模式 具体原理 触发方式 优点与缺点
259 1
|
12月前
|
消息中间件 NoSQL Kafka
大数据-116 - Flink DataStream Sink 原理、概念、常见Sink类型 配置与使用 附带案例1:消费Kafka写到Redis
大数据-116 - Flink DataStream Sink 原理、概念、常见Sink类型 配置与使用 附带案例1:消费Kafka写到Redis
732 0
|
NoSQL Redis 容器
【Azure Cache for Redis】Redis的导出页面无法配置Storage SAS时通过az cli来完成
【Azure Cache for Redis】Redis的导出页面无法配置Storage SAS时通过az cli来完成
106 3