Redis代码阅读3--Redis网络监听(1)

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介: 接下来的三篇文章将对Redis的网络监听流程及涉及到事件库和各个主要方法进行介绍。在介绍 redis的网络监听流程和事件库之前,我们先设想一下,如果我们不采用libevent 等流行的开源库进行基于事件的网络监听,而是自己去实现一套基于事件的库去进行网络监听,需要考虑些什么,然后我们带着这些问题去分析 Redis是如果通过少量的代码来完成这个工作的。


接下来的三篇文章将对Redis的网络监听流程及涉及到事件库和各个主要方法进行介绍。

在介绍 redis的网络监听流程和事件库之前,我们先设想一下,如果我们不采用 libevent 等流行的开源库进行基于事件的网络监听,而是自己去实现一套基于事件的库去进行网络监听,需要考虑些什么,然后我们带着这些问题去分析 Redis是如果通过少量的代码来完成这个工作的。

在我认为,需要考虑的问题有以下一些(限于水平,暂时只能想到这些 ):

1.   采用何种 事件触发机制 ,是 epoll select kquque,抑或 3种都支持

2.   支持那些事件?

3.   如何管理各种事件(数据结构响应,查找)?

4.   如何响应 I/O事件?是异步还是同步?是单线程响应还是多线程响应?

5.   如何尽快地响应各种事件?

Redis的作者没有采用 libevent等之类的知名网络库,而是通过少量的代码实现了一个基于反转模式的轻量级网络库,对于这一点, Redis的作者是这样解释的,因为他觉得 libevent之类的知名网络库太过于庞大,而对 Redis来说只需要异步监听的基本功能,因此他不想引入过于“庞大”的第三库。

首先我们从 ae.h文件开始,介绍一下 redis网络监听所涉及的几个结构体和方法

C代码 复制代码  收藏代码
  1. /* A fired event */  
  2. typedef struct aeFiredEvent {  
  3.     int fd;  
  4.     int mask;  
  5. } aeFiredEvent;  
  6.   
  7. /* State of an event based program */  
  8. typedef struct aeEventLoop {  
  9.     int maxfd;  
  10.     long long timeEventNextId;  
  11.     aeFileEvent events[AE_SETSIZE]; /* Registered events */  
  12.     aeFiredEvent fired[AE_SETSIZE]; /* Fired events */  
  13.     aeTimeEvent *timeEventHead;  
  14.     int stop;  
  15.     void *apidata; /* This is used for polling API specific data */  
  16.     aeBeforeSleepProc *beforesleep;  
  17. } aeEventLoop;  
/* A fired event */
typedef struct aeFiredEvent {
    int fd;
    int mask;
} aeFiredEvent;

/* State of an event based program */
typedef struct aeEventLoop {
    int maxfd;
    long long timeEventNextId;
    aeFileEvent events[AE_SETSIZE]; /* Registered events */
    aeFiredEvent fired[AE_SETSIZE]; /* Fired events */
    aeTimeEvent *timeEventHead;
    int stop;
    void *apidata; /* This is used for polling API specific data */
    aeBeforeSleepProc *beforesleep;
} aeEventLoop;

aeEventLoop 是用于网络循环监听一个结构体,其通过 events这个内部数组来维护要要监听的文件事件,通过 fired来维护 select到需要响应的文件事件, timeEventHead则是把定时响应的时间事件通过链表的形式维护起来。

aeFileEvent是文件读写事件的抽象

C代码 复制代码  收藏代码
  1. /* File event structure */  
  2. typedef struct aeFileEvent {  
  3.     int mask; /* one of AE_(READABLE|WRITABLE) */用来区分读写事件  
  4.     aeFileProc *rfileProc;   读文件事件的处理函数  
  5.     aeFileProc *wfileProc;  写文件事件的处理函数  
  6.     void *clientData;  
  7. } aeFileEvent;  
  8. aeTimeEvent则是定时响应的事件的抽象  
  9. /* Time event structure */  
  10. typedef struct aeTimeEvent {  
  11.     long long id; /* time event identifier. */  
  12.     long when_sec; /* seconds */  事件响应点的秒时刻  
  13.     long when_ms; /* milliseconds */事件响应的毫秒时刻  
  14.     aeTimeProc *timeProc;  事件响应函数  
  15.     aeEventFinalizerProc *finalizerProc;  
  16.     void *clientData;  
  17.     struct aeTimeEvent *next;  下一个要响应的时间事件  
  18. } aeTimeEvent  
/* File event structure */
typedef struct aeFileEvent {
    int mask; /* one of AE_(READABLE|WRITABLE) */用来区分读写事件
    aeFileProc *rfileProc;   读文件事件的处理函数
    aeFileProc *wfileProc;  写文件事件的处理函数
    void *clientData;
} aeFileEvent;
aeTimeEvent则是定时响应的事件的抽象
/* Time event structure */
typedef struct aeTimeEvent {
    long long id; /* time event identifier. */
    long when_sec; /* seconds */  事件响应点的秒时刻
    long when_ms; /* milliseconds */事件响应的毫秒时刻
    aeTimeProc *timeProc;  事件响应函数
    aeEventFinalizerProc *finalizerProc;
    void *clientData;
    struct aeTimeEvent *next;  下一个要响应的时间事件
} aeTimeEvent

 

Redis的网络监控库里面, aeEventLoop aeFileEvent aeTimeEvent之间的关系是:

 

在了解了 Redis基于事件驱动的网络库所涉及的三个基本组件后,我们来看一下 Redis的网络监听的基本流程:

接下来下一篇文章将介绍整个流程涉及到的具体方法

相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
目录
相关文章
|
3月前
|
NoSQL Redis
Redis原理之网络通信协议笔记
1. RESP协议 ​2. 自定义Socket连接Redis
|
3月前
|
NoSQL Linux Redis
Redis原理之网络模型笔记
Redis采用单线程模型,这意味着一个Redis服务器在任何时刻都只会处理一个请求。Redis的网络模型涉及到阻塞I/O(Blocking I/O)、非阻塞I/O(Non-blocking I/O)、I/O多路复用(I/O Multiplexing)、信号驱动I/O(Signal-driven I/O)以及异步I/O(Asynchronous I/O)。
|
3月前
|
缓存 NoSQL 应用服务中间件
2.2.2 redis,memcached,nginx网络组件
2.2.2 redis,memcached,nginx网络组件
|
3月前
|
NoSQL Java 应用服务中间件
4.网络设计与redis、memcached、nginx组件(二)
4.网络设计与redis、memcached、nginx组件(二)
28 0
|
3月前
|
存储 NoSQL 应用服务中间件
4.网络设计与redis、memcached、nginx组件(一)
4.网络设计与redis、memcached、nginx组件(一)
76 0
|
1天前
|
存储 NoSQL Linux
Redis入门到通关之Redis5种网络模型详解
Redis入门到通关之Redis5种网络模型详解
|
2月前
|
NoSQL Java Redis
Spring boot 实现监听 Redis key 失效事件
【2月更文挑战第2天】 Spring boot 实现监听 Redis key 失效事件
79 0
|
2月前
|
NoSQL Java Redis
springboot整合redis过期key监听实现订单过期操作
springboot整合redis过期key监听实现订单过期操作
73 0
|
3月前
|
NoSQL 算法 关系型数据库
redis与mysql的数据一致性问题( 网络分区)
redis与mysql的数据一致性问题( 网络分区)
23 0
|
3月前
|
NoSQL 网络协议 关系型数据库
Redis(二)网络协议和异步方式(乐观锁&悲观锁、事务)
Redis(二)网络协议和异步方式(乐观锁&悲观锁、事务)
36 0