redis非阻塞IO多路复用模型

博客介绍了IO多路复用技术的作用,它能防止一个IO阻塞影响其他IO读取。Redis的IO模型主要基于epoll实现,也提供select和kqueue实现。还阐述了epoll监视多个socket的机制,以及IO多路复用线程模型,包括服务端初始化、客户端请求、事件处理等流程。

为什么要用IO多路复用技术?

redis客户端对服务端的每次调用都经历了发送命令、执行命令、返回结果。网络传输是需要等待的,读写操作等待用户输入输出都是阻塞的,IO操作在一般情况下往往不能直接返回,这会导致某一文件的IO阻塞导致整个进程无法对其它客户提供服务。(我们希望第一次的IO如果需要等待,那么就进行第二次的IO,其实就是规避了等待的时间。)IO多路复用就是为了解决这个问题,防止一个IO阻塞影响其它IO的读取。

redis的IO模型主要基于epoll实现的,不过它也提供了select和kqueue的实现,默认采用epoll。通过监视多个描述符,一旦某个描述符就绪,就能够通知程序进行响应的操作。

下面我们来说一下epoll,epoll大概的代码:

int s = socket(AF_INET, SOCK_STREAM, 0);   
bind(s, ...)
listen(s, ...)
 
int epfd = epoll_create(...);
epoll_ctl(epfd, ...); //将所有需要监听的socket添加到epfd中
 
while(1){
    int n = epoll_wait(...)
    for(接收到数据的socket){
        //处理
    }
}

上述代码,我自己的理解哈,就是监视多个socket,当socket就绪,就通知程序进行响应的操作。

nfds = epoll_wait(epfd,events,5,10000),这个函数的意思是,监视5个socket,当socket就绪,就进行重排。所谓的重排就是,假如有3个socket就绪,那么数组前三个就是已就绪的数据。函数返回值就是3。下面的while循环,就是遍历数组3次,取数据、处理数据。

IO多路复用线程模型:

1.redis服务端初始化,将server socket的AE_READABLE事件与连接应答处理器关联

2.客户端socket01向redis进程的server socket请求建立连接,此时server socket会产生一个AE_READABLE事件。

3.IO多璐复用程序监听到server_socket产生的事件后,将该socket压入队列

4.文件事件分派器从队列中获取socket,交给连接应答处理器。

5.连接应答处理器会创建一个能与客户端通信的socket01,并将该socket01的AE_READABLE事件与命令请求处理器关联。

6.假设客户端发送了一个set key value的请求,此时redis中的socket01会产生AE_READABLE事件。

7.IO多路复用程序将socket01压入队列。

8.事件分派器从队列中获取到socket01产生的AE_READABLE事件,交给命令处理器来处理

9.命令请求处理器读取socket01的key value并在自己内存中完成key value的设置

10.将socket01的AE_READABLE事件与命令回复处理器关联

11.redis种的socket01会产生一个AE_WRITABLE事件,压入队列

12.事件分派器找到相关联的命令回复处理器,由命令回复处理器对socket01输出本次操作的一个结果

13.解除socket01的AE_WRITABLE事件与命令回复处理器的关联

 

 

 

 

### Redis 中基于 Epoll非阻塞 IO 多路复用工作原理 Redis 是一种高性能的内存数据库,其核心之一在于通过高效的 IO 模型支持大量的并发连接。为了实现这一点,Redis 利用了 IO 多路复用技术中的 `epoll` 机制,在 Linux 平台上提供了高效的通知方式。 #### 1. **Epoll 基本概念** `epoll` 是 Linux 提供的一种高效的 IO 复用接口,相比传统的 `select` 和 `poll` 更加适合大规模文件描述符的场景。它通过三个主要操作来完成事件监听和通知的功能: - `epoll_create`: 创建一个 epoll 实例。 - `epoll_ctl`: 注册/修改/删除感兴趣的文件描述符及其对应的事件类型。 - `epoll_wait`: 等待注册的文件描述符上的事件发生并返回。 这些特性使得 `epoll` 能够有效地减少轮询开销,并且只关注那些真正发生了变化的文件描述符[^3]。 #### 2. **Redis 中的 Epoll 应用** 在 Redis 中,所有的客户端连接都被抽象成文件描述符 (FD),并通过 `epoll` 进行统一管理。以下是具体的工作流程: - **初始化阶段**: 当服务器启动时,会调用 `aeCreateFileEvent` 函数创建一个新的文件事件处理器,并将其绑定到指定的文件描述符上。此时,Redis 将该 FD 添加到内部维护的一个全局数组中以便后续跟踪。 - **事件循环**: 主线程进入无限循环模式 (`mainLoop`) 来持续监控所有已注册的文件描述符的状态变更情况。在这个过程中,主线程会定期调用 `epoll_wait` 方法等待任何可读或可写的条件满足后再继续执行下一步逻辑处理动作[^1]。 - **事件分发与回调**: 如果某个特定时间点上有新的数据到达或者可以发送更多消息出去,则相应的 handler function 就会被触发去实际完成具体的业务功能;如果没有匹配项则保持休眠状态直到下一个周期到来为止[^2]。 #### 3. **优势分析** 使用 `epoll` 可以为 Redis 带来以下几个方面的提升效果显著: - 性能优化: 对于大数量级的同时在线活跃链接数来说,相比于其他两种传统方法(select/poll),epoll 明显具备更低延迟率以及更高吞吐能力. - 资源节约: 它只需要消耗少量额外内存用于保存关心列表即可而无需像前者那样每次都需要重新构建整个集合结构体实例化对象. ```c // 示例代码展示如何设置 epoll 监听器 int fd = socket(AF_INET, SOCK_STREAM, 0); struct epoll_event event; event.events = EPOLLIN | EPOLLET; // 边缘触发模式 event.data.fd = fd; if(epoll_ctl(epfd, EPOLL_CTL_ADD, fd, &event) == -1){ perror("epoll set insertion error"); } ``` --- ###
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值