多路复用I/O模型支持多Client的实现及效率讨论

本文介绍如何使用select I/O模型在单线程中支持多个客户端的连接请求,并探讨了其效率问题及解决方案。
1.    引言

 

多路复用I/O模型(select)是UNIX/LINUX用得的最多的一种I/O模型,在Windows下也

 

可做为一种异步I/O使用。本文给出该I/O模型处理多Client的简单(在主线程中)实现。

 

2.    关于select

 

select I/O模型是一种异步I/O模型,在单线程中Linux/WinNT默认支持64个客户端套

 

接字。这种I/O模型主要涉及以下几个函数及宏:

 

int select(…)、FD_ZERO、FD_SET、FD_ISSET以及FD_SETSIZE。

 

3.    用select开发一个Server

 

3.1 只支持单个Client

 

  // 相关初始化处理, 创建监听套接字

 

  listen(listensock, 5);

 

  clientsock = accept(listensock, NULL, NULL);

 

  for (; ;)

 

  {

 

       FD_ZERO(&readfds); 

 

       FD_SET(clientsock, &readfds);

 

       nResult = select(

 

           0,     // Windows中这个参数忽略,Linux中在此处为1

 

           readfds,  // 可读套接字集合

 

           ……

 

       )

 

       if  (nResult = = SOCKET_ERROR)

 

          return –1;

 

       // 判断cliensock是否处于待读状态

 

       if (FD_ISSET(clientsock, &readfds))

 

      {

               // 相关处理

 

      }

 

  }

 

其实Winsock中的WSAEventSelect模型是与之类似的。

 

3.2 在单线程中支持63个Client

 

  SOCKET clientsockarray[FD_SETSIZE – 1];  // FD_SETSIZE is 64

 

 // 相关初始化处理, 创建监听套接字

 

 

 

 listen(listensock, 5);

 

 // 初始化套接字数组

 

InitSock(clientsockarray);

 

 FD_ZERO(&readfds);

 

 FD_SET(listensock, &readfds);

 

 for (; ;)

 

{

 

nRet = select(0, &readfds, NULL, NULL, NULL);

 

// 判断监听套接字是否可读

 

if (FD_ISSET(listensock, &readfds))

 

{

 

     clientsock = accept(listensock, NULL, NULL);

 

     // 将客户套接字放到套接字数组中

 

     if  (!InsertSock(clientsockarray, clientsock))

 

     {

 

          printf("客户端超过了63个,此次连接被拒绝./n");

 

          closesocket(clientsock);

 

          continue;

 

      } 

 

 }

 

  

 

 // 逐个处理处于待决状态的套接字

 

 for (nIndex = 0; nIndex < FD_SETSIZE - 1; nIndex++)

 

{

 

      if  (FD_ISSET(clientsockarray[nIndex], &readfds))

 

      {

 

           nRet = recv(clientsockarray[nIndex], buff, sizeof(buff), 0);

 

           if (nRet = = 0 || nRet = = SOCKET_ERROR)

 

           {

 

                closesocket(clientsockarray[nIndex]);

 

              clientsockarray[nIndex] = INVALID_SOCKET;

 

              continue;    // 继续处理套接字句柄数组中的其它套接字

 

           }

 

           // 将接受到的数据进行处理,此处只将其输出

 

           printf("%s/n", buff);

 

       }

 

    }

 

 

 

    // 初始化套接字集合

 

    FD_ZERO(&readfds);

 

    FD_SET(listensock, &readfds);

 

    // 将所有有效的套接字句柄加入到套接字句柄数组中

 

    for (nIndex = 0; nIndex < FD_SETSIZE - 1; nIndex++)

 

    {

 

if (clientsockarray[nIndex] != INVALID_SOCKET)

 

       FD_SET(clientsockarray[nIndex], &readfds);

 

    }

 

}

 

 

 

BOOL InsertSock(SOCKET* pSock, SOCKET sock)

 

{

 

     for  (int nIndex = 0; nIndex < FD_SETSIZE – 1; nIndex++)

 

     {

                   if  (pSock[nIndex] = = INVALID_SOCKET)

 

         {

 

             pSock[nIndex] = sock;

 

             break;

 

         }

 

     }

 

 

 

     if  (nIndex = = FD_SETSIZE – 1)

 

         return FALSE;

 

   

 

     return TRUE;

 

}

 

 

 

    上面只是给简要的代码,有的辅助函数也没有给出。用select支持多Client是比较方便的,在一个线程中可支持63个;可以采用多线程支持更大数量的Client。

 

4.    效率的讨论

 

4.1 对套接字数组扫描的效率问题

 

  在上面的程序中,存在多处对套接字句柄的扫描处理,这个肯定会影响效率。不知道各位朋友是怎么处理这个问题的。

 

4.2 对客户端实时响应问题

 

上面的程序处理待决的套接字的时候,是逐个处理的,如果响应某个Client的时间长到一定程度的话,肯定会影响对其它客户端的响应。我的解决方法是当这个套接字处于可读的待决状态的话,产生一个子线程去处理------接收数据和处理数据。这样主线程继续自己的工作,其它Client可以得及时的响应;当然当有大量的Client请求时,对线程的控制会成为一个新问题。

 

在UNIX/LINUX下做一个支持大量Client的Server的话,本人还是最先选择select这种I/O模型,这是因为我还不知道LINUX还有哪些更好的I/O模型。WinNT的话,还有CompletionPort和Overlapped,特别对于有大数据量传送,同时只有少量的Client时,Overlapped可以发挥相当大的作用。各位朋友请给出使用select的好方法

 
<think>首先,用户的问题是:“I/O多路复用”,翻译成中文是“I/O多路复用”。我需要用中文回答问题。 我的回答必须包括: 1. 对问题的解释。 2. 在回答末尾,提出3-5个相关问题。 3. 相关问题必须以“§§相关问题§§”开头,且第一行完整输出这个短语。 4. 禁止换行分散,意思是相关问题部分要连贯,不要有余的换行。 问题主题是I/O多路复用(I/O multiplexing)。我需要解释它是什么。 关键点: - I/O多路复用是一种技术,允许一个进程监视个文件描述符(如套接字)以检查它们是否准备好进行I/O操作。 - 常见的实现包括select、poll、epoll(在Linux中)。 - 目的是高效处理个I/O操作,避免阻塞或使用多线程的开销。 我的回答结构: - 先解释I/O多路复用的概念。 - 然后,简要描述其工作原理或常见用法。 - 最后,输出相关问题。 相关问题必须基于用户的问题和我的回答。用户的问题是“I/O多路复用”,所以我应该提出相关的后续问题,比如: 1. 常见的I/O多路复用模型有哪些? 2. 如何在不同操作系统上实现I/O多路复用? 3. I/O多路复用多线程进程模型的区别是什么? 4. 在实际应用中,I/O多路复用的优缺点是什么? 5. 如何使用select、poll或epoll编写代码? 确保相关问题数量在3-5个。 最后,输出格式: - 回答内容。 - 然后,直接输出“§§相关问题§§”。 - 接着,列出问题,用数字或点号表示,如“1. ... 2. ...”。 从示例中,相关问题是用数字列表,如: 1. ··· 2. ··· 3. ··· 所以,我应该用类似格式。 现在,构建回答: - 开头:解释I/O多路复用。 - 中间:可能添加一个简单代码示例(但不是必须的,用户没有要求代码,但示例中有代码,所以我可以考虑添加一个简单的代码片段)。 - 结尾:相关问题。 用户的问题只有“I/O多路复用”,没有指定语言,但示例中有Python代码。所以,我可以添加一个简单的代码示例来展示select或epoll的使用。 为了符合规则,回答必须用中文。 大纲回答: 1. 定义I/O多路复用。 2. 描述其目的和优势。 3. 简要说明常见模型。 4. 添加一个代码示例(可选)。 5. 然后,相关问题。 代码示例:使用Python的select模块。 例如: ```python import select import socket # 创建一个服务器套接字 server_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM) server_socket.bind(('localhost', 8080)) server_socket.listen(5) # 输入列表,包含要监视的套接字 inputs = [server_socket] while True: # 使用select监视可读的套接字 readable, _, _ = select.select(inputs, [], []) for s in readable: if s is server_socket: # 新连接 client_socket, addr = server_socket.accept() inputs.append(client_socket) else: # 处理客户端数据 data = s.recv(1024) if data: # 处理数据 pass else: # 连接关闭 inputs.remove(s) s.close() ``` 然后,相关问题。 相关问题想法: 1. select、poll和epoll有什么区别? 2. 在哪些场景下应该使用I/O多路复用? 3. I/O多路复用如何处理高并发? 4. 如何避免I/O多路复用中的性能瓶颈? 5. 在Python中,除了select,还有哪些模块支持I/O多路复用? 确保3-5个。 最终输出: - 回答内容。 - “§§相关问题§§” - 1. ... 2. ... 3. ...</think>I/O多路复用(I/O Multiplexing)是一种高效处理个输入/输出操作的网络编程技术,允许单个进程同时监视个文件描述符(如套接字),并在其中任何一个准备好进行读写操作时通知进程。核心目的是避免阻塞式I/O或多线程的开销,提高系统并发性能。常见实现模型包括select、poll和epoll(Linux特有),它们通过系统调用实现非阻塞事件循环。例如,使用select模型可以同时监听个套接字,当数据可读或可写时触发处理,减少资源消耗。基本工作流程如下: - 初始化:创建并注册要监视的文件描述符列表。 - 事件循环:调用select/poll/epoll等待事件发生(如数据到达)。 - 事件处理:遍历就绪的描述符并执行相应I/O操作。 - 重复循环:持续监听新事件。 在实际应用中,I/O多路复用常用于高并发服务器(如Web服务器或数据库),以处理数千个连接。优势包括减少线程切换开销、简化代码结构;劣势是编程复杂度较高,需处理事件循环细节。以下是一个简单Python代码示例,使用select实现TCP服务器: ```python import select import socket # 创建服务器套接字 server_socket = socket.socket(socket.AF_INET, socket.SOCK_STREAM) server_socket.bind(('localhost', 8080)) server_socket.listen(5) inputs = [server_socket] # 监视列表 while True: readable, _, _ = select.select(inputs, [], []) # 等待可读事件 for s in readable: if s is server_socket: # 新连接 client_socket, addr = s.accept() inputs.append(client_socket) else: # 客户端数据可读 data = s.recv(1024) if data: print(f"收到数据: {data.decode()}") else: # 连接关闭 inputs.remove(s) s.close() ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值