sendBuffer和sendList

最新推荐文章于 2023-09-25 11:10:05 发布
原创 最新推荐文章于 2023-09-25 11:10:05 发布 · 2.3k 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文详细介绍了网络通信中消息的发送与接收处理流程，包括消息如何从服务器传递到客户端，以及客户端如何解析接收到的消息。此外，还探讨了连接管理、多路复用技术的应用以及处理器如何处理不同类型的消息。
gateserver下发给客户端的消息 只是放到connect的sendlist里面，然后enableMask设置为write
等到多路复用检测到他需要发的时候，可能sendlist已经有很多了个packet了
然后多路复用检测到 这个联系需要send，然后开始onSend


注意下面是核心
现在我们onSend里面要做的就是 把sendlist里面这些发出去
sendlist.pop()
写入buffer,直到sendlist为空，或者buffer满了，然后把这个buffer发送
所以有可能，一个netpacket一个包，有可能多个消息一个包，还有可能半个消息在一个包里面


而onRecv这里，客户端发来的消息，不会有多个一起发什么的，一个消息发一次，
所以收，只需要区分现在在解析头还是在解析体就行了，记住位置，即使一个netpacket
一次只到了一部分也不要紧，我只有当完整的解析出来了一个netpakcet才会
通知别人来处理 
通知谁来处理？
通知给我这个connection对应的processor
processor也是一个线程，多个connection对应一个processor，类似multiplexor
很多连接都过来消息了，push进了某个processor的messgeQueue（参见安全的消息队列）
然后processor线程，检测到里面有消息，就pop然后处理，连接消息呢，断开消息呢
还是游戏消息，游戏消息，就给server去处理，显然，这里是gateserver
gateserver收到后，呵呵，根据proc协议号的区间，判断是什么类型，往哪个server发。
比如是移动，那么就发给gameserver


gameserver收到后，知道哪个玩家要做啥，然后添加到对应player的消息队列，
player update的时候，deal这个消息。比如移动


tcpserver的recvbuffer大小和sendbuffer大小 1048576 1m
tcpclient的recvbuffer大小和sendbuffer大小 32767  31k


当multiplexor里面很多connection比如1000个，每个都有很多数据需要发送，
select epoll 的reactor模式，我们是挨个处理的，所以，很有可能轮到我这个connection
的时候，sendlist里面已经有很多很多消息了，网路游戏下行消息远大于上行，AOI嘛
如果buffer设置的小，那么一次发不完，
所以有个 检测 canNextSend，如果sendlist还没空
就继续发，直到发光为止
而onRecv就是一次ok,


onRecv就是系统层的::recv,读的内容写在recvbuffer里面，然后我解析就行了，
因为客户端发来的消息是一个个的，并不复杂


另外 写完或者发完，我并没有改变fd的状态，因为是边缘触发的，（没有设置，默认是水平触发）

否则你还得完了后改变下读写状态(这段话有问题，因为我发现写完会disableMask(write))

当发现发送完成，就会把这个写标记改为0，后面找到他就认为他不需要发，

可是奇怪的是发现读标记一直没有禁掉，因为在LT模式下，会一直读，读完为止。

写的话，写完了，手动清掉写标记，后面就不会触发写

IxChariot编辑脚本参数详解及配置
悦分享
06-14 3888
Chariot 是一个独特的测试工具，也是目前在应用层性能测试领域得到业界广泛认可的 测试系统。Chariot 能够评估网络应用的性能和容量，对网络和设备进行压力测试，得到设备及网络在不同应用、不同参数下的吞吐量、时延、丢包、反应时间等性能参数。Chariot 通过各种机制可以仿真任意的应用。首先，通过内置的脚本，Chariot 发送不同 的数据流，可以模拟现在常见的 125 种应用，而且这种数据流是双向的，真正与协议栈进行交互。Chariot 对各种应用的支持是基于在 Endpoint 之间发送的多
TCP的发送系列 — 发送缓存的管理（一）
weixin_30784945的博客
09-06 551
主要内容：TCP发送缓存的初始化、动态调整、申请和释放。 内核版本：3.15.2 我的博客：http://blog.youkuaiyun.com/zhangskd 数据结构 TCP对发送缓存的管理是在两个层面上进行的，一个层面是单个socket的发送缓存管理， 另一个层面是整个TCP层的内存管理。 单个socket的发送缓存所涉及的变量。 struct sock { ...
ceph bufferlist
redenval的专栏
10-25 2187
文章转载于：http://bean-li.github.io/bufferlist-in-ceph/ 前言 buffer list是ceph中的一个基础的数据结构，代码中大量的使用。 buffer::raw 介绍buffer list之前，我们必须先介绍buffer::raw和buffer::ptr。相对于buffer list，这两个数据结构相对比较容易理解。
【Ceph】Ceph中Bufferlist的设计与使用
小鱼菜鸟的博客
01-27 442
原文： 1、http://www.voidcn.com/article/p-kmnnilin-kd.html 2、https://zhuanlan.zhihu.com/p/96659509 3、https://www.jianshu.com/p/01e1f4e398df 如果非要在整个Ceph中，找出一个类最重要，我觉得非Bufferlist莫属...
Ceph Bufferlist的设计与使用
lhc121386的博客
04-17 244
Ceph Bufferlist的设计与使用
Node Buffer类总结
sendudu的博客
01-04 115
TCP性能和发送接收Buffer的关系
liweigao01的专栏
04-23 2420
本文希望解析清楚，当我们在代码中写下 socket.setSendBufferSize 和 sysctl 看到的rmem/wmem系统参数以及最终我们在TCP常常谈到的接收发送窗口的关系，以及他们怎样影响TCP传输的性能。 先明确一下：文章标题中所说的Buffer指的是sysctl中的 rmem或者wmem，如果是代码中指定的话对应着SO_SNDBUF或者SO_RCVBUF，从TCP的概念来看对...
C语言：将16进制字符串转化为int类型值
weixin_34241036的博客
09-26 759
将16进制字符串值转换为 int 整型值   此例中用 "1de" 作为测试字符串，实现代码如下：   [cpp] view plaincopy   #include <stdio.h>   #include <stdlib.h>   #include <string.h>   #include <ctype.h&gt...
【MFC串口】具有收发和搜索功能的串口工具的实现
wjy27的博客
09-25 1500
一款具备串口端口搜索、串口数据的收发、定时搜索串口和定时发送数据等功能的串口（调试）工具。方便串口的调试和串口设备的安装。
分配大块内存与list列表buffer关联的思考
thinkvd dvd and video converter
07-21 1191
在wince下某软件工程中的数据流动流程大致如下，从采集到的数据，然后组包、滤波、已滤波包-->(分发) 1. 显示缓存、显示 2. 存储包、存储 3. 网络包、上传 4. 截屏 实际上要复杂些，这里只列举了主要的功能，工程中存在一个值得思考的问题，就是数据来回memory copy很频繁，IO开支不小。 因此希望分配一大块内存，它与list结构中的buffer关联，用队列方式来循
python3 + pyserial ＋pyqt5练习写串口助手（每个功能单独实现，按学习进度更新）
qq_52086693的博客
02-18 936
一、连接串口 from PyQt5 import QtCore, QtGui, QtWidgets import sys import serial import serial.tools.list_ports class Ui_mainWindow(object): def setupUi(self, mainWindow): mainWindow.setObjectName("mainWindow") mainWindow.resize(800, 600)
性能测试工具 IxChariot：Tcl脚本调用方法介绍
测试开发小记
04-24 7256
IxChariot API支持使用C语言和Tcl脚本来驱动IxChariot跑流，我们可以通过IxChariot API来创建、执行、保存和提取测试结果。
TCP 传输
qq_35293054的博客
07-21 1694
TCP优化
socket学习之TCP协议过程（一）
Zoe_liuxy
04-26 371
前段时间学习了socket编程，把现有的分析系统分成了服务器端与客户端两部分。但基本使用的还是简单的socket的编程，对于内里还不够了解，只能说会用了而已。 使用过程中我发现了一个问题，一直想不通原因，也借此机会仔细学一下socket原理，希望学到最后可以解决我的困惑吧。先把问题阐述一下： 代码为廖雪峰老师的教程中的代码，服务器端：server.py import socket s = sock...
【FreeRTOS（十四）】StreamBuffer
K3169的博客
12-04 923
创建 xStreamBufferCreate 发送 xStreamBufferSend 接受 xStreamBufferReceive
TCP PUSH
xiaofei0859的专栏
10-20 1284
由于发送该数据会清空发送缓冲，所以要加上PUSH标志。（告诉接收者：所有数据已发送，马上送到应用层去。）这里所说的数据包括与此PUSH包一起传输的数据以及之前就为该进程传输过来的数据 设置PUSH标志：如果待发送的数据会清空发送缓存，那么栈就会自动为此包设置PUSH标志 正在看《tcp/ip详解》 8个wrtie，每个写1024的数据，每个都会加上push标志，原因是这么说的
private List<byte> sendBuffer = new List<byte>(); private List<byte> sendBuffer1 = new List<byte>();我想将sendbuffer1的值加到sendbuffer的后面
最新发布
03-10
<think>好的，我需要帮助用户解决如何将sendBuffer1的所有元素追加到sendBuffer中，使用C#中的List<byte>进行追加操作。首先，我得回忆一下C#中List的操作方法。记得List<T>有一个AddRange方法，可以将另一个集合的元素添加到当前列表的末尾。所以这里用户有两个List<byte>，sendBuffer和sendBuffer1，他们想把sendBuffer1的元素追加到sendBuffer里。 那正确的代码应该是sendBuffer.AddRange(sendBuffer1)。不过要确认一下这个方法是否适用于List<byte>，是的，因为AddRange接受IEnumerable<T>，而List<byte>实现了这个接口。用户可能还需要了解是否存在其他方法，比如Concat，但Concat会返回一个新列表，而AddRange是直接修改原列表，这在内存使用上更高效，特别是处理大列表时。另外，用户需要注意，如果sendBuffer1为null，调用AddRange会抛出异常，所以可能需要先检查是否为null，但根据用户的问题描述，应该假设这两个列表都是已经初始化的。 另外，参考引用中的内容，用户可能在处理字节相关的操作，比如网络传输或文件操作，比如引用[3]提到的Socket编程中发送消息和文件，所以追加字节列表可能是为了构建发送缓冲区。例如，可能需要将多个字节数组合并成一个大的字节数组再发送。这种情况下使用AddRange方法是合适的，因为它高效且直接。 用户可能需要知道是否有性能上的考虑，比如处理大量数据时，AddRange的效率如何。由于AddRange内部会检查容量并按需扩展，因此比逐个添加元素更高效。此外，如果sendBuffer1可能非常大，可以考虑预分配足够的容量，但通常AddRange已经处理得很好了。 总结步骤：首先确认使用AddRange方法，然后编写代码sendBuffer.AddRange(sendBuffer1);，并提醒可能的异常情况和性能考虑。最后，根据引用中的例子，比如引用[2]提到的字节操作，说明这种追加操作在数据处理中的常见应用场景。</think>在C#中，要将`List<byte> sendBuffer1`的所有元素追加到另一个`List<byte> sendBuffer`的末尾，可以使用`AddRange`方法。具体实现如下： ```csharp sendBuffer.AddRange(sendBuffer1); ``` ### 分步说明： 1. **`AddRange`方法的作用**：将指定集合的所有元素添加到当前列表的末尾，时间复杂度为$O(n)$，其中$n$是待添加集合的元素数量[^1]。 2. **操作示例**： ```csharp List<byte> sendBuffer = new List<byte> { 0x01, 0x02 }; List<byte> sendBuffer1 = new List<byte> { 0x03, 0x04 }; sendBuffer.AddRange(sendBuffer1); // sendBuffer变为[0x01, 0x02, 0x03, 0x04] ``` 3. **注意事项**： - 如果`sendBuffer1`为`null`，调用`AddRange`会抛出`ArgumentNullException` - 此操作会直接修改原列表`sendBuffer`，而非返回新列表 - 适用于字节列表合并、网络数据传输缓冲区组装等场景（如引用[3]提到的Socket编程） ### 性能优化建议： - 若已知`sendBuffer1`的大致容量，可预先分配空间： ```csharp sendBuffer.Capacity = sendBuffer.Count + sendBuffer1.Count; sendBuffer.AddRange(sendBuffer1); ``` - 对于超大规模数据（如引用[1]提到的200,000项级别），建议使用`Array.Copy`或内存块操作（如引用[2]的`Buffer.BlockCopy`）
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值