http2流分片data合并-方法1

已于 2022-07-05 17:30:49 修改
阅读量1.2k 收藏
点赞数
分类专栏： 5GC信令 wireshark 文章标签： 网络 服务器 tcp/ip
于 2022-06-25 11:56:32 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/weixin_45617372/article/details/125457016
版权
在5G的SBA架构中，HTTP2协议在处理大量内容时会被TCP分片。本文详细介绍了如何通过确定TCP stream ID、进行TCP流跟踪、在HTTP2流中找到所需内容以及使用JSON格式化处理，来重组并解析分片后的HTTP2消息，特别是针对JSON格式的消息体。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

5G引入SBA架构，SBI接口均采用HTTP2协议，一个信令流程HTTP2消息携可能带内容过多，TCP会对HTTP2流做分片处理，尤其到NRF get AUSF或者UDM内容时，分片后的包缺少HTTP2头字段，无法解析成HTTP2格式，下面介绍怎么重组显示完整消息内容。以json消息体为例说明。

文章目录

1.确定分片TCP stream ID

如下我要早的tcp流id是53
在这里插入图片描述

2.TCP follow处理

放到53流的一条消息上 右键》追踪流》tcp 流

这个过程可能要稍微等一段时间
在这里插入图片描述
弹出如下界面：
在这里插入图片描述
等待客户端分组后的数字不在跳动追踪完成，

了解本专栏 订阅专栏 解锁全文 超级会员免费看
http2流分片data合并-方法2(借助linux xxd)
weixin_45617372的博客
07-04 796
 首先如果http2的stream分片了，但是能够decode识别为http2 protocol，这种情况是最理想的情况： 使用tcp follow方式比较直观，但是如果http2 stream所在的tcp流包较多的话，follow需要的时间可能较长，这篇文章介绍借用Linux xxd命令合并tcp或者http2 data部分内容 两个原因可能需要再次进行处理： 3.tcp payload目标字段合并 4. 用json工具转换格式 上篇文章(http2分片流内容整合呈现方法)介绍过，copy出大括号的部
【vue2+js】通过js实现大文件分片上传和合并上传
js_wwj的博客
01-19 1808
通过js实现大文件分片上传和合并上传
http2 - frame -DATA frame
weixin_34218579的博客
03-18 349
数据帧是类型为0x0的幀。一个或者多个DATA frame可以一起来，携带HTTP请求的数据或者响应的数据。数据帧也可以包含任意一些填充字节（为了安全的目的） 0 1 2 3 0 1 2 3 4 5 6 7 8...
HTTP/2 介绍
weixin_42322850的博客
04-26 437
TTP/2 介绍转载 读后总结 http/2 是一个二进制协议，一般将传输内容分为一个 HEADERS 帧和多个 DATA 帧。 http/2 中传输的最小单位是帧，HTTP/2 规范一共规定了 10 种不同的帧， 其中最基础的两种分别对应于 HTTP/1.1 的 DATA 帧 和 HEADERS 帧 ，类似于WebSocket协议设置。 http/2 在客户端与服务端之间可以有多个连接（一说是...
网络基础：HTTP（2）：HTTP的首部
imagine_tion的博客
11-28 213
一、通用首部字段（General Header Fields）：请求报文和响应报文两方都会使用的首部 1.Cache-Control 控制缓存 2.Connection 连接管理、逐条首部 3.Upgrade 升级为其他协议 4.via 代理服务器的相关信息 5.warning 错误和警告通知 6.Transfor-Encoding 报文主体的传输编码格式 7.Trailer 报文末端的首部一览 8.Pragma 报文指令 9.Data 创建报文的日期 二、请求首部字段（Request Header Fie
网络：什么叫做TCP流
OceanStar的博客
03-09 4927
在一些技术文档中，特别是wireshark相关的文档中，“TCP流"是一个很常见的词汇。它是什么意思呢？为什么叫做”流“呢？ 其实，这里的TCP流，就是TCP Stream。Stream这个词有”流“的意思，也有”连续的事件“这一含义，所以它是有前后、有顺序的，这也正对应了TCP的特点。 跟Stream相对的一个词是Datagram，它是指没有前后关系的数据单元，比如UDP和IP都属于Datagram。在 Linux 网络编程里面，TCP 对应的 socket 类型是SOCK_STREAM，而 UDP 对应
TCP 杂项问题
Sky_Lee_1的博客
02-01 1945
有关 TCP 的问题
Java分片上传Minio分片上传Demo可用实例，直接导入使用
01-19
2. **上传分片**：使用`uploadPart`方法上传每个分片。每个分片都有一个唯一的分片ID（Part Number），从1开始递增。 ```java // 假设我们已经将大文件读入到InputStream中 InputStream objectData = new ...
Node.js接收文件分片数据并进行合并处理
01-23
Node.js作为JavaScript的服务器端运行环境，因其异步非阻塞I/O模型，在处理文件上传和分片数据合并方面表现尤为出色。在此项目中，我们使用了多个流行的Node.js模块来构建一个能够接收前端分片文件并合并这些分片的...
配合elementuiupload组件支持分片上传功能
08-10
3. **分片逻辑**：在JavaScript中，可以使用`FileReader` API读取文件内容，并通过`Blob.slice()`方法对文件进行切片。切片时需要考虑每片的大小和编号，以便在服务器端正确地重组文件。 4. **并发上传**：为了提高...
rtmp协议中streamid和chunk关系
occupy8的专栏
03-02 5175
Rtmp中,一个Message通常是分割成多个Chunk进行传输的.每个Chunk通常包含有1~12个字节的头部(该部分与完整的协议不是十分符合). 因为Rtmp是基于TCP协议的,所以在Rtmp传输过程中, Chunk头部会根据实际情况使用简化的头部(12字节的头部是完整的头部,8/4/1字节的头部是根据实际情况简化的). 一. Chunk头部的简化规则       说明:以上
深入浅出：HTTP/2
weixin_33842304的博客
12-21 367
上篇文章深入浅出：5G和HTTP里给自己挖了一根深坑，说是要写一篇关于HTTP/2的文章，今天来还账了。 本文分为以下几个部分： HTTP/2的背景 HTTP/2的特点 HTTP/2的协议分析 HTTP/2的支持  HTTP/2简介 HTTP/2主要是为了解决现HTTP 1.1性能不好的问题才出现的。当初Google为了提高HTTP性能，做出了SPDY，它就是HTTP/2的前...
rtmp协议中的stream_id，chunk_id的区别与联系
guo_lei_lamant的博客
11-15 1661
初看rtmp协议，对stream_id、chunk_id的认知很浅薄，而且很混乱，搞不懂之间的联系与区别，直到找到这篇文章：rtmp中的各种ID。 应原文要求，特注明文章出自开源流媒体服务器lal，Github：https://github.com/q191201771/lal 官方文档：https://pengrl.com/lal。 chunk stream id 设计思想 按rtmp的设计思想，是可以在一条链路上传输多路流，比如最常见的一路音频流和一路视频流，音频流和视频流可独立打开关闭。 那么当某一
TCP/IP
qq_36647176的博客
03-02 202
引用：https://github.com/Snailclimb/JavaGuide 一 七层网络体系 二 TCP/IP网络协议栈 TCP/IP网络协议栈分为四层, 从下至上依次是: 链路层 .网络层 传输层 应用层 这四层协议对应的数据包封装如下图: 三...
Windows Sockets网络编程（2）TCP Stream拆分、拼接
机器学习
07-13 4047
TCP与UDP有一个很大的不同，UDP数据包是一包一包到达目的地的，而TCP却是流式传输的。也就是相邻两个TCP包是没有界限的。这就需要使用TCP传输的程序猿定义好数据包的格式。SOCKET编程中，recv所获得的部分仅是数据体（body），而TCP头部对程序猿是透明的。所以，发送TCP数据包时一般是使用这样的格式：数据包=数据包体长度+数据包体。
问题解决：部分海康网络摄像头无法实现视频流解码与实时预览
热门推荐
liyuefeilong的专栏
10-20 4万+
解决部分海康网络摄像头无法实现视频流解码与实时预览的问题。这里使用的海康网络摄像头型号是：DS-2CD852MF-E。
初学搭建DHCP服务器过程中报错的解决过程
qq_43169491的博客
10-27 6627
首先对错误进行简单的描述： 在搭建DHCP服务器的过程中，修改好网卡配置文件后，使用命令systemctl start dhcpd进行DHCP服务的启动，出现了这样的错误： [root@localhost dhcp]# systemctl start dhcpd Job for dhcpd.service failed because the control process exited with...
基础笔记（三）：网络协议之Tcp、Http
weixin_33781606的博客
05-23 4256
目录 一、网络协议 二、TCP（Transmission Control Protocol，传输控制协议） TCP头格式 TCP协议中的三次握手和四次挥手 TCP报文抓取工具 三、HTTP（HyperText Transfer Protocol，超文本传输协议） 请求报文结构 请求报文样例 请求报文参数详解 响应报文结构 响应报文样例 响应报文参数详解 HTT...
HTTP2协议数据包分析
qq_40386321的博客
11-15 1223
简介 HTTP/2（超文本传输协议第 2 版，最初命名为 HTTP 2.0），简称为 h2（基于 TLS/1.2 或以上版本的加密连接）或 h2c（非加密连接），是 HTTP 协议的的第二个主要版 本，使用于万维网。 HTTP/2 是 HTTP 协议自 1999 年 HTTP 1.1 发布后的首个更新，主要基于 SPDY 协 议。 HTTP/2 相比 HTTP/1.1 的修改并不会破坏现有程序的工...
xxl-job分片结果合并
最新发布
03-08
### XXL-JOB 分片任务结果合并方法 在XXL-JOB中，分片执行的任务可以被分配到多个节点上并行处理。为了实现这些分片任务的结果汇总，在编写`@XxlJob`注解的方法时可以通过特定的方式收集各个分片的数据，并最终在一个地方完成数据的聚合。 对于分片任务的支持，XXL-JOB提供了一个内置机制来帮助开发者获取当前任务实例所属的具体分片编号以及总共有多少个分片。这允许每个子任务仅操作属于自己那部分的工作负载[^2]。 当定义一个可分割的任务处理器时，应该继承自`IJobHandler`接口并且重写其`execute()`函数。在这个函数内部，调用者能够访问两个重要的参数用于控制分片行为： - `shardingContext.getShardingTotalCount()` 获取总的分片数量。 - `shardingContext.getShardingItem()` 获得当前正在运行的这个线程所负责的那个具体的分片索引值（从0开始计数）。 下面给出一段Java代码作为例子展示如何利用上述API来进行分片计算并将各分片产生的日志信息记录下来以便后续分析或进一步加工： ```java import com.xxl.job.core.biz.model.ReturnT; import com.xxl.job.core.context.XxlJobHelper; import com.xxl.job.core.handler.annotation.XxlJob; public class ShardDemo { @XxlJob("shardDemoJob") public ReturnT<String> shardDemoJob() throws InterruptedException { int shardingTotalCount = XxlJobHelper.getShardingTotalCount(); int shardingItem = XxlJobHelper.getShardingItem(); String result = ""; // 假设这里有一个列表需要按分片处理 List<Integer> dataList = Arrays.asList(1, 2, 3, 4, 5); int sizePerShard = Math.max(dataList.size() / shardingTotalCount, 1); if (dataList.isEmpty()) { return new ReturnT<>(ReturnT.SUCCESS_CODE, "No data to process"); } // 计算本分片应处理的数据范围 int startIdx = shardingItem * sizePerShard; int endIdx = Math.min(startIdx + sizePerShard, dataList.size()); for (int i = startIdx; i < endIdx; ++i) { Integer item = dataList.get(i); // 对item做某些业务逻辑... // 将每一片的结果拼接到一起形成字符串形式的结果集 result += ("Processing Item#" + item.toString()); } // 日志输出当前分片的结果 XxlJobHelper.log("[Shard-" + shardingItem + "] Processed items: " + result); // 返回成功状态码加上该分片的日志消息给调度中心 return new ReturnT<>(ReturnT.SUCCESS_CODE, "[Shard-" + shardingItem + "] Finished processing."); } } ``` 值得注意的是，虽然这段代码展示了怎样让不同分片各自独立工作并向外部报告进度，但它并没有直接解决跨分片间通信的问题——即如何把所有分片得到的信息集中起来作统一处理。这是因为实际应用中的解决方案会依赖于具体的需求场景和技术栈的选择；可能涉及到数据库存储中间结果、通过消息队列传递更新通知或是其他更复杂的设计模式[^3]。 如果希望在整个作业完成后立即获得完整的汇总统计，则可以在最后一个分片结束之后触发额外的服务端回调或者定时查询未完成的状态直到全部完毕为止。另一种常见做法是在每次提交新批次之前先清理旧有的残留数据以确保不会混淆前后两次之间的差异[^4]。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

feike_3

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值