RTP/RTCP协议的FFmpeg demux源码解析

FFmpeg中RTP/RTCP协议的解析与应用
最新推荐文章于 2024-09-14 07:06:55 发布
最新推荐文章于 2024-09-14 07:06:55 发布
阅读量927 收藏 3
点赞数
CC 4.0 BY-SA版权
分类专栏： 基于RTP/RTCP的音视频通信系统 文章标签： 音视频 RTP RTCP FFmpeg
版权声明：本文为博主原创文章，遵循 CC 4.0 BY 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/fireroll/article/details/113822037
本文深入解析RTP/RTCP协议，并通过FFmpeg库分析了RTP包和RTCP包的结构，包括RTP负载类型、RTCP报文类型，以及客户端与服务端之间的NAT穿透、媒体数据传输、RTCP Sender Report等关键流程。通过抓包数据和源码分析，展示了FFmpeg如何处理RTP和RTCP包。

1. RTP/RTCP协议

协议详解可见文档：

https://download.youkuaiyun.com/download/fireroll/15308144

 

2. 抓包与代码分析

2.1 RTP报文

RTP报文头格式（见RFC3550 Page12）：

PT(Payload Type 负载类型)的值定义如下

 

除了上表中明确指定PT值的负载类型，还有些负载类型由于诞生的较晚，没有具体的PT值，

只能使用动态（dynamic）PT值，即96到127，这就是为什么大家普遍指定H264的PT值为96。

下表中列出了没有具体PT值的负载类型。

 

了解本专栏 订阅专栏 解锁全文 超级会员免费看
RTP协议实现源代码
11-06
jrtplib-2.9是符合RFC1889的RTP协议源代码，可以在Linux，Windows下实现。
RTP-RTCP协议实现源码
01-05
公司里IPTV项目使用的源码，可供参考。
FFmpeg入门详解之86：RTP/RTCP协议讲解
福优学苑@音视频+流媒体
10-18 2315
是用于Internet上针对多媒体数据流的一种传输层协议.RTP 协议和 RTP 控制协议 RTCP 一起使用，而且它是建立在 UDP 协议上的.RTP 不像http和ftp可完整的下载整个影视文件，它是以固定的数据率在网络上发送数据，客户端也是按照这种速度观看影视文件，当影视画面播放过后，就不可以再重复播放，除非重新向服务器端要求数据。RTP是针对Internet上多媒体数据流的一个传输协议, 由IETF(Internet工程任务组)作为RFC1889发布。
视频编解码,FFMPEG,RTP问题汇总
smilestone322的专栏
01-22 4310
1）ffmpeg如何判断一帧数据是正确的？ffmpeg有没有错误处理的模式，能使花屏的帧(h264格式的)不显示出来？ 2) H264网络传输过程中丢包造成马赛克问题?   原因： 1. 接收网络数据包后没有调整包的顺序，譬如说接受包的顺序是1，3，4，2，如果没有调整顺序的话，发送给解码器的顺序也是1，3，4，2，这样肯定会出现马赛克 ； 2. 接收网络数据包后没有没有合并数据包，众所
RTP_h264打包源码
hrbeuwhw的专栏
11-01 2189
class CH264_RTP_PACK  {      #define RTP_VERSION 2     typedef struct NAL_msg_s      {          bool eoFrame ;          unsigned char type;// NAL type          unsigned char *start;// pointer t
ffmpeg解码网络rtp流(包装的h264)
热门推荐
sin@
06-12 1万+
最近接了一个做ffmpeg解码的项目，客户的视频都是在服务器上编码的（H264编码），编码后的数据通过rtp封装发送到客户端，客户端负责解码显示。 前期准备： 下载ffmpeg编译ios版本 查看ffmpeg的例子代码，结果发现都是基于读文件的例子，相信很多没有做过的朋友肯定很着急，呵呵，现在本主给你们发福利了，我把我的代码贴上来， 免得后面涉及到这方面的同学走弯路。 头文件如下： // ...
VLC Media Player 0.9.8a 源码解析与多媒体播放技术
此外，VLC 还内置了对原始流解析、容器格式（如 AVI、MP4、MKV、TS）解封装的能力，这体现在 demuxer 模块的设计上，比如 `modules/demux/mpeg` 或 `ts.c` 文件负责处理 MPEG-TS 流，常用于数字电视和 IPTV 场景。...
ffmpeg——TS流解析
Eyrane的博客
05-07 8261
RTSP（Real Time Streaming Protocol），实时流传输协议，是TCP/IP协议体系中的一个应用层协议，该协议定义了一对多应用程序如何有效地通过IP网络传送多媒体数据。RTSP在体系结构上位于RTP和RTCP之上，它使用TCP或UDP完成数据传输。 实时传输协议RTP（Real-time Transport Protocol）是一个网络传输协议，RTP协议详细说明了在互联...
ffmpeg中的超时控制
melonbo的专栏
07-17 1264
打开输入文件或流。这个函数会阻塞，尤其是在网络流的情况下，可能会因为等待服务器响应而长时间阻塞。这个函数会尝试读取更多的数据来获得流的详细信息，如果数据源响应缓慢，也会阻塞。这个函数会读取下一帧的数据包，如果数据源响应缓慢或者网络连接不稳定，也会阻塞。在FFmpeg库中，很多函数没有直接的参数可以设置超时。： 打开文件或网络资源以进行读取或写入的函数。： 从输入缓冲区读取数据，这个函数也会阻塞。或 avformat_seek_file。用于在媒体流中进行跳转操作。用于关闭输入媒体文件或流。
音视频开发系列（16）技术解码 | SRT和RIST协议综述
yinshipin007的博客
04-13 1812
概要 近些年来，互联网行业出现了几波和音视频相关的热潮：VR、短视频、直播等。除了VR因技术成熟度问题，还在蓄势待发，短视频和直播持续热度不减，以各种方式进入新的行业应用领域。视频直播方向，RTMP仍是最流行的上行传输协议，但RTMP的局限性也越来越凸显： RTMP的容器格式FLV，存在不支持新的codec、不支持多音轨、时间戳精度过低等等缺陷； RTMP基于TCP做传输，TCP的公平、可靠传输设计并不适用于实时音视频传输。 业界出现了一些新的上行传输方式：SRT、RIST、基..
最新的rtp协议（包含C原始代码和java原始代码）
04-17
rtp协议 下载 linux windows android 内涵C源码和java源码 可以自行编译生成需要的库或者直接使用源码导入到自己的工程中
RTP 实现源码 source code
04-21
RTP协议，用于实现流媒体，以及语音传输等。
开源RTP源代码.doc
08-29
供入门级RTP编程爱好者 RTP是一个实时通讯网络协议，网络上的音视频传输可以用它来做，像QQ的语音聊天等都是使用这个。
onvif协议源码（rtsp，rtp，gb28181等等协议）
05-06
视频监控协议标准onvif协议，源码中有rstp，rtp，gb28181等等协议，协议源码有两个版本，windows和linux版本，次源码以中间件形式编写，可以直接用编译后的库
rtp/rtcp协议实现源码
03-12
针对流媒体传输开发的rtp/rtcp协议源代码，底层通过UDP协议传输，上层封装rtp/rtcp控制，优化视频传输效果，可应用于视频聊天工具，视频会议软件，监控系统等的开发。
ffmpeg中av_read_frame 超时设置
weixin_43360707的博客
04-20 3549
ffmpeg中avformat_open_input超时设置 接着上篇文章，我们来看看 av_read_frame（）-->read_frame_internal(s, pkt)--> int av_read_frame(AVFormatContext *s, AVPacket *pkt) { const int genpts = s->flags & AVFMT_FLAG_GENPTS; int eof = 0; int ret; AVS
【亲测免费】 oRTP：开源RTP协议实现库
最新发布
gitblog_00860的博客
09-14 1016
oRTP：开源RTP协议实现库 项目介绍 oRTP 是一个遵循 LGPL 许可证的 C 语言库，专门用于实现 RTP 协议（RFC 3550）。该库支持大多数 Unix 系统（如 Linux 和 HP-UX）以及 Microsoft Windows 平台。oRTP 提供了丰富的功能，包括 IPv6 支持、包调度器、自适应抖动补偿、自动发送 RTCP SR 或 RR 以及 SDES 等。此外，oRT...
RTP基础之RTP流预判代码实战
梦想
01-21 1375
RTP基础介绍 实时传送协议（Real-time Transport Protocol或简写RTP）是一个网络传输协议,其主要用于在互联网上传递音频和视频的标准数据包。 RTP报文由两部分组成：报头和有效载荷。RTP报头格式如上图所示，其中： V：RTP协议的版本号，占2位，当前协议版本号为2。 P：填充标志，占1位，如果P=1，则在该报文的尾部填充一个或多个额外的八位组，它们不是有效
RTP协议解析及H264/H265 音视频RTP打包分析
朱子龙的博客
11-21 1949
一 概述 实时传输协议（Real-time Transport Protocol或简写RTP）是一个网络传输协议，它是由IETF的多媒体传输工作小组1996年在RFC 1889中公布的。 RTP协议详细说明了在互联网上传递音频和视频的标准数据包格式。它一开始被设计为一个多播协议，但后来被用在很多单播应用中。RTP协议常用于流媒体系统（配合RTSP协议），视频会议和一键通（Push to Talk）系统（配合H.323或SIP），使它成为IP电话产业的技术基础。RTP协议和RTP控制协议RTCP一起使用，而且
RTP/RTCP协议的实用实现源码分析
RTP/RTCP协议是实时传输协议（Real-time Transport Protocol）和实时传输控制协议（Real-time Transport Control Protocol）的缩写，它们是用于实时数据流传输的一对互补协议，广泛应用于音视频等多媒体通信领域。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

北雨南萍

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值