I,P，B帧和PTS，DTS的关系--待完善

最新推荐文章于 2024-09-24 10:50:46 发布
转载 最新推荐文章于 2024-09-24 10:50:46 发布 · 418 阅读 · 0

本文介绍了视频编码中的I帧、P帧和B帧的概念，并解释了DTS（解码时间戳）和PTS（播放时间戳）的区别。通过实例展示了不同帧之间的依赖关系，帮助读者更好地理解视频编码原理。

基本概念：

I frame ：帧内编码帧 又称intra picture，I 帧通常是每个 GOP（MPEG 所使用的一种视频压缩技术）的第一个帧，经过适度地压缩，做为随机访问的参考点，可以当成图象。I帧可以看成是一个图像经过压缩后的产物。

P frame: 前向预测编码帧 又称predictive-frame，通过充分将低于图像序列中前面已编码帧的时间冗余信息来压缩传输数据量的编码图像，也叫预测帧；

B frame: 双向预测内插编码帧 又称bi-directional interpolated prediction frame，既考虑与源图像序列前面已编码帧，也顾及源图像序列后面已编码帧之间的时间冗余信息来压缩传输数据量的编码图像，也叫双向预测帧；

PTS：Presentation Time Stamp。PTS主要用于度量解码后的视频帧什么时候被显示出来

DTS：Decode Time Stamp。DTS主要是标识读入内存中的ｂｉｔ流在什么时候开始送入解码器中进行解码。

在没有B帧存在的情况下DTS的顺序和PTS的顺序应该是一样的。

ＩＰＢ帧的不同：

I frame:自身可以通过视频解压算法解压成一张单独的完整的图片。

P frame：需要参考其前面的一个I frame 或者B frame来生成一张完整的图片。

B frame:则要参考其前一个I或者P帧及其后面的一个P帧来生成一张完整的图片。

两个I frame之间形成一个GOP，在x264中同时可以通过参数来设定bf的大小，即：I 和p或者两个P之间B的数量。

通过上述基本可以说明如果有B frame 存在的情况下一个GOP的最后一个frame一定是P.

DTS和PTS的不同：

DTS主要用于视频的解码,在解码阶段使用.PTS主要用于视频的同步和输出.在display的时候使用.在没有B frame的情况下.DTS和PTS的输出顺序是一样的.

例子:

下面给出一个GOP为15的例子,其解码的参照frame及其解码的顺序都在里面:

ibpdtspts

如上图：I frame 的解码不依赖于任何的其它的帧.而p frame的解码则依赖于其前面的I frame或者P frame.B frame的解码则依赖于其前的最近的一个I frame或者P frame 及其后的最近的一个P frame.


http://www.cnblogs.com/fpzeng/archive/2012/07/26/dts_pts.html

Crett
关注
JavaCV开发详解之31：如何计算pts/dts时间戳，在视频转码和转复用中如何自行计算pts/dts时间戳
eguid音视频方向博客，分享经过实践检验的硬核音视频技术。FFmpeg、openCV和JavaCV音视频和图像处理系列教程发布十周年，众多开发者的严格验证。欢迎关注，一起交流探索学习最新音视频和图像处理技术
04-15 3270
javacv系列文章： javacv开发详解之1：调用本机摄像头视频 javaCV开发详解之2：推流器实现，推本地摄像头视频到流媒体服务器以及摄像头录制视频功能实现(基于javaCV-FFMPEG、javaCV-openCV) javaCV开发详解之3：收流器实现，录制流媒体服务器的rtsp/rtmp视频文件(基于javaCV-FFMPEG) javaCV开发详解之4：转流器实现（也可作为本地收流器、推流器，新增添加图片及文字水印，视频图像帧保存），实现rtsp/rtmp/本地文件转发到rtmp流媒体服务
RTMP推流与B帧的关系
兜兜有????的博客
08-10 319
一、H264数据结构 　　一个原始的H.264 NALU 由一个接一个的 NALU 组成的，而它的功能分为两层，VCL(视频编码层)和 NAL(网络提取层). 　　VCL：包括核心压缩引擎和块，宏块和片的语法级别定义，设计目标是尽可能地独立于网络进行高效的编码。　　NAL：负责将VCL产生的比特字符串适配到各种各样的网络和多元环境中，覆盖了所有片级以上的语法级别。 　　 　　组成：NALU (...
I,P，B帧和PTS，DTS的关系
weixin_34146410的博客
07-27 424
基本概念： I frame ：帧内编码帧 又称intra picture，I 帧通常是每个 GOP（MPEG 所使用的一种视频压缩技术）的第一个帧，经过适度地压缩，做为随机访问的参考点，可以当成图象。I帧可以看成是一个图像经过压缩后的产物。 P frame: 前向预测编码帧 又称predictive-frame，通过充分将低于图像序列中前面已编码帧的时间冗余信息来压缩传输数据量的编码图像，也叫...
I-P-B frame简介
代码人生
04-10 4412
      IF——I-frame的缩写，即关键帧。关键帧是构成一个帧组（GOP，Group of Picture）的第一个帧。IF保留了一个场景的所有信息。压缩比为1：7。      PF——P-frame的缩写，即未来单项预测帧，只储存与之前一个已解压画面的差值。压缩比为1：20。      BF——B-frame的缩写，即双向预测帧，除了参考之前解压过了的画面外，亦会参考后面一帧中的画面信息
【整理】视频中IBP帧的介绍和判定方法
蓝色妖姬
08-26 997
mpeg4视频中，I帧、p帧、B帧的判定 mpeg4的每一帧开头是固定的：00 00 01 b6，那么我们如何判断当前帧属于什么帧呢？在接下来的2bit，将会告诉我们答案。注意：是2bit，不是byte，下面是各类型帧与2bit的对应关系： 　　00: I Frame 　　01: P Frame 　　10: B Frame　 为了更好地说明，我们举几个例子，以下是16进制显示的视频编码：...
视频压缩
weizai718的专栏
08-20 1465
视频压缩基础普及：I, P, B-frame, 宏块, 帧内（间）压缩等   2010-09-28 17:57:36|  分类： 视频相关 |  标签： |字号大中小 订阅 原理         从本质上来说，视频就是一种彩色像素点的三维排列。 其中两个维度反映画面在空间上（水平和垂直）的运动方向，另一维度则反映时间域。 数据帧是指某一时间点下的一组像素点。
音视频开发学习笔记（二）----视频基础概念
langlitaojin的博客
03-15 604
文章目录图像的表示方式--RGB视频的表示方式--YUV视频编码 图像的表示方式–RGB    我们都知道视频都是由图片组成的，任何一个图像都可以由RGB组成，凡是渲染到屏幕上的东西，都要转换为RGB的表示形式。当屏幕要显示某篇文字或者某幅图像时，就会把这幅图像的每一个像素点的RGB通道分别对应的屏幕位置上的子像素点绘制到屏幕上，从而显示整个图像，而每个像素点都由三个子像素点组成。那么像素里的子像...
国标MPEG-PS实时流播放器开发（附例子）
爱写代码的自由人
11-10 6915
公安部制定的GBT 28181标准广泛应用于安防领域，这个标准规定了传输的视音频数据要封装成PS流格式。PS格式（原名叫MPEG-PS）在很多领域已经应用了很长一段时间，特别是在安防、广播电视、影音制作等领域，我们熟知的DVD格式（vob）就是用PS封装的。这篇文章我打算给大家讲解怎么实现一个PS流的实时流播放器，通过这篇文章学习，大家就知道一个实时流播放器应该如何设计、如何对PS流做处理等。 ...
Android-音视频学习系列-(六)掌握视频基础知识并使用-OpenGL-ES-2-0-渲染-YUV-数据
2401_84544434的博客
04-29 1119
OpenGL(Open Graphics Lib) 定义了一个跨编程语言、跨平台编程的专业图形程序接口。可用于二维或三维图像的处理与渲染，它是一个功能强大、调用方便的底层图形库。对于嵌入式的设备，其提供了OpenGL ES(OpenGL for Embedded System) 版本，该版本是针对手机、Pad 等嵌入式设备而设计的，是 OpenGL 的一个子集。到目前为止，OpenGL ES 已经经历过很多版本的迭代与更新，到目前为止运用最广泛的还是OpenGL ES2.0 版本。
#include "decode_file.h" #include <QDebug> #include <QImage> Decode_file::Decode_file(QObject *parent) : QObject{parent} { // 初始化FFmpeg avformat_network_init(); decode_video(); } void Decode_file::decode_video() { // 打开文件 if(avformat_open_input(&pFormatCtx, filename, NULL, NULL) != 0) { qDebug() << "无法打开文件"; return; } // 获取流信息 if(avformat_find_stream_info(pFormatCtx, NULL) < 0) { qDebug() << "无法获取流信息"; return; } // 查找视频流 for(unsigned int i=0; i<pFormatCtx->nb_streams; i++) { if(pFormatCtx->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) { video_stream_index = i; origin_par = pFormatCtx->streams[i]->codecpar; break; } } if(video_stream_index == -1) { qDebug() << "未找到视频流"; return; } // 查找解码器（需确认AV_CODEC_ID_CAVS是否支持） codec = avcodec_find_decoder(origin_par->codec_id); if(!codec) { qDebug() << "找不到解码器"; return; } // 创建解码器上下文 codecCtx = avcodec_alloc_context3(codec); avcodec_parameters_to_context(codecCtx, origin_par); // 打开解码器 if(avcodec_open2(codecCtx, codec, NULL) < 0) { qDebug() << "无法打开解码器"; return; } // 分配帧和包内存 frame = av_frame_alloc(); packet = av_packet_alloc(); AVRational time_base = {1, 90000}; // 根据帧率动态计算 int64_t pts_counter = 0; // 解码循环 while (av_read_frame(pFormatCtx, packet) >= 0) { qDebug() << "video_stream_index:" << video_stream_index; if (packet->stream_index == video_stream_index) { // 重建时间戳 packet->pts = pts_counter; packet->dts = pts_counter; pts_counter += 3600; // 根据帧率调整 // 发送数据包 int ret = avcodec_send_packet(codecCtx, packet); if (ret < 0 && ret != AVERROR(EAGAIN)) { char err_msg[AV_ERROR_MAX_STRING_SIZE]; if (av_strerror(ret, err_msg, sizeof(err_msg)) < 0) { snprintf(err_msg, AV_ERROR_MAX_STRING_SIZE, "Unknown error %d", ret); } fprintf(stderr, "Error sending packet: %s\n", err_msg); continue; } // 接收帧 while (ret >= 0) { ret = avcodec_receive_frame(codecCtx, frame); if (ret == AVERROR(EAGAIN) || ret == AVERROR_EOF) break; else if (ret < 0) { char err_msg[AV_ERROR_MAX_STRING_SIZE]; if (av_strerror(ret, err_msg, sizeof(err_msg)) < 0) { snprintf(err_msg, AV_ERROR_MAX_STRING_SIZE, "Unknown error %d", ret); } fprintf(stderr, "Error sending packet: %s\n", err_msg); break; } // 处理帧（如转换为QImage） convert_frame_to_qimage(frame); av_frame_unref(frame); } } av_packet_unref(packet); } // 刷新解码器 avcodec_send_packet(codecCtx, NULL); while (avcodec_receive_frame(codecCtx, frame) >= 0) { convert_frame_to_qimage(frame); av_frame_unref(frame); } av_packet_free(&packet); av_frame_free(&frame); // 清理资源 av_packet_free(&packet); av_frame_free(&frame); avcodec_free_context(&codecCtx); avformat_close_input(&pFormatCtx); } 完善convert_frame_to_qimage和convert_frame_to_qimage函数
最新发布
03-11
好的，我现在需要帮助用户完善他们的C++代码中的convert_frame_to_qimage函数。用户使用的是Qt和FFmpeg库来处理视频解码，所以这个函数的作用应该是将AVFrame转换为QImage，方便在Qt中显示。 首先，我得回忆一下...
I.P.B与DTS.PTS
itheimach的专栏
02-15 666
I.P.B在音视频解码时，从Avpacket读取数据一帧一帧的数据，这些帧数据都是经过一定的算法进行压缩了的，根据压缩算法的分为I帧，P帧以及B帧。I帧I帧称为关键帧，属于帧内压缩帧，经过解压可以得到一帧完整的数据！压缩到原来的80%!P帧P帧称为前向预测帧，表示与上一帧的差别，需要缓存前面一帧才能得到完整的数据！可压缩到50%左右!B帧B帧称为双向预测帧，表示与上一阵以及下一帧的差别，需要缓冲上，
视频流中的 I帧 P帧 B帧 .
细心程度决定你的成败
08-28 8857
视频流中的I,P,B帧介绍 首先我们需要理解，每一个帧都代表着一个静止的图像。在我们实际传输视频流中，我们会想尽办法，通过各种算法来减少数据的容量，这里最为常见的为IPB(Intra coded frames, Predicted pictures, and Bi-directional predictive pictures)。 首先我们分别对IPB进行了解 接下来我们按从I–>P
P-frame 分析 -libx264
Marelin的专栏
01-09 1338
//在对P帧或B帧的宏块进行预测之前，先判断当前帧是否适宜用帧内模式，   //如果宏块的临近已编码宏块均不采用帧内模式，并且若宏块所在的slice为p的话，   //参考帧相应位置的宏块也不采用帧内模式的话，则该宏块采用帧内预测的可能性就很小。   //那么在该宏块用帧间模式得到的最小的SAD后，只要计算帧内16*16预测模式的SAD，   //将二者相比，当比值超过门限
I帧、P帧、B帧
iummature的博客
09-24 1322
B帧是双向差别帧，也就是B帧记录的是本帧与前后帧的差别（具体比较复杂，有4种情况），换言之，要解码B帧，不仅要取得之前的缓存画面，还要解码之后的画面，通过前后画面的与本帧数据的叠加取得最终的画面。立刻刷新，所以IDR帧必须是一个I帧，但是I帧不一定是IDR帧，这个帧出现的时候，是告诉解码器，可以清除掉所有的参考帧，这是一个全新的序列，新的GOP已经开始。B帧法是双向预测的帧间压缩算法。当把一帧压缩成B帧时，它根据相邻的前一帧、本帧以及后一帧数据的不同点来压缩本帧，也即仅记录本帧与前后帧的差值。
音视频中的PTS和DTS及同步
lucky的专栏
11-25 907
说明：此页是所有索引的集合，从此出发，可以找到博客的所有链接。 网络相关索引：https://blog.youkuaiyun.com/knowledgebao/article/details/84626184 linux基础相关索引：https://blog.youkuaiyun.com/knowledgebao/article/details/84315842 GStreamer专栏索引：https://blog.youkuaiyun.com/knowledgebao/article/details/84621238 Gobject
从I、B、P帧来解读DTS和PTS
吴下阿Q
10-14 363
一、基本概念     I frame（帧内编码帧）：一般来说，I 帧是每个 GOP（MPEG 所使用的一种视频压缩技术）的第一个帧，经过适度地压缩，做为随机访问的参考点，自身可以通过视频解压算法解压成一张单独的完整的图片。I 帧可以看成是一个图像经过压缩后的产物。     P frame（前向预测编码帧）：需要参考其前面的一个 I frame 或者 B frame 来生成一张完整的图片
ffmpeg中PTS和DTS
qq_40170041的博客
09-22 1764
计算视频长度： time(秒) = st->duration * av_q2d(st->time_base) ffmpeg内部的时间与标准的时间转换方法： ffmpeg内部的时间戳 = AV_TIME_BASE * time(秒) AV_TIME_BASE_Q=1/AV_TIME_BASE av_rescale_q(int64_t a, AVRational bq, AVRational cq)函数 这个函数的作用是计算a*bq / cq来把时间戳从一个时间基调整到另外一个时间基。PTS和DTS的时间基。
TS流解码分析之I,P,B帧以及PTS,DTS
ShinichR的专栏
04-07 7925
关于TS流，zhe
音视频基础: I帧 P帧 B帧 GOP DIR PTS DTS 帧率 码率的介绍
探索C++编程的奥秘，分享深入的技术见解和实践，旨在激发读者创造力与解决问题的思维。
07-02 8795
视频和帧基础知识整理
MPEG-2 TS流解析：PTS, PCR, DTS 同步原理
然而，对于I帧和P帧，由于可能的包顺序变化，DTS和PTS都需要，以便解码器能正确处理帧的顺序。 PCR是TS包头中的一个重要元素，用于恢复和同步解码端的系统时钟。PCR提供了编码时的精确时间信息，使得接收端可以调整...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值