ffmpeg 快速定位帧-资料整理

最新推荐文章于 2025-05-06 11:08:01 发布

AI算法网奇

最新推荐文章于 2025-05-06 11:08:01 发布

阅读量7.3k

点赞数 3

分类专栏：视频编解码

149 篇文章

订阅专栏

本文探讨了使用FFmpeg进行视频帧精准定位的问题，包括av_seek_frame的使用技巧及其参数设置对定位准确度的影响。通过分析关键帧的概念及不同参数对视频解码效果的影响，提供了一种循环读取帧直至达到所需位置的方法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

原文：https://bbs.youkuaiyun.com/topics/391854674

如果直接使用AVSEEK_FLAG_ANY参数，会产生一个问题：针对不同的解码，有的会花屏，有的会解不出图像数据。

做视频分析研究，用matlab很容易得到视频总帧数，并取得指定的某一帧，用ffmpeg如何实现？
网上找的代码能实现从头播放到结尾的功能，如下

//一帧一帧读取视频

int frameFinished=0;

av_seek_frame(pAVFormatContext,videoStreamIndex,0*1000,AVSEEK_FLAG_BACKWARD);

while (av_read_frame(pAVFormatContext, &pAVPacket) >= 0){

    if(pAVPacket.stream_index==videoStreamIndex){

        avcodec_decode_video2(pAVCodecContext, pAVFrame, &frameFinished, &pAVPacket);

        if (frameFinished){

            mutex.lock();

            sws_scale(pSwsContext,(const uint8_t* const *)pAVFrame->data,pAVFrame->linesize,0,videoHeight,pAVPicture.data,pAVPicture.linesize);

            //OpenCV显示一帧图像信号

            Mat rgb_mat=Mat(videoHeight,videoWidth,CV_8UC3,pAVPicture.data[0]);

            Mat bgr_mat;

            cvtColor(out_mat,bgr_mat,CV_RGB2BGR);

            imshow("Show",bgr_mat);

            mutex.unlock();

}

}

    av_free_packet(&pAVPacket);//释放资源,否则内存会一直上升

    sleep(100);

}

其中av_seek_frame的第三个参数(n*1000)为定位到第n秒开始。

实际操作发现如下问题：
1.av_seek_frame不准。用暴风影音播放器严格对照每一秒，参数n=19,20,21，实际都定位到了19秒上，接着就直接22秒了，20，21秒无法定位。

2.循环三遍才真正捕获到图像。第一遍pAVPacket.stream_index==videoStreamIndex(第5行)为假，第二遍frameFinished(第7行)为0。

视频中有关键帧概念，视频是分块压缩存储，每一块有一个关键帧，其他帧只记录与关键帧不同的地方以节省存储空间。
对于第一个问题，AVSEEK_FLAG_BACKWARD是从指定的时间点向前寻找最近的关键帧，所以很可能19,20,21秒在一个分块内，它们的关键帧是同一帧。

不过目标依旧没有实现，继续研究。

最近也在研究，先用av_seek_frame跳到最近的关键帧（I帧）
然后循环读帧，直到你需要的位置。
如果直接使用AVSEEK_FLAG_ANY参数，会产生一个问题：针对不同的解码，有的会花屏，有的会解不出图像数据。