ffmpeg concat过滤器解析

ffmpeg里面concat的作用是连接两个过滤器，如

ffmpeg -i /home/media/Videos/mytestvideo/input_red.mp4 -i /home/media/Videos/mytestvideo/input_green.mp4  -filter_complex   '[0:0] [1:0] concat=n=2:v=1:a=0 [v]'  -map '[v]' /home/media/Videos/mytestvideo/output.mp4

这个的作用是把input_red.mp4 和 input_green.mp4合并成一个文件
avf_concat.c的filter_frame为

static int filter_frame(AVFilterLink *inlink, AVFrame *buf)
 {   
      return process_frame(inlink, buf);                                                  
 }

static int process_frame(AVFilterLink *inlink, AVFrame *buf)
{
    AVFilterContext *ctx  = inlink->dst;
    ConcatContext *cat    = ctx->priv;
    unsigned in_no = FF_INLINK_IDX(inlink);

    if (in_no < cat->cur_idx) {
        av_log(ctx, AV_LOG_ERROR, "Frame after EOF on input %s\n",
               ctx->input_pads[in_no].name);
        av_frame_free(&buf);
    } else if (in_no >= cat->cur_idx + ctx->nb_outputs) {
    /* ctx->nb_outputs ：number of output pads */
        ff_bufqueue_add(ctx, &cat->in[in_no].queue, buf);
    } else {
        return push_frame(ctx, in_no, buf);
    }
    return 0;
}

一行一行来看

ConcatContext结构

typedef struct ConcatContext {
    const AVClass *class;
    unsigned nb_streams[TYPE_ALL]; /**< number of out streams of each type */
    //这里TYPE_ALL=2
    unsigned nb_segments;
    unsigned cur_idx; /**< index of the first input of current segment */
    int64_t delta_ts; /**< timestamp to add to produce output timestamps */
    unsigned nb_in_active; /**< number of active inputs in current segment */
    unsigned unsafe;
    struct concat_in {
        int64_t pts;
        int64_t nb_frames;
        unsigned eof;
        struct FFBufQueue queue;
    } *in;
} ConcatContext;

FF_INLINK_IDX定义位于libavfilter/internal.h:

/**
 * Find the index of a link.
 *
 * I.e. find i such that link == ctx->(in|out)puts[i]
 */

#define FF_INLINK_IDX(link)  ((int)((link)->dstpad - (link)->dst->input_pads))

要弄清楚这段代码，首先要搞懂AVFilterLink、AVFilterContext和AVFilterPad的关系。
参考 http://blog.youkuaiyun.com/newchenxf/article/details/51364105

AVFilterLink是干嘛的？它是建立AVFilterContext之间的联系。所以，若有4个AVFilterContext，那就需要3个AVFilterLink。
AVFilterLink的src指针，指向上一个AVFilterContext，dst指针，指向下一个AVFilterContext。
AVFilterPad干嘛的？它用于AVFilterContext之间的callback（回调）。
怎么个回调法？
很简单，第一个AVFilterContext的outputs[0]指针，指向第一个AVFilterLink，这个AVFilterLink的dst指针，指向第二个AVFilterContext。
如果我在前一个AVFilterContext调用
outputs[0]->dstpad->filter_frame(Frame* input_frame1), 那其实就意味着，第一个过滤器，可以把处理好的一个frame（名字为input_frame1），可以通过这个调用，传递给第二个过滤器的input_pads的filter_frame函数。而我们实现的vf_transform.c，就是我说的第二个过滤器，里面就实现了filter_frame().

上面的描述是针对单路输入的，如果是多路输入，则情况有一些变化
注意AVFilterContext里面的input_pads/output_pads均为指针数组，而
AVFilterLink里面的srcpad/dstpad是指针。如果有两路输入，那么对应有两个AVFilterLink，它们的dstpad被存在input_pads里面。
FF_INLINK_IDX(link)实际上就是求输入的link对应哪一路输入

cur_idx; /*< index of the first input of current segment /
所以in_no < cat->cur_idx会出问题。

送进来的帧，可能是第1个视频(in_no=0),也可能是第二个视频(in_no=1)
这里cat->cur_idx=0 ctx->nb_outputs=1
对于in_no=0执行push_frame(ctx, in_no, buf)，输出这一帧
对于in_no=1执行ff_bufqueue_add(ctx, &cat->in[in_no].queue, buf)
找个缓冲区把他存起来
大概就是这样了