基于模板生成帧内模式TIMD

TIMD

TIMD(template-basedintra mode derivation)是一种新的帧内预测模式，它由DIMD（decoder-sideintra mode derivation）发展而来。

TIMD模式由MPM中的候选模式和模板生成。如上图所示，当前CU的左侧和上方区域构成当前CU的模板，模板附近是其参考像素。TIMD模式生成过程为：使用MPM中的每个模式为模板生成预测值，然后计算模板预测值和重建值的SATD，选择SATD最小的模式作为TIMD模式，并用于当前CU的预测。其中在生成TIMD的过程中开启PDPC。

TIMD传输

SPS中需要一个标志位表示是否允许使用TIMD，如果序列开启TIMD则每个CU需要一个标志位表示当前CU是否使用了TIMD。TIMD标志位放在MIP标志位之后。如果开启了TIMD标志位，则剩余的亮度帧内预测相关的语法元素包括MRL、ISP和正常的亮度帧内预测模式解析过程都跳过。

Fusion TIMD

在上面的TIMD中，从MPM中选择模板的SATD最小的一个模式，而FTIMD选择SATD最小的两个模式，然后使用这两个模式对当前CU进行加权预测。

选择的两个模式还需要进行阈值比较：

costMode2< 2*costMode1

如果上面条件满足则使用两个模式进行加权预测，否则只使用模式1。

如果使用两个模式进行加权预测，则权值分别为：

weight1 = costMode2/(costMode1+ costMode2)

weight2 = 1 - weight1

实验结果

在ECM1.0上all intra配置下TIMD和FTIMD结果如下：

参考文献

[1]KemingCao, Nan Hu, Vadim Seregin,"Fusion for template-based intra modederivation",JVET-W0123

[2]Yang Wang, LiZhang, Kai Zhang,"Template-based intra mode derivation using MPMs"

感兴趣的请关注微信公众号Video Coding