在解码及编码时,会使用到前面及后面两个方向参考画面的资料。如同 P 画面一样,编码时,在B画面中的大区块,若能在参考画面上找到相对应的大区块,则用动态补偿方式做双向预测编码(Bi-directionally Predictive Coding);若找不到,则以Intra模式做编码。B画面拥有最高的编码效率,然画质最差,故本身不再做为其他预测编码用。
最后要提到MPEG-2不同于MPEG-1的其中一样很大的差异,就是MPEG-2除了固定位元率(Constant Bit Rate,CBR)之外,另外提供了可变位元率(Variable Bit Rate)来调节资料速率。位元率的控制往往决定了离散馀弦系数量化的的结果。视讯的资料经过压缩后并非皆有相同的资料流量。一般说来,画面变动越大,压缩比越小,资料流频宽需求越大;反之,画面变动越小,压缩比越大,资料流频宽需求就越小。各画面间压缩后的值并不是固定的,固定的资料速率只是个理想,实际状况下一昧的要求固定位元率不是牺牲了影像品质(以较低流量画面为基准,较大流量的画面强制做过多的压缩)就是牺牲了容量(以较大流量画面为基准,较低流量的画面强制做过低的压缩)。一般说来,可变位元率对于提供稳定的影像品质是个更好的选择,因为其能够根据动态画面的复杂程度,适时改变数据传输率获得最适且一致的编码效果。