基于多参考帧的平行立体视频视间编码的实现

王凌杰，周 军

(上海交通大学图像通信与信息处理研究所，上海 200240)

1 Side－by－Side 立体视频格式

立体视频正在世界范围流行，其格式也多种多样。Side－by－Side(SbS)是常见的立体视频格式［1］，它将适于左眼观看和适于右眼观看的两幅图像分别进行水平亚采样，使两幅图像的水平分辨力降为原来的一半，然后拼成一幅图像，如图1所示。3D电视机接收到SbS格式的视频后，将每幅图像从中间一分为二，并对分割后的两幅图像分别进行上采样，恢复其水平方向尺寸。经过恢复的图像其质量理论上会有所降低，但并不影响实际观看效果。由于传输SbS格式的视频所需的带宽与普通的高清传输带宽相同，也与 HDMI 1.4标准兼容［2］，因此大部分有线电视供应商采用SbS格式来传输立体视频。

图1 SbS合成原理图【1】

H.264是国际电信联盟ITU－T和国际标准化组织ISO联合开发的视频编码标准，因其优异的压缩性能和良好的网络亲和性，已经成为国际上广泛使用的新一代视频压缩编码标准。H.264将视频预测编码分为帧内预测和帧间预测两种方式，按不同的预测编码方式将图像分为I，P，B 3 种类型［3］。相对普通视频而言，SbS 立体视频图像的左视角和右视角有很强的相关性。针对这一相关性，笔者提出了加入视间预测的预测编码结构，以进一步在H.264标准基础上提高SbS立体视频的压缩率。

2 视间预测原理

H.264标准的附录H多视视频编码(Annex H－Multiview video coding)规定了多视视频编码的视间预测方式［4］。在多视视频中，每个视角都是一个独立的视频序列，视间预测是在两个独立的视频序列之间进行的。……