基于视差/运动联合估计的多视点容错编码框架

摘要

本发明公开了一种基于视差/运动联合估计的多视点容错编码框架，对一个以上视点信息进行视频流传输编码，各个视点以图像组为单位进行编码，每个图像组的最后一帧为关键帧，其余帧为非关键帧。编码框架中引入基于分布式视频编码的差错控制帧。本发明方法比标准的帧内编码具有更好的编码效率，抗差错性能强，即使边信息出现传输差错，仍然能够正确解码，从而增强了多视点视频流的传输鲁棒性。

主权项

1、基于视差/运动联合估计的多视点容错编码框架，对一个以上视点信息进行视频流传输编码，根据视点的重要程度选择其中一个视点编码为基本视点，其余视点编码为增强视点；各个视点以图像组为单位进行编码，每个图像组的最后一帧为关键帧，其余帧为非关键帧；其特征在于，编码框架中引入基于分布式视频编码的差错控制帧，具体编码方法如下：具体编码方法如下：对于基本视点编码基本视点编码1)基本视点视频序列第1帧图像编码为I帧；2)基本视点的关键帧可以编码为I帧、P帧或者E帧；首先判断当前关键帧是否编码为I帧，若非I帧，则判断当前关键帧是否编码为E帧，若既不是I帧也不是E帧，则编码为P帧；其中，I帧的确定依据为帧内编码周期，E帧的确定有多种方法，可以每隔固定间隔插入差错控制帧，也可以根据率失真优化模型动态选择差错控制帧；3)基本视点的关键帧若为E帧，则采用基于分布式视频编码理论的帧内编码方式，其边信息是以前一关键帧重建图像为参考进行运动补偿获取的帧间预测图像；4)基本视点的关键帧若为P帧，则以前一个关键参考帧的重建图像为参考，进行基于运动估计的帧间预测编码；5)基本视点视频序列中的非关键帧图像按照标准层次B帧编码方法编码；对于增强视点编码1)增强视点视频序列第一帧图像编码为P帧，使用基本视点同时刻重建图像为参考，进行基于视差估计的视点间预测编码；2)增强视点关键帧的编码方式根据同时刻基本视点关键帧的编码方式来确定，若基本视点关键帧编码为I帧或者P帧，则增强视点关键帧编码为P帧；如果基本视点关键帧编码为E帧，则增强视点关键帧也编码为E帧；3)增强视点的关键帧若为E帧，则采用基于分布式视频编码理论的帧内编码方式编码；其边信息是以基本视点同时刻重建图像为参考进行视差补偿获取的视点间预测图像；4)增强视点的非关键帧图像按照标准层次B帧编码方式编码。