一种立体视频深度图序列的帧率提升方法

摘要

一种立体视频深度图序列的帧率提升方法，包括以相邻两帧深度图为两个参考帧，构造出中间深度图插入该相邻两帧深度图之间，其中，通过以下步骤获取中间深度图宏块的深度信息：双向运动估计获取当前宏块的匹配代价及初始运动矢量；进行双向运动补偿获取当前宏块的初始深度信息；若最小匹配代价小于设定的阈值，将所述初始深度信息作为当前宏块的深度信息，否则利用所述初始深度信息合成当前宏块对应虚拟视点的纹理块；计算所述纹理块的匹配代价；计算当前宏块和所述纹理块的联合匹配代价，获取最终运动矢量；用最终运动矢量进行双向运动补偿获取当前宏块的深度信息。本方法能使得深度信息更准确可靠，而且能够保证运算复杂度。

主权项

一种立体视频深度图序列的帧率提升方法，该方法包括以相邻两帧深度图为两个参考帧，获取中间深度图中每个宏块的深度信息，构造出中间深度图插入该相邻两帧深度图之间，其特征在于，通过以下步骤获取中间深度图中宏块的深度信息：双向运动估计，获取当前宏块的匹配代价C_D(v)、最小匹配代价C1及初始运动矢量v_D；利用初始运动矢量v_D进行双向运动补偿，获取当前宏块的初始深度信息；将最小匹配代价C1与设定的阈值T比较，若小于阈值T，将所述初始深度信息作为当前宏块的深度信息，当前宏块处理结束；否则执行下一步；利用所述初始深度信息合成当前宏块对应虚拟视点的纹理块；双向运动估计，计算所述纹理块的匹配代价C_P(v)；用当前宏块的匹配代价C_D(v)和所述纹理块的匹配代价C_P(v)，通过C_DP(v)＝ω₁*C_D(v)+ω₂*C_P(v)计算联合匹配代价C_DP(v)，以最小联合匹配代价对应的运动矢量作为最终运动矢量v_DP，其中ω₁和ω₂为加权值，ω₁和ω₂满足ω₁＝C_D(v)/(C_D(v)+C_P(v))和ω₁+ω₂＝1；用最终运动矢量v_DP进行双向运动补偿，获取当前宏块的深度信息；其中利用所述初始深度信息合成当前宏块对应虚拟视点的纹理块的方法包括：通过公式B_Disparity1(m，n)＝255‑B_D1(m，n)计算视差向量v1＝B_Disparity1(m，n)，其中B_D1(m，n)表示当前宏块B_D1中像素(m，n)的像素值，即初始深度信息；通过公式$B_{P_{12,1}}(m,n)=B_{P_{1,1}}(m+v1,n)$合成纹理块的纹理信息，其中，表示当前宏块B_D1对应虚拟视点的纹理块表示当前宏块B_D1对应视点1的纹理块，m和n分别表示像素的横坐标和纵坐标。