一种基于视频序列背景建模的虚拟视点绘制方法

摘要

本发明公开了一种基于视频序列背景建模的虚拟视点绘制方法，包括如下步骤：(1)对参考视点二维视频和深度视频建立统计背景模型，得到背景二维图像和背景深度图像；(2)对每帧深度图像做中值滤波；(3)将背景深度图像和参考视点深度图像投射至视差空间，得到背景图像的视差和参考图像的视差；(4)平移背景二维图像像素，得到目标视点背景图像；(5)平移参考视点二维图像像素，得到目标视点初始图像；(6)融合目标视点初始图像和背景图像，填补空洞，得到最终目标视点图像。本发明结合视频序列时间上的相关性，提取出背景信息，将背景图像和当前参考图像同时绘制至虚拟视点，利用背景来填补空洞，提高了虚拟视点图像的质量。

主权项

一种基于视频序列背景建模的虚拟视点绘制方法，其特征在于包括如下步骤：(1)对参考视点二维视频建立统计背景模型，得到背景二维图像，对参考视点深度视频建立统计背景模型，得到背景深度图像；(2)对参考视点每一帧深度图像做中值滤波处理；(3)将统计建模得到的背景深度图像投射至视差空间，得到背景图像各像素点的视差值，将每一帧中值滤波之后的深度图投射至视差空间，得到参考图像各像素点的视差值；(4)根据背景图像各像素点的视差值，平移统计建模得到的背景二维图像的各个通道的像素，得到目标视点背景图像；(5)根据参考图像各像素点的视差值，平移参考视点二维图像的各个通道的像素，得到目标视点初始图像；(6)融合目标视点初始图像和目标视点背景图像，并用均值滤波器插值填补空洞，得到最终目标视点图像。