虚拟视点图像生成方法和三维图像显示方法及装置

摘要

提供了基于由多个摄像机拍摄到的多个被摄体图像，生成作为从虚拟视点看到被摄体时的图像的虚拟视点图像的虚拟视点图像生成方法。在该虚拟视点图像生成方法中，设定具有多层结构的投影面，求出与所述投影点上的各投影点对应的所述各被摄体图像上的对应点，基于多个对应点的颜色信息来确定所述投影点的颜色信息，对于从空间上的某基准视点看为重合的多个投影点，基于所述对应点的相关程度计算在与所述各投影点的位置相应的距离上存在所述被摄体的可能性的程度，对于从所述虚拟视点看为重合的基准点的颜色信息，进行与所述被摄体存在的可能性程度对应的混合处理，从而确定所述虚拟视点图像中的各像素的颜色信息。

主权项

1.一种虚拟视点图像生成方法，具有：取得由多个摄像机拍摄到的多个被摄体图像的步骤；确定作为观察所述被摄体的位置的虚拟视点的步骤；以及基于所述取得的被摄体图像，生成作为从所述视点看到被摄体时的图像的虚拟视点图像的步骤，其特征在于，生成所述虚拟视点图像的步骤具有：步骤1，设定具有多层结构的投影面；步骤2，求出与所述投影面上的各投影点对应的所述各被摄体图像上的对应点；步骤3，基于多个对应点的颜色信息或亮度信息，确定所述投影点的颜色信息或亮度信息；步骤4，对于从空间上的某基准视点看为重合的多个投影点，基于所述对应点或其附近区域的相关程度，计算在与所述各投影点的位置相应的距离上存在所述被摄体的可能性的程度；步骤5，对从所述虚拟视点看为重合的基准点的颜色信息或亮度信息进行与所述被摄体存在的可能性的程度对应的混合处理，从而确定所述虚拟视点图像中的各像素的颜色信息或亮度信息；以及步骤6，对于与所述虚拟视点图像的像素相应的所有的点，重复进行所述步骤1到步骤5。