一种交互式三维虚拟现实视频节目录播和直播方法

摘要

本发明公开了一种交互式三维虚拟现实视频节目录播和直播方法，具体步骤如下：步骤一，在节目拍摄区域多个角度部署多个摄像机；步骤二，计算设备以所有的摄像机在同一时间内所拍摄到的多幅图像为一帧，进行三维重构；步骤三，计算设备对生成的点云、三维模型及贴图进行压缩和优化；步骤四，将这些数据传输给用户客VR客户端；步骤五，VR客户端将这些带贴图的三维模型或点云以拍摄的时序渲染呈现给用户。本发明通过多个摄像机采集节目现场多个角度的数据进行三维重构，在虚拟现实设备中为用户复原整个节目现场的三维数据，从而使得玩家可以随意变换观看角度以及在虚拟场景中任意移动位置，使玩家可以沉浸在虚拟的节目现场之中。

主权项

一种交互式三维虚拟现实视频节目录播和直播方法，其特征在于，具体步骤如下：步骤一，在节目拍摄区域周围8‑16个角度部署8‑16个摄像机，这些摄像机可以捕捉场上的运动数据图像，在直播过程中，这些摄像机所拍摄到的图像每一帧都实时的传递给中央计算设备；在录播过程中，这些摄像头所拍摄到的图像都存储在存储设备中；步骤二，中央计算设备以所有的摄像机在同一时间内所拍摄到的多幅图像为一帧，进行三维重构，从而生成拍摄现场在某一时刻的点云、三维模型及贴图，中央计算设备以20‑80帧/秒的频率重复地进行三维重构，从而生成随着拍摄物体随时间变化而变化的一系列点云、三维模型及贴图；步骤三，中央计算设备对这些点云、三维模型及贴图进行压缩和优化；步骤四，中央计算设备将这些数据传输给用户客VR客户端；步骤五，VR客户端将这些带贴图的三维模型或点云以拍摄的时序渲染呈现给用户，VR客户端以VR设备所处虚拟空间中的位置和视角进行渲染，从而使得玩家可以随意变换观看角度以及在虚拟场景中任意移动位置，从而产生身临其境的临场观看体验。