立体视频的采集系统及方法

摘要

本发明提出一种立体视频的采集系统及方法，该系统包括：采集设备，包括多个2D相机和多个姿态调整装置，每个2D相机对应一个姿态调整装置，多个2D相机线性排布，用于拍摄平面视频图像；微控制器，通过每个2D相机的通用输入输出口与采集设备相连，用于向多个2D相机发送脉冲信号以控制多个2D相机以预定的帧频同步拍摄平面视频图像；采集服务器，通过每个2D相机的数据口与采集设备相连，用于获取多个2D相机拍摄的平面视频图像，并对多个2D相机进行几何标定，及对多个2D相机拍摄的平面视频图像进行实时几何校正和立体图像合成；立体显示设备，用于接收采集服务器合成的立体图像并进行立体显示。本发明的系统可实时采集数据、灵活性好、立体感知效果佳。

主权项

1.一种立体视频的采集系统，其特征在于，包括：采集设备，所述采集设备包括多个2D相机和多个姿态调整装置，每个所述2D相机对应一个所述姿态调整装置，多个所述2D相机线性排布，用于拍摄平面视频图像；微控制器，所述微控制器通过每个所述2D相机的通用输入输出口与所述采集设备相连，用于向多个所述2D相机发送脉冲信号以控制多个所述2D相机以预定的帧频同步拍摄平面视频图像；采集服务器，所述采集服务器通过每个所述2D相机的数据口与所述采集设备相连，用于获取多个所述2D相机拍摄的平面视频图像，并对多个所述2D相机进行几何标定，及对多个所述2D相机拍摄的平面视频图像进行实时几何校正和立体图像合成；其中，所述采集服务器进一步包括：相机几何标定模块，用于标定每个所述2D相机的参数矩阵，其中，所述参数矩阵包括旋转矩阵R_n、平移向量T_n和内参矩阵K_n；相机虚拟参数计算模块，用于根据每个所述2D相机标定的参数矩阵获得虚拟参数矩阵，其中，所述虚拟参数包括虚拟基线方向、虚拟光心位置虚拟旋转矩阵虚拟平移向量和虚拟内参矩阵像素对应表确定模块，用于分别根据所述参数矩阵K_n,R_n,T_n和所述虚拟参数矩阵确定每个所述2D相机拍摄的平面视频图像像素点和校正后平面视频图像像素点成一一映射关系的像素对应表；实时几何校正模块，用于根据所述像素对应表分别对每个所述2D相机拍摄的平面视频图像进行实时几何，获得校正后的n视角平面视频图像，其中n为所述2D相机的个数；以及立体图合成模块，用于根据所述校正后的n视角平面视频图像合成立体图像；以及立体显示设备，与所述采集服务器相连，用于接收所述采集服务器合成的立体图像并进行立体显示。