用于沉浸式和交互式多媒体生成的系统和方法

摘要

本发明公开一种设备。所述设备包括光学感测系统，其包括至少一个相机，所述至少一个相机被配置为获取物理环境的图像。所述设备还包括处理系统。所述处理系统包括取向和位置确定模块，其被配置为从所述图像检测显著特征，并且基于所述所检测到的显著特征确定所述设备相对于所述物理环境的取向和/或位置变化。所述处理系统还包括渲染模块，其被配置为基于所述图像和所述设备的所述所确定的取向和/或位置变化来确定所述物理环境的渲染，并且将与所述物理环境的所述渲染有关的数据提供给显示系统。

主权项

一种设备，包括：光学感测系统，其包括至少一个相机，所述至少一个相机被配置为获取物理环境的图像；处理系统，其包括：取向和位置确定模块，其被配置为：从所述图像检测显著特征，并且基于所述所检测到的显著特征确定所述设备相对于所述物理环境的取向和/或位置变化；以及渲染模块，其被配置为：基于所述图像和所述所确定的所述设备的取向和/或位置变化来确定所述物理环境的渲染，并且将与所述物理环境的所述渲染有关的数据提供给显示系统。