将多个高分辨率图像映射到一个低分辨率360度图像上生成无重影的高分辨全景图

摘要

一种使用混合分辨率方法的高分辨率全景VR生成器，其将来自HR相机环的高分辨率(HR)图像块放置在一个LR相机的360度低分辨率(LR)图像上，所述LR相机从相机环向上指向一个全景镜，LR相机视野是所有多个HR相机视野的合并，但分辨率较低。由相邻HR相机之间视差所引起的重影会被消除，因为目标位置是由所述360度LR图像确定。通过组合不同深度的目标以获得单应矩阵，每个HR图像被单应投影成3个投影。所述360度LR图像被放大到HR，并对这个放大的HR图像，在所述3个投影里的搜索窗口内搜索一个查询图像块。通过和查询图像块的相似性，最佳匹配图像块被加权处理，以合成产生一个重建图像块，其放置在一个重建HR全景图像里，放置位置即查询图像块的位置。

主权项

一种混合分辨率全景处理器，包括：一个全景输入，用于接收360度场景的360度图像；一个细节视图输入，用于接收由多个高分辨率HR相机拍摄的多个HR图像，每个HR图像仅覆盖所述360度场景的一个有限弧度部分；其中对所述360度场景里的可视目标，所述多个HR图像比所述360度图像具有更高的像素密度；一个图像放大器，其产生额外的像素插入到所述360度图像里，以产生一个放大的360度图像；一个图像块搜索器，其用于扫描所述放大的360度图像，以找到多个查询图像块，并且对每个查询图像块，在HR图像内搜索一个搜索窗口，以在所述HR图像里找到一个最佳匹配HR图像块，并且对靠近相邻HR图像之间拼接处的查询图像块，同样在第二HR图像内搜索第二搜索窗口，以在所述第二HR图像里找到第二最佳匹配HR图像块；一个图像块收集器，其收集所述最佳匹配HR图像块以及所述第二最佳匹配HR图像块；一个图像块评估器，其对由所述图像块收集器收集的每个最佳匹配HR图像块产生一个相似性参数，所述相似性参数对一个最佳匹配HR图像块和一个查询图像块的可视相似性进行定量化；一个重建图像块生成器，其使用所述相似性参数作为合成权重，以对所述最佳匹配HR图像块和所述第二最佳匹配HR图像块进行合成，从而产生一个重建图像块；和一个联合视图重建器，其将所述重建图像块放置在一个重建HR全景图像上，放置的位置即所述放大的360度图像内相应查询图像块的位置。