发明名称 多视角影像的影像合成方法
摘要
申请公布号 TWI348120 申请公布日期 2011.09.01
申请号 TW097102185 申请日期 2008.01.21
申请人 财团法人工业技术研究院 发明人 刘楷哲;黄仁泽;叶宏镇;詹富强
分类号 G06K9/00;G06K9/36 主分类号 G06K9/00
代理机构 代理人 詹铭文 台北市中正区罗斯福路2段100号7楼之1;萧锡清 台北市中正区罗斯福路2段100号7楼之1
主权项 一种多视角影像的影像合成方法,包括:输入多个参考影像,每一个该参考影像是对应一个参考视角拍摄所得到的;决定对应一观视点与一所要视角的一所要合成影像;切割该所要合成影像,得到多个网格以及该些网格的多个顶点;由该观视点分别与每一个该顶点构成一视角;根据该视角从该些参考影像中寻找对应每一个该顶点的多个邻近影像;选定可能的多个影像深度值;将每一个该顶点的位置,依照每一个该影像深度值投影到每一个该邻近影像上的一投影位置;分析该些邻近影像在该投影位置上的一影像区域的一影像差异值,以决定该顶点的一最佳化影像深度值;以及根据影像深度值之对应点进行影像合成以产生该所要合成影像,其中当该些邻近影像有至少一个落在该顶点的一接近范围时,以第一种模式产生该所要合成影像,当该些邻近影像没有落在该顶点的该接近范围时,以第二种模式产生该所要合成影像。如申请专利范围第1项所述之多视角影像的影像合成方法,其中在该第一种模式中,如果有单一个邻近影像足够接近,就直接取得一影像颜色资料来合成该所要合成影像。如申请专利范围第1项所述之多视角影像的影像合成方法,其中在该第一种模式中,如果有二个以上的邻近影像足够接近,则取其中最高比重的该邻近影像的一影像颜色资料。如申请专利范围第1项所述之多视角影像的影像合成方法,其中在该第一种模式中,如果有二个以上的邻近影像足够接近,则取该二个以上的邻近影像的平均得到一影像颜色资料。如申请专利范围第1项所述之多视角影像的影像合成方法,其中在该第二种模式中,对该些邻近影像进行依比重内插得到一影像颜色资料。如申请专利范围第1项所述之多视角影像的影像合成方法,其中决定该第一种模式的条件是以在该顶点的该些邻近影像中检查一最大比重值与一次大比重值之间的差异程度,如果大于一临界值就进入该第一种模式否则进入该第二种模式产生。如申请专利范围第6项所述之多视角影像的影像合成方法,其中该最大比重值与该次大比重值是正规后的值。如申请专利范围第1项所述之多视角影像的影像合成方法,其中该些邻近影像的数量包括4个该参考影像。如申请专利范围第1项所述之多视角影像的影像合成方法,更包括对于依照设定的一最大深度与一最小深度,决定出需要对应到之每一个邻近影像的部分范围(ROI)。如申请专利范围第1项所述之多视角影像的影像合成方法,其中选定可能的该些影像深度值的该步骤包括:设定的一最大深度dmax,一最小深度dmin,及分成M个深度值;以及第m个深度dm为@sIMGTIF!d10020.TIF@eIMG!其中m是0到M-1。如申请专利范围第1项所述之多视角影像的影像合成方法,其中在分析该些邻近影像在该投影位置上的该影像区域的该影像差异值的步骤中,如果属于该些网格其一的该些顶点的该些最佳化影像深度值之间的差异大于一设定值,则将该网格再度切割成较小的多个次网格,并且重新计算出该些次网格的该些顶点的一最佳化影像深度值。如申请专利范围第11项所述之多视角影像的影像合成方法,其中任何二个该顶点的差异有大于该设定值就将该网格再度切割。如申请专利范围第1项所述之多视角影像的影像合成方法,该些网格的形状是三角形网格。如申请专利范围第1项所述之多视角影像的影像合成方法,在分析该些邻近影像在该投影位置上的该影像区域的该影像差异值,包括考虑该些邻近影像之间的相关性参数rij为@sIMGTIF!d10021.TIF@eIMG!其中i与j代表该些邻近影像之任其二张,Iik与Ijk是在该影像区域内第k个像素资料,@sIMGCHAR!d10024.TIF@eIMG!与@sIMGCHAR!d10025.TIF@eIMG!是在该影像区域内的像素资料平均值。一种多视角影像的影像合成方法,包括:输入多个参考影像,每一个该参考影像是对应一个参考视角拍摄所得到的;决定对应一观视点与一所要视角的一所要合成影像;切割该所要合成影像,得到多个网格以及该些网格的多个顶点;每一个该顶点与该观视点分别构成一视角,参考该视角从该些参考影像中寻找多个邻近影像;以及如果该些邻近影像有至少一个落在该顶点的一接近范围时,以第一种模式合成该所要合成影像,当该些邻近影像没有落在该顶点的该接近范围时,以第二种模式合成该所要合成影像。如申请专利范围第15项所述之多视角影像的影像合成方法,其中在该第一种模式中,如果有单一个邻近影像足够接近,就直接取得一影像颜色资料来合成该所要合成影像。如申请专利范围第15项所述之多视角影像的影像合成方法,其中在该第一种模式中,如果有二个以上的邻近影像足够接近,则取其中最高比重的该邻近影像的一影像颜色资料。如申请专利范围第15项所述之多视角影像的影像合成方法,其中在该第一种模式中,如果有二个以上的邻近影像足够接近,则取该二个以上的邻近影像的平均得到一影像颜色资料。如申请专利范围第15项所述之多视角影像的影像合成方法,其中在该第二种模式中,对该些邻近影像进行依比重内插得到一影像颜色资料。如申请专利范围第15项所述之多视角影像的影像合成方法,其中藉由分析该些邻近影像以决定每一个该顶点的一最佳化深度值。
地址 新竹县竹东镇中兴路4段195号