发明名称 一种基于失真图的立体图像质量客观评价方法
摘要 本发明公开了一种基于失真图的立体图像质量客观评价方法,其首先分别计算原始的无失真的立体图像的独眼图和待评价的失真的立体图像的独眼图,然后分别计算两个独眼图之间的结构失真图和可视失真图,并对待评价的失真的立体图像的独眼图中的每个像素点的客观评价度量值进行融合,得到待评价的失真的立体图像的图像质量客观评价预测值,优点在于所获得的独眼图能够很好地对双目立体融合过程进行模拟,并且采用结构失真图和可视失真图进行融合,能有效地提高客观评价结果与主观感知的相关性。
申请公布号 CN102999912B 申请公布日期 2015.08.05
申请号 CN201210493232.6 申请日期 2012.11.27
申请人 宁波大学 发明人 邵枫;段芬芳;蒋刚毅;郁梅;李福
分类号 G06T7/00(2006.01)I;G06T5/50(2006.01)I 主分类号 G06T7/00(2006.01)I
代理机构 宁波奥圣专利代理事务所(普通合伙) 33226 代理人 周珏
主权项 一种基于失真图的立体图像质量客观评价方法,其特征在于它的处理过程为:首先,根据原始的无失真的立体图像的左视点图像和右视点图像中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,及原始的无失真的立体图像的左视点图像和右视点图像之间的视差图像,获得原始的无失真的立体图像的独眼图;根据待评价的失真的立体图像的左视点图像和右视点图像中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,及原始的无失真的立体图像的左视点图像和右视点图像之间的视差图像,获得待评价的失真的立体图像的独眼图;其次,分别计算两个独眼图之间的结构失真图和可视失真图;然后,根据结构失真图和可视失真图,对待评价的失真的立体图像的独眼图中的每个像素点的客观评价度量值进行融合,得到待评价的失真的立体图像的图像质量客观评价预测值;最后,按照上述处理过程获取多幅不同失真类型不同失真程度的失真的立体图像的图像质量客观评价预测值;该立体图像质量客观评价方法具体包括以下步骤:①令S<sub>org</sub>为原始的无失真的立体图像,令S<sub>dis</sub>为待评价的失真的立体图像,将S<sub>org</sub>的左视点图像记为{L<sub>org</sub>(x,y)},将S<sub>org</sub>的右视点图像记为{R<sub>org</sub>(x,y)},将S<sub>dis</sub>的左视点图像记为{L<sub>dis</sub>(x,y)},将S<sub>dis</sub>的右视点图像记为{R<sub>dis</sub>(x,y)},其中,此处(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,L<sub>org</sub>(x,y)表示{L<sub>org</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值,R<sub>org</sub>(x,y)表示{R<sub>org</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值,L<sub>dis</sub>(x,y)表示{L<sub>dis</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值,R<sub>dis</sub>(x,y)表示{R<sub>dis</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值;②计算{L<sub>org</sub>(x,y)}、{R<sub>org</sub>(x,y)}、{L<sub>dis</sub>(x,y)}、{R<sub>dis</sub>(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应;然后获取{L<sub>org</sub>(x,y)}、{R<sub>org</sub>(x,y)}、{L<sub>dis</sub>(x,y)}、{R<sub>dis</sub>(x,y)}中的每个像素点的振幅;再根据{L<sub>org</sub>(x,y)}和{R<sub>org</sub>(x,y)}中的每个像素点的振幅及{L<sub>org</sub>(x,y)}与{R<sub>org</sub>(x,y)}之间的视差图像中的每个像素点的像素值,计算S<sub>org</sub>的独眼图,记为{CM<sub>org</sub>(x,y)},并根据{L<sub>dis</sub>(x,y)}和{R<sub>dis</sub>(x,y)}中的每个像素点的振幅及{L<sub>org</sub>(x,y)}与{R<sub>org</sub>(x,y)}之间的视差图像中的每个像素点的像素值,计算S<sub>dis</sub>的独眼图,记为{CM<sub>dis</sub>(x,y)},其中,CM<sub>org</sub>(x,y)表示{CM<sub>org</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值,CM<sub>dis</sub>(x,y)表示{CM<sub>dis</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值;③计算S<sub>org</sub>的独眼图{CM<sub>org</sub>(x,y)}与S<sub>dis</sub>的独眼图{CM<sub>dis</sub>(x,y)}之间的结构失真图,记为{D<sub>appear</sub>(x,y)},将{D<sub>appear</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值记为D<sub>appear</sub>(x,y),<img file="FDA0000701809270000027.GIF" wi="1941" he="130" />,其中,α表示对{CM<sub>org</sub>(x,y)}和{CM<sub>dis</sub>(x,y)}进行滤波所采用的滤波器的尺度因子,1≤α≤4,θ表示对{CM<sub>org</sub>(x,y)}和{CM<sub>dis</sub>(x,y)}进行滤波所采用的滤波器的方向因子,1≤θ≤4,ω<sub>θ</sub>表示不同尺度的加权系数,ρ、λ和γ为控制系数,<img file="FDA0000701809270000022.GIF" wi="460" he="76" />和<img file="FDA0000701809270000023.GIF" wi="205" he="77" />对应表示{CM<sub>org</sub>(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度,<img file="FDA0000701809270000024.GIF" wi="454" he="90" />和<img file="FDA0000701809270000025.GIF" wi="204" he="86" />对应表示{CM<sub>dis</sub>(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度;④计算S<sub>org</sub>的独眼图{CM<sub>org</sub>(x,y)}与S<sub>dis</sub>的独眼图{CM<sub>dis</sub>(x,y)}之间的可视失真图,记为{D<sub>detect</sub>(x,y)},将{D<sub>detect</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值记为D<sub>detect</sub>(x,y),D<sub>detect</sub>(x,y)=ξ(x,y)<sup>η</sup>×CM<sub>err</sub>(x,y)<sup>2×(1‑η)</sup>,其中,ξ(x,y)表示{CM<sub>org</sub>(x,y)}与{CM<sub>dis</sub>(x,y)}中坐标位置为(x,y)的像素点之间的对比度失真,<img file="FDA0000701809270000026.GIF" wi="451" he="140" />β<sub>1</sub>和β<sub>2</sub>为控制系数,CM<sub>err</sub>(x,y)表示{CM<sub>org</sub>(x,y)}与{CM<sub>dis</sub>(x,y)}之间的残差图像{CM<sub>err</sub>(x,y)}中坐标位置为(x,y)的像素点的像素值;⑤根据{D<sub>appear</sub>(x,y)}和{D<sub>detect</sub>(x,y)},对S<sub>dis</sub>的独眼图{CM<sub>dis</sub>(x,y)}中的每个像素点的客观评价度量值进行融合,得到S<sub>dis</sub>的图像质量客观评价预测值,记为Q,<maths num="0001" id="cmaths0001"><math><![CDATA[<mrow><mi>Q</mi><mo>=</mo><msup><mrow><mo>[</mo><mfrac><mrow><munder><mi>&Sigma;</mi><mrow><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow><mo>&Element;</mo><mi>&Omega;</mi></mrow></munder><msub><mi>Q</mi><mi>image</mi></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow><mo>&times;</mo><msub><mi>D</mi><mi>appear</mi></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><munder><mi>&Sigma;</mi><mrow><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow><mo>&Element;</mo><mi>&Omega;</mi></mrow></munder><msub><mi>D</mi><mi>appear</mi></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow></mfrac><mo>]</mo></mrow><mi>&tau;</mi></msup><mo>&times;</mo><msup><mrow><mo>[</mo><mfrac><mrow><munder><mi>&Sigma;</mi><mrow><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow><mo>&Element;</mo><mi>&Omega;</mi></mrow></munder><msub><mi>Q</mi><mi>image</mi></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow><mo>&times;</mo><msub><mi>D</mi><mrow><mi>det</mi><mi>ect</mi></mrow></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow><mrow><munder><mi>&Sigma;</mi><mrow><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow><mo>&Element;</mo><mi>&Omega;</mi></mrow></munder><msub><mi>D</mi><mrow><mi>det</mi><mi>ect</mi></mrow></msub><mrow><mo>(</mo><mi>x</mi><mo>,</mo><mi>y</mi><mo>)</mo></mrow></mrow></mfrac><mo>]</mo></mrow><mi>&upsi;</mi></msup><mo>,</mo></mrow>]]></math><img file="FDA0000701809270000031.GIF" wi="1438" he="214" /></maths>其中,Q<sub>image</sub>(x,y)表示{CM<sub>dis</sub>(x,y)}中坐标位置为(x,y)的像素点的客观评价度量值,Ω表示像素域范围,τ和υ为权重系数;⑥采用n幅原始的无失真的立体图像,建立其在不同失真类型不同失真程度下的失真立体图像集合,该失真立体图像集合包括多幅失真的立体图像,其中,n≥1;⑦按照步骤①至步骤⑤计算S<sub>dis</sub>的图像质量客观评价预测值的操作过程,分别计算失真立体图像集合中每幅失真的立体图像的图像质量客观评价预测值。
地址 315211 浙江省宁波市江北区风华路818号