发明名称 一种基于ORB算子的无参考视频平滑度的评价方法
摘要 本发明涉及一种基于ORB算子的无参考视频平滑度的评价方法,包括以下步骤:取视频连续n帧图像,提取n帧图像中的ORB特征点;对每相邻两帧图像中的ORB特征点进行匹配;对每相邻两帧图像误匹配的ORB特征点进行筛选并剔除;根据运动仿射变换模型生成相邻两帧图像间的仿射变换矩阵,即相邻两帧图像间的单应性矩阵,对单应性矩阵A进行逐步迭代求解;计算每相邻两帧图像间的运动参数,所述运动参数包括图像的平移及旋转角度;生成视频序列平移运动轨迹及旋转运动轨迹;利用高斯滤波器对平移运动轨迹及旋转运动轨迹进行滤波处理,得到滤波后的平移轨迹、旋转运动轨迹;计算平移抖动数及旋转抖动数,并计算水平平滑度值及旋转平滑度值并判断视频平滑度。
申请公布号 CN103700069A 申请公布日期 2014.04.02
申请号 CN201310674448.7 申请日期 2013.12.11
申请人 武汉工程大学 发明人 卢培磊;王海晖;曾祥进;陈青;徐凯
分类号 G06T5/00(2006.01)I 主分类号 G06T5/00(2006.01)I
代理机构 湖北武汉永嘉专利代理有限公司 42102 代理人 唐万荣
主权项 一种基于ORB算子的无参考视频平滑度的评价方法,其特征在于,包括以下步骤:1)取视频连续n帧图像,提取n帧图像中的ORB特征点;2)对每相邻两帧图像中的ORB特征点进行匹配;3)对每相邻两帧图像误匹配的ORB特征点进行筛选并剔除;剔除方法为:求每相邻两帧图像中所有匹配特征点两两之间的距离,取得其距离的最小值记为min_dist,将特征点距离大于B*min_dist的特征点进行剔除,B取值范围为6<B<10;4)根据运动仿射变换模型生成相邻两帧图像间的仿射变换矩阵,即相邻两帧图像间的单应性矩阵,对单应性矩阵A进行逐步迭代求解;5)根据单应性矩阵,计算每相邻两帧图像间的运动参数;所述运动参数包括图像的平移及旋转角度;6)根据所有相邻两帧图像间的运动参数,生成视频序列平移运动轨迹DTajectory及旋转运动轨迹;将视频序列中所有两两相邻图像间的位移及旋转角度求解出来便得到整个视频序列的平移、旋转轨迹,记D=[Dx,Dy]有:DTajectory=(D1,D2,...DN‑1)     θTajectory=(θ1,θ2,...θN‑1)     其中N表示视频序列总帧数,DN‑1表示第N‑1帧视频图像与第N帧视频图像间的平移向量,θN‑1表示第N‑1帧视频图像与第N帧图像间的旋转角度;Dx,Dy分别表示图像水平、垂直方向的位移;7)利用高斯滤波器对平移运动轨迹及旋转运动轨迹进行滤波处理,得到滤波后的平移轨迹DsTajectory、旋转运动轨迹θsTajectory;8)根据滤波后的平移轨迹DsTajectory、旋转运动轨迹θsTajectory,计算平移均值Daverage、旋转均值θaverage;平滑后帧间运动的平均值:Daverage=(DS,1+DS,2+....DS,N‑1)/(N‑1)     θaverage=(θS,1+θS,2+...θS,N‑1)/(N‑1)     若图像中存在DS,i>m*Daverage(i=1,…N‑1)则表示视频序列中存在平移抖动,若图像中存在θS,i>m*θaverage(i=1,…N‑1)则表示视频序列中存在旋转抖动,m表示调整系数;9)计算平移抖动数count_T及旋转抖动数count_R,计算水平平滑度值Tsmoothness及旋转平滑度值Rsmoothness; <mfenced open='{' close=''> <mtable> <mtr> <mtd> <mi>count</mi> <mo>_</mo> <mi>R</mi> <mo>=</mo> <munderover> <mi>&Sigma;</mi> <mrow> <mi>i</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>-</mo> <mn>1</mn> </mrow> </munderover> <mi>&delta;</mi> <mo>[</mo> <msub> <mi>&theta;</mi> <mrow> <mi>S</mi> <mo>,</mo> <mi>i</mi> </mrow> </msub> <mo>-</mo> <mi>m</mi> <mo>*</mo> <msub> <mi>&theta;</mi> <mi>average</mi> </msub> <mo>]</mo> </mtd> </mtr> <mtr> <mtd> <mi>count</mi> <mo>_</mo> <mi>T</mi> <mo>=</mo> <munderover> <mi>&Sigma;</mi> <mrow> <mi>i</mi> <mo>=</mo> <mn>1</mn> </mrow> <mrow> <mi>N</mi> <mo>-</mo> <mn>1</mn> </mrow> </munderover> <mi>&delta;</mi> <mo>[</mo> <msub> <mi>D</mi> <mrow> <mi>S</mi> <mo>,</mo> <mi>i</mi> </mrow> </msub> <mo>-</mo> <mi>m</mi> <mo>*</mo> <msub> <mi>D</mi> <mi>average</mi> </msub> <mo>]</mo> </mtd> </mtr> </mtable> </mfenced> <mrow> <mi>&delta;</mi> <mrow> <mo>(</mo> <mi>x</mi> <mo>)</mo> </mrow> <mo>=</mo> <mtable> <mrow> <mfenced open='{' close=''> <mtable> <mtr> <mtd> <mn>1</mn> </mtd> <mtd> <mi>x</mi> <mo>></mo> <mn>0</mn> </mtd> </mtr> <mtr> <mtd> <mn>0</mn> </mtd> <mtd> <mi>x</mi> <mo>&le;</mo> <mn>0</mn> </mtd> </mtr> </mtable> </mfenced> </mrow> </mtable> <mtable> </mtable> </mrow>其中count_T表示平移抖动数,count_R表示旋转抖动数,δ(x)表示判断函;平移抖动程度Tmeasure及旋转抖动程度值Rmeasure计算公式为: <mfenced open='{' close=''> <mtable> <mtr> <mtd> <msub> <mi>T</mi> <mi>measure</mi> </msub> <mo>=</mo> <mfrac> <mrow> <mi>count</mi> <mo>_</mo> <mi>T</mi> </mrow> <mrow> <mi>N</mi> <mo>-</mo> <mn>1</mn> </mrow> </mfrac> </mtd> </mtr> <mtr> <mtd> <msub> <mi>R</mi> <mi>measure</mi> </msub> <mo>=</mo> <mfrac> <mrow> <mi>count</mi> <mo>_</mo> <mi>R</mi> </mrow> <mrow> <mi>N</mi> <mo>-</mo> <mn>1</mn> </mrow> </mfrac> </mtd> </mtr> </mtable> </mfenced>因此,其水平平滑度值Tsmoothness及旋转平滑度值Rsmoothness为: <mfenced open='{' close=''> <mtable> <mtr> <mtd> <msub> <mi>T</mi> <mi>smoothness</mi> </msub> <mo>=</mo> <mn>1</mn> <mo>-</mo> <msub> <mi>T</mi> <mi>measure</mi> </msub> </mtd> </mtr> <mtr> <mtd> <msub> <mi>R</mi> <mi>smoothness</mi> </msub> <mo>=</mo> <mn>1</mn> <mo>-</mo> <msub> <mi>R</mi> <mi>measure</mi> </msub> </mtd> </mtr> </mtable> </mfenced>10)判断:Tsmoothness与Rsmoothness的值介于0~1之间,越接近于0表示视频序列中不存在抖动,视频平滑度好,越接近于1表示视频序列中抖动帧数越多,视频平滑度越差。
地址 430074 湖北省武汉市洪山区雄楚大街693号