发明名称 微表情自动识别的建库视频自动切段方法
摘要 微表情自动识别的建库视频自动切段方法,它将建库视频转化为反映视觉内容特征的单帧图像,并与相邻帧之间的反映视觉内容的特征进行度量,获取帧与帧之间的视觉相似性信息,从而实现对建库视频中非微表情的剔除和微表情视频的自动切段。本发明所述方法包括如下步骤:步骤一:把建库视频分解为连续的单帧图像;步骤二:对每帧图像的人脸位置进行标定;步骤三:对每帧图像的眼睛和鼻子的位置进行标定;步骤四:根据获取的眼睛和鼻子的位置对图像进行裁剪,只保留脸部区域;步骤五:选取一张无表情的图像作为模板,逐帧与模板进行比较,剔除非微表情的图像;步骤六:对剩余的微表情图像采用基于内容的切段算法对视频进行切段。
申请公布号 CN103426005B 申请公布日期 2017.02.15
申请号 CN201310340292.9 申请日期 2013.08.06
申请人 山东大学 发明人 贲晛烨;付希凯;杨艳艳;张鹏;孙孟磊;刘天娇
分类号 G06K9/66(2006.01)I;G06T7/00(2006.01)I 主分类号 G06K9/66(2006.01)I
代理机构 济南金迪知识产权代理有限公司 37219 代理人 吕利敏
主权项 微表情自动识别的建库视频自动切段方法,包括如下步骤:步骤一:把建库视频分解为连续的单帧图像;步骤二:对每帧图像的人脸位置进行标定;步骤三:对每帧图像中人脸上的眼睛和鼻子的位置进行标定;步骤四:根据步骤三中获取的眼睛和鼻子的位置对图像进行裁剪,只保留每帧图像的脸部区域;步骤五:选取一张同一个人的无表情的图像作为模板,逐帧与模板进行比较,剔除非微表情的图像;步骤六:对步骤五中剩余的微表情图像,采用基于内容的切段方法对视频进行切段;所述步骤五中剔除非微表情图像的方法:选取一张无表情的图像作为模板,对上述步骤四中裁剪出来的图像逐个比较其与模板图像的灰度直方图的差异,如果帧间的灰度直方图差异小于根据图像内容自动选取的阈值时,则把所述帧图像认为是非微表情图像,并剔除掉;如果帧间差异大于根据图像内容自动选取的阈值,则把所述帧图像认为是微表情图像;上述根据图像内容自动选取阈值的方法为:假设D<sub>i</sub>为第i帧图像与无表情模板图像的灰度直方图的差值,α为自适应系数,其中0≤α≤1,设置常数c是为了防止帧间差值几乎为零时而无法自动选取阈值,当满足下式时,则把所述帧图像认为是非微表情图像<maths num="0001"><math><![CDATA[<mrow><msub><mi>D</mi><mi>i</mi></msub><mo>+</mo><mi>c</mi><mo>&le;</mo><mi>&alpha;</mi><munderover><mo>&Sigma;</mo><mrow><mi>q</mi><mo>=</mo><mi>i</mi><mo>-</mo><mn>3</mn></mrow><mrow><mi>i</mi><mo>-</mo><mn>1</mn></mrow></munderover><mfrac><mrow><msub><mi>D</mi><mi>q</mi></msub><mo>+</mo><mi>c</mi></mrow><mn>3</mn></mfrac></mrow>]]></math><img file="FDA0001005541700000011.GIF" wi="427" he="134" /></maths>其中,D<sub>q</sub>为第q帧图像与无表情模板图像的灰度直方图的差值;当<img file="FDA0001005541700000012.GIF" wi="465" he="135" />时,则把所述帧图像认为是微表情图像。
地址 250100 山东省济南市历城区山大南路27号