发明名称 基于谱稀疏典型相关分析的表情语义稀疏量化方法
摘要 本发明公开了基于谱稀疏典型相关分析的表情语义稀疏量化方法,属于图像处理的技术领域。本发明通过在典型相关分析中引入表情图像特征矩阵的谱分解表示方法,将典型相关分析与表情图像特征矩阵的谱稀疏选择相结合;通过采用方向交错优化法确定最佳投影参数以及最佳变换矩阵;在提取待测人脸图像表情语义特征向量时,通过在最小二乘回归方法中增加L1范式的稀疏惩罚项,实现对待测表情图像的表情语义信息的稀疏量化评估。本发明具有识别率更高、鲁棒性更好的表情识别效果。
申请公布号 CN102779271B 申请公布日期 2015.06.17
申请号 CN201210218216.6 申请日期 2012.06.28
申请人 南京信息工程大学 发明人 周晓彦;郑文明
分类号 G06K9/00(2006.01)I 主分类号 G06K9/00(2006.01)I
代理机构 南京经纬专利商标代理有限公司 32200 代理人 许方
主权项 基于谱稀疏典型相关分析的表情语义稀疏量化方法,其特征在于包括如下步骤:步骤1,从训练人脸表情图像样本集中提取表情特征矢量集F、情感语义特征矢量集Y:步骤1‑1,在每幅人脸图像上定位34个反映人脸表情变换特性的几何特征点,将每幅表情图像分别与30个二维Gabor小波进行卷积,并取34个几何特征点位置处的卷积结果的幅度值作为表情特征,构建表情特征矢量集F,所述二维Gabor小波对应于5个尺度和6个旋转方向;步骤1‑2,计算表情特征矢量集F的协方差矩阵C,对协防差矩阵C进行奇异值分解得到白化矩阵P;步骤1‑3,用白化矩阵白化处理表情特征矢量集,利用模糊K近邻算法计算白化处理后的表情特征矢量集得到情感语义特征矢量集Y:构造N幅表情图像对应的特性向量x<sub>1</sub>,…,x<sub>N</sub>,给近邻数K赋值,计算任意两个样本点x<sub>r</sub>和x<sub>l</sub>之间的距离d<sub>rl</sub>,并记为d<sub>rl</sub>=d(x<sub>r</sub>,x<sub>l</sub>),令D是一个N×N矩阵,其每个元素由距离d<sub>rl</sub>构成,并令矩阵的对角元素取无穷大,近邻数K采用交叉验证方法确定,对矩阵D的每列元素以升序进行排序,选择所有模式中位于K近邻的模式的类别标签,利用表达式:<img file="FDA0000700367450000011.GIF" wi="1242" he="170" />计算第j个样本属于第i类的隶属度<img file="FDA0000700367450000012.GIF" wi="79" he="77" />其中:<img file="FDA0000700367450000013.GIF" wi="64" he="76" />代表与第j个样本相邻且属于第i类的样本数目;步骤2,利用谱稀疏典型相关分析方法得到投影方向矩阵<img file="FDA0000700367450000014.GIF" wi="220" he="83" />将表情特征矢量集和情感语义矢量集按照投影方向矩阵求解得到表情投影矢量集<maths num="0001" id="cmaths0001"><math><![CDATA[<mrow><mi>&Omega;</mi><mo>=</mo><mo>[</mo><msubsup><mi>&omega;</mi><mi>x</mi><mn>1</mn></msubsup><mo>,</mo><mo>&CenterDot;</mo><mo>&CenterDot;</mo><mo>&CenterDot;</mo><mo>,</mo><msubsup><mi>&omega;</mi><mi>x</mi><mi>r</mi></msubsup><mo>]</mo></mrow>]]></math><img file="FDA0000700367450000015.GIF" wi="352" he="84" /></maths>和情感语义投影矢量集<maths num="0002" id="cmaths0002"><math><![CDATA[<mrow><mrow><mi>&Phi;</mi><mo>=</mo><mo>[</mo><msubsup><mi>&omega;</mi><mi>y</mi><mn>1</mn></msubsup><mo>,</mo><mo>&CenterDot;</mo><mo>&CenterDot;</mo><mo>&CenterDot;</mo><mo>,</mo><msubsup><mi>&omega;</mi><mi>y</mi><mi>r</mi></msubsup><mo>]</mo></mrow><mo>;</mo></mrow>]]></math><img file="FDA0000700367450000016.GIF" wi="383" he="87" /></maths>步骤3,采用方向交错优化计算最佳变换矩阵,所述最佳变换矩阵定义为使得表情投影矢量集按照最佳变换矩阵变换后与情感语义投影矢量集的均方误差最小;步骤4,利用最小二乘法对待测试人脸表情图像进行特征提取,获得待识别人脸表情图像的Gabor表情特征矢量、情感语义特征矢量,将所述Gabor表情特征矢量、情感语义特征矢量按照步骤1至步骤3所述的训练人脸表情图像样本集的线性关系变换,得到识别结果。
地址 210044 江苏省南京市宁六路219号