发明名称 基于PWLD和D-S证据理论的人脸表情识别方法
摘要 本发明公开一种基于PWLD和D-S证据理论的人脸表情识别方法,该方法包括如下步骤:首选选取人脸表情数据库;然后对已选取的图像进行预处理;分别提取步骤2得到的两个显著区域图像的PWLD特征;将步骤3提取的PWLD特征用D-S证据理论进行分类识别;根据D-S联合规则进行决策判断,得出最终判别结果。本发明的目的在于克服传统的WLD对于局部描述不强,表情识别率低和识别时间长的问题,具有更好的局部信息表征能力,对于图像局部纹理描述更加精确,可以更好地提取全局和局部特征。
申请公布号 CN104112145A 申请公布日期 2014.10.22
申请号 CN201410307045.3 申请日期 2014.06.30
申请人 合肥工业大学 发明人 王晓华;胡敏;金超;黄伟;任福继
分类号 G06K9/66(2006.01)I 主分类号 G06K9/66(2006.01)I
代理机构 合肥和瑞知识产权代理事务所(普通合伙) 34118 代理人 王挺;孟丽平
主权项 一种基于PWLD和D‑S证据理论的人脸表情识别方法,其特征在于该方法包括如下步骤:步骤1:选取人脸表情数据库采用已知表情的人脸表情数据库作为训练集,并选取训练集中某一类表情的一张人脸图像作为测试集;步骤2:对所有图像进行预处理用AdaBoost算法检测人脸,得到只含有人脸表情的人脸图像后,用双向灰度积分投影法对检测出的人脸图像的眼睛定位,然后对人脸图像进行尺度归一化处理,将所有人脸图像尺度归一化为128×128像素,将归一化处理后的人脸图像分割出两个较小的显著区域图像,显著区域图像一为仅含有眉毛、眼睛的图像,显著区域图像二为仅含有嘴巴的图像;步骤3:按照如下步骤分别提取步骤2中两个显著区域图像的PWLD特征S1、将显著区域图像一分成3层,显著区域图像二分成2层,每一层图像均由方形且大小均等的图像块构成,且每层图像块的数量为4<sup>l</sup>,l为图像块所在层的层次,对于显著区域图像一,l=0,1,2;对于显著区域图像二,l=0,1;即下一层图像为由上一层图像的各图像块按宽和高等分成更小的图像块构成;S2、对显著区域图像一和显著区域图像二,分别提取每一层每个图像块的WLD一维直方图;S3:将每一层每个图像块的WLD一维直方图乘以一个归一化系数<img file="FDA0000530135910000011.GIF" wi="35" he="49" />,与每一图像块所对应的归一化系数<img file="FDA0000530135910000012.GIF" wi="220" he="68" />l为图像块所在层的层次;并把同一显著区域图像的每一层每个图像块的归一化后的WLD一维直方图级联,即得到与相应的显著区域图像的PWLD特征;步骤4:将步骤3提取的PWLD特征用D‑S证据理论进行分类S1:按照上述步骤3的方法得到每一幅图像的每一个显著区域图像的PWLD特征后,计算测试集图像的每一个显著区域图像的PWLD特征分别与训练集中每一类表情的每一张图像的相对应的显著区域图像的PWLD特征的卡方距离D(T,S),可由下式求得:<maths num="0001" id="cmaths0001"><math><![CDATA[<mrow><mi>D</mi><mrow><mo>(</mo><mi>T</mi><mo>,</mo><mi>S</mi><mo>)</mo></mrow><mo>=</mo><munderover><mi>&Sigma;</mi><mrow><mi>t</mi><mo>=</mo><mn>1</mn></mrow><mi>N</mi></munderover><msup><mrow><mo>(</mo><msub><mi>T</mi><mi>t</mi></msub><mo>-</mo><msub><mi>S</mi><mi>t</mi></msub><mo>)</mo></mrow><mn>2</mn></msup><mo>/</mo><mrow><mo>(</mo><msub><mi>T</mi><mi>t</mi></msub><mo>+</mo><msub><mi>S</mi><mi>t</mi></msub><mo>)</mo></mrow></mrow>]]></math><img file="FDA0000530135910000021.GIF" wi="748" he="178" /></maths>T是测试集的联合直方图,S是训练集的联合直方图,N是直方图值的分数,T<sub>t</sub>是测试集直方图中取t的个数,S<sub>t</sub>是训练集直方图中取t的个数;S2;选取S1计算的测试集与训练集每一类表情的每一张图像的最小卡方距离作为这一类表情的第一最终卡方距离d<sub>i</sub>′<sub>,j</sub>,i是表情的显著区域,i=1,2,j是表情的类别数目,j=1,2,…,N;S3:用下式对所有的第一最终卡方距离d<sub>i</sub>′<sub>,j</sub>进行归一化:<maths num="0002" id="cmaths0002"><math><![CDATA[<mrow><msub><mi>d</mi><mrow><mi>i</mi><mo>,</mo><mi>j</mi></mrow></msub><mo>=</mo><mfrac><msubsup><mi>d</mi><mrow><mi>i</mi><mo>,</mo><mi>j</mi></mrow><mo>&prime;</mo></msubsup><mrow><munderover><mi>&Sigma;</mi><mrow><mi>j</mi><mo>=</mo><mn>1</mn></mrow><mi>N</mi></munderover><msubsup><mi>d</mi><mrow><mi>i</mi><mo>,</mo><mi>j</mi></mrow><mo>&prime;</mo></msubsup></mrow></mfrac></mrow>]]></math><img file="FDA0000530135910000022.GIF" wi="297" he="229" /></maths>上式中:i是表情的显著区域,i=1,2;j是表情的类别数目,j=1,2,…,N;归一化后得到的第二最终卡方距离d<sub>i,j</sub>∈[0,1),将第二最终卡方距离di,j由小到大排序;S4:构造指数函数<img file="FDA0000530135910000025.GIF" wi="465" he="71" />将归一化后的最终卡方距离d<sub>i,j</sub>作为x带入上述指数函数,完成归一化后的最终卡方距离d<sub>i,j</sub>到基本概率分配函数的映射;S5:定义证据i对类别μ<sub>j</sub>的基本概率分配函数为m<sub>i</sub>(μ<sub>j</sub>)<maths num="0003" id="cmaths0003"><math><![CDATA[<mrow><msub><mi>m</mi><mi>i</mi></msub><mo>=</mo><mrow><mo>(</mo><msub><mi>&mu;</mi><mi>j</mi></msub><mo>)</mo></mrow><mo>=</mo><mi>&beta;</mi><mo>&times;</mo><mrow><mo>(</mo><msup><mi>e</mi><mrow><mo>-</mo><mn>13</mn><msup><mrow><mo>(</mo><msub><mi>d</mi><mrow><mi>i</mi><mo>,</mo><mi>j</mi></mrow></msub><mo>+</mo><mn>0.06</mn><mo>)</mo></mrow><mn>2</mn></msup></mrow></msup><mo>+</mo><mn>0.05</mn><mo>)</mo></mrow></mrow>]]></math><img file="FDA0000530135910000026.GIF" wi="654" he="80" /></maths>其中:β为调节系数,使得<img file="FDA0000530135910000023.GIF" wi="479" he="126" />β取值范围为(0,0.8);S6:由S5的基本概率分配函数构造的不确定性分配函数m<sub>i</sub>(θ)如下:<maths num="0004" id="cmaths0004"><math><![CDATA[<mrow><msub><mi>m</mi><mi>i</mi></msub><mrow><mo>(</mo><mi>&theta;</mi><mo>)</mo></mrow><mo>=</mo><mn>1</mn><mo>-</mo><munderover><mi>&Sigma;</mi><mrow><mi>j</mi><mo>=</mo><mn>1</mn></mrow><mi>N</mi></munderover><msub><mi>m</mi><mi>i</mi></msub><mrow><mo>(</mo><msub><mi>&mu;</mi><mi>j</mi></msub><mo>)</mo></mrow></mrow>]]></math><img file="FDA0000530135910000024.GIF" wi="435" he="141" /></maths>此处i是表情的类别区域,j是表情的类别数目;S7:将显著区域一的基本概率分配值m<sub>1</sub>(μ<sub>j</sub>)与显著区域二的基本概率分配值m<sub>2</sub>(μ<sub>j</sub>)用D‑S合成法则融合,得到融合后的基本概率分配值m(μ<sub>j</sub>),最后得到融合后的不确定性分配值m(θ);步骤5:根据D‑S联合规则进行决策判断,得出最终判别结果。
地址 230009 安徽省合肥市屯溪路193号