机器人的人脸检测与情感识别系统及方法

摘要

本发明公开了一种机器人的人脸检测及情感识别系统及方法，该系统包括：人脸表情库采集模块，利用视频采集装置采集大量人脸表情彩色图像帧，进行处理后生成人脸表情库；原始表情库构建模块,利用人脸表情库的训练图像，对训练图像去除图像冗余信息后进行表情特征提取，形成原始表情特征库；特征库重构模块，使用基于距离哈希法将原始表情特征库重构为结构化的哈希表；现场表情特征提取模块，利用视频采集装置采集现场人脸表情彩色图像帧，并进行现场表情特征提取；表情识别模块，将该现场表情特征模块提取的现场表情特征在重构后的特征库中利用k近邻分类算法来识别人脸表情，通过本发明，可提升家居机器人的家庭监控和陪护能力。

主权项

一种机器人的人脸检测及情感识别系统，至少包括：人脸表情库采集模块，利用视频采集装置采集大量人脸表情彩色图像帧，将其预处理后，利用人脸检测器、人眼检测器进行人脸检测与定位及人眼检测与定位并进行人脸旋转，最后利用人脸几何结构特征对表情区精确定位，生成存储用于表情特征提取的训练图像集的人脸表情库；原始表情库构建模块,利用人脸表情库的训练图像，对训练图像去除图像冗余信息后进行表情特征提取，并将表情特征保存为文件形成原始表情特征库；特征库重构模块，使用基于距离哈希法将原始表情特征库重构为结构化的哈希表；现场表情特征提取模块，从该视频采集装置采集现场人脸表情彩色图像帧进行预处理后，利用人脸检测器、人眼检测器进行人脸检测与定位及人眼检测与定位，并进行人脸旋转，利用人脸几何结构特征对表情区精确定位，生成现场人脸表情图像，并对现象人脸表情图像进行现场表情特征提取；表情识别模块，将该现场表情特征模块提取的现场表情特征在重构后的表情特征库中利用K近邻分类算法来识别人脸表情。