一种人脸关键器官外轮廓特征点定位与跟踪的方法及装置

摘要

本发明公开了一种人脸关键器官外轮廓特征点定位与跟踪的方法及装置。首先获取人脸眼角点与嘴角点的位置；根据所述角点的位置确定出眼睛与嘴巴的中轴线；在所述眼睛的中轴线上确定眼睛和眉毛的外轮廓特征点，在所述嘴巴的中轴线上确定嘴巴外轮廓特征点。在此基础上，对人脸关键器官外轮廓特征点持续定位与跟踪。本发明实施例提供的方案，解决了在人脸做出各种姿态的时候对眼睛、嘴巴和眉毛外轮廓特征点定位不准确的问题，基于这些特征点的定位，可以实时驱动已有的二维和三维人脸模型，实时模拟摄像头前人的皱眉、眨眼、张嘴等表情和面部动作，生成各类真实生动的人脸动画。

主权项

一种人脸关键器官外轮廓特征点的定位方法，其特征在于，包括：获取输入人脸图像帧人脸眼角点位置；确定出眼睛的中轴线；根据眼睛外轮廓点边界强度大小，在所述中轴线上确定多个上下眼皮外轮廓特征点的候选点，并选取上眼皮外轮廓特征点的候选点与下眼皮外轮廓特征点的候选点组成多对候选点对；分别根据所述眼角点和每对候选点对，利用抛物线模型拟合出眼睛的外轮廓线，在所述外轮廓线上选取外轮廓点，计算所选外轮廓点的边界强度之和，得到与每对候选点对对应的和值；或者还计算每对候选点对之间各像素点灰度的均值，用所述和值减去所述均值，得到与每对候选点对对应的差值；将最大和值对应的候选点对作为人脸眼睛外轮廓特征点；或者将最大差值对应的候选点对作为人脸眼睛外轮廓特征点。