一种基于眨眼动作的人机交互方法及系统

摘要

本发明涉及人机交互技术领域，提供了一种基于眨眼动作的人机交互方法，实现用户对电子设备的操作，包括：通过摄像头获取人脸图像；对图像进行人眼区域检测，根据检测到的人眼区域对瞳孔中心进行定位；跟踪瞳孔中心位置；检测眨眼动作，根据检测到的眨眼动作发送相应的控制命令给电子设备。本发明还提供了一种基于眨眼动作的人机交互系统。本发明通过摄像头和眼睛检测技术，实现眨眼动作的判断，通过眨眼发出控制命令实现对电子设备的操作，使用户对电子设备的操作简单方便。

主权项

一种基于眨眼动作的人机交互方法，实现用户对电子设备的操作，其特征在于，包括：S1、通过摄像头获取人脸图像；S2、对所述图像进行人眼区域检测，根据检测到的人眼区域对瞳孔中心进行定位；S3、跟踪瞳孔中心位置；S4、检测眨眼动作，根据检测到的眨眼动作发送相应的控制命令给电子设备；其中，所述跟踪瞳孔中心位置的步骤具体包括：以步骤S2得到的瞳孔中心作为中心初始化搜索窗口；通过摄像头获取下一帧人脸图像；在下一帧人脸图像中的搜索窗口中对瞳孔中心进行定位；所述根据检测到的人眼区域对瞳孔中心进行定位的步骤和在下一帧人脸图像中的搜索窗口中对瞳孔中心进行定位的步骤均包括：定义眼睛的等照度线；计算眼睛的等照度线曲率，得到眼睛的等照度曲线图；计算等照度曲线图中满足等照度线曲率的圆的中心；所述计算等照度曲线图中满足等照度线曲率的圆的中心的步骤具体包括：计算等照度线的中心的位移矢量；采用投票法将所述位移矢量映射到累加器中形成等照度线中心图；将累加器与高斯核作卷积运算，使每个位移矢量均形成一个单一的中心估计；计算每个位移矢量的权重，选取权重值较大的位移矢量对应的等照度线作为特定等照度线；选取等照度线中心图中特定等照度线中心附近的较强响应区内的候选响应中强度最大的点作为瞳孔中心。