基于视觉的手势遥控系统

摘要

本发明公开了一种基于视觉的手势遥控系统，该基于视觉的手势遥控系统包括：图像捕获设备，用于捕获对象的一系列图像；手势识别设备，用于从图像捕获设备所捕获的一系列图像识别对象的手势并将识别结果发送给操作命令触发设备；以及操作命令触发设备，用于根据从手势识别设备发送来的识别结果来触发预定操作命令。所述手势识别设备包括：手检测部件，用于从图像捕获设备所捕获的图像检测对象的手；手跟踪部件，用于在当手检测部件在一图像中检测到对象的手时，在接下来的图像中跟踪对象的手；手势识别部件，用于根据手检测部件检测到的对象的手和手跟踪部件跟踪到的对象的手来确定对象的手的运动并根据所确定的对象的手的运动来识别对象的手势。

主权项

一种基于视觉的手势遥控系统，包括：图像捕获设备，所述图像捕获设备用于捕获对象的一系列图像；手势识别设备，所述手势识别设备用于从所述图像捕获设备所捕获的一系列图像识别对象的手势并将识别结果发送给操作命令触发设备；以及操作命令触发设备，所述操作命令触发设备用于根据从所述手势识别设备发送来的识别结果来触发预定操作命令，其中，所述手势识别设备包括：手检测部件，所述手检测部件用于从所述图像捕获设备所捕获的图像检测对象的手；手跟踪部件，所述手跟踪部件用于在当所述手检测部件在一图像中检测到对象的手时，在接下来的图像中跟踪对象的手；手势识别部件，所述手势识别部件用于根据所述手检测部件检测到的对象的手和所述手跟踪部件跟踪到的对象的手来确定对象的手的运动并根据所确定的对象的手的运动来识别对象的手势，其中，所述手跟踪部件通过如下处理来跟踪对象的手：利用在前一图像中检测或跟踪到的手的范围以及当前图像的肤色图像与前一图像的肤色图像之间的差分图像，来初始定义当前图像的肤色图像中的用于跟踪手的搜索范围；执行模板匹配法以确定作为跟踪到的当前图像的手的范围，其中，所述模板匹配法包括：在搜索范围中定义多个第一候选手范围，该些第一候选手范围具有与目标模板的大小相同的大小，并且，在差分图像中定义第二候选手范围，该候选手范围具有与目标模板的大小相同的大小，其中，所述目标模板为在前一图像中检测或跟踪到的手的范围；针对所述多个第一候选手范围循环执行如下步骤直到这多个第一候选手范围都经过如下匹配判断处理为止，从而确定出与目标模板最匹配的候选手范围作为在当前图像的肤色图像中跟踪到的手的范围：计算一个第一候选手范围与目标模板的各像素的绝对差的平均值作为第一误差；如果该第一误差大于第一预定阈值，则表示该个候选手范围不与目标模板匹配，从而被排除；如果该第一误差小于第一预定阈值，则计算第二误差，第二误差是通过将第一误差减去第二候选手范围的各像素的值的平均值所获得的值乘以预定的调节系数而得到的值；如果该第二误差小于第二预定阈值，则确定匹配，即该个第一候选手范围被确定为在当前图像的肤色范围中跟踪到的手的范围，并且第二误差的值作为第二阈值以便对下一个第一候选手范围进行匹配判断。