一种基于单目视频序列的目标人手势交互方法

摘要

本发明提出了一种基于单目视频序列的目标人手势交互方法，首先获取单目视频帧序列图像，并使用运动检测算法提取运动前景掩膜，使用手掌分类器检测手掌最小外接矩形框并甄选出目标人手掌；从目标人手掌图像中提取颜色直方图模型，计算目标人手掌图像的反向投影图，统计目标人手掌的面积模型；对跟踪到的目标区域，使用颜色模型计算反向投影图，并计算当前帧目标人手的面积，以判断目标人手的静止姿态：拳头或者手掌；使用拳头和手掌两种姿态进行点击或者移动交互控制。本发明可在复杂背景下进行目标人手甄选，完成任意手形的跟踪和任意预设轨迹的识别，可以在低运算能力的嵌入式平台上得以应用，简单、快速而稳定。

主权项

一种基于单目视频序列的目标人手势交互方法，其特征在于，包括如下步骤：S1：交互系统启动前，进行目标人手掌甄选过程：获取单目视频帧序列图像，使用运动检测算法提取运动前景掩膜，使用手掌分类器检测手掌最小外接矩形框，根据前景掩膜MaskFG和手掌最小外接矩形框的重叠情况，甄选出目标人手掌；S2：目标人手掌特征建模过程：从目标人手掌图像中提取颜色直方图模型，使用颜色直方图模型，计算目标人手掌图像的反向投影图，统计目标人手掌的面积模型；S3：目标人手掌跟踪过程：使用人手目标跟踪算法以上一帧人手掌位置为初始位置进行跟踪，找到当前帧中的目标人手掌位置，如果检测不到人手掌，则综合使用颜色模型的反向投影图和运动前景掩膜进行人手掌的跟踪；S4：目标人手掌识别过程：包括运动轨迹识别过程、建立映射坐标系和静态手势识别过程；S5：人机交互过程：使用拳头和手掌两种姿态进行点击或者移动交互控制。