一种基于达芬奇技术的手语识别翻译方法

摘要

本发明提出一种基于达芬奇技术的手语识别翻译方法，所述方法包括以下步骤：采集手语者的动作视频；在前景图像中提取肤色块；计算提取到的肤色块的深度信息，并根据肤色块的深度信息对脸部区域进行定位；根据肤色块的深度信息对手部进行定位并提取关键帧并修补填充肤色块；提取关键帧的一种或多种手型特征；根据提取的手型特征，使用单个分类器进行分类或者使用多个分类器进行投票表决，得到静态手势识别结果；对手势的运动轨迹进行识别，得到轨迹识别结果；对静态手势识别结果和轨迹识别结果进行纠错与拼接，得到手语的识别翻译结果。本发明具有识别率高、实时性强的优点。

主权项

一种基于达芬奇技术的手语识别翻译方法，其特征在于，所述方法包括以下步骤：S1：采集手语者的动作视频，对视频流建立背景，当前帧与背景作差得到前景图像；S2：在前景图像中提取肤色块；S3：计算提取到的肤色块的深度信息，并根据肤色块的深度信息对脸部区域进行定位；S4：根据肤色块的深度信息对手部进行定位并提取关键帧，并对关键帧的手部区域肤色块进行修补填充，所述关键帧为手部在一个区域内停留达到预设帧数的帧；S5：提取关键帧的一种或多种手型特征；S6：根据提取的手型特征，使用单个分类器进行分类或者使用多个分类器进行投票表决，得到静态手势识别结果；S7：对手势的运动轨迹进行识别，得到轨迹识别结果；S8：对静态手势识别结果和轨迹识别结果进行纠错与拼接，得到手语的识别翻译结果。