基于视频与三维路径规划的手语标准化训练学方法

摘要

本发明为一种基于视频与三维路径规划的手语标准化训练学方法，其根据有关国家标准，真人录制标准手语各部分视频模块，在录制视频的同时，采用三维动作捕捉系统对手语手势进行三维动画采集，通过动作捕捉系统采集到的手势图像，显示出手势变化的过程，即手势变化的轨迹，该轨迹能够以慢动作方式显示出来，从而实现手势的路径规划，聋哑人及学者通过视觉直观看到显示屏幕上文字对应的手势，并根据该手势的三维动作轨迹的变化，纠正自己的手势，一边模仿一边练，最终达到标准手语手势。本发明通过逼真的三维动作路径规划可以充分指导聋哑人进行标准手语训练和学，让聋哑人循序渐进的从字到词、句进行练和纠正，达到自主学。

主权项

一种基于视频与三维路径规划的中国手语标准化训练学习方法，其特征在于：根据中华人民共和国国家标准《GB/T24435‑2009中国手语基本手势》，真人录制标准手语各部分视频模块；在录制视频的同时，采用三维动作捕捉系统对手语手势进行三维动画采集，通过动作捕捉系统采集到的手势图像，能够显示出手势变化的过程，即手势变化的轨迹，该轨迹能够以慢动作方式显示出来，从而实现手势的路径规划，聋哑人及学习者通过视觉直观看到显示屏幕上文字对应的手势，并根据该手势的三维动作轨迹的变化，纠正自己的手势，一边模仿一边练习，最终达到标准手语手势的程度，三维动作轨迹的变化，能够解决了聋哑人及学习者看不清视频内容或者视频中手势变化复杂、过快等问题；对于手语的地方方言学习者，可以根据视频和三维动作轨迹的变化，改正自己的手语手势的不标准打法，最终达到纠正的目的，具体操作步骤是：a、根据中华人民共和国国家标准《GB/T24435‑2009中国手语基本手势》‑‑中国手语规范性附录，真人录制标准手语视频，形成基本的标准中国手语可视化视频模块；可视化手语视频模块包括：1）可视化手语视频“字”单元模块；2）可视化手语视频“词”单元模块；3）可视化手语视频“短”语单元模块；4）可视化手语视频“简单句子”单元模块；b、根据中国标准手语字、词、短语、简单句子的可视化手语视频模块，应用三维动作捕捉技术，通过三维动作捕捉系统，对手语手势进行三维动作捕捉，分步建立与a步骤可视化视频模块相匹配的手势的三维动作轨迹，即路径规划模块，包括：1）可视化手语视频规划“字”单元模块；2）可视化手语视频规划“词”单元模块；3）可视化手语视频规划“短语”单元模块；4）可视化手语视频规划“简单句子”单元模块；c、采用计算机及现代教育技术，将以上“标准中国手语可视化手语视频模块”和“中国标准手语路径规划模块”两个数据库内容分别进行剪辑、编辑，形成一个完整的基于视频与三维路径规划的中国手语标准化训练学习库，分为高级、中级、初级三个等级，分别装载各自不同级别的单元内容，并包括纠正手法的内容，最终形成一个训练平台；d、聋哑人及学习者可以通过“中国手语标准化训练学习库”的电脑进入该训练平台，进行学习和训练 ，包括纠正手法，让聋哑人循序渐进的从字到词、句进行标准练习和纠正，而且能够自主学习，达到中国手语手势标准化目的 ；对于手语的地方方言学习者，通过视频可以清楚的看到标准手语的打法，同时可以根据手语手势的三维路径轨迹的变化进行学习纠正，通过逼真的三维动画路径规划可以充分指导聋哑人进行中国标准手语训练和学习，让聋哑人循序渐进的从字到词、句进行标准练习和纠正，而且能够自主学习，由于采用的是中国标准手语，推进了手语的无障碍交流，以及国际化交流；e、中国手语标准化，达到无障碍交流。