一种手语语音双向翻译系统

摘要

本发明涉及基于传感技术和模式识别技术的肢体动作识别技术以及语音识别技术，属于传感技术和惯性信号处理、语音处理技术领域，特指一种手语语音双向翻译系统，其以微惯导传感器网络和手语动作分类器为核心，通过安装在聋哑人手指、手臂以及头部的传感器，检测聋哑人做出的手语动作，并正确识别，然后将其代表的含义通过语音和发声系统连贯的表达出来，以达到让正常人“看懂”手语的效果；同时，正常人的语言可以被翻译成特定的连贯的手语动作，并以动画或视频的形式显示出来，以达到聋哑人间接“听到”正常人说话的效果。该系统有效解决了聋哑人与正常人双向交流的障碍，且廉价便携，有着巨大的社会效益和经济效益。

主权项

一种手语语音双向翻译系统，其特征在于，所述系统包括：基于微惯导传感的手语动作捕捉系统(1)、微惯导信号处理与分析系统(2)、一训练完整的手语动作特征分类器(3)、用来训练手语动作分类器(3)的手语动作特征数据库(0)、语音文字数据库(6)、视频/动画数据库(9)、语音信号采集系统(4)、语音分析系统(5)、发声系统(7)和显示系统(8)；其中：所述手语动作捕捉系统(1)与所述微惯导信号处理与分析系统(2)通信连接，所述手语动作分类器(3)分别与所述手语动作特征数据库(0)、微惯导信号处理与分析系统(2)、语音文字数据库(6)、视频/动画数据库(9)、显示系统(8)通信连接，所述语音文字数据库(6)还与所述语音分析系统(5)和视频/动画数据库(9)通信连接，所述语音信号采集系统(4)和发声系统(7)分别与所述语音分析系统(5)通信连接。