语障儿童语言训练辅助系统及方法

摘要

本发明提供了一种语障儿童语言训练辅助系统及方法，该系统包括：视频处理模块，用于调用平板电脑摄像头；服务器模块，存储录制的教学课程视频，对无线通信模块发送数据；无线通信模块，接收来自服务器模块的App页面信息的数据，获取App页面信息的数据后，对其进行分析来得到有效数据，传递给信息处理模块；信息处理模块，采用多线程设计，实现了无线通讯线程，运动控制和传感器数据采集线程，并实现线程间的通讯与同步，接受无线通信模块的数据，用于控制气息模拟模块、舌形模拟模块及颌骨模拟模块的运作，完成上位机软件运行与下位机硬件控制的结合等。本发明提供直观的学指导，通过游戏化的形式进行语言识别反馈，提高儿童训练的乐趣。

主权项

一种语障儿童语言训练辅助系统，其特征在于，包括：视频处理模块，用于调用平板电脑摄像头，以及家长录制或播放教学课程视频，将教学课程视频传送至服务器或从服务器获取教学课程视频；服务器模块，存储录制的教学课程视频，对无线通信模块发送数据；无线通信模块，接收来自服务器模块的App页面信息的数据，获取App页面信息的数据后，对其进行分析来得到有效数据，传递给信息处理模块；信息处理模块，采用多线程设计，实现了无线通讯线程，运动控制和传感器数据采集线程，并实现线程间的通讯与同步，接受无线通信模块的数据，用于控制气息模拟模块、舌形模拟模块及颌骨模拟模块的运作，完成上位机软件运行与下位机硬件控制的结合；舌形模拟模块，受信息处理模块控制，根据输入指令，该模块中的机构将发生相应的运动，从而模仿人说话时舌部的动作；颌骨模拟模块，受信息处理模块控制，根据输入指令，该模块中的机构将发生相应的运动，从而模仿人说话时颌骨的张开闭合的动作；气息模拟模块，受信息处理模块控制，根据输入指令，该模块中的机构会产生不同幅度的动作压缩空气，产生不同强弱的气流，从而模拟发音时口腔内的气流；传感器模块，测量模块安装位置的倾角以及加速度，获得不倒翁娃娃的位置信息，反馈给信息处理模块，信息处理模块再控制扬声器模块发声；扬声器模块，受信息处理模块控制，因不倒翁娃娃的倾角和加速度不同而发出不同的声音；语音准确度反馈模块，用于将由麦克风获取的语障儿童发声的音频输出到语音识别接口，接收反馈并转化为拼音，判断正误，产生学习记录，传输给数据记录模块；数据记录模块，用于所有课程数据、学习记录的存储与处理，家长查看所记录的数据。