听障儿童语言训练辅助系统及方法
【技术领域】
[0001]本发明涉及一种语言训练辅助系统及方法，具体地，涉及一种听障儿童语言训练辅助系统及方法。
【背景技术】
[0002]现有的技术主要是单纯捕捉声音，进行分析和反馈，没有针对发音技巧的指导；或者是主要针对语言理解、思维认知的训练，没有对单个发音进行练习；或者是部分的语言训练方法，但是没有系统的语言训练方法。
【发明内容】
[0003]针对现有技术中的缺陷，本发明的目的是提供一种听障儿童语言训练辅助系统及方法，其模拟传统的教学方式，将主流的教学方式结合到一起，可以提供发音技巧的指导，针对单个发音练习进行准确度反馈。
[0004]根据本发明的一个方面，提供一种听障儿童语言训练辅助系统，其特征在于，包括:
[0005]视频处理模块，用于调用电脑摄像头，以及家长录制或播放教学课程视频，将教学课程视频传送至服务器或从服务器获取教学课程视频；
[0006]服务器模块，存储录制的教学课程视频，对无线通信模块发送数据；
[0007]无线通信模块，接收来自服务器模块的网站页面信息的数据，获取网站页面信息的数据后，对其进行分析来得到有效数据，传递给信息处理模块，用于控制气息模拟模块的运作和声带振动模拟模块的运作；
[0008]信息处理模块，通过多线程设计对无线通信模块产生的通信线程、气息模拟模块产生的气息模拟线程以及声带振动模拟模块产生的声带振动模拟线程进行管理，从而使得各线程同时运行，保障无线通信模块在接收数据之后及时将数据传递给输出模块；
[0009]输出模块，首先对GP1进行配置，通过在选定的两个GP1 口输出PWM波来控制气息模拟模块的运作程度和声带振动模拟模块的运作程度，PWM波的占空比由无线通信模块的处理数据确定；
[0010]气息模拟模块，受信息处理模块控制，气息模拟模块进行转动；根据输出模块的控制，产生不同的转速，模拟不同发音时的口腔气流的大小；
[0011]声带振动模拟模块，受信息处理模块控制，声带振动模拟模块产生振动；根据输出模块的控制，产生不同的振动强度，模拟不同发音时声带振动的强弱；
[0012]语音准确度反馈模块，用于将由麦克风获取的听障儿童发声的音频输出到语音识别接口，接收反馈并转化为拼音，判断正误，产生学习记录，传输给数据记录模块；
[0013]数据记录模块，用于所有课程数据、学习记录的存储与处理，家长查看所记录的数据。
[0014]优选地，所述气息模拟模块采用风扇。
[0015]优选地，所述声带振动模拟模块采用振子ο
[0016]优选地，所述语音准确度反馈模块包括麦克风和语音识别接口。
[0017]优选地，所述无线通信模块、信息处理模块、输出模块、气息模拟模块、声带振动模拟模块构成硬件设备。
[0018]本发明还提供一种听障儿童语言训练辅助方法，其特征在于，其包括以下步骤:
[0019]步骤一，家长登录网站，选择语言训练课程；
[0020]步骤二，判断语言训练课程是否是录制过的教学视频，如果是录制过的教学视频，则执行步骤四；如果是未录制过的教学视频，则执行步骤三；
[0021]步骤三，若该语言训练课程是未录制过的教学视频，则通过视频处理模块进行教学视频的录制，录制完成的教学视频上传至服务器模块；
[0022]步骤四，语言训练课程录制完成，进入课程学习页面；课程学习页面左侧为家长录制的教学视频，右侧为摄像头实时捕捉的儿童学习画面；学习页面上还有课程相配套的文字、图片、拼音、发声舌形示意图；点击播放语言训练课程的教学视频；
[0023]步骤五，开启硬件设备，硬件设备中的无线通信模块向服务器模块发送指令请求，请求获取网站页面信息的数据；
[0024]步骤六，当语言训练课程的教学视频播放时，无线通信模块接收到来自服务器模块的网站学习页面信息的数据，分析得到有效数据，传递给信息处理模块，用于控制气息模拟模块的运作和声带振动模拟模块的运作；
[0025]步骤七，硬件设备中的信息处理模块将无线通信模块接收到的数据传递给控制气息模拟模块、声带振动模拟模块，同时控制控制气息模拟模块的运作、声带振动模拟模块的运作；同时传递数据给输出模块，输出模块控制气息模拟模块的运作程度和声带振动模拟模块的运作程度；
[0026]步骤八，听障儿童手持硬件设备，感受硬件设备根据视频的内容产生相应的振动和气流，结合网站页面上文字、图片、舌型以及视频中的口型和声音，练习发声；
[0027]步骤九，由语音准确度反馈模块捕捉儿童声音，进行语音识别和分析，以拼音形式反馈在学习页面，和正确的发音拼音进行比较，得出准确度，以小星星形式评分反馈；
[0028]步骤十，数据记录模块记录儿童学习得分和课程数据。
[0029]优选地，所述评分的规则为两个字的课程，两字均发音错误，评为零颗小星星；发对部分音节，评为一颗小星星；发对一字，评为二颗小星星；两字均发音正确，评为三颗小星星。
[0030]与现有技术相比，本发明具有如下的有益效果，(I)本发明可以让听障儿童感受到模拟的声带振动过程，代替传统人为教学环节，减轻父母等教学压力，提高语言训练效率。
(2)本发明可以让听障儿童感受并学习不同发音时的口腔气流变化，代替传统人为教学环节，减轻父母等教学压力，提高语言训练效率。(3)本发明可以提供实时发音反馈，代替传统人为反馈，减轻父母等教学压力，提高学习效率。
【附图说明】
[0031]通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显，
[0032]图1为本发明听障儿童语言训练辅助系统的原理框图。
[0033]图2为本发明听障儿童语言训练辅助方法的流程图。
【具体实施方式】
[0034]下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明，但不以任何形式限制本发明。应当指出的是，对本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进。这些都属于本发明的保护范围。
[0035]如图1所示，本发明听障儿童语言训练辅助系统包括:
[0036]视频处理模块101，用于调用电脑摄像头，以及家长录制或播放教学课程视频，将教学课程视频传送至服务器102或从服务器102获取教学课程视频；
[0037]服务器模块102，存储录制的教学课程视频，对无线通信模块201发送数据；
[0038]无线通信模块201，接收来自服务器模块102的网站页面信息的数据，获取网站页面信息的数据后，对其进行分析来得到有效数据，传递给信息处理模块202，用于控制气息模拟模块204和声带振动模拟模块205的运作；
[0039]信息处理模块202，通过多线程设计对无线通信模块201产生的通信线程、气息模拟模块204产生的气息模拟线程以及声带振动模拟模块205产生的声带振动模拟线程进行管理，从而使得各线程同时运行，保障无线通信模块201在接收数据之后及时将数据传递给输出模块203 ；
[0040]输出模块203，首先对 GP1(General Purpose Input Output，通用输入 / 输出)进行配置，通过在选定的两个GP1 口输出PWM(脉宽调制)波来控制气息模拟模块204的运作程度和声带振动模拟模块205的运作程度，PWM波的占空比由无线通信模块201的处理数据确定；
[0041 ] 气息模拟模块204，气息模拟模块204可以采用风扇，受信息处理模块202控制，风扇进行转动；根据输出模块203的控制，产生不同的转速，模拟不同发音时的口腔气流的大小；
[0042]声带振动模拟模块205，声带振动模拟模块205可以采用振子，受信息处理模块202控制，振子产生振动；根据输出模块203的控制，产生不同的振动强度，模拟不同发音时声带振动的强弱；
[0043]语音准确度反馈模块103，用于对听障儿童发声的音频进行语音识别和正误判断反馈，具体来说，用于将由麦克风获取的听障儿童发声的音频输出到语音识别接口，接收反馈并转化为拼音，判断正误，产生学习记录，传输给数据记录模块104 ;语音准确度反馈模块103包括麦克风和语音识别接口 ；
[0044]数据记录模块104，用于所有课程数据、学习记录等数据的存储与处理，家长可以查看所记录的数据。
[0045]其中，无线通信模块201、信息处理模块202、输出模块203、气息模拟模块204、声带振动模拟模块205构成硬件设备。
[0046]如图2所示，本发明听障儿童语言训练辅助方法包括以下步骤，
[0047]SI，家长登录网站，选择语言训练课程；
[0048]S2，判断语言训练课程是否是录制过的教学视频，如果是录制过的教学视频，则执行步骤S4 ;如果是未录制过的教学视频，则执行步骤S3 ;
[0049]S3，若该语言训练课程是未录制过的教学视频，则通过视频处理模块101进行教学视频的录制，录制完成的教学视频上