一种手语语音游戏互动系统的制作方法

本发明属于游戏领域，涉及一种手语语音游戏互动系统。

背景技术：

目前越来越多的线上游戏可以实现在线聊天功能，当前常用的游戏聊天为语音聊天和文字聊天，并且文字聊天信息不能转化为语音信息进行展示，语音聊天信息也不能转化为文字信息进行展示，对于认识字的正常游戏者来说现有的聊天系统已经可以满足线上互动的需求，但是对于聋哑人和不认识字的文盲来说，对方游戏者的文字信息可能并不认识，同时对方游戏者的语音信息无法听取，此时为游戏互动带来了大大的不便。

技术实现要素：

为了解决文盲已经聋哑游戏者线上聊天互动的问题，本发明提供了一种手语语音游戏互动系统，该系统可以实现文字信息和语音信息的互相转化，文字信息与手语信息的互相转化，语音信息和手语信息的相互转化，可以使文盲和聋哑游戏者能够正常的实现线上互动聊天，方便游戏互动。

本发明的目的可以通过以下技术方案实现：

一种手语语音游戏互动系统，包括聊天系统，所述聊天系统包括信息获取端、转化端和输出端；

所述信息获取端包括语音获取模块、文字获取模块和手语图像获取模块，所述转化端包括语音转化模块、文字转化模块和图像转化模块，所述输出端包括视频显示装置、语音显示装置、文字显示装置和手语符号显示装置，所述信息获取端将获取的语音、文字和手语信息通过转化端进行转化后，经过输出端输出，所述输出端为视频聊天窗口。

进一步地，所述转化端还包括警报模块，所述警报模块为闪光鸣笛警报器。

进一步地，所述语音获取模块包括麦克风和语音存储模块，所述麦克风对游戏者的语音进行实时采集、同步控制，语音存储模块用于实时存储、同步输出麦克风获取的语音信息，并对语音信息中的杂音做初步处理。

进一步地，所述手语图像获取模块包括摄像头和图像存储模块，所述摄像头为360度无死角摄像头，可以对游戏者的手语进行实时、全面的采集，图像存储模块可以对摄像头采集的视频图像进行缓存，并对缓存的图像进行初步光线校正。

进一步地，所述语音转化模块包括语音对比库和同步语音转换器，所述图像转化模块包括手语符号对比库和手语翻译器，所述文字转化模块为文本朗读器。

进一步地，所述视频聊天窗口包括视频显示装置、语音显示装置、文字显示装置、手语符号显示装置，所述视频显示装置为视频显示器，语音显示装置包括听筒和语音按钮，文字显示装置包括文字按钮和文字显示框，手语符号显示装置包括手语符号按钮和手语符号显示框。

进一步地，所述信息获取端将获取的语音、文字和手语信息通过转化端进行转化的步骤和经过输出端输出的步骤为：

s1：所述语音存储模块中的语音信息与语音对比库中的语音进行对比，然后通过同步语音转换器将对比得到的语音信息转化为文字信息，所述图像存储模块中的手语图像信息与手语符号对比库中的手语进行比较，然后通过手语翻译器将手语信息转化为文字信息或者语音信息，经过对比后的语音信息和手语信息无法转化时会启动警报模块，警示游戏者重新输入；

s2：所述文字存储模块中存储的文字信息和语音转化的文字信息通过手语翻译器转化为手语符号，文字存储模块中存储的文字信息和手语翻译器翻译的文字信息通过文本朗读器转化为语音信息；

s3：所述文字信息通过控制文字显示装置中的文字按钮直接在文字显示框中显示，手语符号通过控制手语符号按钮直接在手语符号显示框中显示，语音信息通过直接控制语音按钮在听筒中播放，同时视频显示器可以直接显示游戏者的图像以及手语游戏者的手语信息。

本发明的有益效果：

本发明的聊天系统可以通过麦克风获得语音信息，语音信息在语音存储模块中实时存储并同步输出，同时语音存储模块对语音信息中的杂音做初步处理，使处理后的语音信息更易分辨，然后可以直接通过语音显示装置进行显示，同时处理后的信息方便与语音对比库进行对比，然后对比后的语音信息经过同步语音转换器转化为文字信息，文字信息可以直接输出也可以通过手语翻译器转化为是手语符号输出，方便聋哑游戏者辨识。

本发明的聊天系统也可以通过摄像头采集手语图像信息，图像信息在图像存储模块中实时存储并同步输出，同时图像存储模块对图像信息进行初步光线校正，使图像信息更加清晰，然后可以通过视频显示装置进行显示，同时处理后的图像信息也可以与手语符号对比库进行对比，然后对比后的图像信息经过手语翻译器转化为文字信息，文字信息可以直接输出，也可以通过语音朗读器转化为语音信息输出，方便聋哑已经文盲游戏者辨识。

本发明的聊天系统在输出模块中还包含了警报模块，麦克风采集的语音信息和摄像头采集的手语图像信息经过处理后，与语音对比库和手语符号对比库无法清晰对比时，警报模块中的闪光鸣笛警报器就会发出警报，警告游戏者继续输入。

附图说明

下面结合附图对本发明作进一步的说明。

图1是本发明手语语音游戏互动系统示意图；

图2是本发明手语语音游戏互动系统示意图；

具体实施方式

结合图1和图2对本发明的实施过程进行详细说明：

一种手语语音游戏互动系统，包括聊天系统，所述聊天系统包括信息获取端、转化端和输出端；

所述信息获取端包括语音获取模块、文字获取模块和手语图像获取模块，所述转化端包括语音转化模块、文字转化模块和图像转化模块，所述输出端包括视频显示装置、语音显示装置、文字显示装置和手语符号显示装置，所述信息获取端将获取的语音、文字和手语信息通过转化端进行转化后，经过输出端输出，所述输出端为视频聊天窗口，所述转化端连接警报模块，所述警报模块为闪光鸣笛警报器；

所述语音获取模块包括麦克风和语音存储模块，所述麦克风对游戏者的语音进行实时采集、同步控制，语音存储模块用于实时存储、同步输出麦克风获取的语音信息，并对语音信息中的杂音做初步处理，所述文字获取模块包括键盘和文字存储模块，所述文字存储模块用于实时存储、同步输出键盘输入的文字，所述手语图像获取模块包括摄像头和图像存储模块，所述摄像头为360度无死角摄像头，可以对游戏者的手语进行实时、全面的采集，图像存储模块可以对摄像头采集的视频图像进行缓存，并对缓存的图像进行初步光线校正；

所述语音转化模块包括语音对比库和同步语音转换器，所述图像转化模块包括手语符号对比库和手语翻译器，经过对比后的语音信息和手语信息无法转化时会启动警报模块，警示游戏者重新输入，所述文字转化模块为文本朗读器，语音存储模块中的语音信息与语音对比库中的语音进行对比，然后通过同步语音转换器将对比得到的语音信息转化为文字信息，图像存储模块中的手语图像信息与手语符号对比库中的手语进行比较，然后通过手语翻译器将手语信息转化为文字信息或者语音信息，文字存储模块中存储的文字信息和语音转化的文字信息可以通过手语翻译器转化为手语符号，文字存储模块中存储的文字信息和手语翻译器翻译的文字信息可以通过文本朗读器转化为语音信息；

所述视频聊天窗口包括视频显示装置、语音显示装置、文字显示装置、手语符号显示装置，所述视频显示装置为视频显示器，语音显示装置包括听筒和语音按钮，文字显示装置包括文字按钮和文字显示框，手语符号显示装置包括手语符号按钮和手语符号显示框；所述文字信息通过控制文字显示装置中的文字按钮直接在文字显示框中显示，对于认识字的游戏者可以直接辨识，手语符号通过控制手语符号按钮直接在手语符号显示框中显示，语音信息通过直接控制语音按钮在听筒中播放，同时视频显示器可以直接显示游戏者的图像，如果懂手语可以通过视频直接观看对方游戏者的手语，如果没有摄像头可以通过手语符号直接与对方游戏者交流，也可以通过文字或者语音交流，适用于聋哑人以及文盲。

以上内容仅仅是对本发明结构所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的结构或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。