一种听力障碍通信方法及装置与流程

本发明涉及电子设备技术领域，特别是涉及一种听力障碍通信方法及装置。

背景技术：

听力障碍者一般使用手语与其他人进行交流，但手语需要长期学习并且交流效率低，限制了听力障碍者的日常交流。

为了解决听力障碍者的正常交流，现有存在两种技术，一种是通过可视层面上的唇语识别方式，另一种是通过可听层面上的骨传导的方式。

虽然上述两种方式能够解决听力障碍者的正常交流问题，但二者仅仅从一个方面(如可视层面，或者可听层面)解决听力障碍者的正常交流问题，在处理过程中会产生信息传输错误，影响听力障碍者的交流。

技术实现要素：

本发明实施例所要解决的技术问题是提供一种听力障碍通信方法及装置，能够提高信息传输的全面性和准确性，提高用户体验。

本发明通过以下技术方案解决上述技术问题：

本发明一方面提供一种听力障碍通信方法，包括：

对当前唇语特征信息进行编码解析得到查询信息，其中，所述查询信息是用于服务器查询数据库的查询条件；

将所述查询信息发送给服务器；

根据服务器发送的振动电流信息产生对应的颅骨振动。

进一步的，所述唇语特征信息通过唇语视频中的唇语特征信息图片获得。

进一步的，所述对当前唇语特征信息进行编码解析得到查询信息包括：

将当前唇语特征信息转换为二进制码流；

根据所述二进制码流确定查询信息。

进一步的，还包括：

接收唇语特征信息，将所述唇语特征信息发送给服务器。

进一步的，还包括：

当未接收到服务器发送的振动电流信息时，存储当前唇语特征信息，将当前唇语特征信息发送给服务器。

本发明另一方面提供一种听力障碍通信方法，包括：

根据客户端发送的查询信息查询对应的振动电流信息；其中，所述查询信息是用于服务器查询数据库的查询条件；

将所述振动电流信息发送给客户端。

进一步的，还包括：

根据所述唇语特征信息建立查询数据库。

进一步的，当未查询到对应的振动电流信息时，接收客户端发送的当前唇语特征信息，根据所述当前唇语特征信息更新查询数据库。

本发明还提供一种听力障碍通信装置，包括：

解析模块，用于对当前唇语特征信息进行编码解析得到查询信息；

第一发送模块，用于将所述查询信息发送给服务器；

振动模块，用于根据服务器发送的振动电流信息产生对应的颅骨振动。

本发明还提供另一种听力障碍通信装置，包括：

查询模块，用于根据客户端发送的查询信息查询对应的振动电流信息；

第二发送模块，用于将所述振动电流信息发送给客户端。

本发明提供的听力障碍通信方法及装置，将唇语识别和骨传导两种技术通过数据库查询映射方式结合在一起。通过唇语识别输出当前唇语特征信息，并将当前唇语特征信息作为查询条件，查询服务器数据库，输出对应的振动电流信号，将该电流信号输入到骨传导设备，由骨传导设备根据输入的电流信号，转换为振动模型，通过颅骨振动，传入大脑听力中枢，使听力障碍者可以听到声音。相较于现有技术，具有信息传输全面、精准、易于操作的优点。

附图说明

图1示出本发明实施例提供的一种听力障碍通信方法的流程图；

图2示出本发明实施例提供的一种听力障碍通信装置的结构示意图；

图3示出本发明实施例提供的另一种听力障碍通信装置的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面对本发明中的技术方案进行清楚、完整的描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下，所获得的所有其他实施例，都属于本发明保护的范围。

本发明提供的听力障碍通信方法及装置，将唇语识别和骨传导两种技术通过数据库查询映射方式结合在一起。通过唇语识别输出当前唇语特征信息，并将当前唇语特征信息作为查询条件，查询服务器数据库，输出对应的振动电流信号，将该电流信号输入到骨传导设备，由骨传导设备根据输入的电流信号，转换为振动模型，通过颅骨振动，传入大脑听力中枢，识别为声音。

下面通过实施例来说明本发明的具体实现方式。

本发明提供的一种听力障碍通信方法，如图1所示，该方法包括：

s101、客户端对当前唇语特征信息进行编码解析得到查询信息，将所述查询信息发送给服务器；

在实施本步骤之前，客户端可以采集大量的唇语特征信息发送给服务器，服务器根据这些唇语特征信息预先建立查询数据库。

其中，所述唇语特征信息通过唇语视频中的唇语特征信息图片获得。例如可以通过摄像头采集对方说话的唇语频信息，即口型视频信息，然后将唇语视频信息解析成唇语特征信息图片。

示例性的，所述对当前唇语特征信息进行编码解析得到查询信息包括：

s11、将当前唇语特征信息转换为二进制码流；

例如人说话发出“我”的口型，则将“我”的口型的特性图标进行编码生成二进制码流101010010101110001…

s12、根据所述二进制码流确定查询信息。

其中，所述查询信息是用于服务器查询数据库的查询条件。

例如：

s102、服务器根据客户端发送的查询信息查询对应的振动电流信息；将所述振动电流信息发送给客户端。

本步骤中，如果查询到对应的振动电流信息，则服务器将对应的振动电流信息返回给客户端。其中，振动电流信息为二进制码流，用0和1表示。“我”的口型对应的二进制码流为11000110，服务器将二进制码流11000110发送给客户端。

如果未查询到对应的振动电流信息时，客户端存储当前唇语特征信息，将当前唇语特征信息发送给服务器。服务器接收客户端发送的当前唇语特征信息，根据所述当前唇语特征信息更新查询数据库。

其中，客户端可以将当前唇语特征信息实时发送器服务器进行查询数据库的更新，客户端也可以将当前唇语特征信息存储到预设容量值后一起发送给服务器，或者，客户端也可以将间隔预设时间将存储的当前唇语特征信息发送给服务器。

s103、客户端根据服务器发送的振动电流信息产生对应的颅骨振动。

客户端根据振动电流信息的二进制码流改变线圈电流强度，驱动振动模型，产生对应的物理颅骨振动。颅骨振动通过颅骨、骨迷路、内耳淋巴液、螺旋器、听神经到达大脑皮层听觉中枢，就可以让使听力障碍者听到声音。实现本发明的听力障碍通信方法。

本发明实施例提供的听力障碍通信方法，将唇语识别和骨传导两种技术通过数据库查询映射方式结合在一起。通过唇语识别输出当前唇语特征信息，并将当前唇语特征信息作为查询条件，查询服务器数据库，输出对应的振动电流信号，将该电流信号输入到骨传导设备，由骨传导设备根据输入的电流信号，转换为振动模型，通过颅骨振动，传入大脑听力中枢，使听力障碍者 可以听到声音。相较于现有技术，具有信息传输全面、精准、易于操作的优点。

基于与上述方法实施例相同的构思，本发明还提供一种听力障碍通信装置。所述听力障碍通信装置具体可以是包含振动贴片的耳机、听筒、手环等的可穿戴设备，其中，振动贴片可以附着在听力障碍者身体的不同部位。

如图2所示，该听力障碍通信装置2包括：

唇语识别模块20，用于采集当前唇语特征信息，

解析模块21，用于对当前唇语特征信息进行编码解析得到查询信息；

第一发送模块22，用于将所述查询信息发送给服务器；

振动模块23，用于根据服务器发送的振动电流信息产生对应的颅骨振动。

第三发送模块24，用于当未接收到服务器发送的振动电流信息时，存储当前唇语特征信息，将当前唇语特征信息发送给服务器。

本发明还提供另一种听力障碍通信装置，该听力障碍通信装置具体是服务器。如图3所示，该听力障碍通信装置3包括：

创建模块30，用于根据客户端发送的唇语特征信息建立查询数据库；

查询模块31，用于根据客户端发送的查询信息查询对应的振动电流信息；

第二发送模块32，用于将所述振动电流信息发送给客户端。

更新模块33，用于接收客户端发送的当前唇语特征信息，根据所述当前唇语特征信息更新查询数据库。

本发明实施例还提供一种听力障碍通信系统，包括如图2所示的听力障碍通信装置2和如图3所示的听力障碍通信装置3。

本发明实施例提供的听力障碍通信装置，将唇语识别和骨传导两种技术通过数据库查询映射方式结合在一起。通过唇语识别输出当前唇语特征信息，并将当前唇语特征信息作为查询条件，查询服务器数据库，输出对应的振动电流信号，将该电流信号输入到骨传导设备，由骨传导设备根据输入的电流信号，转换为振动模型，通过颅骨振动，传入大脑听力中枢，使听力障碍者可以听到声音。相较于现有技术，具有信息传输全面、精准、易于操作的优点。

本领域技术人员可以理解，可以用计算机程序指令来实现这些结构图和/或框图和/或流程图中的每个框以及这些结构图和/或框图和/或流程图中的框图的组合。可以将这些计算机程序指令提供给可编程数据处理方法的处理器来生成机器，从而通过可编程数据处理方法的处理器来执行的指令创建用于实现结构图和/或框图和/或流程图的框或多个框中指定的方法。

需要说明的是：本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。

以上对本发明所提供的一种听力障碍通信方法及装置，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。