一种基于手持电子设备的语音信息交互方法及系统与流程

文档序号:15625878发布日期:2018-10-09 22:58阅读:238来源:国知局

本发明涉及手持电子设备技术领域,具体涉及一种基于手持电子设备的语音信息交互方法及系统。



背景技术:

手机等移动通讯设备的出现,使得人与人之间的沟通交流不再受限于时间和距离,给人们的生活带来了极大的便利。虽然在日常生活中人们可以随时通过手机进行语音信息的交互,但是,当人们位于特殊场景中(如工作环境中、培训大厅中等)时,通过手机播放语音信息容易带来干扰,如分散注意力、对他人带来噪声等。可见,如何减少播放语音信息所带来的干扰成为目前亟待解决的问题。



技术实现要素:

本发明实施例公开一种基于手持电子设备的语音信息交互方法及系统,能够减少播放语音信息所带来的干扰。

本发明实施例第一方面公开了一种基于手持电子设备的语音信息交互方法,所述方法包括:

移动终端检测是否存在需要播放的语音信息,当检测到存在所述语音信息时,将所述语音信息发送至与所述移动终端关联的手持电子设备;

所述手持电子设备接收所述移动终端发送的所述语音信息,并检测所述手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值;

当检测到所述第一预设位置处所受到的压力值大于所述预设压力值时,所述手持电子设备以预先启动的骨传导模式播放所述语音信息。

本发明实施例第二方面公开了一种基于手持电子设备的语音信息交互系统,所述系统包括移动终端以及与所述移动终端关联的手持电子设备,其中:

所述移动终端包括第一通信单元、第一检测单元;

所述手持电子设备包括第二通信单元、第二检测单元以及播放单元;

所述第一检测单元,用于检测是否存在需要播放的语音信息;

所述第一通信单元,用于当所述第一检测单元检测到存在所述语音信息时,将所述语音信息发送至与所述移动终端关联的手持电子设备;

所述第二通信单元,用于接收所述移动终端发送的所述语音信息;

所述第二检测单元,用于检测所述手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值;

所述播放单元,用于当所述第二检测单元检测到所述第一预设位置处所受到的压力值大于所述预设压力值时,以预先启动的骨传导模式播放所述语音信息。

本发明实施例第三方面公开了另一种手持电子设备,所述手持电子设备包括:

存储有可执行程序代码的存储器;

与所述存储器耦合的处理器;

所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的任意一种方法中的全部或部分步骤。

本发明实施例第四方面公开了一种计算机可读存储介质,其特征在于,其存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的任意一种方法中的全部或部分步骤。

本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比,本发明实施例具有以下有益效果:

本发明实施例中,移动终端检测是否存在需要播放的语音信息,当检测到存在该语音信息时,将语音信息发送至与移动终端关联的手持电子设备;手持电子设备接收该语音信息并检测手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值;当检测结果为是时,手持电子设备以预先启动的骨传导模式播放该语音信息。可见,实施本发明实施例,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放语音信息所带来的干扰。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种基于手持电子设备的语音信息交互方法的流程示意图;

图2是本发明实施例公开的另一种基于手持电子设备的语音信息交互方法的流程示意图;

图3是本发明实施例公开的又一种基于手持电子设备的语音信息交互方法的流程示意图;

图4是本发明实施例公开的一种基于手持电子设备的语音信息交互系统的结构示意图;

图5是本发明实施例公开的另一种基于手持电子设备的语音信息交互系统的结构示意图;

图6是本发明实施例公开的又一种基于手持电子设备的语音信息交互系统的结构示意图;

图7是本发明实施例公开的一种电磁笔的部分结构框图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

需要说明的是,本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开一种基于手持电子设备的语音信息交互方法及系统。以下分别进行详细说明。

实施例一

请参阅图1,图1是本发明实施例公开的一种基于手持电子设备的语音信息交互方法的流程示意图。其中,如图1所示,该基于手持电子设备的语音信息交互方法可以包括以下步骤:

101、移动终端检测是否存在需要播放的语音信息,当检测到存在该语音信息时,执行步骤102;反之,当检测到不存在该语音信息时,继续执行步骤101。

本发明实施例中,移动终端可以获取移动终端上所有已接收但未输出供用户查看的通信信息所形成的通信信息列表,其中,通信信息的类型可以是文字信息或者语音信息,并且该通信信息列表中的通信信息可以按照移动终端接收到通信信息的先后顺序由上至下依次排列。进一步的,移动终端还可以从通信信息列表中获取从上至下排列的预设数量的通信信息,并分析发送预设数量的通信信息的各个终端设备与该移动终端之间的联系等级,以及选择与该移动终端的联系等级最高的目标终端设备发送的通信信息作为目标通信信息,并判断目标通信信息的类型是否为语音,如果是语音,则执行步骤102;反之,如果不是语音,则将该目标通信信息转换为语音信息,并执行步骤102。其中,终端设备的联系等级可以由通信频率和目标关键词共同决定,具体地,移动终端可以获取其与各个终端设备在预设时间段内的通信频率,判断通信频率是否高于预设频率阈值,再对通信频率高于预设频率阈值的终端设备所发送的通信信息进行目标关键词(例如马上、紧急、回复等)的检索,以及将检索出的包含最多目标关键词的通信信息确定为目标通信信息、发送该目标通信信息的终端设备确定为联系等级最高的目标终端设备。可见,本发明实施例,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送。

102、移动终端将上述语音信息发送至与移动终端关联的手持电子设备。

本发明实施例中,可选的,移动终端在将上述语音信息发送至与移动终端关联的手持电子设备之后,还可以向手持电子设备发送针对该语音信息的确认接收请求,以使手持电子设备在接收到上述语音信息之后针对该确认接收请求返回确认接收信息;进一步的,如果移动终端在预设时间内未接收到手持电子设备针对该确认接收请求返回的确认接收信息,移动终端可以按照预设的发送频率向手持电子设备发送该语音信息以及确认接收请求,直到接收到手持电子设备返回的确认接收信息时,执行向手持电子设备发送下一条语音信息的发送动作。可见,本发明实施例,可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率。

103、手持电子设备接收移动终端发送的语音信息。

作为一种可选的实施方式,手持电子设备在接收到移动终端发送的语音信息之后,可以控制其内置的提示灯在预设时长内发出闪烁提示光,以提醒手持电子设备的用户可以通过手持电子设备获取该语音信息。

进一步可选的,手持电子设备可以预先与手持电子设备的用户所佩戴的可穿戴设备(如腕表、智能眼镜等)关联。在接收到移动终端发送的语音信息之后,手持电子设备可以向该可穿戴设备发送用于获取用户在当前时间段内皮肤表面的导电数据的获取请求,并根据用户在当前时间段内皮肤表面的导电数据分析用户(佩戴者)的情绪状态等级,进一步可选的,该手持电子设备可以预设有两个情绪状态等级,即包括第一级情绪状态等级和第二级情绪状态等级。当手持电子设备分析出用户的情绪状态等级为第一级情绪状态等级时,手持电子设备控制其内置的提示灯发出持续的闪烁提示光,直到其检测到用户触发的停止闪烁指令之后关闭提示灯;当手持电子设备分析出用户的情绪状态等级为第二级情绪状态等级时,手持电子设备控制其内置的提示灯在预设时长内发出闪烁提示光,并在该预设时长结束后关闭提示灯。其中,上述第一级情绪状态等级可以表示该用户当前处于兴奋或者紧张的状态,第二级情绪状态等级可以表示该用户当前处于平静的状态。当人们在感觉兴奋或紧张时,皮肤中的汗水会随着发生改变,而汗水的变化会引起皮肤导电值的增减,因此,通过监测皮肤导电值的增减,可以判断出用户当前的情绪状态,进而得到用户的情绪状态等级,并根据用户的情绪状态等级设置向用户提示播放语音信息的提示方式。举例来说,用户当前正处于会议室开会状态,易知用户当前的情绪状态等级为第一级情绪状态等级,即用户当前处于精神高度集中的状态,容易忽略手持电子设备接收到的语音信息。因此,手持电子设备可以控制控制其内置的提示灯发出持续的闪烁提示光,直到其检测到用户触发的停止闪烁指令之后关闭提示灯。可见,本发明实施例,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验。

104、手持电子设备检测手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值,当检测到第一预设位置处所受到的压力值大于预设压力值时,执行步骤105;反之,当检测到第一预设位置处所受到的压力值不大于预设压力值时,结束本流程。

本发明实施例中,当上述第一预设位置处所受到的压力值大于预设压力值时,可以表示手持电子设备当前处于握持状态,也可以表示手持电子设备当前正与用户目标位置相接触并处于待播放状态,本发明实施例不做限定。

105、手持电子设备以预先启动的骨传导模式播放语音信息。

本发明实施例中,可选的,手持电子设备在以预先启动的骨传导模式播放语音信息之前,还可以检测周围环境的噪声值,并将上述语音信息的播放音量调整至与上述噪声值相匹配的标准播放音量,以减少周围环境的噪声对手持电子设备播放上述语音信息的影响。

本发明实施例中,骨传导是一种声音传导方式,即通过将声音(语音信息)转化为不同频率的机械振动,通过人(用户)的颅骨、骨迷路、内耳淋巴液传递、螺旋器、听神经、听觉中枢来传递声波。相对于通过振膜产生声波的经典声音传导方式,骨传导省去了许多声波传递的步骤,能在嘈杂的环境中实现清晰的声音还原,而且声波也不会因为在空气中扩散而影响到他人,具有良好的隐秘性和抗干扰性。可见,本发明实施例,可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达。

可见,通过图1所描述的方法,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放该语音信息所带来的干扰;此外,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送;还可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率;以及,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验;还可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达。

实施例二

请参阅图2,图2是本发明实施例公开的另一种基于手持电子设备的语音信息交互方法的流程示意图。其中,如图2所示,该基于手持电子设备的语音信息交互方法可以包括以下步骤:

201、移动终端检测是否存在需要播放的语音信息,当检测到存在该语音信息时,执行步骤202;反之,当检测到不存在该语音信息时,继续执行步骤201。

202、移动终端检测移动终端所处的当前环境,得到用于反映当前环境的当前环境数据,该当前环境数据包括当前环境的声音信息和/或当前环境的图像信息。

本发明实施例中,移动终端可以控制与移动终端关联的摄像头获取当前环境的图像信息,和/或控制与移动终端关联的拾音设备获取当前环境的声音信息,本发明不做限定。

203、移动终端判断上述当前环境数据是否与预设的目标环境数据相匹配,当当前环境数据与预设的目标环境数据相匹配时,执行步骤204;反之,当当前环境数据与预设的目标环境数据不匹配时,结束本流程。

本发明实施例中,当用户位于某些特殊环境中(如工作环境中、培训大厅中)时,由于该特殊环境下如果使用手机等移动终端播放语音信息容易分散个人的注意力,甚至给对他人带来噪声。因此,移动终端可以在检测到存在上述语音信息之后,进一步通过检测当前环境数据的方式确定用户当前所处的环境是否为目标环境(即不适宜使用移动终端播放语音信息的环境),如果确定出用户当前所处的环境为目标环境,则触发执行步骤204,即将上述语音信息发送至与移动终端关联的手持电子设备,由手持电子设备向用户完成语音信息的传达。

可选的,在移动终端判断出当前环境数据与预设的目标环境数据相匹配之后,移动终端还可以向与该移动终端关联的手持电子设备发送位置获取请求,使得手持电子设备根据该位置获取请求返回该手持电子设备的位置信息以及移动终端根据该位置信息计算该移动终端与手持电子设备之间的位置距离,并判断该位置距离是否小于预设距离阈值,如果小于,则执行步骤204。可见,本发明实施例,在判断用户所处的环境符合发送语音信息的条件之后,再加入对移动终端与手持电子设备之间的位置距离的判断,并在位置距离小于预设距离阈值之后移动终端才向手持电子设备发送上述语音信息(即执行步骤204),可以确保移动终端与手持电子设备位于同一环境区域,以顺利实现通过手持电子设备向用户进行语音信息传达的目的。

其中,该基于手持电子设备的语音信息交互方法包括步骤204~207,针对步骤204~207的描述,请参照实施例一中针对步骤102~105的详细描述,本发明实施例不再赘述。

可见,通过图2所描述的方法,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放该语音信息所带来的干扰;此外,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送;还可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率;以及,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验;还可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达;此外,可以确保移动终端与手持电子设备位于同一环境区域,以顺利实现通过手持电子设备向用户进行语音信息传达的目的。

实施例三

请参阅图3,图3是本发明实施例公开的另一种基于手持电子设备的语音信息交互方法的流程示意图。其中,如图3所示,该基于手持电子设备的语音信息交互方法可以包括以下步骤:

本发明实施例中,该基于手持电子设备的语音信息交互方法包括步骤301~305,针对步骤301~305的描述,请参照实施例二中针对步骤201~205的详细描述,本发明实施例不再赘述。

306、手持电子设备采集手持电子设备的加速度数据。

307、手持电子设备根据加速度数据判断手持电子设备是否处于移动状态,当手持电子设备处于移动状态时,执行步骤308;反之,当手持电子设备不处于移动状态时,结束本流程。

作为一种可选的实施方式,手持电子设备20根据上述加速度数据判断该手持电子设备20是否处于移动状态,可以包括:

手持电子设备根据加速度数据判断手持电子设备的加速度是否发生变化;

当手持电子设备的加速度发生变化时,获取手持电子设备的加速度发生变化的起始时刻所产生的初始加速度,并判断初始加速度在垂直方向上的垂直加速度分量是否大于预设加速度分量阈值;

当垂直加速度分量大于预设加速度分量阈值时,手持电子设备确定手持电子设备处于移动状态。

本发明实施例中,通过判断出手持电子设备垂直方向上的加速度分量满足预设条件,推断出手持电子设备的用户正在拿起移动终端,从而预测用户即将使用该手持电子设备,接着执行步骤308采集目标图像进行进一步的准确判断。

308、手持电子设备采集其移动方向所朝向的目标对象的目标图像。

本发明实施例中,可选的,移动终端可以控制与移动终端关联的摄像头采集其移动方向所朝向的目标对象的目标图像,具体来说,移动终端可以控制与移动终端关联的至少两个摄像头,分别获取目标对象的全局图像和局部细节图像,并根据全局图像和局部细节图像确定出目标对象的目标图像。可见,本发明实施例,可以通过全局图像和局部细节图像实现图像的互补,降低了其他因素(例如手抖、障碍物局部遮挡等)在图像采集过程中造成的拍摄误差,提高了目标图像获取的精度。

309、手持电子设备提取上述目标图像的特征点集合,该特征点集合用于反映目标对象的轮廓特征。

310、手持电子设备判断特征点集合与预设的目标特征点集合的相似度是否高于预设相似度阈值,当相似度高于预设相似度阈值时,执行步骤311;反之,当相似度不高于预设相似度阈值时,结束本流程。

311、手持电子设备检测手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值,当检测到第一预设位置处所受到的压力值大于预设压力值时,执行步骤312;反之,当检测到第一预设位置处所受到的压力值不大于预设压力值时,结束本流程。

作为一种可选的实施方式,在执行完毕步骤311之后,该方法还可以包括以下操作:

312、手持电子设备判断手持电子设备上第二预设位置处是否与手持电子设备的用户的皮肤贴合,当第二预设位置与手持电子设备的用户的皮肤贴合时,执行步骤313;反之,当第二预设位置不与手持电子设备的用户的皮肤贴合时,结束本流程。

本发明实施例中,上述第二预设位置用于安装骨传导部件。

313、手持电子设备以预先启动的骨传导模式播放语音信息。

针对步骤308~313,由于骨传导模式播放语音信息时需要将手持电子设备的第二预设位置与手持电子设备的用户的身体部位相接触,并且对于与手持电子设备接触的身体部位的选择也会直接影响骨传导模式下的音质效果和信息传达质量,因此,手持电子设备可以预存有目标接触部位,并通过目标图像的特征点的相似度、第一预设位置的压力值以及第二预设位置是否贴合皮肤这三重判断,准确判断手持电子设备是否与目标接触部位相接触,其中,手持电子设备在该目标接触部位进行骨传导模式播放语音信息的播放效果最好。可见,本发明实施例,可以确保手持电子设备的用户能够收听到该语音信息,进而降低了语音信息交互过程中信息被遗漏的概率。

作为一种可选的实施方式,在执行完毕步骤313之后,该方法还可以包括以下操作:

314、手持电子设备检测手持电子设备的用户是否触发语音输入指令,当检测到手持电子设备的用户触发语音输入指令时,执行步骤315;反之,当检测到手持电子设备的用户没有触发语音输入指令时,继续执行步骤314。

315、手持电子设备确定骨传导部件所接收到的振动信号。

316、手持电子设备将上述振动信号转换成音频信息,并分析音频信息,得到与音频信息对应的声纹信息。

317、手持电子设备判断与音频信息对应的声纹信息是否与预设声纹信息相匹配,当判断结果为是时,执行步骤318;反之,当判断结果为否时,结束本流程。

318、手持电子设备将音频信息发送至移动终端。

本发明实施例中,声纹(voiceprint),是用电声学仪器显示的携带言语信息的声波频谱,现代科学研究表明,声纹不仅具有特定性,而且有相对稳定性的特点,因此,手持电子设备可以判断上述音频信息中的声纹信息是否与预设声纹信息相匹配,其中,预设声纹信息可以是预先存储在手持电子设备上的该手持电子设备的用户的声纹信息。如果判断结果为是,则确定手持电子设备采集的音频信息符合要求(即包含了手持电子设备的用户输入的语音)。可选的,手持电子设备判断出音频信息对应的声纹信息与预设声纹信息相匹配之后,手持电子设备还可以将该音频信息转换成文字信息,并沿手持电子设备的用户的握持方向的相反方向投影到预先关联的显示界面上,供用户查看。举例来说,当用户在会议室主持会议时,需要将文字投影到显示界面给其他用户观看,此时,手持电子设备可以通过骨传导的方式获取到用户的音频信息,将音频信息转换成文字信息,并充当“投影设备”的功能,将文字信息投影到显示屏幕上供其他用户同时观看,或者,可以将上述文字信息发送至位于该会议室的区域网络内所有用户的电子设备供其用户查看。可见,本发明实施例,可以通过声纹检测保证用户语音的正常录入,此外,还可以通过手持电子设备与投影界面、其他电子设备的通信交互,实现多人信息共享。

319、移动终端接收音频信息,并输出音频信息。

可见,通过图3所描述的方法,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放该语音信息所带来的干扰;此外,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送;还可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率;以及,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验;还可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达;还可以确保移动终端与手持电子设备位于同一环境区域,以顺利实现通过手持电子设备向用户进行语音信息传达的目的;可以通过全局图像和局部细节图像实现图像的互补,降低了其他因素(例如手抖、障碍物局部遮挡等)在图像采集过程中造成的拍摄误差,提高了目标图像获取的精度;可以确保手持电子设备的用户能够收听到该语音信息,进而降低了语音信息交互过程中信息被遗漏的概率;可以通过声纹检测保证用户语音的正常录入,此外,还可以通过手持电子设备与投影界面、其他电子设备的通信交互,实现多人信息共享。

实施例四

请参阅图4,图4是本发明实施例公开的一种基于手持电子设备的语音信息交互系统的结构示意图。如图4所示,该系统可以包括移动终端10以及与该移动终端10关联的手持电子设备20,其中:

上述移动终端10包括第一通信单元101、第一检测单元102;

上述手持电子设备20包括第二通信单元201、第二检测单元202以及播放单元203;

上述第一检测单元102,用于检测是否存在需要播放的语音信息,并在检测到存在需要播放的语音信息时,将该语音信息提供给第一通信单元101。

本发明实施例中,上述第一检测单元102可以获取移动终端上所有已接收但未输出供用户查看的通信信息所形成的通信信息列表,其中,通信信息的类型可以是文字信息或者语音信息,并且该通信信息列表中的通信信息可以按照移动终端接收到通信信息的先后顺序由上至下依次排列。进一步的,上述第一检测单元102还可以从通信信息列表中获取从上至下排列的预设数量的通信信息,并分析发送预设数量的通信信息的各个终端设备与该移动终端之间的联系等级,以及选择与该移动终端的联系等级最高的目标终端设备发送的通信信息作为目标通信信息,并判断目标通信信息的类型是否为语音,如果是语音,则触发第一通信单元101启动;反之,如果不是语音,则将该目标通信信息转换为语音信息,并触发第一通信单元101启动。其中,终端设备的联系等级可以由通信频率和目标关键词共同决定,具体地,第一检测单元102可以获取其与各个终端设备在预设时间段内的通信频率,判断通信频率是否高于预设频率阈值,再对通信频率高于预设频率阈值的终端设备所发送的通信信息进行目标关键词(例如马上、紧急、回复等)的检索,以及将检索出的包含最多目标关键词的通信信息确定为目标通信信息、发送该目标通信信息的终端设备确定为联系等级最高的目标终端设备。可见,本发明实施例,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送。

上述第一通信单元101,用于当上述第一检测单元102检测到存在上述语音信息时,将该语音信息发送至与移动终端关联的手持电子设备。

本发明实施例中,可选的,上述第一通信单元101在将上述语音信息发送至与移动终端关联的手持电子设备之后,还可以向手持电子设备发送针对该语音信息的确认接收请求,以使手持电子设备在接收到上述语音信息之后针对该确认接收请求返回确认接收信息;进一步的,如果上述第一通信单元101在预设时间内未接收到手持电子设备针对该确认接收请求返回的确认接收信息,上述第一通信单元101可以按照预设的发送频率向手持电子设备发送该语音信息以及确认接收请求,直到接收到手持电子设备返回的确认接收信息时,执行向手持电子设备发送下一条语音信息的发送动作。可见,本发明实施例,可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率。

上述第二通信单元201,用于接收移动终端发送的语音信息,并触发第二检测单元202启动。

作为一种可选的实施方式,上述第二通信单元201在接收到移动终端发送的语音信息之后,可以控制其内置的提示灯在预设时长内发出闪烁提示光,以提醒手持电子设备的用户可以通过手持电子设备获取该语音信息。

进一步可选的,上述第二通信单元201可以预先与手持电子设备的用户所佩戴的可穿戴设备(如腕表、智能眼镜等)关联。在接收到移动终端发送的语音信息之后,上述第二通信单元201可以向该可穿戴设备发送用于获取用户在当前时间段内皮肤表面的导电数据的获取请求,并根据用户在当前时间段内皮肤表面的导电数据分析用户(佩戴者)的情绪状态等级,进一步可选的,该手持电子设备可以预设有两个情绪状态等级,即包括第一级情绪状态等级和第二级情绪状态等级。当上述第二通信单元201分析出用户的情绪状态等级为第一级情绪状态等级时,控制其内置的提示灯发出持续的闪烁提示光,直到其检测到用户触发的停止闪烁指令之后关闭提示灯;当上述第二通信单元201分析出用户的情绪状态等级为第二级情绪状态等级时,控制其内置的提示灯在预设时长内发出闪烁提示光,并在该预设时长结束后关闭提示灯。其中,上述第一级情绪状态等级可以表示该用户当前处于兴奋或者紧张的状态,第二级情绪状态等级可以表示该用户当前处于平静的状态。当人们在感觉兴奋或紧张时,皮肤中的汗水会随着发生改变,而汗水的变化会引起皮肤导电值的增减,因此,通过监测皮肤导电值的增减,可以判断出用户当前的情绪状态,进而得到用户的情绪状态等级,并根据用户的情绪状态等级设置向用户提示播放语音信息的提示方式。可见,本发明实施例,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验。

上述第二检测单元202,用于检测手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值,并将检测结果提供给播放单元203。

上述播放单元203,用于当上述第二检测单元202检测到第一预设位置处所受到的压力值大于预设压力值时,以预先启动的骨传导模式播放语音信息。

本发明实施例中,可选的,上述播放单元203在以预先启动的骨传导模式播放语音信息之前,还可以检测周围环境的噪声值,并将上述语音信息的播放音量调整至与上述噪声值相匹配的标准播放音量,以减少周围环境的噪声对手持电子设备播放上述语音信息的影响。

可见,通过图4所描述的系统,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放该语音信息所带来的干扰;此外,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送;还可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率;以及,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验;还可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达。

实施例五

请参阅图5,图5是本发明实施例提供的另一种基于手持电子设备的语音信息交互系统的结构示意图,其中,图5所示的基于手持电子设备的语音信息交互系统是由图4所示的系统进一步进行优化得到的。与图4所示的系统相比较,图5所示的所示的系统中,上述移动终端还可以包括第一判断单元103,其中:

上述第一判断单元103,用于根据上述第一检测单元102得到的当前环境数据,判断当前环境数据是否与预设的目标环境数据相匹配,并将判断结果提供给第一通信单元101。

本发明实施例中,当用户位于某些特殊环境中(如工作环境中、培训大厅中)时,由于该特殊环境下如果使用手机等移动终端播放语音信息容易分散个人的注意力,甚至给对他人带来噪声。因此,上述第一检测单元可以在检测到存在上述语音信息之后,进一步触发上述第一判断单元103启动,上述第一判断单元103通过判断当前环境数据的方式确定用户当前所处的环境是否为目标环境(即不适宜使用移动终端播放语音信息的环境),如果确定出用户当前所处的环境为目标环境,则触发上述第一通信单元101启动,即将上述语音信息发送至与移动终端关联的手持电子设备,由手持电子设备向用户完成语音信息的传达。

可选的,在移动终端判断出当前环境数据与预设的目标环境数据相匹配之后,移动终端还可以向与该移动终端关联的手持电子设备发送位置获取请求,使得手持电子设备根据该位置获取请求返回该手持电子设备的位置信息以及移动终端根据该位置信息计算该移动终端与手持电子设备之间的位置距离,并判断该位置距离是否小于预设距离阈值,如果小于,则触发上述第一通信单元101启动。可见,本发明实施例,在判断用户所处的环境符合发送语音信息的条件之后,再加入对移动终端与手持电子设备之间的位置距离的判断,并在位置距离小于预设距离阈值之后移动终端才向手持电子设备发送上述语音信息(即触发上述第一通信单元101启动),可以确保移动终端与手持电子设备位于同一环境区域,以顺利实现通过手持电子设备向用户进行语音信息传达的目的。

其中,第一检测单元102,还用于在检测到存在上述语音信息之后,检测移动终端所处的当前环境,得到用于反映当前环境的当前环境数据,并提供给第一判断单元103,该当前环境数据包括当前环境的声音信息和/或当前环境的图像信息。

上述第一通信单元101,具体用于当上述第一检测单元102检测到存在语音信息时,以及上述第一判断单元103判断出当前环境数据与预设的目标环境数据相匹配时,将语音信息发送至与移动终端关联的手持电子设备。

可见,通过图5所描述的系统,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放该语音信息所带来的干扰;此外,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送;还可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率;以及,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验;还可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达;此外,可以确保移动终端与手持电子设备位于同一环境区域,以顺利实现通过手持电子设备向用户进行语音信息传达的目的。

实施例六

请参阅图6,图6是本发明实施例提供的又一种基于手持电子设备的语音信息交互系统的结构示意图,其中,图6所示的系统是由图5所示的系统进一步进行优化得到的。与图5所示的系统相比较,在图6所示的系统中:

上述手持电子设备20还包括采集单元204、第二判断单元205以及提取单元206,其中:

上述采集单元204,用于在第二通信单元201接收到移动终端发送的语音信息之后,采集手持电子设备的加速度数据,并将加速度数据提供给第二判断单元205。

上述第二判断单元205,用于根据加速度数据判断手持电子设备是否处于移动状态,并触发采集单元204启动。

上述采集单元204,还用于当上述第二判断单元205判断出手持电子设备处于移动状态时,采集其移动方向所朝向的目标对象的目标图像,并将该目标图像提供给提取单元206。

本发明实施例中,可选的,上述采集单元204可以控制与移动终端关联的摄像头采集其移动方向所朝向的目标对象的目标图像,具体来说,上述采集单元204可以控制与移动终端关联的至少两个摄像头,分别获取目标对象的全局图像和局部细节图像,并根据全局图像和局部细节图像确定出目标对象的目标图像。可见,本发明实施例,可以通过全局图像和局部细节图像实现图像的互补,降低了其他因素(例如手抖、障碍物局部遮挡等)在图像采集过程中造成的拍摄误差,提高了目标图像获取的精度。

上述提取单元206,用于提取目标图像的特征点集合,并将该特征点集合提供给第二判断单元205,其中,该特征点集合用于反映目标对象的轮廓特征。

上述第二判断单元205,还用于判断特征点集合与预设的目标特征点集合的相似度是否高于预设相似度阈值,并将判断结果提供给第二检测单元202。

上述第二检测单元202,具体用于当第二判断单元205判断出相似度高于预设相似度阈值时,检测手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值。

作为一种可选的实施方式,如图6所示,手持电子设备20还包括第三判断单元207、第三检测单元208、确定单元209以及声纹获取单元210,其中:

上述第三判断单元207,用于在第二检测单元202检测到手持电子设备上第一预设位置处所受到的压力值大于预设压力值之后,判断手持电子设备上第二预设位置处是否与手持电子设备的用户的皮肤贴合,并将判断结果提供给播放单元203,其中,第二预设位置用于安装骨传导部件。

上述播放单元203,具体用于当第二检测单元202检测到第一预设位置处所受到的压力值大于预设压力值时,以及第三判断单元207判断出第二预设位置与手持电子设备的用户的皮肤贴合之后,以预先启动的骨传导模式播放语音信息。

上述第三检测单元208,用于检测手持电子设备的用户是否触发语音输入指令,并将检测结果提供给确定单元209。

上述确定单元209,用于确定骨传导部件所接收到的振动信号,并触发声纹获取单元210启动。

上述声纹获取单元210,用于将振动信号转换成音频信息,并分析音频信息,得到与音频信息对应的声纹信息,并将该声纹信息提供给第三判断单元207。

上述第三判断单元207,还用于判断与音频信息对应的声纹信息是否与预设声纹信息相匹配,并触发第二通信单元201启动。

上述第二通信单元201,还用于当第三判断单元207的判断结果为是时,将音频信息发送至移动终端。

可选的,在移动终端10中:

上述第一通信单元101,还用于接收音频信息,并输出音频信息。

作为一种可选的实施方式,如图6所示,上述第二判断单元205可以包括:第一判断子单元2051,用于根据加速度数据判断手持电子设备的加速度是否发生变化,并将判断结果提供给获取子单元2052。

获取子单元2052,用于当第一判断子单元2051判断出手持电子设备的加速度发生变化时,获取手持电子设备的加速度发生变化的起始时刻所产生的初始加速度,并将该初始加速度提供给第一判断子单元2051。

上述第一判断子单元2051,还用于判断初始加速度在垂直方向上的垂直加速度分量是否大于预设加速度分量阈值,并将判断结果提供给确定子单元2053。

确定子单元2053,用于当上述第一判断子单元2051判断出垂直加速度分量大于预设加速度分量阈值时,确定手持电子设备处于移动状态。

第二判断子单元2054,用于判断特征点集合与预设的目标特征点集合的相似度是否高于预设相似度阈值。

可见,通过图6所描述的系统,能够在满足播放条件的情况下,通过骨传导模式播放该语音信息,并基于骨传导模式播放所具有的良好的隐秘性和抗干扰性,减少播放该语音信息所带来的干扰;此外,既避免了用户需要手动筛选重要信息的操作、节约了用户的时间,又能够降低用户错过重要信息的概率,实现了语音信息的智能推送;还可以提高手持电子设备接收到语音信息的成功概率,以及降低手持电子设备的用户遗漏重要信息的几率;以及,可以根据用户的情绪状态有针对性的设置信息提醒方式,符合用户的个性化需求、提高了用户的使用体验;还可以在减少播放语音信息所带来的干扰的同时,实现语音信息的及时传达;还可以确保移动终端与手持电子设备位于同一环境区域,以顺利实现通过手持电子设备向用户进行语音信息传达的目的;可以通过全局图像和局部细节图像实现图像的互补,降低了其他因素(例如手抖、障碍物局部遮挡等)在图像采集过程中造成的拍摄误差,提高了目标图像获取的精度;可以确保手持电子设备的用户能够收听到该语音信息,进而降低了语音信息交互过程中信息被遗漏的概率;可以通过声纹检测保证用户语音的正常录入,此外,还可以通过手持电子设备与投影界面、其他电子设备的通信交互,实现多人信息共享。

本发明实施例还提供了又一种手持电子设备,如图7所示,为了便于说明,仅示出了与本发明实施例相关的部分,具体技术细节未揭示的,请参照本发明实施例方法部分。该手持电子设备可以为包括电磁笔、录音笔、智能笔等任意终端设备,以终端为电磁笔为例:

图7示出的是与本发明实施例提供的终端相关的电磁笔的部分结构框图。参考图7,电磁笔包括:射频(radiofrequency,rf)电路1110、存储器1120、输入单元1130、显示单元1140、传感器1150、音频电路1160、无线通信模块1170、处理器1180、电源1190以及摄像头1100等部件。本领域技术人员可以理解,图7中示出的电磁笔结构并不构成对电磁笔的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。

下面结合图7对电磁笔的各个构成部件进行具体的介绍:

rf电路1110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器1180处理;另外,将设计上行的数据发送给基站。通常,rf电路1110包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier,lna)、双工器等。此外,rf电路1110还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(globalsystemofmobilecommunication,gsm)、通用分组无线服务(generalpacketradioservice,gprs)、码分多址(codedivisionmultipleaccess,cdma)、宽带码分多址(widebandcodedivisionmultipleaccess,wcdma)、长期演进(longtermevolution,lte)、电子邮件、短信息服务(shortmessagingservice,sms)等。

存储器1120可用于存储可执行程序代码,与存储器1120耦合的处理器1180通过运行存储在存储器1120的可执行程序代码,从而执行电磁笔的各种功能应用以及数据处理,特别是用于执行实施例一至实施例三任一种基于手持电子设备的语音信息交互方法的全部或部分步骤。存储器1120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电磁笔的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器1120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元1130可用于接收输入的数字或字符信息,以及产生与电磁笔的用户设置以及功能控制有关的键信号输入。具体地,输入单元1130可包括触控面板1131以及其他输入设备1132。触控面板1131,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1131上或在触控面板1131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板1131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器1180,并能接收处理器1180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1131。除了触控面板1131,输入单元1130还可以包括其他输入设备1132。具体地,其他输入设备1132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元1140可用于显示由用户输入的信息或提供给用户的信息以及电磁笔的各种菜单。显示单元1140可包括显示面板1141,可选的,可以采用液晶显示器(liquidcrystaldisplay,lcd)、有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板1141。进一步的,触控面板1131可覆盖显示面板1141,当触控面板1131检测到在其上或附近的触摸操作后,传送给处理器1180以确定触摸事件的类型,随后处理器1180根据触摸事件的类型在显示面板1141上提供相应的视觉输出。虽然在图7中,触控面板1131与显示面板1141是作为两个独立的部件来实现电磁笔的输入和输入功能,但是在某些实施例中,可以将触控面板1131与显示面板1141集成而实现电磁笔的输入和输出功能。

电磁笔还可包括至少一种传感器1150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1141的亮度,接近传感器可在手机移动到耳边时,关闭显示面板1141和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。

音频电路1160、扬声器1161,传声器1162可提供用户与电磁笔之间的音频接口。音频电路1160可将接收到的音频数据转换后的电信号,传输到扬声器1161,由扬声器1161转换为声音信号输出;另一方面,传声器1162将收集的声音信号转换为电信号,由音频电路1160接收后转换为音频数据,再将音频数据输出处理器1180处理后,经rf电路1110以发送给比如另一电磁笔,或者将音频数据输出至存储器1120以便进一步处理。

无线通信模块1170可用于在执行向外部设备发送信息、接收外部设备的控制指令等,特别地,在接收到外部设备的控制指令之后发送至处理器1180,由处理器1180处理。无线通信模块1170可包括如无线保真(wirelessfidelity,wifi)模块等。其中,wifi属于短距离无线传输技术,电磁笔通过wifi模块可以用于发送信息、帮助用户收发电子邮件、浏览网页和访问流式媒体以及接收外部设备的控制指令等,它为用户提供了无线的宽带互联网访问。

处理器1180是电磁笔的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器1120内的软件程序和/或模块,以及调用存储在存储器1120内的数据,执行电磁笔的各种功能和处理数据,从而对电磁笔进行整体监控。可选的,处理器1180可包括一个或多个处理单元;优选的,处理器1180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器1180中。

电磁笔还包括给各个部件供电的电源1190(比如电池),优选的,电源可以通过电源管理系统与处理器1180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

尽管未示出,电磁笔还可以包括蓝牙模块等,在此不再赘述。

在本发明实施例中,该电磁笔所包括的处理器1180用于执行存储器1120中存储的可执行程序代码,还具有以下功能:

控制无线通信模块1170接收与电磁笔关联的移动终端发送的语音信息,并控制传感器1150检测手持电子设备上第一预设位置处所受到的压力值是否大于预设压力值;

当传感器1150检测到第一预设位置处所受到的压力值大于预设压力值时,控制音频电路1160以预先启动的骨传导模式播放该语音信息。

其中,上述语音信息是在移动终端检测是否存在需要播放的语音信息、并当检测到存在该语音信息时,向无线通信模块1170发送的;

可见,通过该电磁笔所包括的处理器1180,能够减少播放语音信息所带来的干扰。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(read-onlymemory,rom)、随机存储器(randomaccessmemory,ram)、可编程只读存储器(programmableread-onlymemory,prom)、可擦除可编程只读存储器(erasableprogrammablereadonlymemory,eprom)、一次可编程只读存储器(one-timeprogrammableread-onlymemory,otprom)、电子抹除式可复写只读存储器(electrically-erasableprogrammableread-onlymemory,eeprom)、只读光盘(compactdiscread-onlymemory,cd-rom)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上所述,以上实施例仅用以说明本申请的技术方案而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,然而本领域的普通技术人员应当理解;其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1