一种交互方法、装置、电子设备和计算机可读存储介质与流程

文档序号:18788739发布日期:2019-09-29 18:21阅读:174来源:国知局
一种交互方法、装置、电子设备和计算机可读存储介质与流程
本发明涉及电子设备控制领域,尤其涉及一种交互方法、装置、电子设备和计算机可读存储介质。
背景技术
:一般的玩具娃娃有固定的形象但表情不变化,动作也需要完全靠人的掌控,玩起来比较单一。随着电子设备技术的发展,目前已有在机器娃娃中增加电机等器件控制机器娃娃动作,通过语音或者控制键盘等对机器娃娃发出指令,以控制机器娃娃可以在人命令控制下做一些简单动作的技术。在通过语音与电子设备(例如机器人)交互的方案中,不仅可以通过人工智能语音识别控制系统将用户语音命令识别为电子设备的控制命令,也可以通过人工智能语音识别控制系统与电子设备进行一系列的人工智能语音对话。但是,该类型对话系统中,往往只能针对预定义的有限的用户语音命令,得到对应的回答句子,并控制电子设备执行对应的命令。这种现有技术,对语音命令的回复形式单一,机器人动作比较单一,机器人表现力弱,机器人情感展现力不强,降低了用户的体验感。技术实现要素:有鉴于此,本发明实施例提供一种交互方法、装置、电子设备和计算机可读存储介质,交互方式更加多样。第一方面,本发明实施例提供一种交互方法,用于终端设备,所述方法包括:接收交互信息的输入;对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令,以使受控电子设备根据所述动作控制指令,执行相应的动作模式。第二方面,本发明实施例提供一种交互方法,用于电子设备,所述方法包括:接收交互信息的输入;对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;将确定的所述影像在所述电子设备的显示屏上显示或将所述影像发送到指定终端设备,以使所述影像在指定终端设备的显示屏上显示,并发送确定的所述控制指令以使所述电子设备执行相应的动作模式。第三方面,本发明实施例提供一种交互方法,用于终端设备和受控电子设备的交互系统,所述方法包括:终端设备接收交互信息的输入;终端设备对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;终端设备根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;终端设备将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令;所述受控电子设备根据所述动作控制指令,执行相应的动作模式。第四方面,本发明实施例提供一种交互装置,用于终端设备,包括:第一接收模块,用于接收交互信息的输入;第一识别模块,用于对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;第一匹配模块,用于根据所述用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;第一执行模块,用于将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令,以使受控电子设备根据所述动作控制指令,执行相应的动作模式。第五方面,本发明实施例提供一种交互装置,用于受控电子设备,包括:第二接收模块,用于接收交互信息的输入;第二识别模块,用于对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;第二匹配模块,用于根据所述用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;第二执行模块,用于将确定的所述影像在所述电子设备的显示屏上显示或将所述影像发送到指定终端设备,以使所述影像在指定终端设备的显示屏上显示,并发送确定的所述控制指令以使所述电子设备执行相应的动作模式。第六方面,本发明实施例提供一种交互系统,包括终端设备和受控电子设备;所述终端设备,用于接收交互信息的输入;还用于对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;还用于根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;还用于将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令;所述受控电子设备,用于根据所述动作控制指令,执行相应的动作模式。第七方面,本发明实施例提供一种电子设备,所述电子设备包括:壳体、处理器、存储器、电路板和电源电路,其中,电路板安置在壳体围成的空间内部,处理器和存储器设置在电路板上;电源电路,用于为上述电子设备的各个电路或器件供电;存储器用于存储可执行程序代码;处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序,用于执行前述任一方法实施例所述的方法。第八方面,本发明实施例提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时或实现前述任一方法实施例所述的方法步骤。本发明实施例提供的一种交互方法、装置、电子设备和计算机可读存储介质,通过对接收的交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息,随后基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令,在向受控电子设备发送确定的所述动作控制指令,以使受控电子设备根据所述动作控制指令,执行相应的动作模式的同时,自动将确定的所述影像在所述终端设备的显示屏上进行展示,预先设置的影像内容和电子设备动作之间具有一定关联性,可以在电子设备动作的同时向用户展现有关的影像,比如说展现相关动作情感的影像,能够丰富电子设备响应控制指令时的情感表达,使得交互方式更加多样,不仅能提高用户体验感,且该方案的实现无需复杂编程,实现成本低。附图说明为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。图1为本发明实施例一的一种交互方法流程图;图2为本发明实施例二的一种交互方法流程图;图3为本发明实施例三的一种交互方法流程图;图4为本发明提供的一种用于终端设备的交互装置的结构示意图;图5为本发明提供的另一种用于终端设备的交互装置的结构示意图;图6为本发明提供的一种用于受控电子设备的交互装置的结构示意图;图7为本发明提供的另一种用于受控电子设备的交互装置的结构示意图;图8为本发明提供的一种交互系统的结构示意图;图9为本发明电子设备一个实施例的结构示意图。具体实施方式下面结合附图对本发明实施例一种交互方法、装置、电子设备和计算机可读存储介质进行详细描述。应当明确,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。实施例一图1为本发明实施例一的一种交互方法流程图,本实施例的方法用于终端设备,如手机客户端、平板电脑客户端等,如图1所示,本实施例的方法可以包括:s101:接收交互信息的输入。本实施例中,通过终端设备的人机界面接收用户的交流信息。在一可选实施例中,所述交互信息可以包括:语音指令,和/或受控电子设备发送的、由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号,和/或用户身体电信号输入。例如:所述电子设备可以为机器人、电子玩具娃娃等,可以在机器人的头部、背部、腿部等多个预定位置安装触摸传感器,还可以在机器人身上安装语音识别处理器,用户可以通过手机客户端输入语音指令,或者抚摸、拍打受控机器人以激发相应的传感信号输入至所述终端设备,或者通过相关仪器测量得到的用户身体电信号。本发明实施例中,用户身体电信号为用相关仪器或传感器等测量的用于反映用户身体动态模式(身体状态)的电信号,例如如由脑电波读取器读取人体脑电波并转换所得到的脑电波信号,脑电波读取器通过蓝牙或无线网络等将脑电波信号发送至所述终端设备。或者,用户身体例如心率、肌肉收缩等生理指标变化,可以反映出人对外界刺激产生的应变,或者意志的变化产生的生理指标变化,经过相关仪器或传感器测量可以得到相应的身体电信号,例如通过心率手表测得的反应用户心率的电信号,或者如通过测谎仪测得的电信号等,用户身体电信号的具体获取方式此处不再赘述。s102:对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息。可选地,若s101中接收的是语音指令,则此步骤对所述语音指令进行语音识别,确定所述语音指令所对应的文字指令信息;若s101中接收的是由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号,则此步骤中对所述传感信号进行识别,确定用户动作模式;若s101中接收的是用户身体电信号,则此步骤中对所述用户身体电信号进行处理,确定所述用户身体电信号所反映的用户的身体动态模式,例如分析心率电信号,识别出用户处于运动状态。随着技术的进步,通过对脑波的分析,可以获得人类思想内容的程度也在不断丰富和加深。在一可选实施例中,所述用户身体电信号为由脑电波读取器读取并发送的用户脑电波信号,此步骤s102对所述用户脑电波信号进行处理,确定所述用户的专注度。终端设备通过对脑波的分析,获得用户的专注度。专注度数值用0-100整数进行描述,专注度最高数值对应100,用户完全精神不集中对应的数值为0。s103:根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。在一可选实施例中,预先建立并存储用户输入信息与影像、电子设备动作控制指令之间的映射关系,例如下表1所示:表1用户输入信息影像电子设备动作控制指令第一语音指令影像1控制指令1第二语音指令影像2控制指令2第一动作模式(例如“摸头”)影像3控制指令3第二动作模式(例如“拍背”)影像4控制指令1专注度数值范围1影像5控制指令5心率范围1影像6控制指令6………根据预先建立的表2,s103具体实施时,根据所述文字指令信息,基于预先建立的文字指令信息与影像、电子设备动作控制指令之间的映射关系,确定与所述文字指令信息相对应的影像和电子设备动作控制指令;或者,根据所述用户动作模式,基于预先建立的动作模式与影像、电子设备动作控制指令之间的映射关系,确定与所述用户动作模式相对应的影像和电子设备动作控制指令;或者,根据所述用户的身体动态模式,基于预先建立的身体动态模式与影像、电子设备动作控制指令之间的映射关系,确定与当前用户的身体动态模式相对应的影像和电子设备动作控制指令。本实施例,根据用户的单一输入信息,基于预先建立的单一输入信息与影像、电子设备动作控制指令之间的映射关系,来确定影像和电子设备动作控制指令。在另一可选实施例中,还可以预先建立文字指令信息、动作模式和用户身体动态模式三者中的至少两项任意组合与影像、电子设备动作控制指令之间的映射关系,则在用户输入信息包括文字指令信息、用户动作模式和身体动态模式三者中的至少两项组合时,可根据该映射关系确定相应的影像和电子设备动作控制指令。例如:预先建立的映射关系表如下表2所示:表2例如,当所述电子设备为机器人时,用户通过手机客户端向机器人发送语音命令“唱首歌”并且抚摸一下机器人的头,则s102识别该语音指令对应的文字指令为“唱首歌”以及用户动作模式为“摸头”,则此s103在表2中确定出与用户输入信息相对应的影像为“影像1”,机器人动作控制指令为“控制指令1”。显然,除了表1和表2的映射关系,也可以将表1和表2的映射关系合并,即用户输入信息和影像、电子设备控制指令之间的映射关系表中,用户输入信息可以是单一信息(语音指令或动作模式或专注度),也可以是至少两种单一信息的组合,s103中根据所述文字指令信息、用户动作模式和用户的身体动态模式三者中的一项或者多项的组合,基于预先建立的文字指令信息、动作模式和身体动态模式三者中的一项或多项信息的组合与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令,此处不再赘述。s104:将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令,以使受控电子设备根据所述动作控制指令,执行相应的动作模式。例如上一步骤中的例子,若s103确定出与用户输入信息相对应的影像为“影像1”,机器人动作控制指令为“控制指令1”,则在手机终端播放影像1(例如某影星正在舞台高歌的影像和歌曲),同时,将控制指令1发送给受控机器人,受控机器人根据该控制指令1,手舞足蹈做模拟该影星唱歌的动作。优选地,所述用户输入信息与影像、电子设备动作控制指令之间的映射关系中,与用户输入信息对应的影像为带有能够体现所述用户输入信息的情绪的影像,例如用户输入信息为“我心情不好,唱首歌”,则对应影像可以为忧伤抒情的歌曲影像,或者,还可以进一步在s102中通过分析语音语调等来判别用户情绪;进一步地,电子设备动作控制指令和所述用户输入信息/影像具有预定关联性,例如上一段例子中所述,电子设备模仿的动作和影像内容有一定的相似性。本发明实施例,通过对接收的交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息,随后基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令,在向受控电子设备发送确定的所述动作控制指令,以使受控电子设备根据所述动作控制指令,执行相应的动作模式的同时,自动将确定的所述影像在所述终端设备的显示屏上进行展示,预先设置的影像内容和电子设备动作之间具有一定关联性,可以在受控电子设备动作的同时向用户展现有关的影像,比如说展现相关动作情感的影像,能够丰富受控电子设备响应控制指令时的情感表达,不仅能提高用户体验感,且该方案的实现无需复杂编程,实现成本低。在一可选实施方式中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集,则上述s103可以具体根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。例如:上表2中的“影像1”可以为包含多个影像片段的影像集,如“影像1”={忧伤抒情歌曲影像片段,快节奏好心情歌曲影像片段、校园民谣风歌曲影像},若当前用户输入信息为“唱首歌+摸头”,且分析用户输入的语音语调识别出用户心情很愉快,则可以在“影像1”中选择“快节奏好心情歌曲影像片段”作为与当前用户输入信息对应的影像。本实施例,预先设置的对应关系中,同一用户输入信息对应多个影像片段,在响应交互信息时,能够有更多的播放选择,尤其能够根据用户情绪来选择影像,相对于现有技术,不仅人机交互反馈更为多样化,还具有感情色彩。进一步地,预先存储的所述映射关系中,还包括与用户输入信息相对应的应答内容信息,例如下表3所示:表3本实施例,映射关系中还包括与用户输入信息相对应的应答内容信息时,图1所示方法中,s102之后,还可包括:根据确定的用户输入信息,基于所述映射关系,确定与所述用户输入信息相对应的应答内容的步骤;以及,通过语音播报或文字展示所述应答内容的步骤。即:对于确定的用户输入信息,不仅展示影像并控制电子设备动作,还通过当前终端设备代表电子设备以语音或文字响应所述交互信息。本实施例无需改变现有电子设备,仅需对终端设备进行改进即可实现,且实现简单,成本低。优选地,在输入的交互信息为用户脑电波信号时,本发明将脑电波信号识别为用户的专注度,本实施例中用0-100描述从完全无专注到绝对注意力集中的用户状态。专注度数值按照0-33,34-66,67-100分为三组,若交互信息为脑电波信号,在用户输入信息与影像、电子设备控制指令之间的映射关系中,具有专注度取值范围为0-33和影像、电子设备控制指令之间的一组映射关系,以及专注度取值范围为34-66和影像、电子设备控制指令之间的一组映射关系,以及专注度取值范围为67-100和影像、电子设备控制指令之间的一组映射关系。本实施例根据研究,对专注度分组为3种,能够更为有效地界定用户专注程度并准确提供更为符合用户当前状态的影像,以及控制电子设备动作。实施例二本实施例二提供一种交互方法,用于受控电子设备,图2为本发明实施例二的一种基于即时通讯的交互方法流程图,如图2所示,本实施例的方法可以包括:s201:接收交互信息的输入;在一可选实施例中,此步骤具体接收语音指令输入和/或通过安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号输入和/或由脑电波读取器读取并发送的用户脑电波信号输入。本实施例中,s201的实施方法类似于上述s101,只是本实施例中将该方法实施于电子设备端,具体实施过程此处不再赘述。s202:对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息.可选地,若s201中接收的是语音指令,则此步骤对所述语音指令进行语音识别,确定所述语音指令所对应的文字指令信息;若s101中接收的是由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号,则此步骤中对所述传感信号进行识别,确定用户动作模式;若s101中接收的用户身体电信号是用户脑电波信号,则此步骤中对所述用户脑电波信号进行处理,确定所述脑电波信号对应的命令。本实施例中,s202的实施方法类似于上述s102,只是本实施例中将该方法实施于电子设备端,具体实施过程此处不再赘述。s203:根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。在一可选实施例中,预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系中,用户输入信息可以为文字指令信息、动作模式、用户身体电信号中的一项或至少两项组合。当用户输入信息为单一信息内容时,根据所述文字指令信息,基于预先建立的文字指令信息与影像、电子设备动作控制指令之间的映射关系,确定与所述文字指令信息相对应的影像和电子设备动作控制指令;或者,根据所述用户动作模式,基于预先建立的动作模式与影像、电子设备动作控制指令之间的映射关系,确定与所述用户动作模式相对应的影像和电子设备动作控制指令;或者,根据所述用户的身体动态模式,基于预先建立的身体动态模式与影像、电子设备动作控制指令之间的映射关系,确定与所述用户的身体动态模式相对应的影像和电子设备动作控制指令。当用户输入信息为至少两种信息组合时,基于预先建立的文字指令信息、动作模式和身体动态模式三者中的至少两项任意组合与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。具体实施方法类似于上述s103,只是本实施例中将该方法实施于电子设备端,此处不再赘述。在一可选实施例中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集;则类似于s103,此s203根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。s204:将确定的所述影像在所述电子设备的显示屏上显示或将所述影像发送到指定终端设备,以使所述影像在指定终端设备的显示屏上显示,并发送确定的所述控制指令以使所述电子设备执行相应的动作模式。本实施例中,若受控电子设备本身自带显示屏,则在本地显示屏上显示与所述确定的用户输入信息对应的影像,或者还可将所述影像发送到指定终端设备,以使所述影像在指定终端设备的显示屏上显示,同时,将确定的所述控制指令发送给受控电子设备本身的动作控制模块,以使所述受控电子设备执行相应的动作模式。在一可选实施例中,所述映射关系中,还包括与用户输入信息相对应的应答内容信息;本实施例二提供的方法在s202之后,还可包括:根据确定的用户输入信息,基于所述映射关系,确定与所述用户输入信息相对应的应答内容的步骤;以及通过语音播报或文字展示所述应答内容的步骤。实施例三本实施例三提供一种交互方法,用于终端设备和受控电子设备组成的系统,图3为本发明实施例三的一种基于即时通讯的交互方法流程图,如图3所示,本实施例的方法可以包括:s301:终端设备接收交互信息的输入;所述交互信息可以为语音指令和/或受控电子设备发送的、由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号输入和/或用户身体电信号,如由脑电波读取器读取并发送的用户脑电波信号输入。本实施例中,s301的具体实施方法类似于前述s101,此处不再赘述。s302:终端设备对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;可选地,若s301中终端设备接收的是语音指令,则此步骤终端设备对所述语音指令进行语音识别,确定所述语音指令所对应的文字指令信息;若s101中接收的是由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号,则此步骤中对所述传感信号进行识别,确定用户动作模式;若s101中终端设备接收的是用户脑电波信号,则此步骤中终端设备对所述用户脑电波信号进行处理,确定所述脑电波信号对应的命令。本实施例中,s302的具体实施方法类似于前述s102,此处不再赘述。s303:终端设备根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;在一可选实施例中,预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系中,用户输入信息可以为文字指令信息、动作模式、身体动态模式中的一种输入,也可以为所述文字指令信息、用户动作模式和所述身体动态模式三者中的至少两项组合。当用户输入信息为单一信息内容时,终端设备根据所述文字指令信息,基于预先建立的文字指令信息与影像、电子设备动作控制指令之间的映射关系,确定与所述文字指令信息相对应的影像和电子设备动作控制指令;或者,根据所述用户动作模式,基于预先建立的动作模式与影像、电子设备动作控制指令之间的映射关系,确定与所述用户动作模式相对应的影像和电子设备动作控制指令;或者,根据所述用户的身体动态模式,基于预先建立的身体动态模式与影像、电子设备动作控制指令之间的映射关系,确定与所述用户的身体动态模式相对应的影像和电子设备动作控制指令。当用户输入信息为至少两种信息组合时,终端设备基于预先建立的文字指令信息、动作模式和身体动态模式三者中的至少两项任意组合与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。在一可选实施例中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集;则类似于s103,此s303中终端设备根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。本实施例中,s303的具体实施方法类似于前述s103,此处不再赘述。s304:终端设备将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令;本实施例中,s304的具体实施方法类似于前述s104,此处不再赘述。优选地,若受控电子设备带有显示屏,则终端设备还可以将所述影像发送给受控电子设备也进行展示。s305:所述受控电子设备根据所述动作控制指令,执行相应的动作模式。在一可选实施例中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集;则s303中,终端设备根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。在一个可选实施例中,所述映射关系中还包括与用户输入信息相对应的应答内容信息;在s302之后,终端设备还可根据确定的用户输入信息,基于所述映射关系,确定与所述用户输入信息相对应的应答内容,并通过语音播报或文字展示所述应答内容。显然,若受控电子设备具有语音功能,终端设备还可以将语音应答内容发送给受控电子设备进行播报。实施例四对应于本发明实施例一提供的交互方法,本发明还提供交互装置。图4为本发明提供的一种用于终端设备的交互装置的结构示意图,如图4所示,本实施例的装置可以包括:第一接收模块11,用于接收交互信息的输入;第一识别模块12,用于对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;第一匹配模块13,用于根据所述用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;第一执行模块14,用于将确定的所述影像在所述终端设备的显示屏上进行展示,并向受控电子设备发送确定的所述动作控制指令,以使受控电子设备根据所述动作控制指令,执行相应的动作模式。本实施例的装置,可以用于执行图1所示方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。在一可选实施例中,第一接收模块11,具体用于接收如下至少一项交互信息的输入:接收语音指令输入;接收受控电子设备发送的、由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号输入;接收用户身体电信号输入。在一可选实施例中,第一识别模块12,具体用于对所述语音指令进行语音识别,确定所述语音指令所对应的文字指令信息;和/或对所述传感信号进行识别,确定用户动作模式;和/或对所述用户身体电信号进行识别,确定所述用户的身体动态模式。在一可选实施例中,第一接收模块11接收用户身体电信号输入,具体包括:接收由脑电波读取器读取并发送的用户脑电波信号输入;第一识别模块12对所述用户身体电信号进行识别,确定所述用户的身体动态模式,具体包括:对所述用户脑电波信号进行处理,确定所述用户的专注度。在一可选实施例中,第一匹配模13块,具体用于根据所述文字指令信息、用户动作模式和所述用户的身体动态模式三者中的一项或者多项的组合,基于预先建立的文字指令信息、动作模式和身体动态模式三者中的一项或者多项的任意组合与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。在一可选实施例中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集;第一匹配模块13,具体用于根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。图5为本发明提供的另一种用于终端设备的交互装置的结构示意图,如图5所示,本实施例的装置在图4所示装置结构的基础上,进一步地,还包括第一应答模块15;本实施例中,所述映射关系中还包括与用户输入信息相对应的应答内容信息;第一匹配模块13,还用于根据确定的用户输入信息,基于所述映射关系,确定与所述用户输入信息相对应的应答内容;第一应答模块15,用于通过语音播报或文字展示第一匹配模块13确定的应答内容。实施例五对应于本发明实施例二提供的交互方法,本发明还提供交互装置。图6本发明提供的一种用于受控电子设备的交互装置的结构示意图,如图6示,本实施例的装置可以包括:第二接收模块21,用于接收交互信息的输入;第二识别模块22,用于对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;第二匹配模块23,用于根据所述用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;第二执行模24,用于将确定的所述影像在所述受控电子设备的显示屏上显示或将所述影像发送到指定终端设备,以使所述影像在指定终端设备的显示屏上显示,并发送确定的所述控制指令以使所述受控电子设备执行相应的动作模式。本实施例的装置,可以用于执行图2所示方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。在一可选实施例中,第二接收模块21,具体用于接收如下至少一项交互信息的输入:接收语音指令输入;通过安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号输入;接收用户身体电信号输入。在一可选实施例中,第二识别模块22,具体用于对所述语音指令进行语音识别,确定所述语音指令所对应的文字指令信息;和/或对所述传感信号进行识别,确定用户动作模式;和/或对所述用户身体电信号进行识别,确定所述用户的身体动态模式。在一可选实施例中,第二接收模块21接收用户身体电信号输入,具体包括:接收由脑电波读取器读取并发送的用户脑电波信号输入;第二识别模块22对所述用户身体电信号进行识别,确定所述用户的身体动态模式,具体包括:对所述用户脑电波信号进行处理,确定所述用户的专注度。。在一可选实施例中,第二匹配模块23,具体用于根据所述文字指令信息、用户动作模式和所述用户的身体动态模式三者中的一项或者多项的组合,基于预先建立的文字指令信息、动作模式和身体动态模式三者中的一项或者多项的任意组合与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。在一可选实施例中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集;第二匹配模块23,具体用于根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。图7为本发明提供的另一种用于受控电子设备的交互装置的结构示意图,如图7所示,本实施例的装置在图6所示装置结构的基础上,进一步地,还包括,第二应答模块25;本实施例中,所述映射关系中还包括与用户输入信息相对应的应答内容信息;第二匹配模块23,还用于根据确定的用户输入信息,基于所述映射关系,确定与所述用户输入信息相对应的应答内容;第二应答模块25,用于通过语音播报或文字展示第二匹配模块23确定的应答内容。实施例六对应于本发明实施例三提供的交互方法,本发明还提供一种交互系统。图8为本发明提供的一种交互系统的结构示意图,如图8示,该系统包括终端设备31和受控电子设备32;其中:终端设备31,用于接收交互信息的输入;还用于对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息;还用于根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令;还用于将确定的所述影像在本地的显示屏上进行展示,并向受控电子设备32发送确定的所述动作控制指令;受控电子设备32,用于根据所述动作控制指令,执行相应的动作模式。本实施例的装置,可以用于执行图3所示方法实施例的技术方案,其实现原理和技术效果类似,此处不再赘述。在一可选实施例中,终端设备31,具体用于接收如下至少一项交互信息的输入:接收语音指令输入;接收受控电子设备发送的、由安装在受控电子设备上预定部位的传感器感测用户动作所生成的传感信号输入;接收用户身体电信号输入。在一可选实施例中,终端设备31对所述交互信息进行识别或处理,确定所述交互信息所对应的用户输入信息,具体包括:终端设备31对所述语音指令进行语音识别,确定所述语音指令所对应的文字指令信息;和/或,终端设备31对所述传感信号进行识别,确定用户动作模式;和/或,终端设备31对所述用户身体电信号进行识别,确定所述用户的身体动态模式。在一可选实施例中,终端设备31接收用户身体电信号输入,包括:终端设备31接收由脑电波读取器读取并发送的用户脑电波信号输入;终端设备31对所述用户身体电信号进行识别,确定所述用户的身体动态模式,包括:终端设备31对所述用户脑电波信号进行处理,确定所述用户的专注度。在一可选实施例中,终端设备31根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备控制指令,具体包括:终端设备31根据所述文字指令信息、用户动作模式和所述用户的身体动态模式三者中的一项或者多项的组合,基于预先建立的文字指令信息、动作模式和身体动态模式三者中的一项或者多项的任意组合与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令。在一可选实施例中,在预先建立的用户输入信息与影像之间的映射关系中,同一用户输入信息对应影像为由一个或多个影像片段组成的影像集;终端设备31根据确定的用户输入信息,基于预先建立的用户输入信息与影像、电子设备动作控制指令之间的映射关系,确定与所述用户输入信息相对应的影像和电子设备动作控制指令,具体包括:终端设备31根据确定的用户输入信息,基于预先建立的用户输入信息与影像之间的映射关系,按照预设的影像选择规则,从与确定的所述用户输入信息相对应的影像集中,选择其中的一个或多个影像片段。在一可选实施例中,所述映射关系中还包括与用户输入信息相对应的应答内容信息;终端设备31,还用根据确定的用户输入信息,基于所述映射关系,确定与所述用户输入信息相对应的应答内容,并通过语音播报或文字展示所述应答内容。实施例七图9为本发明电子设备一个实施例的结构示意图,如图9所示,所述电子设备可以包括:壳体41、处理器42、存储器43、电路板44和电源电路45,其中,电路板44安置在壳体41围成的空间内部,处理器42和存储器43设置在电路板44上;电源电路45,用于为上述电子设备的各个电路或器件供电;存储器43用于存储可执行程序代码;处理器42通过读取存储器43中存储的可执行程序代码来运行与可执行程序代码对应的程序,用于执行前述任一实施例所述的交互方法。该电子设备以多种形式存在,包括但不限于:(1)移动通信设备:这类设备的特点是具备移动通信功能,并且以提供话音、数据通信为主要目标。这类终端包括:智能手机(例如iphone)、多媒体手机、功能性手机,以及低端手机等。(2)超移动个人计算机设备:这类设备属于个人计算机的范畴,有计算和处理功能,一般也具备移动上网特性。这类终端包括:pda、mid和umpc设备等,例如ipad。(3)便携式娱乐设备:这类设备可以显示和播放多媒体内容。该类设备包括:音频、视频播放器(例如ipod),掌上游戏机,电子书,以及智能玩具和便携式车载导航设备。(4)服务器:提供计算服务的设备,服务器的构成包括处理器、硬盘、内存、系统总线等,服务器和通用的计算机架构类似,但是由于需要提供高可靠的服务,因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。(5)其他具有数据交互功能的电子设备。本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时或实现前述任一实施例所述的交互方法步骤。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(read-onlymemory,rom)或随机存储记忆体(randomaccessmemory,ram)等。以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本
技术领域
的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。当前第1页12
当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1