智能家用电器、其操作方法及使用智能家用电器的语音识别系统的制作方法

文档序号:10517806阅读:345来源:国知局
智能家用电器、其操作方法及使用智能家用电器的语音识别系统的制作方法
【专利摘要】提供了一种智能家用电器。该智能家用电器包括:语音输入单元,采集语音;语音识别单元,识别与通过语音输入单元采集的语音对应的文本;捕获单元,采集用于检测用户的面容或面部的图像;存储器单元,映射语音识别单元识别的文本以及设置功能并且存储所映射的信息;以及控制单元,基于捕获单元采集的图像信息和语音输入单元采集的语音信息的至少一种信息确定是否执行语音识别服务。
【专利说明】智能家用电器、其操作方法及使用智能家用电器的语音识别系统
技术领域
[0001]本公开文本涉及智能家用电器、其操作方法以及使用智能家用电器的语音识别系统。
【背景技术】
[0002]作为装配在家中的电子产品的家用电器包括冰箱、空调、炊具和真空清洁器。通常,为了操作这些家用电器,使用接近并直接操纵它们或者通过遥控器远程控制它们的方法。
[0003]但是,随着通信技术的最新发展,引入了一种通过使用语音输入操作家用电器的指令并使家用电器识别输入的语音内容并操作的技术。
[0004]图1为示出现有家用电器的结构及其操作方法的视图。
[0005]现有家用电器包括语音识别单元2、控制单元3、存储器4和驱动单元5。
[0006]当用户发出表示特定指令的语音时,家用电器I采集发出的语音,并且通过使用语音识别单元2解释所采集的语音。
[0007]作为采集的语音的解释结果,可以提取与该语音对应的文本。控制单元3将提取的第一文本信息与存储在存储器4中的第二文本信息进行比较,以确定该文本是否匹配。
[0008]当第一文本信息和第二文本信息匹配时,控制单元3可以识别家用电器I的与第二文本信息对应的预定功能。
[0009]然后,控制单元3可以基于识别的功能操作驱动单元5。
[0010]然而,当使用这种现有家用电器时,周围环境产生的噪声源可能错误地被识别为语音。另外,即使用户只是在家用电器附近与其他人交谈而没有发出语音识别指令的意图,这也可能被错误地识别。即,家用电器出现故障。

【发明内容】

[0011]技术问题
[0012]实施例提供了一种具有提高的语音识别率的智能家用电器、其操作方法以及使用智能家用电器的语音识别系统。
[0013]问题的解决方案
[0014]在一个实施例中,一种智能家用电器包括:语音输入单元,采集语音;
[0015]语音识别单元,识别与通过语音输入单元采集的语音对应的文本;捕获单元,采集用于检测用户的面容或面部的图像;存储器单元,映射语音识别单元识别的文本以及设置功能并且存储所映射的信息;以及控制单元,基于捕获单元采集的图像信息和语音输入单元采集的语音信息的至少一种信息确定是否执行语音识别服务。
[0016]控制单元可以包括:面部检测单元,当通过捕获单元采集关于用户的面容或面部的图像信息超过设置时间时识别到用户处于语音输入的凝视状态。
[0017]当通过语音输入单元识别到语音中存在关键词信息并且通过面部检测单元识别到用户处于凝视状态时,控制单元确定可以进入语音识别服务待机状态。
[0018]智能家用电器还可以包括:过滤器单元,从通过语音输入单元输入的语音去除噪声;以及存储器单元,预先映射通过语音输入单元输入的语音中与智能家用电器的操作有关的语音信息以及与智能家用电器的操作无关的语音信息并存储所映射的信息。
[0019]智能家用电器还可以包括:地区识别单元,基于关于通过语音输入单元采集的语音的信息确定用户的地区;以及输出单元,基于关于地区识别单元确定的地区的信息以及关于设置功能的信息输出地区自定义信息。
[0020]设置功能可以包括:按照地区划分的多个功能;并且通过输出单元输出包括多个功能中与关于地区的信息匹配的一个功能的地区自定义信息。
[0021]输出单元可以通过使用地区识别单元确定的地区的方言来输出地区自定义信息。
[0022]输出单元可以输出用于安全设置的关键词,并且语音输入单元可以设置与关键词对应的应答词。
[0023]智能家用电器还可以包括情感识别单元和输出单元,其中语音识别单元可以识别与通过语音输入单元采集的语音中的第一语音信息对应的文本;情感识别单元可以基于通过语音输入单元采集的语音中的第二语音信息提取用户的情感;并且输出单元可以基于关于情感识别单元确定的用户的情感的信息以及关于设置功能的信息输出用户自定义信息。
[0024]第一语音信息可以在采集的语音中包括语言元素;并且第二语音信息包括与用户的情感有关的非语言元素。
[0025]情感识别单元可以包括映射关于用户的语音特征的信息以及关于情感状态的信息的数据库;并且关于用户的语音特征的信息可以包括关于具有每一个用户的情感的特征的话音频谱的信息。
[0026]设置功能可以包括待推荐或选择的多个功能;并且通过输出单元输出包括多个功能中与关于用户的情感的信息匹配的一个功能的用户自定义信息。
[0027]智能家用电器还可以包括:位置信息识别单元,识别位置信息;以及输出单元,基于位置信息识别单元识别的位置信息输出关于设置功能的信息。
[0028]位置信息识别单元可以包括:GPS接收单元,从外部位置信息发送单元接收位置坐标;以及第一通信模块,可通信地连接至装配在外部服务器中的第二通信模块。
[0029]输出单元可以包括:语音输出单元,通过位置信息识别单元识别的位置,或者地区所用的方言以语音的形式输出关于设置功能的信息。
[0030]输出单元可以输出关于设置功能的多个信息中对于位置信息识别单元识别的地区来说最佳的信息。
[0031]位置信息识别单元识别的位置信息可以包括天气信息。
[0032]在另一个实施例中,一种智能家用电器的操作方法包括:通过语音输入单元采集语音;识别所采集的语音中是否包括关键词信息;通过装配在智能家用电器中的捕获单元采集关于用户的面容或面部的图像信息;以及基于关于用户的面容或面部的图像信息进入语音识别服务的待机状态。
[0033]当采集关于用户的面容或面部的图像信息超过设置时间时,可以识别到用户处于语音输入的凝视状态;以及当识别到语音中存在关键词信息并且用户处于语音输入的凝视状态时,可以进入语音识别服务的待机状态。
[0034]该方法还可以包括:基于关于所采集的语音的信息确定用户的地区;以及基于关于设置功能的信息以及关于所确定的地区的信息驱动智能家用电器。
[0035]该方法还可以包括:基于关于所确定的地区的信息输出与智能家用电器的驱动有关的地区自定义信息。
[0036]地区自定义信息的输出可以包括通过使用用户的地区所用的方言输出语音或屏
[0037]该方法还可以包括:执行安全设置,其中安全设置的执行可以包括:输出预定关键词;以及响应于所建议的关键词输入应答词。
[0038]该方法还可以包括:基于关于所采集的语音的信息提取用户的情感状态;以及基于关于用户的情感状态的信息推荐操作模式。
[0039]该方法还可以包括:通过位置信息识别单元识别智能家用电器的安装位置;以及基于关于安装位置的信息驱动智能家用电器。
[0040]智能家用电器的安装位置的识别可以包括从GPS卫星或通信基站接收GPS坐标信息。
[0041]智能家用电器的安装位置的识别可以包括当装配在智能家用电器中的第一通信模块连接至装配在服务器中的第二通信模块时查看通信地址。
[0042]在再一个实施例中,一种语音识别系统包括:移动设备,包括接收语音的语音输入单元;智能家用电器,基于通过语音输入单元采集的语音操作并且受控制;以及通信模块,装配在移动设备和智能家用电器的每一个中,其中移动设备包括通过检测移动设备的移动确定是否进入智能家用电器的语音识别服务的待机状态的移动检测单元。
[0043]移动检测单元可以包括检测移动设备的倾斜角度的改变的加速度传感器或陀螺仪传感器,其中语音输入单元可以布置在移动设备的下部;并且当用户手持移动设备将语音输入单元靠近嘴边以输入语音时,加速度传感器或陀螺仪传感器检测的角度值可以减小。
[0044]移动检测单元可以包括检测移动设备采集的外部光的强度的照明传感器;并且当用户手持移动设备将语音输入单元靠近嘴边以输入语音时,照明传感器检测的光的强度值可以增大。
[0045]在附图和以下说明中阐述了一个或更多实施例的细节。通过说明书、附图以及权利要求书,其它特征将是明显的。
[0046]发明的有益效果
[0047]根据本发明,由于用户通过语音控制智能家用电器的操作,因而可以改善可用性。
[0048]另外,识别用户的面部或用于操纵移动设备的动作,并且通过这样,确定用户是否具有发出语音指令的意图,从而可以防止语音误识别。
[0049]此外,当存在可语音识别的多个智能家用电器时,可以通过提取用户发出的指令语音的特征(特定词语)识别指令对象,并且根据所识别的指令对象,多个电子产品中仅特定的电子产品响应。因此,在电子产品的操作期间,可以防止错误通信。
[0050]另外,识别用户讲的是标准语言还是方言,并且根据识别的语音的内容或方言类型,提供自定义信息,使得用户的便利性可以得到改善。
[0051]而且,由于关于是否使用家用电器的语音识别功能的设置以及安全设置是可行的,因而可以防止任意用户使用相应的功能。因此,可以提高产品操作的可靠性。
[0052]特别是,通过使用语音特征和语音中的情感状态的映射信息,可以从用户的语音中区分快乐、愤怒、悲伤以及颤抖情感,并且基于区分的情感,可以执行或推荐家用电器的操作。
[0053]另外,由于将与空调的操作有关的语音信息和与用户的语音中的噪声有关的语音信息区分开的映射信息存储在空调中,因而可以减少用户的语音的误识别。
[0054]根据本发明,由于用户通过语音控制智能家用电器的操作,因而可用性可以得到改善。因此,工业实用性显着。
【附图说明】
[0055]图1为示出现有家用电器的结构及其操作方法的视图。
[0056]图2为示出根据本发明的第一实施例的作为智能家电的一个例子的空调的结构的视图。
[0057]图3和图4为示出空调的结构的方框图。
[0058]图5为示出根据本发明的第一实施例的智能家用电器的控制方法的流程图。
[0059]图6为示出根据本发明的第二实施例的语音识别系统的结构的示意图。
[0060]图7为示出根据本发明的第二实施例的语音识别系统的结构的方框图。
[0061]图8为示出根据本发明的第一实施例的智能家用电器的控制方法的流程图。
[0062]图9为根据本发明的第二实施例的当用户通过使用移动设备执行开始语音识别的动作时的视图。
[0063]图10为示出根据本发明的第三实施例的多个智能家用电器的结构的视图。
[0064]图11为根据本发明的第三实施例的当用户在多个智能家用电器上发出语音时的视图。
[0065]图12为根据本发明的第四实施例的当通过使用移动设备操作多个智能家用电器时的视图。
[0066]图13为示出根据本发明的实施例的智能家用电器或移动设备的结构及其操作方法的视图。
[0067]图14为示出根据本发明的实施例的显示单元的消息输出的视图。
[0068]图15为示出根据本发明的另一个实施例的显示单元的消息输出的视图。
[0069]图16A和图16B为示出根据本发明的第五实施例的语音识别功能执行的安全设置的视图。
[0070]图17为示出根据本发明的第六实施例的语音识别系统的结构及其操作方法的视图。
[0071]图18至图20为示出根据本发明的第六实施例的显示单元的消息输出的视图。
[0072]图21A至图23为示出根据本发明的另一个实施例的显示单元的消息输出的视图。
[0073]图24为示出根据本发明的第七实施例的作为智能家用电器的一个例子的空调的结构的方框图。
[0074]图25为示出根据本发明的第七实施例的智能家用电器的控制方法的流程图。
[0075]图26为示出智能家用电器的显示单元的视图。
[0076]图27为示出根据本发明的第七实施例的作为智能家用电器的另一个例子的炊具的结构的视图。
[0077]图28A和图28B为示出炊具的显示单元的视图。
[0078]图29为示出根据本发明的第八实施例的作为智能家用电器的另一个例子的洗衣机的结构的视图。
[0079]图30为示出根据本发明的第八实施例的智能家用电器的控制方法的流程图。
[0080]图31为示出根据本发明的第九实施例的语音识别系统的结构的方框图。
【具体实施方式】
[0081]在下文中,参考附图描述本发明的具体实施例。然而,本发明的构思不限于推荐的实施例,并且本领域技术人员可以推荐落入相同构思的范围内的其它实施例。
[0082]图2为示出根据本发明的第一实施例的作为智能家电的一个例子的空调的结构的视图。图3和图4为示出空调的结构的方框图。
[0083]在下文中,虽然描述了作为智能家电的一个例子的空调,应事先明白,除了空调的独特的设置功能之外,与语音识别或通信(信息提供)过程有关的构思可以应用于其它智能家用电器,例如,清洁器、炊具、洗衣机或冰箱。
[0084]参照图2至图4,根据本发明的第一实施例的空调10包括吸入部22、排放部25和42以及形成外观的壳体20。图2所示的空调10可以是安装在室内空间中用来排放空气的室内单元。
[0085]吸入部22可以形成在壳体20的后部。然后,排放部25和42包括使通过吸入部22吸入的空气排放到壳体20的前方或一侧的主排放部25和向下排放空气的下部排放部42。
[0086]主排放部25可以形成在壳体20的两侧,并且其打开/闭合程度可以通过排放叶片26进行调节。排放叶片26可以可旋转地设置在主排放部25的一侧。下部排放部42的打开/闭合程度可以通过下排放叶片44进行调节。
[0087]竖直可移动的上部排放装置30可以设置在壳体20的上部。当空调10开启时,上部排放装置30可以移动以便从壳体20的上端朝着向上方向突出,并且当空调10关闭时,上部排放装置30可以向下移动,并且可以容纳在壳体20内部。
[0088]排放空气的上部排放部32限定在上部排放装置30的前方并且调节排放空气的流动方向的上部排放叶片34装配在上部排放装置30内部。上部排放叶片34可以可旋转地设置。
[0089 ]接收用户的语音的语音输入单元110装配在壳体20的至少一侧。例如,语音输入单元110可以装配在壳体20的左侧或右侧。语音输入单元110可以称为“语音采集单元”,可以在其中采集语音。语音输入单元110可以包括麦克风。语音输入单元110可以布置在主排放单元25的后部以免受到从主排放部25排放的空气的影响。
[0090]空调10还可以包括检测室内空间中的人体或人体的移动的人体检测单元36ο例如,人体检测单元36可以包括红外传感器和摄像头中的至少之一。人体检测单元36可以布置在上部排放装置30的前部。
[0091]空调10还可以包括使带有芳香的胶囊注入的胶囊注入装置60。胶囊输入装置60可以安装在空调10的前面以可抽出。当胶囊输入到胶囊输入装置60时,布置在空调10内部的胶囊释放装置(未示出)使胶囊爆开,且特定的香气扩散开来。然后,扩散开的香气可以与从排放部25和42排放的空气一起排放到空调10的外部。根据胶囊的类型,可以提供各种不同的香气,例如,薰衣草、迷迭香或薄荷。
[0092]空调10可以包括从通过语音输入单元110输入的语音去除噪声的过滤器单元115。语音可以通过过滤器单元115过滤成对于语音信息而言容易的语音频率。
[0093]空调10包括从通过过滤器单元115的语音信息中识别使空调10操作的信息的控制单元120和150。控制单元120和150包括控制驱动单元140的操作以使空调10操作并且控制可通信地连接至主控制单元120的输出单元160将空调10的操作信息显示给外部的主控制单元120。
[0094]驱动单元140可以包括压缩机或鼓风扇。然后,输出单元160包括以图像形式显示空调10的操作信息的显示单元和以语音形式输出操作信息的语音输出单元。语音输出单元可以包括扬声器。语音输出单元可以布置在壳体20的一侧,并且可以与语音输入单元110分开设置。
[0095]然后,空调10可以包括预先映射并存储通过语音输入单元110输入的语音中与空调10的操作有关的语音信息以及与空调10的操作不相关的语音信息的存储器单元130。第一语音信息、第二语音信息和第三语音信息存储在存储器单元130中。更具体地,限定第一语音信息至第三语音信息的频率信息可以存储在存储器单元130中。
[0096]第一语音信息可以理解为与空调10的操作有关的语音信息,S卩,关键词信息。当识别到第一语音信息输入时,可以执行或停止与输入的第一语音信息对应的空调10的操作。存储器单元130可以包括与第一语音信息对应的文本信息和与该文本信息对应的关于设置功能的信息。
[0097]例如,当第一语音信息与空调10的开启对应时,随着第一语音信息被识别,开始空调10的操作。另一方面,当第一语音信息与空调10的关闭对应时,随着第一语音信息被识另U,停止空调10的操作。
[0098]作为另一个例子,当第一语音信息与空调10的一个操作模式对应时,S卩,空气调节、加热、通风或除湿,随着第一语音信息被识别,可以执行相应的操作模式。结果是,第一语音信息以及与第一语音信息对应的空调10的操作方法(开启/关闭和操作模式)可以预先映射在存储器单元130中。
[0099]第二语音信息可以包括类似于与空调10的操作有关的第一语音信息但大体理解为与空调10的操作有关的语音信息的频率信息。在本文中,与第一语音信息类似的频率信息可以理解为显示出第一语音信息与设置范围内部之间的频率差的频率信息。
[0100]当识别到第二语音信息输入时,相应的语音信息可以作为噪声信息被过滤。即,主控制单元120可以识别第二语音信息,但可能不能执行空调10的操作。
[0101]第三语音信息可以理解为与空调10的操作不相关的语音信息。第三语音信息可以理解为显示出第一语音信息与设置范围外部之间的频率差的频率信息。第二语音信息和第三语音信息可以称为“无关的信息”,因为它们是与空调10的操作无关的语音信息。
[0102]以这种方式,由于与家用电器的操作有关的语音信息以及与家用电器的操作无关的语音信息预先映射并存储在智能家用电器中,因而可以有效地执行语音识别。
[0103]空调10包括作为捕获用户的面部的捕获单元的摄像头50。例如,摄像头50可以安装在空调10的前部。
[0104]空调10还可以包括基于摄像头50捕获的图像识别到用户看着空调10以便进行语音识别的面部检测单元180。面部检测单元180可以安装在摄像头50内部或者单独安装在壳体20中,以实现摄像头50的一个功能。当摄像头50捕获用户的面部达预定时间时,面部检测单元180识别到用户凝视着空调10进行语音输入(即,凝视状态)。
[0105]空调10还包括从通过语音输入单元110采集的语音提取文本信息并基于提取的文本信息识别空调10的设置功能的语音识别单元170。
[0106]语音识别单元170或面部检测单元180识别的信息可以传递到主控制单元120。主控制单元120可以实现用户使用语音识别服务的意图,并且然后可以基于语音识别单元170和面部检测单元180识别的信息进入待机状态。
[0107]虽然语音识别单元170、面部检测单元180和主控制单元120如图4所示单独配置,然而语音识别单元170和面部检测单元180可以作为主控制单元120的一个组件进行安装。即,语音识别单元170可以理解为主控制单元120的用于执行语音识别功能的功能组件,而面部检测单元180可以理解为主控制单元120的用于执行面部检测功能的功能组件。
[0108]图5为示出根据本发明的第一实施例的智能家用电器的控制方法的流程图。
[0109]参照图5,在根据本发明的第一实施例的控制智能家用电器的过程中,语音识别服务可以设置为开启。语音识别服务理解为通过输入语音指令来控制空调10的操作的服务。例如,为了开启语音识别服务,可以操纵预定输入单元(未示出)。当然,当用户不想要使用语音识别服务时,其可以在操作SI I中设置为关闭。
[0110]然后,用户在操作S12中发出预定的语音指令。通过语音输入单元110采集发出的语音。确定采集的语音中是否包括用于激活语音识别的关键词信息。
[0111]作为存储在存储器单元130中的第一语音信息的关键词信息被理解为用户可以输入以开始语音识别服务的信息。即,即使语音识别服务设置为开启,也可以在当前时间之后输入关键词信息来表示用户要使用语音识别服务的意图。
[0112]例如,关键词信息可以包括预先映射的信息,例如,“开启空调”或“语音识别开始”。以这种方式,在开始使用语音识别服务时,通过输入关键词信息,为用户提供减少周围噪声或谈话声的准备时间。
[0113]当识别到通过语音输入单元110输入的语音指令中包括关键词信息时,识别用户是否真正有该语音指令的意图。
[0114]另一方面,当识别到语音指令中没有包括关键词信息时,可以从空调10的输出单元160输出用于重新输入关键词信息的请求消息。
[0115]用户是否真正具有执行该语音指令的意图可以基于摄像头50对用户的面容或面部的检测是否超过了设置时间来确定。例如,设置时间可以是2秒至3秒。当用户在空调10的前面凝视着摄像头50时,摄像头50捕获用户的面容或面部并且将捕获的面容或面部发送给面部检测单元180。
[0116]然后,面部检测单元180可以识别用户是否凝视了摄像头50设置时间。在操作S14和S15中,当面部检测单元180识别到用户的凝视状态时,主控制单元120确定用户具有发出语音指令的意图,并且进入语音识别待机状态。
[0117]随着进入语音识别待机状态,对通过空调10的输入单元110采集的全部语音信息进行过滤过程,然后识别是否具有语音指令。在操作S16中,当用户输入用于语音识别终止的关键词信息或者操纵附加的输入单元时,可以执行语音识别待机状态的终止。
[0118]以这种方式,由于通过根据语音输入简单识别关键词信息或者检测用户的面容或面部来确定是否激活语音识别服务,因而可以防止语音错误识别。
[0119]虽然参考图5描述了在语音关键词信息识别操作之后执行用户面部检测操作,但与此不同,也可以在用户面部检测操作之后执行语音关键词信息识别操作。
[0120]作为另一个例子,虽然参考图5描述了当满足语音关键词信息识别和用户面部检测两个条件时,进入语音识别待机,然而,也可以在满足语音关键词信息识别和用户面部检测中的任何一个条件时,进入语音识别待机。
[0121 ]在下文中,描述了本发明的第二实施例。在本实施例中,由于与第一实施例的不同在于通过移动设备执行语音识别服务,因而主要描述了该不同,并且对于与第一实施例相同的部分,并入了第一实施例的描述和附图标记。
[0122]图6为示出根据本发明的第二实施例的语音识别系统的结构的示意图。
[0123]参照图6,语音识别系统包括接收用户的语音输入的移动设备200和基于输入到移动设备200的语音而操作并受控制的空调10。空调10只是智能家用电器的一个例子。因此,本实施例的构思可适用于其它智能家用电器。移动设备200可以包括智能手机、遥控器和触屏书(tap book) ο
[0124]移动设备200可以包括可语音输入的语音输入单元220、可操纵的输入单元210、装配在前部用于显示关于移动设备200的操作状态的信息或者从移动设备200提供的信息的显示单元以及检测移动设备200的移动的移动检测单元230。
[0125]语音输入单元220可以包括传声器。语音输入单元220可以布置在移动设备200的下部。输入单元210可以包括用户可按压操纵的按钮或用户可触摸操纵的触摸面板。
[0126]然后,移动检测单元230可以包括加速度传感器或陀螺仪传感器。加速度传感器或陀螺仪传感器可以检测关于移动设备200的倾斜角度(例如,相对于地面的倾斜角度)的信息。
[0127]例如,当用户使移动设备200竖起以便凝视移动设备200的显示单元260时并且当用户放下移动设备200以便通过语音输入单元220输入语音指令时,加速度传感器或陀螺仪传感器可以根据移动设备200的竖立程度检测不同的角度值。
[0128]作为另一个例子,移动检测单元230可以包括照明传感器。照明传感器可以检测根据移动设备200的竖立程度采集的外部光的强度。例如,当用户使移动设备200竖起以便凝视移动设备200的显示单元260并且当用户放下移动设备200以便通过语音输入单元220输入语音指令时,加速度传感器或陀螺仪传感器可以根据移动设备200的竖立程度检测不同的角度值。
[0129]移动设备200还包括:控制单元250,接收输入单元210、语音输入单元230、显示单元260和移动检测单元230检测的信息并识别用户的语音指令输入意图;以及通信模块270,
与空调10通信。
[0130]例如,空调10的通信模块和移动设备200的通信模块270可以彼此直接通信。即,通过使用W1-F1-Direct技术、Ad-Hoc模式(或网络)或者蓝牙,直接通信是可能的,而不用经过无线接入点。
[0131 ] 更详细地,WiF1-Direct可以表示通过使用诸如802.1la、b、g和η等通信标准而不论是否安装接入点的高速通信技术。这种技术理解为不用互联网网络而是通过使用W1-Fi将空调10和移动设备200无线连接的通信技术。
[0132]Ad-Hoc模式(或Ad-Hoc网络)是只包括移动主机而无固定有线网络的通信网络。由于主机的移动没有限制,且其不需要有线网络和基站,因而可以进行快速网络配置,并且其成本低廉。即,没有接入点的无线通信是可能的。因此,在Ad-Hoc模式下,在没有接入点的情况下,空调10与移动设备200之间的无线通信是可能的。
[0133]在蓝牙通信中,作为短距离无线通信方法,在空调10的通信模块(第一蓝牙模块)与移动设备的通信模块270(第二蓝牙模块)之间的无线通信通过配对过程在特定距离内是可能的。
[0134]作为另一个例子,空调10和移动设备200可以通过接入点和服务器(未示出)或者有线网络彼此通信。当识别到用户的语音指令意图时,控制单元250可以通过通信模块270将进入语音识别服务待机状态的信息发送给空调10。
[0135]图8为示出根据本发明的第二实施例的智能家用电器的控制方法的流程图。图9为根据本发明的第二实施例的当用户通过使用移动设备执行启动语音识别的动作时的视图。
[0136]参照图8,在根据本发明的第二实施例控制智能家用电器的过程中,语音识别服务可以在操作S21中设置为开启。
[0137]然后,用户可以通过操纵输入单元210或语音输入单元220输入或发出语音识别待机准备状态的指令。当识别到输入单元210的输入或者识别到通过语音输入单元220采集的语音中包括语音识别待机的关键词信息时,确定进入“语音识别待机准备状态”。
[0138]如第一实施例中描述的,作为存储在存储器单元130中的第一语音信息的关键词信息被理解为用户可以在操作S22和S23中输入用于开始语音识别服务的信息。
[0139]当识别到进入“语音识别待机准备状态”时,识别用户是否真正具有关于该语音指令的意图。另一方面,当没有识别到进入“语音识别待机准备状态”时,可以再次执行操作S22和下面的操作。
[0140]用户是否真正具有有关该语音指令的意图可以基于移动检测单元230中的检测值是否改变来确定。例如,当移动检测单元230包括加速度传感器或陀螺仪传感器时,识别加速度传感器或陀螺仪传感器检测的值是否改变。该变化可以取决于使移动设备200竖立的倾斜值(或范围)是否变为使移动设备200平放的倾斜值(或范围)。
[0141]如图9所示,当用户手持移动设备200凝视显示单元260时,移动设备200可能稍微竖立起来一些。此时,移动设备200与地面所呈的角度可以是α?。
[0142]另一方面,当用户手持移动设备200通过布置在移动设备200的下部的语音输入单元220输入预定语音指令时,移动设备200可能稍微平放一些。此时,移动设备200与地面所呈的角度可以是α2。然后,01>(12。(11和α2的值在预定设置范围内可以是预定的。
[0143]当加速度传感器或陀螺仪传感器检测的值从α?的设置范围变成α2的设置范围时,识别到用户将语音输入单元220靠近用户的嘴边。在这种情况下,识别到用户具有关于语音指令的意图。
[0144]作为另一个例子,当移动检测单元230包括照明传感器时,识别照明传感器检测的值是否改变。该变化可以取决于当移动设备200竖立时采集的光的强度(第一强度)是否变为当移动设备200平放时采集的光的强度(第二强度)。
[0145]在本文中,第二强度可以形成为大于第一强度。即,当移动设备200平放时从外部采集的光的强度可以大于当移动设备200竖立时从外部采集的光的强度。在本文中,第一强度和第二强度的值在预定设置范围内可以是预定的。
[0146]当检测到照明传感器检测的值从第一强度的设置范围变为第二强度的设置范围时,确定用户将语音输入单元220更靠近用户的嘴边。在这种情况下,识别到用户在操作S24和S25中具有发出语音指令的意图。
[0147]通过这种方法,当识别到用户具有发出语音指令的意图时,可以进入语音识别待机状态。随着进入语音识别待机状态,对通过空调10的语音输入单元220采集的全部语音信息进行过滤过程,然后识别是否具有语音指令。
[0148]当用户以语音形式输入用于语音识别终止的关键词信息或者操纵附加的输入单元时,可以执行语音识别待机状态的终止。以这种方式,由于通过检测移动设备的移动来确定是否根据简单的语音输入来识别关键词信息或者是否激活语音识别服务,因而可以防止在操作S26中的语音错误识别。
[0149]虽然参考图8描述了在用户的按钮(触摸)输入或语音输入操作之后执行移动设备的移动检测操作,然而也可以在移动设备的移动检测操作之后执行用户的按钮(触摸)输入或语音输入操作。
[0150]作为另一个例子,虽然参考图8描述了当满足用户的按钮(触摸)输入或语音输入操作和移动设备的移动检测操作两个条件时,进入语音识别待机,然而,当满足用户的按钮(触摸)输入或语音输入操作和移动设备的移动检测操作中的任何一个条件时,也可以进入语音识别待机。
[0151]图10为示出根据本发明的第三实施例的多个智能家用电器的结构的视图。图11为根据本发明的第三实施例的当用户在多个智能家用电器上发出语音时的视图。
[0152]参照图10,根据本发明的第三实施例的语音识别系统10包括可语音识别的多个智能家用电器310、320、330和340。例如,多个智能家用电器310、320、330和340可以包括清洁器310、炊具320、空调330和冰箱340。
[0153]多个智能家用电器310、320、330和340可以处于接收语音的待机状态。当用户在每一个智能家用电器中设置语音识别模式时,可以进入待机状态。然后,可以通过预定输入单元的输入或者设置语音的输入来完成语音识别模式的设置。
[0154]多个智能家用电器310、320、330和340可以一起布置在预定空间中。在这种情况下,即使用户朝着多个智能家用电器310、320、330和340中特定的一个发出预定语音指令,另一个家用电器可对该语音指令作出反应。因此,本实施例特征在于当用户发出预定语音时,适当地估计或确定所命令的目标家用电器。
[0155]更详细地,参照图11,智能家用电器310、320、330和340的每一个包括语音输入单元510、语音识别单元520和指令识别单元530。
[0156]语音输入单元510可以采集用户发出的语音。例如,语音输入单元510可以包括麦克风。语音识别单元520从采集的语音中提取文本。指令识别单元530通过使用提取的文本确定是否存在使用了与每一个家用电器的操作有关的特定词语的文本。指令识别单元530可以包括存储与该特定词语有关的信息的存储器。
[0157]如果采集的语音中包括使用了特定词语的语音,则指令识别单元530可以识别到相应的家用电器是作为用户的指令目标的家用电器。语音识别单元520和指令识别单元530在功能上进行了区分描述,但是它们可以装配在一个控制器的内部。
[0158]识别为指令目标的家用电器可以输出表明用户的指令目标是否为该家用电器本身的消息。例如,当识别为指令目标的家用电器是空调330时,可以输出“是否开启空调?”的语音或文本消息。在此,输出的语音或文本消息称为“识别消息”。
[0159]据此,在期望空调330的操作时,用户可以输入空调为目标的识别或确认消息,例如,“空调操作”或“好(0K)”的简短消息。在此,所输入的语音消息称为“确认消息”。
[0160]另一方面,如果采集的语音中不包括使用了特定词语的语音,则指令识别单元530可以识别到相应的家用电器(即,清洁器310、炊具320和冰箱340)从用户的指令目标中排除。然后,即使在识别之后的设置时间内输入了用户的语音,从指令目标中排除的家用电器不会被识别为用户的指令目标,并且不会对用户的语音作出反应。
[0161]图11示出当识别到与多个家用电器中的空调330对应的语音输入时,输出识别消息,并且执行响应于输入的指令的操作。
[0162]此外,当识别为指令目标的家用电器多于一个时,如上文提到的,每一个家用电器可以输出表明用户的指令目标是否为每一个家用电器本身的确认消息。然后,用户可以通过输入多个家用电器中将被命令的家用电器的类型的语音来指定作为指令目标的家用电器。
[0163]例如,当家里同时具有可语音识别的清洁器310、炊具320、空调330和冰箱340时,当用户发出语音“启动空气调节”时,空调330识别到使用了特定的词语“空气调节”,并且还识别到该家用电器本身是指令目标。当然,关于文本“空气调节”的信息可以预先存储在空调330的存储器中。
[0164]另一方面,由于相对于清洁器310、炊具320和空调330,词语“空气调节”不是相应的家用电器的特定词语,因而识别到家用电器310、320和330排除在指令目标之外。
[0165]作为另一个例子,当用户发出语音“升高温度”时,炊具320、空调330和冰箱340可以识别到使用了特定的词语“温度”。也就是说,多个家用电器320、330和340可以识别到它们是指令目标。
[0166]此时,多个家用电器320、330和340可以输出表明用户的指令目标是否为家用电器320、330和340本身的消息。然后,当用户输入针对特定家用电器(例如,“空调”)的语音时,指定指令目标为空调330ο当以上述方式指定指令目标时,可以通过用户与相应的家用电器之间的交互式通信来控制家用电器的操作。
[0167]以这种方式,当存在可语音识别的多个智能家用电器时,可以通过提取用户发出的语音的特征(特定词语)来识别指令对象,并且仅多个电子产品中的特定电子产品根据所识别的指令对象响应。因此,可以在电子产品的操作期间防止错误通信。
[0168]图12为根据本发明的第四实施例的当通过使用移动设备操作多个智能家用电器时的视图。
[0169]参照图12,根据本发明的第四实施例的语音识别系统10包括接收用户的语音输入的移动设备400、基于输入到移动设备400的语音操作并受控制的多个家用电器310、320、330和340以及可通信地连接移动设备400和多个家用电器310、320、330和340的服务器450。
[0170]移动设备400装配有参考图11描述的语音输入单元510,并且服务器450包括语音识别单元520和指令识别单元530。
[0171]移动设备400可以包括连接至服务器450的应用程序。一旦执行该应用程序,可以在移动设备400中激活用户的语音输入的语音输入模式。
[0172]当用户的语音通过移动设备400的语音输入单元510输入时,输入的语音传递给服务器450,并且服务器450在语音识别单元520和指令识别单元530操作时确定哪一个家用电器是语音指令的目标。
[0173]当基于确定结果将特定家用电器识别为指令目标时,服务器450将识别结果通知给该特定家用电器。被通知该结果的家用电器响应于用户的指令。例如,当空调330识别为指令目标并且被通知结果时,空调330可以输出诸如“开启空调? ”的识别消息。据此,用户可以输入诸如“好”或“空调操作”等确认消息。与此有关的,使用了参考图11描述的内容。
[0174]图13为示出根据本发明的实施例的智能家用电器或移动设备的结构及其操作方法的视图。图13所示的结构可以装备在智能家用电器或移动设备中。在下文中,例如,将描述智能家用电器。
[0175]参照图13,根据本发明的实施例的智能家用电器包括接收用户的语音输入的语音输入单元510和从通过语音输入单元510采集的语音中提取文本的语音识别单元520。语音识别单元520可以包括映射语音和文本的频率的存储器单元。
[0176]该智能家用电器还可以包括提取从语音输入单元510输入的语音的语调以确定语音的地方色彩(即,确定使用了哪个地区方言)的地区识别单元540。地区识别单元540可以包括多个地区使用的方言的数据库。该数据库可以存储关于在说方言时识别的语调(即,独特的频率变化)的信息。
[0177]通过语音识别单元520提取的文本以及有关地区识别单元540所确定的地区的信息可以传递给控制单元550。
[0178]该智能家用电器还可以包括映射语音识别单元520提取的文本以及与文本对应的功能并将它们存储的存储器单元560。
[0179]控制单元550可以基于存储器单元560中存储的信息识别与语音识别单元520提取的文本对应的功能。然后,控制单元550可以控制装配在家用电器中的驱动单元590以执行所识别的功能。
[0180]例如,驱动单元560可以包括清洁器的吸入电机、炊具的电机或加热器、空调的压缩机电机、或冰箱的压缩机电机。
[0181]该家用电器还包括将地区自定义信息输出到或提供给屏幕的显示单元570或者基于与语音识别单元520提取的文本对应的设置功能以及地区识别单元540确定的地区信息输出语音的语音输出单元580。显示单元570和语音输出单元580结合起来可以称为“输出单
--7?
J L ο
[0182]S卩,设置功能可以包括按照地区划分的多个功能,并且可以输出多个功能中与地区识别单元540确定的地区信息匹配的一个功能。总之,识别的功能和确定的地方色彩的结合信息可以输入到显示单元570或语音输出单元580(地区自定义信息提供服务)。
[0183]此外,该智能家用电器还包括用以执行地区自定义信息提供服务的模式的可选择模式设置单元565。当模式设置单元565处于“开启”状态时,用户可以使用地区自定义信息提供服务。当然,当模式设置单元565处于“关闭”状态时,用户不可以使用地区自定义信息提供服务。
[0184]在下文中,通过参照附图,描述了输出到显示单元570的地区自定义信息的内容。
[0185]图14为示出根据本发明的实施例的显示单元的消息输出的视图。
[0186]参照图14,显示单元570可以装配在炊具320、冰箱340或移动设备400中。在下文中,例如,描述了装配在冰箱340上的显示单元570。
[0187]炊具320或冰箱340可以为用户提供关于预定烹饪的食谱的信息。换句话说,炊具320或冰箱340可以包括存储关于至少一种烹饪的食谱信息的存储器单元。
[0188]当地区自定义信息提供服务用于获得食谱信息时,用户可以在冰箱340的模式设置单元565为开启状态时提供输入。
[0189]例如,当地区自定义信息提供服务启动时,诸如“有什么能帮您的吗”等引导消息(即,语音输入请求消息)可以显示在显示单元570的屏幕上。当然,语音输入请求消息可以通过语音输出单元580以语音形式输出。
[0190]如图14所示,对于语音输入请求消息,用户可以输入特定食谱,例如,如图14所示,输入语音“牛肉萝卜汤食谱”。冰箱340接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本。因此,显示单元570可以显示画面“牛肉萝卜汤食谱”。
[0191]然后,冰箱340从用户输入的语音中提取语调并且识别与提取的语调对应的频率变化,使得冰箱340可以识别特定地区的方言。
[0192]例如,当用户用庆尚道口音输入语音“牛肉萝卜汤食谱”时,冰箱340识别庆尚道方言,并且准备提供对于庆尚道地区来说最佳的食谱。也就是说,按照地区来说,存在许多种牛肉萝卜食谱,可以推荐匹配识别的地区(庆尚道)的一个食谱。
[0193]结果是,冰箱340可以识别到庆尚道地区的用户想要收到“牛肉萝卜汤食谱”,然后冰箱340可以读取有关庆尚道特色萝卜食谱的信息以将它提供给用户。例如,显示单元570可以显示消息“这就是庆尚道特色红牛肉萝卜汤食谱”。另外,语音消息可以通过语音输出单元580输出。
[0194]描述了另一个例子。
[0195]当智能家用电器是调节室内空间的空调并且识别到用户的地区是凉爽地区(例如,江原道)时,随着用户输入“降低温度”语音指令,假设寒冷地区的用户喜欢凉爽的天气,智能家用电器可以操作将相对较低的温度设置为设置温度。然后,关于与设置温度调节为相对较低的温度(例如,20 °C)有关的内容的信息可以输出到输出单元570和580。
[0196]根据这种结构,在用户没有输入特定信息的情况下,识别用户讲的方言并且基于识别的方言信息提供地区自定义信息。因此,可以改善可用性。
[0197]图15为示出根据本发明的另一个实施例的显示单元的消息输出的视图。
[0198]参照图15,根据本发明的另一个实施例的显示单元570可以装配在空调330或移动设备400中。当地区自定义信息提供服务用于输入操作空调330的指令时,用户可以在空调330的模式设置单元545处于开启状态时提供输入。
[0199]例如,当地区自定义信息提供服务启动时,诸如“有什么能帮您的吗”等引导消息(即,语音输入请求消息)可以显示在显示单元570的屏幕上。当然,语音输入请求消息可以通过语音输出单元580以语音形式输出。
[0200]对于语音输入请求消息,用户可以输入操作空调330的指令,例如,如图15所示,输入语音“开启空调(方言)”。空调330接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本。因此,显示单元570可以显示屏幕“开启空调(方言)”。
[0201]然后,空调330从用户输入的语音中提取语调并且识别与提取的语调对应的频率变化,使得空调330可以识别特定地区的方言。例如,当用户用全罗道口音输入语音“开启空调”时,空调330可以识别全罗道方言,并且然后可以用全罗道方言为用户生成响应消息。
[0202]S卩,空调330识别到全罗道地区的用户想要“空调操作”并从存储器单元560读取有关执行空调操作的消息的方言信息以将它提供给用户。例如,显示单元570可以使用全罗道方言输出消息,例如,“天气很热,快点开启空调(全罗道方言)”。另外,语音消息可以通过语音输出单元580输出。
[0203]通过这种结构,识别用户讲的方言并且基于识别的方言信息,要提供给用户的信息用方言来提供,使用户可以有亲密感。
[0204]图16A和图16B为示出根据本发明的第五实施例的语音识别功能执行的安全设置的视图。
[0205]参照图16A和图16B,根据本发明的第五实施例,用户的安全设置在语音识别系统中是可行的。安全设置可以直接通过智能家用电器或者通过使用移动设备来完成。在下文中,例如,描述了通过使用移动设备的安全设置和认证过程。
[0206]当用户想要使用地区自定义信息提供服务时,可以在移动设备400的模式设置单元565处于开启状态时提供输入。随着在模式设置单元565处于开启状态时提供输入,可以执行设置初始安全的操作。
[0207]移动设备400可以输出预定关键词语消息。例如,如图所示,关键词语“日历”可以通过移动设备400的屏幕以文本的形式输出,或者可以通过扬声器以语音的形式输出。
[0208]然后,第一引导消息可以与输出的关键词消息一起输出。第一引导消息包括用于输入关键词的应答词的内容。例如,第一导向消息可以包括内容“当看到下一个词时请说出想到的词”。然后,第一引导消息可以通过移动设备400的屏幕以文本的形式输出,或者可以通过扬声器以语音的形式输出。
[0209]对于第一引导消息,用户可以以语音的形式输入将要设置为密码的词语。例如,如图所示,可以输入应答词“猫”。当移动设备400识别应答词时,通知应答词被存储的第二引导消息可以通过屏幕或语音输出。
[0210]以这种方式,当在完成安全设置之后使用地区自定义信息提供服务时,如图16B所示,可以执行通过输入关键词的应答词进行认证的过程。
[0211 ]更详细地,当移动设备400的模式设置单元565处于开启状态时提供输入时,移动设备400输出关键词消息,例如“日历”,并且输出通知需要认证的第三引导消息,例如,“此功能需要用户认证”。关键词消息和第三引导消息可以通过移动设备400的屏幕或语音输出。
[0212]对于关键词,用户可以输入预定的设置应答词,例如,语音“猫”。当识别关键词与应答词匹配时,移动设备400可以输出通知认证成功的第四引导消息,例如,语音消息“认证”的文本。
[0213]以这样的方式,在设置安全以使用地区自定义信息提供服务后,预定应答词配置为在使用阶段输入,使得除了指定用户之外其他用户的服务访问和使用受到限制。
[0214]图17为示出根据本发明的第六实施例的语音识别系统的结构及其操作方法的视图。
[0215]参照图17,根据本发明的第六实施例的智能家用电器包括接收用户的语音输入的语音输入单元510和从通过语音输入单元510采集的语音信息以文本的形式提取语言元素的语音识别单元520。语音识别单元520可以包括映射语音和文本的频率的存储器单元。
[0216]该智能家用电器还可以包括从通过语音输入单元510输入的语音信息提取用户的情感信息的情感识别单元540。情感识别单元540可以包括映射关于用户的语音特征的信息和关于情感状态的信息的数据库。关于用户的语音特征的信息可以包括关于具有每一个用户的情感的显著特征的话音频谱的信息。
[0217]话音频谱表示根据语音的频率的分布,并且可以理解为图案化每种情感的频率分布,即,诸如欢乐、愤怒、悲伤等情感。因此,当用户发出带有特定情感的语音时,情感识别单元540解释频率变化以提取用户的情感。
[0218]通过语音识别单元520提取的文本以及关于情感识别单元540确定的情感的信息可以传递给控制单元550。该智能家用电器还可以包括映射语音识别单元520提取的文本以及与文本对应的功能并将它们存储的存储器单元560。
[0219]控制单元550可以基于存储器单元560中存储的信息识别与语音识别单元520提取的文本对应的功能。然后,控制单元550可以控制装配在家用电器中的驱动单元590以执行所识别的功能。
[0220]该家用电器还包括将用户自定义信息输出到或提供给屏幕的显示单元570或者基于与语音识别单元520提取的文本对应的设置功能以及情感识别单元540提取的情感信息来输出语音的语音输出单元580。
[0221]S卩,设置功能可以包括根据用户的情感划分的多个功能并且可以输出多个功能中与情感识别单元540确定的情感信息匹配的一个功能。总之,显示单元570或语音输出单元580可以输出与文本对应的功能和用户的情感信息的结合信息(用户自定义信息提供服务)。
[0222]此外,该智能家用电器还包括用以执行用户自定义信息提供服务的模式的可选择模式设置单元565。当模式设置单元565处于“开启”状态时,用户可以使用用户自定义信息提供服务。当然,当模式设置单元565处于“关闭”状态时,用户不可以使用用户自定义信息提供服务。
[0223]图18至图20为示出根据本发明的第六实施例的显示单元的消息输出的视图。图18至图20所示的显示单元570可以装配在空调330或移动设备400中。在下文中,例如,描述了装配在空调330上的显示单元570。
[0224]首先,参照图18,当通过使用空调330调节室内空间的空气来使用用户自定义信息提供服务时,用户可以在模式设置单元565处于开启状态时提供输入。
[0225]例如,当用户自定义信息提供服务启动时,诸如“有什么能帮您的吗”等引导消息(即,语音输入请求消息)可以显示在显示单元570的屏幕上。当然,语音输入请求消息可以通过语音输出单元580以语音形式输出。
[0226]如图18所示,对于语音输入请求消息,用户可以输入特定操作指令,例如,如图18所示,输入语音“启动空调”。空调330接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本(第一语音信息)。因此,显示单元570可以显示画面“启动空调”。
[0227]然后,空调330可以通过操作情感识别单元540从用户输入的语音中提取情感信息(第二语音信息)。更详细地,关于从用户的语音检测出的频率变化的信息可以与关于具有人的每种情感的特征的话音频谱的信息进行比较。然后,彼此对应的信息可以基于比较结果相匹配,因此,可以获得用户的语音具有的情感信息。
[0228]例如,当用户用愤怒的语音输入“启动空调”时,情感识别单元540可以通过从用户的语音检测出的频率变化识别到用户发出的语音带有愤怒情感。空调330将第一语音信息和第二语音信息结合起来识别用户想要的功能并且推荐匹配用户情感的预定功能,即,特定操作模式。
[0229]S卩,如图18所示,在空调330的操作根据用户的指令启动时,在考虑因炎热天气带来恼闷情感的情况下,推荐操作模式。例如,显示单元570可以输出消息“哦!很热吗?以最低温度启动空调并且开启直接风?”。
[0230]在本文中,直接风理解为空气的排放方向形成为直接朝向空调330的人体检测单元36检测出的用户的位置的模式。即,设置温度被设置为最低温度来执行空气调节功能并且冷风直接到达用户,使用户可以立即感到凉爽。当输入用户接受或选择输出消息的语音(例如,“是”)时,空调330将此识别并在推荐模式下操作。
[0231]参考图18描述了在空调330向用户推荐特定模式并且识别了用户接受推荐模式之后,空调330根据该特定模式操作。然而,与此不同,推荐模式可以立即操作。
[0232]然后,参照图19,当用户自定义信息提供服务启动并且语音输入请求消息输出到显示单元570的屏幕或者以语音的形式输出时,用户可以输入语音输入请求消息的特定指令,例如,语音“升高温度”。
[0233]空调330接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本(第一语音信息)。因此,显示单元570可以显示屏幕“升高温度”。
[0234]然后,空调330可以通过操作情感识别单元540从用户输入的语音中提取情感信息(第二语音信息)。例如,当用户用颤抖的语音输入“升高温度”时,情感识别单元540可以通过从用户的语音检测出的频率变化识别到用户由于寒冷而发出带有颤抖语音的语音。
[0235]空调330将第一语音信息和第二语音信息结合起来识别用户想要的功能并且推荐匹配用户情感的预定功能,即,特定操作模式。即,如图19所示,在空调330的操作根据用户的指令启动时,在考虑寒冷颤抖状态的情况下,推荐操作模式。例如,显示单元570可以输出消息“感觉冷吗?将空调温度设置为26度。执行动作检测,是否开启间接风?”。
[0236]在本文中,间接风理解为通过避开空调330的人体检测单元36(参照图2)检测出的用户的位置间接向用户提供空气的排放方向的模式。即,设置温度上升到相对较高的温度以执行冷却或加热功能,并且风间接吹向用户,使用户可以感到舒适而不觉得寒冷。当输入用户接受输出消息的语音(例如,“是”)时,空调330将此识别并在推荐模式下操作。
[0237]然后,参照图20,当用户自定义信息提供服务启动并且语音输入请求消息输出到显示单元570的屏幕或者以语音的形式输出时,用户可以输入语音输入请求消息的特定指令,例如,语音“启动空调”。
[0238]空调330接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本(第一语音信息)。因此,显示单元570可以显示屏幕“启动空调”。
[0239]然后,空调330可以通过操作情感识别单元540从用户输入的语音中提取情感信息(第二语音信息)。例如,当用户用悲伤的语音输入“启动空调”时,情感识别单元540可以通过从用户的语音检测出的频率变化识别到用户发出的语音带有悲伤情感。
[0240]空调330将第一语音信息和第二语音信息结合起来识别用户想要的功能并且推荐匹配用户情感的预定功能,即,特定操作模式。即,如图20所示,空调330的操作根据用户的指令启动,在考虑用户的悲伤情感状态的情况下,推荐操作模式。例如,显示单元570可以输出消息“启动空调。先生,使用芳香功能恢复精神。是否启动芳香功能?”。
[0241]在本文中,芳香功能理解为插入空调330的胶囊注入装置60(参见图2)的胶囊起作用使得排放的风带有香气的功能。即,空调330识别到用户的悲伤情感,并且然后将用于恢复精神的香气扩散到室内空间。当输入用户接受输出消息的语音(例如,“是”)时,空调330将此识别并在推荐模式下操作。
[0242]图21A至图23为示出根据本发明的另一个实施例的显示单元的消息输出的视图。图2IA至图23所示的显示单元570可以装配在炊具320、冰箱340或移动设备400中。在下文中,例如,描述了装配在冰箱340上的显示单元570。
[0243]首先,参照图21A,当用户自定义信息提供服务启动并且语音输入请求消息输出到显示单元570的屏幕或者以语音的形式输出时,用户可以输入语音输入请求消息的特定指令,例如,语音“食谱搜索”。
[0244]冰箱340接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本(第一语音信息)。因此,显示单元570可以显示屏幕“食谱搜索”。然后,冰箱340可以通过操作情感识别单元540从用户输入的语音中提取情感信息(第二语音信息)。
[0245]例如,当用户用悲伤的语音输入“食谱搜索”时,情感识别单元540可以通过从用户的语音检测出的频率变化识别到用户发出的语音带有悲伤情感。
[0246]冰箱340将第一语音信息和第二语音信息结合起来识别用户想要的功能并且推荐匹配用户情感的预定功能,即,特定食谱。即,如图21A所示,在根据用户的指令搜索食谱时,在考虑悲伤情感的情况下,推荐多个食谱中的一个。例如,显示单元570可以输出消息“感到沮丧吗?吃甜食会让你感觉好点。是否搜索甜食食谱? ”当用户输入输出消息的接受语音(例如,“是”)时,冰箱340将此识别并在输出消息“甜食食谱搜索”的同时推荐特定食谱。
[0247]图21B的情形与图2IA的类似,但是当用户拒绝冰箱340推荐的特定食谱时,例如,当用户输入拒绝显示单元570输出的“是否搜索甜食食谱?”消息的语音(S卩,不)时,可以输出语音输入请求消息“说出要搜索的食物配料”。
[0248]如图21B所示,语音输入请求消息“有什么能帮您的吗?”可以定义为“第一消息”,并且语音输入请求消息“告诉要搜索的食物配料”可以定义为“第二消息”。针对第二消息,用户可以输入另一个可选功能的语音,即,另一种食物配料,以接收关于期望食谱的信息。
[0249]然后,参照图22,当用户自定义信息提供服务启动并且语音输入请求消息输出到显示单元570的屏幕或者以语音的形式输出时,用户可以输入语音输入请求消息的特定指令,例如,语音“食谱搜索”。
[0250]冰箱340接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本(第一语音信息)。因此,显示单元570可以显示屏幕“食谱搜索”。
[0251]然后,冰箱340可以通过操作情感识别单元540从用户输入的语音中提取情感信息(第二语音信息)。例如,当用户用愤怒的语音输入“食谱搜索”时,情感识别单元540可以通过从用户的语音检测出的频率变化识别到用户发出的语音带有愤怒情感。
[0252]冰箱340将第一语音信息和第二语音信息结合起来识别用户想要的功能并且推荐匹配用户情感的功能,即,特定食谱。即,如图22所示,在根据用户的指令搜索食谱时,在考虑愤怒情感的情况下,推荐多个食谱中的一个。例如,显示单元570可以输出消息“空着肚子是否感到心情不爽吗?是否搜索快速烹饪食谱?”。
[0253]当用户输入输出消息的接受语音(例如,“是”)时,冰箱340将此识别并在输出消息“快速烹饪食谱搜索”时推荐特定食谱。当然,在图22的情况下,如参考图21B所描述的,当用户拒绝推荐的食谱时,冰箱340可以输出第二消息以从用户接收期望的特定食谱。
[0254]然后,参照图23,当用户自定义信息提供服务启动并且语音输入请求消息输出到显示单元570的屏幕或者以语音的形式输出时,用户可以输入语音输入请求消息的特定指令,例如,语音“食谱搜索”。
[0255]冰箱340接收并识别用户的语音指令,并提取与所识别的语音指令对应的文本(第一语音信息)。因此,显示单元570可以显示屏幕“食谱搜索”。
[0256]然后,冰箱340可以通过操作情感识别单元540从用户输入的语音中提取情感信息(第二语音信息)。例如,当用户用愉快的语音输入“食谱搜索”时,情感识别单元540可以通过从用户的语音检测出的频率变化识别到用户发出的语音带有愉快情感。
[0257]冰箱340将第一语音信息和第二语音信息结合起来识别用户想要的功能并且推荐匹配用户情感的功能,即,特定食谱。即,如图23所示,在根据用户的指令搜索食谱时,在考虑愉快情感的情况下,推荐多个食谱中的一个。例如,显示单元570可以输出消息“心情不错吗?制作特色食物。是否搜索特色食物食谱?”。
[0258]当用户输入输出消息的接受语音(例如,“是”)时,冰箱340将此识别并在输出消息“特色食物食谱搜索”时推荐特定食谱。当然,在图23的情况下,如参考图21B所描述的,当用户拒绝推荐的食谱时,冰箱340可以输出第二消息以从用户接收期望的特定食谱。
[0259]以这种方式,由于智能家用电器从用户的语音提取情感信息,并且推荐多个功能中与用户的情感匹配的特定功能,而不是从用户的语音指令提取文本并简单地执行设置功能,可以增加用户的便利性并且可以改善产品满意度。
[0260]图24为示出根据本发明的第七实施例的作为智能家用电器的一个例子的空调的结构的方框图。在下文中,虽然描述了作为智能家电的一个例子的空调,应事先明白,除了空调的独特的设置功能之外,与语音识别或通信(信息提供)过程有关的构思可以应用于其它智能家用电器。
[0261]参照图24,根据本发明的第七实施例的空调600包括与外部设备通信的多个通信单元680和690。多个通信单元680和690包括与服务器700通信的第一通信模块680和从位置信息发送单元695接收关于空调600的位置的信息的位置信息接收单元690。
[0262]第一通信模块680可以以有线或无线方式与服务器700的第二通信模块780通信。例如,空调600的第一通信模块680和服务器700的第二通信模块780可以彼此直接通信或者可以通过接入点、或通过有线网络彼此通信。在本实施例中,空调600的第一通信模块680与服务器700的第二通信模块780之间的通信方法没有限制。
[0263]而且,空调600的第一通信模块680和服务器700的第二通信模块780的每一个可以具有唯一的互联网协议(IP)地址。因此,当第一通信模块680和第二通信模块780可通信地彼此连接时,服务器700可以通过识别第一通信模块680来识别空调600的安装位置或地区。
[0264]例如,位置信息接收单元690可以是GPS接收单元。然后,位置信息发送单元695配置为将关于位置信息接收单元690或空调600的位置的信息发送给位置信息接收单元690。例如,关于位置的信息可以包括位置坐标值。
[0265]位置信息发送单元695可以是GPS卫星或通信基站。位置信息接收单元690可以周期性地或在特定时间点将预定信号发送给位置信息发送单元695,并且位置信息发送单元695可以将关于位置的信息发送给位置信息接收单元690。因为第一通信模块680和位置信息接收单元695识别空调600的位置或地区,它们可以称为“位置信息识别单元”。
[0266]服务器700还可以包括服务器存储器770。服务器存储器770可以存储操作空调600所需的信息,例如,关于空调600或第一通信模块680的位置(地区)的信息、或者与该位置(地区)对应的天气信息。当第一通信模块680和第二通信模块780可通信地连接时,存储在服务器存储器770中的信息可以发送到空调700。
[0267]以这种方式,关于空调600的位置的信息可以基于关于第一通信模块680和第二通信模块780可通信地连接时的通信地址的信息或者从位置信息接收单元690接收的信息来识别。
[0268]例如,当第一通信模块680和第二通信模块780没有可通信地连接时,空调600可以通过位置信息接收单元690接收关于位置的信息。另一方面,当位置信息接收单元690不处于开启状态时,空调600可以通过第一通信模块680和第二通信模块780的通信连接接收关于位置的信息。
[0269]图25为示出根据本发明的第七实施例的智能家用电器的控制方法的流程图。
[0270]参照图25,在根据本发明的第七实施例控制智能家用电器的过程中,位置识别服务可以设置为开启。位置识别服务理解为当第一通信模块680和第二通信模块780可通信地连接或者位置信息接收单元690接收位置信息时识别空调600的安装位置或地区并且基于关于识别的位置或地区的信息执行智能家用电器的功能的服务。然后,在操作S31和S32中执行使用位置识别服务的应用程序。
[0271]通过语音输入单元110(参见图2)输入用户的语音指令。然后,在操作S33和S34中通过第一通信模块680和第二通信模块780的通信连接以及位置信息接收单元690识别关于智能家用电器的位置的信息。
[0272]通过语音输入单元110输入的语音指令可以与存储在存储器单元130(参见图3)中的多条语音信息中的至少一条语音信息对应,并且对应的语音信息可以以文本的形式提取。然后,通过使用提取的文本,可以在操作S35中识别家用电器执行的多个设置功能中的预定设置功能。
[0273]然后,当智能家用电器执行识别的设置功能时,可以考虑关于智能家用电器的位置的信息。然后,关于设置功能的信息和关于位置的信息结合起来使得可以给用户提供预定信息。
[0274]例如,当智能家用电器位于一地区时,相应地区使用的语言(S卩,方言)可以引导关于设置功能的信息。作为另一个例子,可以在操作S36中引导对于智能家用电器的位置来说最佳的设置功能的信息。与此有关的,在下文中,描述了关于智能家用电器提供的设置功能的信息的例子。
[0275]图26为示出智能家用电器的显示单元的视图。图26示出了当输出与位置信息结合的关于设置功能的信息时的视图。
[0276]参照图26,可以从空调600的输出单元660输出用于请求语音输入的消息。例如,可以从输出单元660输出消息“有什么能帮您的吗?”。此时,语音和文本消息可以一起输出。
[0277]对此,用户可以发出语音指令“升高温度”。发出的语音通过语音输入单元110输入并且过滤,然后传递到主控制单元120(参见图3)。主控制单元120将过滤的语音识别为预定语音信息,并以文本的形式将其输出。
[0278]然后,通过与服务器700的通信连接或者基于从位置信息接收单元690接收的信息,可以识别关于空调600的位置的信息。空调600可以根据所识别的语音指令信息将与语音指令对应的设置功能提供给用户。此时,可以考虑关于识别的位置的信息。
[0279]例如,当空调600的位置(地区)位于庆尚道地区时,可以用庆尚道口音引导关于设置功能的信息。例如,可以用庆尚道口音输出用于执行提高设置温度的功能的消息“是否将温度升高I度?”。对此,当用户输入接受意图(即,语音“是”)时,主控制单元120可以控制驱动单元140(参见图3)的操作以将设置温度升高I度。
[0280]图27为示出根据本发明的第七实施例的作为智能家用电器的另一个例子的炊具的结构的视图。图28A和图28B为示出炊具的显示单元的视图。
[0281]参照图27,根据本发明的第七实施例的炊具810包括接收用户的语音输入的语音输入单元812、被操纵用于输入用户的指令的输入单元814以及显示关于炊具810的操作状态的信息的输出单元816。输出单元816包括显示关于屏幕的信息的显示单元和输出语音的语音输出单元。
[0282]炊具810包括过滤器单元115、存储器单元130、驱动单元140、控制单元120和150、第一通信模块680和位置信息接收单元690,参考图3对它们全部进行了描述。省略了对它们的详细描述。
[0283]参照图28A,可以从炊具810的输出单元816输出用于请求语音输入的消息。例如,可以从输出单元816输出消息“有什么能帮您的吗?”。此时,语音和文本消息可以一起输出。
[0284]对此,用户可以发出语音指令“食物食谱”。发出的语音通过语音输入单元110输入并且过滤,然后传递到主控制单元120。主控制单元120将过滤的语音识别为预定语音信息,并以文本的形式将其输出。然后,通过与服务器700的通信连接或者基于从位置信息接收单元690接收的信息,可以识别关于炊具810的位置的信息。
[0285]当主控制单元120识别用户的语音指令时,输出单元816可以输出用于请求输入关于食谱的详细信息的消息。例如,可以以语音或文本的形式输出消息“请输入食物种类”。用户可以通过输入单元815输入关于期望的食物种类的信息,S卩,食物关键词。例如,用户可以输入食物关键词“烧烤食物”。
[0286]一旦完成用户的食物关键词输入,炊具810可以完成有关的食谱搜索并且然后可以输出引导消息。例如,可以输出消息“食谱搜索完成。想要查看搜索结果吗?”。对此,当用户输入接受意图(即,语音“是”)时,可以切换屏幕并且可以输出图28B所示的另一个屏幕。
[0287]参照图28B,关于位置的信息和与识别的语音指令对应的设置功能信息可以结合,并且预定信息可以输出到炊具810的输出单元816。
[0288]更详细地,在关于用户想要的“烧烤食物”的食谱信息中,位于炊具810所处的位置(地区)的特色或传统食物食谱可以优先排列并输出到输出单元816。例如,特产或传统食物食谱“烧烤食物”,即,“用烤箱烤的带鱼肉的猪肉卷”、“烤什锦海鲜”和“烤什锦蘑燕”,可以排列在输出单元816的上部并且可以在复选框中显示。即,在关于设置功能的多个信息中,对于位置信息识别单元680和690识别的位置最佳的信息可以首先输出到输出单元816。
[0289]然后,普通烧烤食物的食谱可以排列在特色或传统食物食谱的下部。当用户在每一个排列的食谱之间选择期望的食谱时,可以查看关于食谱的详细信息。以这种方式,由于基于关于用户的语音指令的信息和家用电器的位置信息提供关于家用电器的设置功能的信息,因而可以提高用户的便利性。
[0290]图29为示出根据本发明的第八实施例的作为智能家用电器的另一个例子的洗衣机的结构的视图。图30为示出根据本发明的第八实施例的智能家用电器的控制方法的流程图。
[0291]参照图29,根据第八实施例的智能家用电器可以包括洗衣机820。
[0292]洗衣机820包括接收用户的语音输入的语音输入单元822、被操纵用于输入用户的指令的输入单元825以及显示关于洗衣机820的操作状态的信息的输出单元826。输出单元826包括在屏幕上显示信息的显示单元和输出语音的语音输出单元。洗衣机820包括过滤器单元115、存储器单元130、驱动单元140、控制单元120和150、第一通信模块680和位置信息接收单元690。省略了对它们的详细描述。
[0293]参照图30,在控制智能家用电器的过程中,位置识别服务可以设置为开启。位置识别服务理解为如下服务,其中当第一通信模块680和第二通信模块780可通信地连接或者位置信息接收单元690接收位置信息时识别洗衣机820的安装位置或地区并且基于关于识别的位置或地区的信息执行智能家用电器的功能。然后,在操作S41和S42中执行使用位置识别服务的应用程序。
[0294]通过语音输入单元110输入用户的语音指令。然后,在操作S43和S44中通过第一通信模块680和第二通信模块780的通信连接以及位置信息接收单元690识别关于智能家用电器的位置的信息。然后,在操作S45中从服务器700接收安装洗衣机820的位置(地区)的天气
?目息O
[0295]通过语音输入单元110输入的语音指令可以与存储在存储器单元130中的多条语音信息中的至少一条语音信息对应,并且对应的语音信息可以提取为文本。然后,通过使用提取的文本,可以在操作S46中识别家用电器执行的多个设置功能中的预定设置功能。
[0296]然后,当智能家用电器执行识别的设置功能时,可以考虑关于智能家用电器的安装地区的天气信息。然后,关于设置功能的信息和关于天气的信息结合起来使得与设置功能有关的推荐信息可以提供给用户。即,可以推荐与设置功能有关的多条信息中的一条信息。
[0297]例如,当智能家用电器是洗衣机820并且语音指令是“启动洗衣”时,可以通过识别关于安装洗衣机820的地区的天气信息来推荐洗衣进程。例如,如果是雨天或湿度高,则可以在操作S47中推荐强甩干或烘干功能。
[0298]作为另一个例子,当智能家用电器是空调时,在语音指令“开启空调”的情况下,可以通过识别关于安装空调的地区的天气信息来推荐驱动进程。例如,通过接收湿度信息,可以推荐除湿功能。然后,通过接收夜间的温度、增加或减短预约时间的推荐,用户设置就寝时间预约。
[0299]图31为示出根据本发明的第九实施例的语音识别系统的结构的方框图。
[0300]参照图31,根据本发明的第九实施例的语音识别系统包括接收用户的语音输入的移动设备900、基于输入到移动设备900的语音操作并受控制的多个家用电器810、820、830和840以及可通信地连接移动设备900和多个家用电器810、820、830和840的服务器950。
[0301]例如,多个智能家用电器810、820、830和840可以包括炊具810、洗衣机820、清洁器830和空调840。移动设备900可以包括智能手机、遥控器和触屏书。
[0302]移动设备900包括语音输入单元110、第一通信模块918和位置信息接收单元919。然后,移动设备900还包括输出与家用电器的功能执行有关的信息的输入单元916。
[0303]服务器950还可以包括服务器存储器957和第二通信模块958。服务存储器可以存储映射成为输入语音的文本信息以及与文本信息对应的设置功能信息。
[0304]连接至服务器950的应用程序可以在移动设备900中执行。一旦执行该应用程序,可以在移动设备900中激活用户的语音输入的语音输入模式。
[0305]当用户的语音通过移动设备900的语音输入单元110输入时,输入的语音传递到服务器950,并且服务器950可以识别输入的语音以将执行设置功能的指令发送到与语音指令对应的家用电器。此时,服务器950可以识别移动设备900的位置,并且然后可以基于关于识别的位置的信息将执行设置功能的指令发送给家用电器。
[0306]然后,服务器950可以将关于设置功能执行的信息发送给移动设备900,并且该信息可以输出到移动设备900的输出单元916。更详细地,关于语音识别、位置识别以及设置功能执行的信息可以输出到移动设备900的输出单元916。即,参考图26、图28A和图28B描述的信息可以输出到输出单元916。
[0307]以这种方式,由于用户通过移动设备900输入语音指令或者进行操纵,并且通过移动设备900的输出单元916查看关于语音识别、位置识别和家用电器的设置功能执行的信息,因而可以改善便利性。
[0308]虽然已经参考其许多示例性实施例描述了多个实施例,但是应理解,本领域技术人员能够设计落入本公开文本的原理的精神和范围内的很多其它变型和实施例。更具体地,在本公开文本、附图以及所附权利要求的范围内,可以对对象组合排列的零部件和/或排列进行很多变化和变型。除了零部件和/或排列的变化和变型之外,多种用途对本领域技术人员来说也是显而易见的。
【主权项】
1.一种智能家用电器,包括: 语音输入单元,采集语音; 语音识别单元,识别与通过所述语音输入单元采集的所述语音对应的文本; 捕获单元,采集用于检测用户的面容的图像; 存储器单元,映射所述语音识别单元识别的所述文本以及设置功能并且存储所映射的信息;以及 控制单元,基于所述捕获单元采集的图像信息和所述语音输入单元采集的语音信息的至少一种信息确定是否执行语音识别服务。2.根据权利要求1所述的智能家用电器,其中所述控制单元包括:面部检测单元,当通过所述捕获单元采集关于用户的面容的图像信息超过设置时间时,识别到用户处于语音输入的凝视状态。3.根据权利要求2所述的智能家用电器,其中当通过所述语音输入单元识别到语音中存在关键词信息并且通过所述面部检测单元识别到用户处于所述凝视状态时,所述控制单元确定进入语音识别服务待机状态。4.根据权利要求1所述的智能家用电器,还包括: 过滤器单元,从通过所述语音输入单元输入的所述语音中去除噪声;以及 存储器单元,映射通过所述语音输入单元输入的所述语音中与所述智能家用电器的操作有关的语音信息以及与所述智能家用电器的操作无关的语音信息并存储所映射的信息。5.根据权利要求1所述的智能家用电器,还包括: 地区识别单元,基于关于通过所述语音输入单元采集的所述语音的信息确定用户的地区;以及 输出单元,基于关于所述地区识别单元确定的地区的信息以及关于所述设置功能的信息来输出地区自定义信息。6.根据权利要求5所述的智能家用电器,其中 所述设置功能包括:按照地区划分的多个功能;并且 通过所述输出单元输出包括所述多个功能中与关于所述地区的信息匹配的一个功能的所述地区自定义信息。7.根据权利要求5所述的智能家用电器,其中所述输出单元通过使用所述地区识别单元确定的所述地区的方言来输出所述地区自定义信息。8.根据权利要求5所述的智能家用电器,其中所述输出单元输出用于安全设置的关键词,并且所述语音输入单元设置与所述关键词对应的应答词。9.根据权利要求1所述的智能家用电器,还包括情感识别单元和输出单元, 其中 所述语音识别单元识别与通过所述语音输入单元采集的所述语音中的第一语音信息对应的文本; 所述情感识别单元基于通过所述语音输入单元采集的所述语音中的第二语音信息提取用户的情感;并且 所述输出单元基于关于所述情感识别单元确定的用户的情感的信息以及关于所述设置功能的信息来输出用户自定义信息。10.根据权利要求9所述的智能家用电器,其中 所述第一语音信息包括采集的所述语音中的语言元素;并且 所述第二语音信息包括与用户的情感有关的非语言元素。11.根据权利要求9所述的智能家用电器,其中 所述情感识别单元包括映射关于用户的语音特征的信息以及关于情感状态的信息的数据库;并且 关于所述用户的语音特征的信息包括关于具有每一个用户的情感的特征的话音频谱的信息。12.根据权利要求9所述的智能家用电器,其中 所述设置功能包括待推荐或选择的多个功能;并且 通过所述输出单元输出包括所述多个功能中与关于所述用户的情感的信息匹配的一个功能的所述用户自定义信息。13.根据权利要求1所述的智能家用电器,还包括: 位置信息识别单元,识别位置信息;以及 输出单元,基于所述位置信息识别单元识别的位置信息输出关于所述设置功能的所述?目息O14.根据权利要求13所述的智能家用电器,其中所述位置信息识别单元包括: GPS接收单元,从位置信息发送单元接收位置坐标;以及 第一通信模块,可通信地连接至装配在服务器中的第二通信模块。15.根据权利要求13所述的智能家用电器,其中所述输出单元包括:语音输出单元,通过使用所述位置信息识别单元识别的所述位置或者地区所用的方言以语音的形式输出关于所述设置功能的信息。16.根据权利要求13所述的智能家用电器,其中所述输出单元输出关于所述设置功能的多个信息中对于所述位置信息识别单元识别的地区来说最佳的信息。17.根据权利要求13所述的智能家用电器,其中所述位置信息识别单元识别的所述位置信息包括天气信息。18.—种智能家用电器的操作方法,所述方法包括: 通过语音输入单元采集语音; 识别所采集的语音中是否包括关键词信息; 通过装配在所述智能家用电器中的捕获单元采集关于用户的面容的图像信息;以及 基于关于所述用户的面容的所述图像信息进入语音识别服务的待机状态。19.根据权利要求18所述的方法,其中 当采集关于所述用户的面容的所述图像信息超过设置时间时,识别到用户处于语音输入的凝视状态;以及 当识别到所述语音中存在关键词信息并且所述用户处于语音输入的所述凝视状态时,进入所述语音识别服务的待机状态。20.根据权利要求18所述的方法,还包括: 基于关于所采集的语音的信息确定用户的地区;以及 基于关于所述设置功能的信息以及关于所确定的地区的信息驱动所述智能家用电器。21.根据权利要求20所述的方法,还包括:基于关于所确定的地区的信息输出与所述智能家用电器的驱动有关的地区自定义信息。22.根据权利要求21所述的方法,其中所述地区自定义信息的输出包括通过使用所述用户的地区所用的方言输出语音或屏幕。23.根据权利要求22所述的方法,还包括执行安全设置, 其中所述安全设置的执行包括: 输出预定关键词;以及 响应于所输出的关键词输入应答词。24.根据权利要求18所述的方法,还包括: 基于关于所采集的语音的信息提取用户的情感状态;以及 基于关于所述用户的情感状态的信息推荐操作模式。25.根据权利要求18所述的方法,还包括: 通过位置信息识别单元识别所述智能家用电器的安装位置;以及 基于关于所述安装位置的信息驱动所述智能家用电器。26.根据权利要求25所述的方法,其中所述智能家用电器的所述安装位置的识别包括从GPS卫星或通信基站接收GPS坐标信息。27.根据权利要求25所述的方法,其中所述智能家用电器的所述安装位置的识别包括当装配在所述智能家用电器中的第一通信模块连接至装配在服务器中的第二通信模块时查看通信地址。28.—种语音识别系统,包括: 移动设备,包括接收语音的语音输入单元; 智能家用电器,基于通过所述语音输入单元采集的语音操作;以及 通信模块,装配在所述移动设备和所述智能家用电器的每一个中, 其中所述移动设备包括通过检测所述移动设备的移动确定是否进入所述智能家用电器中的语音识别服务的待机状态的移动检测单元。29.根据权利要求28所述的系统,其中所述移动检测单元包括检测所述移动设备的倾斜角度的改变的加速度传感器或陀螺仪传感器, 其中 所述语音输入单元布置在所述移动设备的下部;并且 当用户手持所述移动设备将所述语音输入单元靠近嘴边以输入语音时,所述加速度传感器或所述陀螺仪传感器检测的角度值减小。30.根据权利要求28所述的系统,其中 所述移动检测单元包括检测所述移动设备采集的外部光的强度的照明传感器;并且当用户手持所述移动设备将所述语音输入单元靠近嘴边以输入语音时,所述照明传感器检测的光的强度值增大。
【文档编号】G06F3/01GK105874405SQ201480072279
【公开日】2016年8月17日
【申请日】2014年11月4日
【发明人】李株完, 金洛榕, 申泰东, 徐大根
【申请人】Lg电子株式会社
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1