一种面向智能机器人的交互方法和装置的制造方法
【专利摘要】本发明公开了一种面向智能机器人的电视交互方法和装置，属于机器人技术领域，解决了传统的电视交互方式用户体验度低和模式单一的技术问题。该方法包括：获取多模态输入信息以及电视相关数据；分析所述多模态输入信息，获取针对当前用户的电视交互行为触发指令；根据所述电视交互行为触发指令，以及所述电视相关数据，生成相应的电视交互行为多模态数据并输出。
【专利说明】
一种面向智能机器人的交互方法和装置
技术领域
[0001]本发明涉及机器人技术领域，具体的说，涉及一种面向智能机器人的电视交互方法和装置。
【背景技术】
[0002]随着信息技术、计算机技术以及人工智能技术的不断发展，智能机器人已经走入到医疗、保健、家庭、娱乐以及服务行业等与人们生活息息相关的领域。人们对于智能机器人的要求也越来越高，需要智能机器人具备更多的功能从而为人类生活提供更多的帮助。
[0003]目前，尚不存在与电视相关的智能机器人交互方法。
【发明内容】
[0004]本发明的目的在于提供一种面向智能机器人的交互方法和系统，以解决的传统的电视交互方式用户体验度低和模式单一的技术问题。
[0005]本发明提供一种面向智能机器人的交互方法，该方法包括:
[0006]获取多模态输入信息以及电视相关数据；
[0007]分析所述多模态输入信息，获取针对当前用户的电视交互行为触发指令；
[0008]根据所述电视交互行为触发指令，以及所述电视相关数据，生成相应的电视交互行为多模态数据并输出。
[0009]本发明提供的面向智能机器人的交互方法，还包括:
[0010]分析所述多模态输入信息及所述电视相关数据，获取面向当前用户的电视交互行为主动触发指令；
[0011]当确定需要推荐电视交互行为时，生成电视交互需求询问的多模态数据并输出。
[0012]在获取当前用户的电视交互行为触发指令的步骤中包括:
[0013]根据分析所述多模态输入信息的结果，确认用户身份信息及当前交互场景信息；
[0014]根据用户身份获取对应电视观看习惯信息。
[0015]所述电视相关数据包括如下之一或组合:电视节目表信息、当前节目内容信息、电视节目的互动平台连接信息、舞蹈同步信息、歌曲同步信息、电视节目背景信息、购物节目商品信息以及购物平台连接信息。
[0016]本发明还提供一种面向智能机器人的交互装置，该装置包括:
[0017]信息获取单元，其用于获取多模态输入信息以及电视相关数据；
[0018]第一触发单元，其用于分析所述多模态输入信息，获取针对当前用户的电视交互行为触发指令；
[0019]第一交互输出单元，其用于根据所述电视交互行为触发指令，以及所述电视相关数据，生成相应的电视交互行为多模态数据并输出。
[0020]本发明提供的面向智能机器人的交互装置，还包括:
[0021]第二触发单元，其用于分析所述多模态输入信息及所述电视相关数据，获取面向当前用户的电视交互行为主动触发指令；
[0022]第二交互输出单元，其用于当确定需要推荐电视交互行为时，生成电视交互需求询问的多模态数据并输出。
[0023]所述第一触发单元包括:
[0024]输入分析模块，其用于根据分析所述多模态输入信息的结果，确认用户身份信息及当前交互场景信息；
[0025]习惯信息获取模块，其用于根据用户身份获取对应电视观看习惯信息。
[0026]所述电视相关数据包括如下之一或组合:电视节目表信息、当前节目内容信息、电视节目的互动平台连接信息、舞蹈同步信息、歌曲同步信息、电视节目背景信息、购物节目商品信息以及购物平台连接信息。通过本发明实施例提供的面向智能机器人的交互方法和装置，智能机器人可以在电视场景下与用户进行与电视相关的交互活动，实现用户、智能机器人和电视的三方联合互动。基于本发明提供的交互方法和装置，智能机器人根据获取的电视相关数据可以在电视播放前向用户提供电视节目的提醒、备忘以及预告等互动服务，在电视播放中可向用户提供关于播放中的节目内容的互动服务，并搭建用户与电视节目互动的桥梁，使用户可以便捷的通过智能机器人实现与电视节目的互动，以及在电视节目播放后可向用户提供关于已播节目的调研、回放等互动服务。
[0027]并且，智能机器人与用户进行的互动可以根据用户的指令或由智能机器人主动触发，在电视播出前、播出中和播出后的恰当的时机向用户发出关于电视的交互需求询问，为用户提供更贴近人性的恰如其分的交互服务。与此同时，基于本发明提供的交互方法和装置，智能机器人针对不同用户的不同的观看电视习惯进行不同的互动行为，对于每个用户以其关于电视的兴趣、喜好等特征作为互动行为的依据，为每个用户提供量身定制的交互行为，从而成为用户的贴心伙伴和助手。
[0028]通过本发明提供的交互方法，智能机器人在电视播出前、播出中和播出后，将更加丰富多彩的、更加深入的电视交互方式带到用户身边，形成自然舒适的人机交互体验，大大提高了机器人的用户体验。本发明的其它特征和优点将在随后的说明书中阐述，并且，部分的从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
【附图说明】
[0029]为了更清楚的说明本发明实施例中的技术方案，下面将对实施例描述中所需要的附图做简单的介绍:
[0030]图1是本发明实施例提供的面向智能机器人的交互方法的流程图；
[0031]图2是本发明实施例提供的面向智能机器人的交互方法的流程图；
[0032]图3是本发明实施例提供的获取电视交互行为主动触发指令的流程示意图；
[0033]图4是本发明实施例提供的面向智能机器人的交互装置的示意图。
【具体实施方式】
[0034]以下将结合附图及实施例来详细说明本发明的实施方式，借此对本发明如何应用技术手段来解决技术问题，并达成技术效果的实现过程能充分理解并据以实施。需要说明的是，只要不构成冲突，本发明中的各个实施例以及各实施例中的各个特征可以相互结合，所形成的技术方案均在本发明的保护范围之内。
[0035]本发明实施例提供一种面向智能机器人的交互方法，如图1所示，该方法包括步骤101至步骤103。首先执行步骤101，获取多模态输入信息以及电视相关数据。所获取的多模态输入信息包括外界环境语音、视觉以及感应输入信息，其中包括:用户的输入指示信息，如语音指示、动作指示、文字指示等；用户的状态信息，如用户的动作和特征信息；电视的状态信息，如电视的图像和声音；以及其他与用户、电视以及当前交互环境相关的信息。
[0036]在发明中，本步骤中所获取的电视相关数据包括但不限于如下之一或组合:电视节目表信息、当前节目内容信息、电视节目的互动平台连接信息、舞蹈同步信息、歌曲同步信息、电视节目背景信息、购物节目商品信息以及购物平台连接信息等等与电视交互行为相关的信息。
[0037]在本发明的多个实施例中将会对上述电视相关数据进行进一步的说明和描述。对于上述电视相关数据可以通过网络下载获取，通过智能家居系统从智能电视中获取，以及其他基于智能机器人的数据获取方式。
[0038]然后，执行步骤102，分析所获取的多模态输入信息，从而获取针对当前用户的电视交互行为触发指令。针对当前用户的电视交互行为触发指令用于触发智能机器人与当前用户的电视交互行为，并描述所触发的交互行为模式，是用户指示需要进行电视交互时，生成的触发指令。
[0039]在本步骤中，对多模态输入信息进行分析，从中分离出有关于当前用户的电视交互行为意图的信息，从而分析获得对应于当前用户交互意图所匹配的电视交互行为模式。如根据当前用户的语音指示、动作指示或文字指示输入信息分析当前用户是否想要与智能机器人进行电视交互行为，以及想要进行什么模式的电视交互行为，进而获得该对应模式的电视交互行为触发指令。例如，若当前用户通过语音指示想要查看今天的电视节目单，则通过分析含有该语音指示的多模态输入信息获取到向当前用户显示电视节目单的交互行为触发指令。
[0040]在本发明的上述实施方式中，根据当前用户的多模态输入信息可以触发的智能机器人的电视交互行为模式包括但不限于以下几种:为用户制定观看电视的备忘，协助用户进行电视问答或投票，根据电视节目内容进行同步表演，关于电视节目内容的语音交互问答，协助用户进行电视购物，向用户推荐电视节目，与电视节目进行同步表演。
[0041]最后，执行步骤103，根据电视交互行为触发指令，以及电视相关数据，生成相应的电视交互行为多模态数据并输出。在本步骤中，通过电视交互行为触发指令触发智能机器人的对应电视交互行为模式，并通过所获取的电视相关数据提供该种模式的交互内容，进而生成并输出相应模式和内容的多模态数据实现与当前用户的电视交互行为。例如，如果智能机器人获取到的交互行为触发指令触发显示电视节目单的交互行为模式，进而将所获取到的电视节目单数据通过图像等多模态输出方式显示出来。
[0042]通过本发明实施例提供的面向智能机器人的交互方法，用户可以通过智能机器人实现与电视的交互，智能机器人可以通过用户的多模态输入触发与电视相关的交互行为，并基于获取的电视相关数据实现用户、智能机器人和电视的三方联合互动，可以根据用户的需求为用户提供与电视相关的多种服务，协助用户与电视节目进行更深入的互动。
[0043]更为具体的，根据多模态输入数据获取当前用户的电视观看习惯信息和当前交互场景信息。首先，根据分析多模态输入信息的结果，确认用户身份信息及当前交互场景信息。可通过分析多模态输入信息获得用户的声音信息或面部图像信息，并对应进行声纹识别或人脸识别，进而匹配获得当前用户身份信息。还可通过分析多模态输入信息获得有关用户和电视状态的信息，进行识别和分析获得匹配的当前交互场景信息。然后，根据用户身份获取对应电视观看习惯信息，进而在步骤103中结合电视观看习惯信息和当前交互场景信息生成相应的电视交互行为模式的多模态数据并输出。
[0044]电视观看习惯信息用于描述用户个人的观看电视节目的习惯和口味，如喜好看什么类型的电视节目(新闻实事、生活服务、综艺娱乐等)，习惯在什么时间看电视等。由于不同的用户往往会有不同的电视观看习惯，在一个家庭中父母和孩子对于电视节目的兴趣有所不同，男性和女性对于电视节目的兴趣也有所不同，人们往往只会观看自己感兴趣的节目，因此，需要针对不同用户的不同的观看电视习惯进行不同的交互行为，本发明提供的交互方法对用户的身份和当前交互环境进行识别，针对用户的身份获取该用户观看电视的习惯，然后基于用户的观看习惯和在不同的交互环境进行对应的交互行为。例如，用户向智能机器人询问说:“现在有好看的电视节目吗?”，智能机器人识别用户意图匹配到向用户推荐节目的交互行为模式，同时智能机器人识别用户身份获得该用户的观看电视的习惯(喜欢看动画片)，通过语音输出将从获取的电视节目表中的正在播放动画片的频道和动画片的信息(如名称，集数，剧情梗概等)推荐给用户，或根据当前交互环境获知当前用户没有在看电视，然后通过智能家居系统自动打开电视机，将电视调整到播放动画片的频道。
[0045]进一步的，本发明实施例提供的面向智能机器人的交互方法，如图2所示，还包括如下步骤201至204。其中，在步骤201中，分析所述多模态输入信息及所述电视相关数据，获取面向当前用户的电视交互行为主动触发指令。面向当前用户的电视交互行为主动触发指令用于触发不需要当前用户的指示，可由智能机器人主动发起的与当前用户的交互行为，并描述所触发的交互行为模式以及交互行为内容。
[0046]在一种实施方式中，本步骤可以具体为首先对电视相关数据及多模态输入信息进行分析，根据分析结果确定是否存在可主动触发的交互行为模式。例如，当前电视节目正在进行扫描二维码参与活动的互动环节，智能机器人可以从多模态输入信息中分析获取电视画面图像，并通过对电视画面图像进行图像识别获得其中的二维码信息，获知当前电视节目正在进行扫描二维码的互动环节，从而确定可以主动触发扫描二维码参与活动的交互行为;或者电视节目主持人说:“下面进行扫描二维码参与活动互动环节”，智能机器人可以从多模态输入信息中分析获得电视的声音信息，并通过语义解析识别出电视节目即将进行扫描二维码的互动，从而确定可以主动触发扫描二维码参与活动的交互行为；又或者智能机器人从网络获取当前节目内容数据，并分析识别出当前电视节目正在进行扫描二维码的互动，从而确定可以主动触发扫描二维码参与活动的交互行为。
[0047]同样的，在本发明的一种实施方式中，如图2和图3所示，步骤201中还包括获取当前用户的电视观看习惯信息和当前交互场景信息。在步骤201中分析所述多模态输入信息及所述电视相关数据，确定可主动触发的电视交互行为，并根据分析多模态输入信息的结果确认用户身份信息及当前交互场景信息，然后根据用户身份获取对应电视观看习惯信息。进而结合可主动触发的电视交互行为，当前交互场景信息，以及所述电视观看习惯信息，获取面向当前用户的电视交互行为主动触发指令，即综合四者进行交互行为模式是否可主动触发的考量。
[0048]例如，在智能机器人分析获取的电视节目表信息获知当前有频道正在播放动画片，识别用户身份获得该用户的观看电视的习惯(喜欢看动画片)，从而确定可以主动触发向用户推荐正在播放的动画片的交互行为。又如，智能机器人通过多模态输入信息识别出当前电视节目正在进行扫描二维码的互动，但是根据当前用户的电视观看习惯信息获知当前用户不喜欢参加该类型的活动，则确定不存在可主动触发的交互行为。
[0049]在确定存在可主动触发的交互行为模式后，根据多模态输入信息确定当前用户状态是否适合进行交互行为，通过对多模态输入信息进行分析获得当前用户的动作信息、面部信息、位置信息以及其他可以用于判断当前用户状态的环境信息，对上述信息进行综合分析识别，判断当前用户状态是否适合进行交互行为。若当前用户状态适合进行交互行为，获取上述对应电视交互行为的主动触发指令。若当前用户状态不适合进行交互行为，例如，通过识别用户面部信息、声音信息和动作信息获知用户处于睡眠状态，不适合进行交互行为，则不进行电视交互行为的主动触发指令的获取。
[0050]继而，在步骤202中，根据主动电视交互行为触发指令确定是否需要向当前用户推荐电视交互行为，对于是否向当前用户进行推荐的判断基于对获取的当前电视交互行为主动触发指令中所包含的有关于电视交互行为模式和当前交互场景信息的分析得出。例如，分析当前主动触发指令得知当前电视交互行为模式为扫描二维码参与活动，当前的交互场景为用户正在电视机前观看电视，基于上述条件确定需要向当前用户推荐该扫描二维码参与活动的电视交互行为。
[0051]基于判断结果，当确定需要推荐电视交互行为时，则执行步骤203，生成电视交互需求询问的多模态数据并输出。例如，基于扫描二维码参与活动的交互行为模式生成对应的语音需求询问输出:“主人，想要扫描二维码参与互动吗?”，用户回答“是”，则生成与当前用户进行扫描二维码参与互动的交互行为的多模态数据并输出。当确定不需要推荐电视交互行为时，则执行步骤204，根据主动触发指令所描述的交互行为模式和内容直接生成对应的与当前用户进行电视交互行为的多模态数据并输出。例如，当电视节目中出现舞蹈时，并且用户状态为正在观看电视，可以不必进行询问，直接输出与电视同步跳舞的交互数据。
[0052]下面结合具体的电视交互行为模式在下述实施例中对本发明实施例提供的面向智能机器人的交互方法进行进一步的说明。
[0053]实施例一:
[0054]在本实施例中，电视交互行为模式为即时问答或投票。该种电视交互行为模式的触发方式可以是被动触发方式，也可以是主动触发方式。
[0055]被动触发方式即用户指示触发该种电视交互行为模式，并输出对应多模态电视交互数据。用户在想要进行交互时，对智能机器人说或通过文字输入我要参加问答(或投票)”。智能机器人获取多模态输入信息以及电视相关数据，对多模态输入信息进行分析，获取其中用户的语音指示或文字指示信息并进行识别得知用户的意图为参加问答(或投票)，进而获取到参加问答(或投票)的交互行为模式触发指令。
[0056]主动触发方式即智能机器人根据多模态输入信息及电视相关数据主动触发该种电视交互行为模式，并输出对应多模态电视交互数据。智能机器人通过对多模态输入信息进行分析，获取其中电视画面图像信息和电视声音信息，对电视画面图像信息或者电视声音信息进行分析识别，若电视画面中显示当前电视正在进行问答(或投票)的文字，或电视声音中有节目主持人说现在进行问答(或投票)”，智能机器人即可识别到，获知当前电视节目正在进行问答(或投票)。与此同时，智能机器人识别当前用户身份，通过分析与其匹配的电视观看习惯信息获知当前用户有参加问答(或投票)的习惯，从而确定可主动触发进行问答(或投票)的交互行为模式。
[0057]智能机器人也可以通过对电视相关数据进行分析获得该种电视交互行为模式的主动触发指令。在本实施例中，电视相关数据中包括电视节目的内容信息，电视节目的互动平台连接信息。电视节目的内容信息包括电视节目的流程内容，即电视节目在什么时间进行什么环节。电视节目的互动平台连接信息用于智能机器人通过网络连接到该电视节目的互动平台进行互动信息的传输。智能机器人可以通过对电视节目的内容信息进行分析，获知当前时间点电视节目正在进行问答(或投票)。进而确定当前可主动触发进行问答(或投票)的交互行为模式。
[0058]然后，智能机器人通过对多模态输入信息中分析出的关于当前用户状态(当前用户正在观看电视)的信息判断当前用户的状态适合进行问答(或投票)的交互行为模式，进而获取到参加问答(或投票)的交互行为模式主动触发指令。在确定主动触发参加问答(或投票)的交互行为模式后，判断该交互行为模式需要向当前用户进行推荐。
[0059]最后，智能机器人根据问答(或投票)的交互行为模式的被动触发指令以及电视相关数据，生成相应的问答(或投票)交互行为多模态数据并输出。或根据问答(或投票)的交互行为模式的主动触发指令，生成问答(或投票)需求询问的多模态数据并输出，在用户通过多模态的指示信息表达肯定意愿后，生成相应的问答(或投票)交互行为多模态数据并输出。在该种交互行为模式中，智能机器人通过多模态输出信息获取用户对于问答(或投票)的回答(或选择)结果，并将回答(或选择)结果数据发送给电视节目的互动平台，从而将回答(或选择)结果返回到电视节目中。
[0060]实施例二:
[0061]在本实施例中，电视交互行为模式为根据电视节目内容进行同步表演。该种电视交互行为模式的触发方式可以是被动触发方式或主动触发方式。
[0062]该种电视交互行为模式的被动触发方式与实施例一基本相同，在此不再赘述。其面向电视的主动触发方式具体为智能机器人根据多模态输入信息及电视相关数据主动触发根据电视节目内容进行同步表演的电视交互行为模式，并输出对应多模态电视交互数据。
[0063]智能机器人通过对多模态输入信息进行分析，获取其中电视画面图像信息和电视声音信息，对电视画面图像信息或者电视声音信息进行分析识别，若电视画面中正在进行跳舞表演，智能机器人即可识别到，并确定可主动触发进行同步跳舞表演的交互行为模式。若电视声音中有歌曲演唱的声音出现，智能机器人即可识别到，并确定可主动触发进行同步唱歌表演的交互行为模式。
[0064]在本实施例中，电视相关数据中包括电视节目的内容信息，舞蹈同步信息，歌曲同步信息。与实施例一相同，智能机器人可以通过对电视节目的内容信息进行分析，获知当前时间点电视节目正在进行舞蹈或歌唱表演，进而确定当前可主动触发进行同步表演的交互行为模式。舞蹈同步信息为当前节目内的舞蹈动作和时间点的同步数据，歌曲同步信息为当如节目内的歌曲的声首?目息(首调、首尚、首色等)和时间点的同步数据。
[0065]然后，根据多模态输入信息确定当前的交互情景是否适合进行上述跳舞或唱歌的同步表演交互行为。通过对多模态输入信息进行分析判断当前交互情景中是否存在用户，存在的用户的当前状态是否适合智能机器人进行同步表演的电视的交互行为。若存在的用户的当前状态适合智能机器人进行同步表演，则认为当前的交互情景适合进行上述跳舞或唱歌的同步表演交互行为，若存在的用户的当前状态不适合智能机器人进行同步表演，则认为当前的交互情景不适合进行上述跳舞或唱歌的同步表演交互行为。
[0066]在交互情景适合时获取上述同步表演交互行为的主动触发指令。根据该主动触发指令所描述的交互行为模式和内容，生成跳舞或唱歌的同步表演交互行为多模态数据并输出，即智能机器人与电视节目同步进行跳舞或唱歌表演。
[0067]实施例三:
[0068]在本实施例中，电视交互行为模式为有关节目内容的语音交互问答。该种电视交互行为模式的触发方式为被动触发方式，即用户基于有关电视节目的内容向智能机器人提问，智能机器人进行回答。
[0069]该种电视交互行为模式的被动触发方式与实施例一基本相同，在此不再赘述。在本实施例中，电视相关数据中包括电视节目的内容信息、电视节目表信息以及电视节目背景信息。其中，电视节目背景信息中包括有电视节目人物资料(如节目嘉宾的姓名、年龄、个人履历等)，节目资料(如电影的导演、拍摄时间、获奖情况)，以及其他与电视节目相关的背景资料。
[0070]在获取语音交互问答交互行为的触发指令后，根据该触发指令以及所获取的电视节目的内容信息、电视节目表信息以及电视节目背景信息，生成相应的电视交互行为多模态数据并输出，即智能机器人根据用户关于电视节目内容的提问通过声音或图像进行相应的回答。
[0071]实施例四:
[0072]在本实施例中，电视交互行为模式为与电视购物相关的电视交互模式。该种电视交互行为模式的触发方式可以是被动触发方式或面向用户的主动触发方式。
[0073]在该种电视交互行为模式的被动触发方式中，通过对用户指示信息的识别获知用户的意图为购买商品或需要智能机器人推荐商品。进而获取到购买商品或推荐商品的交互行为模式触发指令。
[0074]该模式面向用户的主动触发方式具体为智能机器人根据多模态输入信息及电视相关数据主动触发电视购物推荐的电视交互行为模式，生成相应推荐或购买商品的交互行为多模态数据并输出，在推荐模式中所输出的推荐内容为购物节目中符合当前用户购买习惯的商品的详细介绍、购买评价等。
[0075]智能机器人通过对多模态输入信息进行分析，获取其中电视画面图像信息和电视声音信息，对电视画面图像信息或者电视声音信息进行分析识别，若电视购物节目的画面中正在展示某件商品，智能机器人即可获知当前电视节目为电视购物节目并通过图像识别到该商品，并确定可主动触发进行推荐该商品的交互行为模式。若购物节目销售员正在向大家介绍商品，智能机器人即可通过语音识别到所介绍的商品，并确定可主动触发进行推荐该商品的交互行为模式。
[0076]在本实施例中，电视相关数据中包括电视节目的内容信息、购物节目商品信息、购物节目的购物平台连接信息。电视节目的内容信息包括购物节目的流程内容，即购物节目在什么时间进行什么商品的推荐。购物节目商品信息中包括购物节目中所推荐的商品的详细介绍、购买评价等。购物平台连接信息用于智能机器人通过网络连接到购物平台进行购买等相关操作。
[0077]智能机器人也可以通过对购物节目的内容信息进行分析，获知当前时间点购物节目正在进行哪样商品的推荐，进而确定当前可主动触发进行推荐该商品的交互行为模式。
[0078]在本实施例的一种实施方式中，还要根据用户购买习惯信息确定是否可主动触发进行推荐该商品的交互行为模式。用户购买习惯信息用于描述用户以往购买商品的习惯，例如喜欢购买什么类型的商品，对于不同类型商品可以接收的价格区间等等。若当前商品类型是当前用户喜欢购买的商品，且价格处于当前用户的接收范围内，则确定当前可主动触发进行推荐该商品的交互行为模式。
[0079]然后，智能机器人通过对多模态输入信息中分析出的关于当前用户状态的信息判断当前用户的状态适合进行主动购物推荐的交互行为，且该主动交互行为模式需要向当前用户进行推荐，判断过程与实施例一基本相同，在此不再赘述。
[0080]最后，智能机器人或根据主动触发指令，生成推荐购买某件商品需求询问的多模态数据并输出，在用户通过多模态的指示信息表达肯定意愿后，生成购买该商品的交互行为多模态数据并输出。
[0081]本发明实施例还提供一种面向智能机器人的交互装置，如图4所示，该装置包括:信息获取单元1、第一触发单元2以及第一交互输出单元3。其中，信息获取单元I用于获取多模态输入信息以及电视相关数据。第一触发单元2用于分析所述多模态输入信息，获取针对当前用户的电视交互行为触发指令。第一交互输出单元3用于根据所述电视交互行为触发指令，以及所述电视相关数据，生成相应的电视交互行为多模态数据并输出。
[0082]进一步的，本发明实施例提供的面向智能机器人的交互装置还包括:第二触发单元和第二交互输出单元。
[0083]第二触发单元用于分析多模态输入信息及电视相关数据，获取面向当前用户的电视交互行为主动触发指令；
[0084]第二交互输出单元用于当确定需要推荐电视交互行为时，生成电视交互需求询问的多模态数据并输出。
[0085]进一步的，在本发明实施例中，第一触发单元和第二触发单元中包括有:输入分析模块和习惯信息获取模块。输入分析模块用于根据分析所述多模态输入信息的结果，确认用户身份信息及当前交互场景信息。习惯信息获取模块用于根据用户身份获取对应电视观看习惯?目息。
[0086]电视相关数据包括如下之一或组合:电视节目表信息、当前节目内容信息、电视节目的互动平台连接信息、舞蹈同步信息、歌曲同步信息、电视节目背景信息、购物节目商品信息以及购物平台连接信息。
[0087]通过本发明实施例提供的面向智能机器人的交互方法和装置，智能机器人可以在电视场景下与用户进行与电视相关的交互活动，实现用户、智能机器人和电视的三方联合互动。基于本发明提供的交互方法和装置，智能机器人根据获取的电视相关数据可以在电视播放前向用户提供电视节目的提醒、备忘以及预告等互动服务，在电视播放中可向用户提供关于播放中的节目内容的互动服务，并搭建用户与电视节目互动的桥梁，使用户可以便捷的通过智能机器人实现与电视节目的互动，以及在电视节目播放后可向用户提供关于已播节目的调研、回放等互动服务。
[0088]并且，智能机器人与用户进行的互动可以根据用户的指令或由智能机器人主动触发，在电视播出前、播出中和播出后的恰当的时机向用户发出关于电视的交互需求询问，为用户提供更贴近人性的恰如其分的交互服务。与此同时，基于本发明提供的交互方法和装置，智能机器人针对不同用户的不同的观看电视习惯进行不同的互动行为，对于每个用户以其关于电视的兴趣、喜好等特征作为互动行为的依据，为每个用户提供量身定制的交互行为，从而成为用户的贴心伙伴和助手。
[0089]通过本发明提供的交互方法，智能机器人在电视播出前、播出中和播出后，将更加丰富多彩的、更加深入的电视交互方式带到用户身边，形成自然舒适的人机交互体验，大大提高了机器人的用户体验。
[0090]虽然本发明所公开的实施方式如上，但所述的内容只是为了便于理解本发明而采用的实施方式，并非用以限定本发明。任何本发明所属技术领域内的技术人员，在不脱离本发明所公开的精神和范围的前提下，可以在实施的形式上及细节上作任何的修改与变化，但本发明的专利保护范围，仍须以所附的权利要求书所界定的范围为准。
【主权项】
1.一种面向智能机器人的交互方法，其特征在于，包括: 获取多模态输入信息以及电视相关数据； 分析所述多模态输入信息，获取针对当前用户的电视交互行为触发指令； 根据所述电视交互行为触发指令，以及所述电视相关数据，生成相应的电视交互行为多模态数据并输出。2.根据权利要求1所述的面向智能机器人的交互方法，其特征在于，还包括: 分析所述多模态输入信息及所述电视相关数据，获取面向当前用户的电视交互行为主动触发指令； 当确定需要推荐电视交互行为时，生成电视交互需求询问的多模态数据并输出。3.根据权利要求1-2任一项所述的面向智能机器人的电视交互方法，其特征在于，在获取当前用户的电视交互行为触发指令的步骤中包括: 根据分析所述多模态输入信息的结果，确认用户身份信息及当前交互场景信息； 根据用户身份获取对应电视观看习惯信息。4.根据权利要求1所述的面向智能机器人的电视交互方法，其特征在于，所述电视相关数据包括如下之一或组合:电视节目表信息、当前节目内容信息、电视节目的互动平台连接信息、舞蹈同步信息、歌曲同步信息、电视节目背景信息、购物节目商品信息以及购物平台连接信息。5.一种面向智能机器人的交互装置，其特征在于，包括: 信息获取单元，其用于获取多模态输入信息以及电视相关数据； 第一触发单元，其用于分析所述多模态输入信息，获取针对当前用户的电视交互行为触发指令； 第一交互输出单元，其用于根据所述电视交互行为触发指令，以及所述电视相关数据，生成相应的电视交互行为多模态数据并输出。6.根据权利要求5所述的面向智能机器人的交互装置，其特征在于，还包括: 第二触发单元，其用于分析所述多模态输入信息及所述电视相关数据，获取面向当前用户的电视交互行为主动触发指令； 第二交互输出单元，其用于当确定需要推荐电视交互行为时，生成电视交互需求询问的多模态数据并输出。7.根据权利要求5-6任一项所述的面向智能机器人的电视交互装置，其特征在于，所述第一触发单元包括: 输入分析模块，其用于根据分析所述多模态输入信息的结果，确认用户身份信息及当前交互场景信息； 习惯信息获取模块，其用于根据用户身份获取对应电视观看习惯信息。8.根据权利要求5所述的面向智能机器人的电视交互装置，其特征在于，所述电视相关数据包括如下之一或组合:电视节目表信息、当前节目内容信息、电视节目的互动平台连接信息、舞蹈同步信息、歌曲同步信息、电视节目背景信息、购物节目商品信息以及购物平台连接信息。
【文档编号】H04N21/482GK105898487SQ201610272955
【公开日】2016年8月24日
【申请日】2016年4月28日
【发明人】黄钊
【申请人】北京光年无限科技有限公司