一种用于智能设备的播放控制方法及装置与流程

本发明实施例涉及人工智能，尤其涉及一种用于智能设备的播放控制方法及装置。

背景技术：

交互型媒体是指：受众与媒体或者受众与受众间能够借助媒体这个平台达到一种互动状态。即能够实现人与机、人与人之间的媒体沟通。与非交互型媒体相比，交互型媒体与受众的交互性大大增强。交互型媒体一般建立在现代网络技术、数字技术、计算机技术等多项技术的基础上。常见的交互型媒体如计算机、计算机网络、多媒体教学平台以及开发的各种交互系统如互动教学平台、交互式视频学习系统等。

大多数多媒体播放设备只能播放多媒体，不能和人进行交互，就算能和人进行交互，其交互方式枯燥单一，何时进行交互以及进行何种交互需要人工操作实现。

技术实现要素：

本发明实施例提供一种用于智能设备的播放控制方法及装置，可以适时与用户进行交互。

第一方面，本发明实施例提供了一种用于智能设备的播放控制方法，包括：获取智能设备播放多媒体数据时用户的声音信息和/或面部表情信息；根据所述声音信息和/或面部表情信息确定对应的用户反应信息；如果所述多媒体数据和/或所述用户反应信息满足预设的中断条件，则根据所述中断条件调整播放所述多媒体数据的方式和/或播放对应的用户交互语句。

第二方面，本发明实施例还提供了一种用于智能设备的播放控制装置，包括：信息获取单元，用于获取智能设备播放多媒体数据时用户的声音信息和/或面部表情信息；信息处理单元，与所述信息获取单元相连，用于根据所述声音信息和/或面部表情信息确定对应的用户反应信息；调整单元，与所述信息处理单元相连，用于如果所述多媒体数据和/或所述用户反应信息满足预设的中断条件，则根据所述中断条件调整播放所述多媒体数据的方式和/或播放对应的用户交互语句。

本发明实施例中智能设备根据播放多媒体数据时获取的用户反应信息调整播放所述多媒体数据的方式和/或播放对应的用户交互语句，使智能设备在播放多媒体数据时能根据遇到的不同的情景与用户进行对应的互动。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：

图1是本发明第一实施例的用于智能设备的播放控制方法流程图；

图2是本发明第二实施例的用于智能设备的播放控制方法流程图；

图3是本发明第三实施例的用于智能设备的播放控制装置结构示意图；

图4是本发明第四实施例的用于智能设备的播放控制装置结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部内容。另外还需要说明的是，为了便于说明，以下实施例中示出了与本发明相关的示例，这些示例仅作为说明本发明实施例的原理所用，并不作为对本发明实施例的限定，同时，这些示例的具体数值会根据不同的应用环境和装置或者组件的参数不同而不同。

实施例一

图1是本发明第一实施例的用于智能设备的播放控制方法流程图，本实施例可适用于智能设备播放多媒体内容时进行人机交互的情况，该方法可以由智能设备的播放控制装置来执行，该装置可以由软件和/或硬件方式实现，该装置可以集成在任何提供人机交互的智能设备中，例如典型的是用户终端设备，如手机、平板电脑等。该方法包括：

s101、获取智能设备播放多媒体数据时用户的声音信息和/或面部表情信息。

智能设备确认用户已就绪就开始播放多媒体数据。用户信息包括用户需求、用户情感及用户关注度。用户需求、用户情感及用户关注度可通过语音询问、语音识别或图像识别等方式来获取。例如若图像识别出用户距离较远或者用户关注度不在智能设备上，则表示用户当前没关注。智能设备根据获取的用户信息进行相应的交互操作。

s102、根据所述声音信息和/或面部表情信息确定对应的用户反应信息。

用户的声音信息和/或面部表情信息包含喜、怒、哀、乐、爱、恨、惊、恐或忧等人类情感，用户说的话背后隐藏着诉求。根据用户的声音信息和/或面部表情信息确定用户的情感或诉求。例如询问用户时用户没有回答或着语音识别出呼噜声，就可确定用户当前没关注。智能设备根据确定的用户的情感或诉求进行人机互动。

s103、如果所述多媒体数据和/或所述用户反应信息满足预设的中断条件，则根据所述中断条件调整播放所述多媒体数据的方式和/或播放对应的用户交互语句。

如果所述多媒体数据和/或所述用户信息满足预设的中断条件，则智能设备识别出相应的交互时机进而做出相应的交互操作。例如通过用户声音或表情识别出用户需求，根据需求进行互动，需求有多种，如果用户询问内容中的元素，则说明用户对该元素感兴趣，则根据和该元素的联系和用户进行互动；如果用户表现出厌烦的状态，则询问用户是停止还是换播放内容；如果用户表现出高兴的状态，则询问用户，并根据用户的反馈进行互动。

本实施例中智能设备根据播放多媒体数据时获取的用户反应信息调整播放所述多媒体数据的方式和/或播放对应的用户交互语句，使智能设备在播放多媒体数据时能根据遇到的不同的情景与用户进行对应的互动。

实施例二

图2是本发明第二实施例的用于智能设备的播放控制方法流程图，实施例二以上述实施例为基础，根据所述中断条件调整播放所述多媒体数据的方式和/或播放对应的用户交互语句根据不同的情景进行了优化。

本实施例提供的用于智能设备的播放控制方法包括步骤s201、步骤s202和步骤s203。其中，步骤s201与实施例一中的步骤s101相同，步骤s202与实施例一中的步骤s102相同，相同的步骤不再赘述。

s201、获取智能设备播放多媒体数据时用户的声音信息和/或面部表情信息。

s202、根据所述声音信息和/或面部表情信息确定对应的用户反应信息。

s203、所述中断条件为播放所述多媒体数据到预设的情节、预设的事件或者预设的时间，则停止播放所述多媒体数据，并且播放预设的交互语句；或者，所述中断条件为确定用户反应信息为用户未关注所述多媒体数据，则停止播放所述多媒体数据；或者，所述中断条件为确定用户反应信息为用户关注所述多媒体数据，则停止播放所述多媒体数据，并且播放预设的交互语句；或者，所述中断条件为确定用户反应信息为预设的情绪状态，则停止播放所述多媒体数据，并且播放预设的交互语句，该预设的交互语句对应不同的情绪状态。

智能设备根据不同的交互时机做出不同的交互。播放的多媒体数据事先做过预处理，即通过人工或者技术手段依情节、事件或时间等的不同对多媒体数据进行分段，针对每个分段点设定交互语句，播放所述多媒体数据到预设的情节、预设的事件或者预设的时间，则暂停播放所述多媒体数据，并且播放预设的交互语句，交互语句可用问答的方式进行；如果确定用户未关注所述多媒体数据，则停止播放多媒体数据、减小音量或询问用户等；如果确定用户关注所述多媒体数据，可采用事先设定好的逻辑和用户进行交互；喜、怒、哀、乐、爱、恨、惊、恐及忧等情感对应的交互逻辑事先进行了设定，如果确定用户的情绪状态，则暂停播放多媒体数据，采用设定的交互逻辑和用户进行互动。

上述播放到预设的情节、预设的事件或者预设的时间、用户未关注所述多媒体数据、用户关注所述多媒体数据及确定预设的情绪状态属于不同的交互情景，可根据需要配置不同的交互情景，在播放多媒体数据的过程中，如果触发该交互情景，则暂停播放多媒体数据，并执行该交互情景下的交互操作。

进一步地，当停止播放所述多媒体数据时，记录所述多媒体数据的中断点的信息。

在执行完交互操作后，若多媒体数据没有播放完，则从暂停播放时记录的中断点继续播放多媒体数据。

进一步地，所述播放预设的交互语句包括：播放预设的交互子语句，并获取用户对所述交互子语句的反馈信息；根据所述反馈信息确定待播放的下一交互子语句并播放，直至达到交互语句的播放结束条件。

开始交互的时候播放的是预设的交互子语句，根据用户的反馈信息播放相应的下一交互子语句，直至确定用户的意图就可以结束交互语句的播放，根据用户的意图执行播放相应的多媒体数据或停止播放等操作。

本实施例根据不同的交互情景做出相应的交互操作，并通过交互语句获知用户的意图。

实施例三

图3是本发明第三实施例的用于智能设备的播放控制装置结构示意图，该装置用于执行上述实施例中的用于智能设备的播放控制方法。该装置包括：信息获取单元301、信息处理单元302和调整单元303。

信息获取单元301，用于获取智能设备播放多媒体数据时用户的声音信息和/或面部表情信息。

信息处理单元302，与所述信息获取单元301相连，用于根据所述声音信息和/或面部表情信息确定对应的用户反应信息。

调整单元303，与所述信息处理单元302相连，用于如果所述多媒体数据和/或所述用户反应信息满足预设的中断条件，则根据所述中断条件调整播放所述多媒体数据的方式和/或播放对应的用户交互语句。

本实施例中智能设备根据播放多媒体数据时获取的用户信息调整播放所述多媒体数据的方式和/或播放对应的用户交互语句，使智能设备在播放多媒体数据时能根据遇到的不同的情景与用户进行对应的互动。

进一步地，所述调整单元具体用于：所述中断条件为播放所述多媒体数据到预设的情节、预设的事件或者预设的时间，则停止播放所述多媒体数据，并且播放预设的交互语句；或者，所述中断条件为确定用户反应信息为用户未关注所述多媒体数据，则停止播放所述多媒体数据；或者，所述中断条件为确定用户反应信息为用户关注所述多媒体数据，则停止播放所述多媒体数据，并且播放预设的交互语句；或者，所述中断条件为确定用户反应信息为预设的情绪状态，则停止播放所述多媒体数据，并且播放预设的交互语句，该预设的交互语句对应不同的情绪状态。

本实施例根据不同的交互情景做出相应的交互操作，并通过交互语句获知用户的意图。

进一步地，所述调整单元还具体用于：播放预设的交互子语句，并获取用户对所述交互子语句的反馈信息；根据所述反馈信息确定待播放的下一交互子语句并播放，直至达到交互语句的播放结束条件。

进一步地，所述调整单元还具体用于：当停止播放所述多媒体数据时，记录所述多媒体数据的中断点的信息。

本发明实施例所提供的用于智能设备的播放控制装置可用于执行本发明任意实施例所提供的用于智能设备的播放控制方法，具备执行该方法相应的功能和有益效果。

实施例四

图4是本发明第四实施例的用于智能设备的播放控制装置结构示意图。在图4中，智能设备400包括显示屏401、扬声器402、摄像头403和麦克风404。本实施例是上述实施例的技术方案的应用，是一个可选的实施方案。

本实施例中用户和智能设备的交互过程如下：智能设备在向用户播放催眠歌曲的过程中，每隔十分钟通过摄像头采集用户的面部图像，将将采集到的图像与表情库中预存的图像进行比较，如果确定用户已睡着，则执行减小音量或停止播放催眠歌曲等操作。

本实施例在播放多媒体内容的过程中，通过获取用户信息并自动执行相应的操作，使得智能设备能够根据用户的需求自动控制多媒体内容的播放。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。