情绪监控方法和装置的制造方法_3

文档序号:9851348阅读:来源:国知局
行关联后存储,这样,在存储情绪表现信息时,就可以将所有情绪表现信息都转化为同一类型的信息后再存储,以便于后期进行信息管理;或者还可以将采集到的音频信息转换为文字信息后再存储,从而降低了信息存储时的空间需求。
[0084]在本实施例的一个可选实现方式中,所述情绪表现信息包括:文本信息、图像信息、音频信息、视频信息和生理信号信息中的至少一个。
[0085]从图4中可以看出,与图2所示的实施例相比,本实施例中的情绪监控方法更详细地描述了如何获取情绪表现信息,以及何时存储情绪表现信息和情绪刺激源信息的一种示例性实现方式。具体地,首先根据当前采集到的图像信息、音频信息、视频信息和生理信号信息中的至少一个确定用户的当前情绪的情绪表现信息,然后获取当前情绪的情绪刺激源信息,最后在检测到当前情绪发生变化时,将情绪表现信息与所述情绪刺激源信息进行关联后存储,本实施例进一步确定了将情绪表现信息与所述情绪刺激源信息进行关联后存储的触发条件,使得存储下来的情绪相关信息都可以有效地表示情绪变化的情况,从而提高了情绪监控的效率。
[0086]进一步参考图5,其示出了情绪监控方法的再一个实施例的流程500。该情绪监控方法,包括以下步骤:
[0087]步骤501、获取用户的当前情绪的情绪表现信息。
[0088]步骤502、根据当前获取的多媒体信息、环境信息和生理信号信息中的至少一个确定所述当前情绪的情绪刺激源信息。
[0089]在本实施例中,当获取当前情绪的情绪刺激源信息时,可以根据当前获取的多媒体信息、环境信息和生理信号信息中的至少一个确定所述当前情绪的情绪刺激源信息。具体地,终端可以通过各种类型的信号传感器设备获取多媒体信息、环境信息和生理信号信息中的至少一个,然后对采集到的至少一个信息进行数据分析,进而根据数据分析结果确定出当前情绪的刺激源信息。
[0090]在本实施例的一个可选实现方式中,根据当前获取的多媒体信息确定所述当前情绪的情绪刺激源信息包括:根据当前输出和/或采集的多媒体信息确定所述情绪刺激源信息,其中,所述多媒体信息包括文本信息、图像信息、音频信息和视频信息中的至少一个。在本实施例中,可以首先获取终端当前输出和/或采集的多媒体信息,然后对所述多媒体信息进行数据分析,进而根据数据分析结果确定出能够引起情绪变化的刺激源信息。
[0091]在本实施例的一个可选实现方式中,根据当前输出和/或采集的多媒体信息确定所述情绪刺激源信息包括:将当前输出和/或采集的音频信息、所述音频信息的属性信息、所述音频信息在预设时间段内的音频片段和所述音频信息的语义信息中的至少一个作为所述情绪刺激源信息。
[0092]在本实施例中,可以首先获取终端当前输出和/或采集的音频信息,然后对该音频信息进行数据分析,从而进一步获得该音频信息的属性信息、语义信息和在预设时间段内的音频片段,最后再将音频信息、音频信息的属性信息、音频信息在预设时间段内的音频片段和音频信息的语义信息中的至少一个作为情绪刺激源信息,其中,预设时间段可以是当前时间点前后的一段时间。例如,当终端输出即播放一首歌曲时,可以首先通过检测终端的使用情况获取当前正在播放的歌曲,然后对该歌曲进行数据分析,就可以获得该歌曲的名字、演唱者/演奏者、专辑等属性信息,也可以获得该歌曲的歌词或对该歌词进行语义分析得到的歌词大意等语义信息,还可以对该歌曲进行片段截取得到在预设时间内的音频片段;而当用户使用该终端进行语音通话时,终端可以主动采集该通话音频,然后对该通话音频进行数据分析,就可以获取对方联系人、通话持续时间、与该联系人的通话频率等属性信息,也可以对通话内容进行语义分析得到语义信息,还可以对该通话音频进行截取以得到在预设时间段内的音频片段,最后可以对得到的所有与音频信息有关的信息进行刺激源分析以确定情绪刺激源信息。
[0093]在本实施例的一个可选实现方式中,根据当前输出和/或采集的多媒体信息确定所述情绪刺激源信息包括:将当前输出和/或采集的视频信息、所述视频信息的属性信息、所述视频信息在预设时间段内的视频片段、所述视频信息的语义信息、所述视频信息中的事件信息、所述视频信息中的人物信息、所述视频信息的截图信息和所述视频信息的音频信息中的至少一个作为所述情绪刺激源信息。
[0094]在本实施例中,可以首先获取终端当前输出和/或采集的视频信息,然后对该视频信息进行数据分析,从而进一步获得该视频信息的属性信息、语义信息、事件信息、人物信息和在预设时间段内的视频片段等信息,最后再通过刺激源分析从前述信息中确定至少一个情绪刺激源信息,其中,预设时间段可以是当前时间点前后的一段时间。例如,当终端输出即播放一部电影时,可以首先通过检测终端的使用情况获取当前正在播放的电影,然后对该电影进行数据分析,就可以获得该电影的名字、主要演员、导演、制片单位等属性信息,也可以获得该电影的台词或对该台词进行语义分析得到的台词梗概等语义信息,还可以对该电影进行视频截图并进一步对截图图像进行分析得到事件信息或人物信息,更可以对该电影进行片段截取得到在预设时间内的视频片段;或当用户使用该终端进行视频通话时,终端可以主动采集该通话视频,然后对该通话视频进行数据分析,就可以获取对方联系人、视频通话持续时间、与该联系人的视频通话频率等属性信息,也可以对视频通话内容进行语义分析得到语义信息,还可以对该通话视频进行视频截图并进一步对截图图像进行分析得到事件信息或人物信息,更可以对该通话视频进行截取以得到在预设时间段内的视频片段,最后可以对得到的所有与视频信息有关的信息进行刺激源分析以确定情绪刺激源信息。
[0095]在本实施例的一个可选实现方式中,根据当前输出和/或采集的多媒体信息确定所述情绪刺激源信息包括:将当前输出和/或采集的图像信息、所述图像信息中的事件信息和所述图像信息中的人物信息中的至少一个作为所述情绪刺激源信息。
[0096]在本实施例中,可以首先获取终端当前输出和/或采集的图像信息,然后对该图像信息进行数据分析,从而进一步获得该图像信息所包括的事件信息和/或人物信息,最后再通过刺激源分析从前述信息中确定至少一个情绪刺激源信息。例如,当终端输出即展示或通过照相功能采集到一张图片时,可以首先通过检测终端的使用情况获取当前正在浏览的图片,然后对该图片进行分析得到事件信息或人物信息,具体地,可以通过人物的面部特征及穿着打扮确定人物信息,如人物的名字、性别、年龄等信息,还可以通过分析图片中人物的肢体动作、面部表情、图片背景等信息确定图片中包含的事件信息,最后可以对得到的所有与图片信息有关的信息进行刺激源分析以确定情绪刺激源信息。
[0097]图6是本实施例的一个应用场景示意图,如图6所示,当用户在使用终端601浏览图片602时,如果终端检测到用户的情绪突然变为惊恐,就可以首先获取图片602,然后通过图像分析技术分析图片602,首先可以根据人物的面部特征和衣服识别出图片602中的人物信息,即第一人物信息白雪公主和第二人物信息老巫婆,然后通过分析人物的动作还可以确定出图像中的第一事件信息,即老巫婆正拿着一个苹果要给白雪公主。如果进一步结合已有的知识库还可以得知图片602中的老巫婆是皇后假扮的,并且苹果是一个毒苹果,从而可以得到第二事件信息,即皇后想要将毒苹果给白雪公主。最后,通过对得到的两个人物信息和两个事件信息进行综合分析,可以确定皇后想要将毒苹果给白雪公主的事件信息是引起用户产生惊恐情绪的情绪刺激源信息。
[0098]在本实施例的一个可选实现方式中,根据当前输出和/或采集的多媒体信息确定所述情绪刺激源信息包括:将当前输出和/或采集的文本信息和所述文本信息的语义信息中的至少一个作为所述情绪刺激源信息。
[0099]在本实施例中,可以首先获取终端当前输出和/或采集的文本信息,然后对该文本信息进行数据分析,从而进一步获得该文本信息的语义信息,最后再将文本信息和语义信息中的至少一个确定为情绪刺激源信息。例如,当终端输出即展示一段文本信息时,可以首先通过检测终端的使用情况获取当前正在浏览的文字图像,然后通过字符识别技术获取该文字图像中包含的文本信息,或当用户通过终端进行文字输入时,可以直接采集输入的文字作为采集的文本信息。然后还可以对获得的文本信息进行语义分析得到语义信息,最后可以对得到的文本信息和/或语义信息进行刺激源分析以确定情绪刺激源信息。在本实施例的一个应用场景中,如果终端采集到用户输入了文字信息:“独在异乡为异客,每逢佳节倍思亲”,可以直接将该文字信息作为刺激用户产生悲伤情绪的情绪刺激源信息,也可以进一步对该文字信息进行语义分析得到“独自在外,无法与家人团圆”的语义信息,并可以将该语义信息作为情绪刺激源信息。
[0100]在本实施例的一个可选实现方式中,所述生理信号信息包括用户当前的生理信号信息或根据所述生理信号信息得到的健康信息,其中,所述生理信号信息,所述健康信息可以是对所述生理信号信息进行分析后得到的、用来反映用户健康状况的健康信息,例如,当采集到用户的体温信号为38°c时,可以对该体温信号进行分析,发现该体温信号高于人类正常的体温36°C,因此可以认为该用户处于发烧状态,则健康信息可以是用于表示〃发烧〃的图像或文字等信息。
[0101]需要说明的是,当将生理信号信息作为情绪刺激源信息时,获取的情绪表现信息就不再包括生理信号信息,而是将获取的图像信息(如由于发烧到引起的面部发红的照片)等其他信息作为情绪表现信息。
[0102]在本实施例的一个可选实现方式中,所述环境信息包括时间信息、位置信息、天气信息、温度信息和湿度信息中的至少一个。在本实施例中,可以将环境信息作为情绪刺激源信息,环境信息可以是在采集情绪表现信息的同时,能够获取到的和当前环境有关的信息,其可以包括采集到情绪表现信息时的时间信息和地理位置等信息,也可以包括当前的天气、温度和湿度等气候信息。环境信息的表现形式可以包括文本信息、图像信息、音频信息和视频信息,例如,一张晴空万里的照片可以被作为情绪刺激源信息,因为该照片中包含有“晴朗”这一天气信息。
[0103]需要说明的是,当上述多媒体信息、环境信息和生理信号信息中的多个信息都可以刺激情绪发生变化时,可以将它们都作为情绪刺激源信息,也可以根据用户选择将它们中的某一个作为情绪刺激源信息。例如,当终端通过当前采集的情绪表现信息确定用户的当前情绪的情绪类型为悲伤时,同时通过检测终端的使用情况,确定到终端当前在播放一部电影《梁祝》,并通过网络从天气预报网站获取到当前的天气信息为小雨,还通过生理信
当前第3页1 2 3 4 5 6 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1