一种用户情绪显示系统的制作方法

本实用新型涉及视频直播技术领域，尤其涉及一种用户情绪显示系统。

背景技术：

随着网络传输技术、无线近场通信技术以及移动终端数据处理技术的发展，网络直播，比如体育赛事直播或者有线视讯的直播等，成为用户越来越青睐的节目观看方式。用户可以借助无线网络数据传输，随时随地观看喜欢的直接节目。

网络视频直播是有视频媒体的高端形态。从信息传播的角度来看，直播可以让用户与直播现场实时地连接，提供真实直接的视频观看体验。因为真实性，直播节目的不可预料性对用户来说很有吸引力，带给用户想象空间和惊喜。而其强大的互动性也拉近了粉丝和主播的距离。

但是现有的网络直播技术领域，技术开发关注点还是在直播流数据或者优化网络传输上，并未针对直播频道的内容提供相应体验更好的互动。并且，对于很多内向不善于表达的直播观众，即使设置了直播互动环节，对于内向的观众来说也很难参与到直播互动环节。并且，直播观众在互动环节的互动信息过于随意，互动环节对直播用户来说吸引力不大，并且互动过程无法成为指导直播内容的直播平台的可挖掘信息。

因此，现有技术的网络直播技术还有待于改进。

技术实现要素：

为了解决上述技术问题，本实用新型实施例提供一种用户情绪显示系统，可以实时显示用户当前真实的情绪度，为直播平台等提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验。

为解决上述技术问题，本实用新型实施例提供以下技术方案：

一种用户情绪显示系统，包括可穿戴装置、显示终端以及云端服务器，所述可穿戴装置连接显示终端，所述显示终端连接云端服务器；

所述可穿戴装置用于采集用户的生物体震信息，并将所述生物体震信息发送至所述显示终端；

所述显示终端用于接收所述生物体震信息，并将所述生物体震信息转发至所述云端服务器；

所述云端服务器包括第第一处理器与第一存储器，所述第一处理器分别与所述第一存储器及所述显示终端连接，所述第一存储器存储有可被所述第一处理器执行的指令，所述指令被所述第一处理器执行，以使所述第一处理器执行：接收所述显示终端转发的所述生物体震信息；从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，以使所述显示终端实时显示所述目标情绪度，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。

在一些实施例中，所述可穿戴装置包括：第二处理器及体震传感器，所述第二处理器分别与所述体震传感器及所述显示终端连接；

所述体震传感器用于采集用户的生物体震信息，并将所述生物体震信息发送至所述第二处理器；

所述第二处理器为带有第二存储器的处理器，所述第二存储器存储有可被所述第二处理器执行的指令，所述指令被所述第二处理器执行，以使所述第二处理器执行：接收所述生物体震信息，并将所述生物体震信息转发至所述显示终端。

在一些实施例中，所述可穿戴装置还包括无线通信模块，所述无线通信模块与所述第二处理器连接，所述第二处理器通过所述无线通信模块与所述显示终端通信。

在一些实施例中，所述可穿戴装置还包括语音输入组件，所述语音输入组件与所述第二处理器连接，所述语音输入组件用于采集及播放音频信息。

在一些实施例中，所述体震传感器为加速度传感器、重力传感器、位移传感器、光电传感器或生物电电极。

在一些实施例中，所述可穿戴装置还包括声光/振动指示组件，所述声光/ 振动指示组件与所述第二处理器连接，所述声光/振动指示组件用于提供提示信息。

在一些实施例中，所述声光/振动指示组件包括声光指示灯和振动马达。

在一些实施例中，所述显示终端包括：第三处理器、第三存储器及显示器，所述第三处理器分别与所述第三存储器、所述蓝牙模块、所述无线网络模块及所述显示器连接，并且所述第三处理器与所述可穿戴装置及所述云端服务器连接；

所述第三存储器存储有可被所述第三处理器执行的指令，所述指令被所述第三处理器执行，以使所述第三处理器执行：接收所述生物体震信息，并将所述生物体震信息转发至所述云端服务器，以及控制所述显示器实时显示所述目标情绪度。

在一些实施例中，所述显示终端还包括：蓝牙模块及无线网络模块，所述蓝牙模块与所述无线网络模块均与所述第三处理器连接，所述第三处理器通过所述蓝牙模块与所述可穿戴装置通信，所述第三处理器通过所述无线网络模块与所述云端服务器进行通信。

在一些实施例中，所述第三处理器执行控制所述显示器实时显示所述目标情绪度，包括：

获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据所述时间戳控制显示器滚动显示接收的所述目标情绪度对应的文字或者动图。

与现有技术相比较，在本实用新型实施例的用户情绪显示系统，在可穿戴装置上安装体震传感器，比如加速度传感器、陀螺仪、压阻式传感器或者生物电极，该可穿戴装置获取用户的生物体震信息后，连接可穿戴装置的显示终端将获取的生物体震信息转发至云端服务器，该云端服务器从生物体震信息中提取心冲击信息，再从该心冲击信息中提取出心冲击特征信息，基于该心冲击特征信息查询确定佩戴可穿戴装置的用户当前真实的情绪度，为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验，使直播平台的直播界面更具娱乐性、可观赏性、互动性、氛围更强烈。

【附图说明】

一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。

图1是本实用新型实施例提供的用户情绪显示系统的系统框架图；

图2是本实用新型实施例提供的用户情绪显示系统的可穿戴装置的硬件结构图；

图3是本实用新型实施例提供的用户情绪显示系统的显示终端的模块结构图；

图4是本实用新型实施例提供的用户情绪显示系统的显示终端直播界面示意图；

图5是本实用新型实施例提供的用户情绪显示系统的云端服务器的模块结构图。

【具体实施方式】

为了便于理解本实用新型，下面结合附图和具体实施例，对本实用新型进行更详细的说明。需要说明的是，当元件被表述“固定于”另一个元件，它可以直接在另一个元件上、或者其间可以存在一个或多个居中的元件。当一个元件被表述“连接”另一个元件，它可以是直接连接到另一个元件、或者其间可以存在一个或多个居中的元件。本说明书所使用的术语“上”、“下”、“内”、“外”、“底部”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本实用新型和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本实用新型的限制。此外，术语“第一”、“第二”“第三”等仅用于描述目的，而不能理解为指示或暗示相对重要性。

除非另有定义，本说明书所使用的所有的技术和科学术语与属于本实用新型的技术领域的技术人员通常理解的含义相同。在本实用新型的说明书中所使用的术语只是为了描述具体的实施例的目的，不是用于限制本实用新型。本说明书所使用的术语“和/或”包括一个或多个相关的所列项目的任意的和所有的组合。

此外，下面所描述的本实用新型不同实施例中所涉及的技术特征只要彼此之间未构成冲突就可以相互结合。

本实用新型实施例提供的用户情绪显示系统，涉及可穿戴装置、显示终端以及云端服务器，该可穿戴装置与显示终端无线连接或者有线连接，该显示终端与云端服务器通过有线或者无线网络进行数据通信。本实用新型实施例在可穿戴装置上安装体震传感器，比如加速度传感器、陀螺仪、压阻式传感器或者生物电极，该可穿戴装置获取用户的生物体震信息(如基于时域获取用户的生物体震信息)后，连接可穿戴装置的显示终端将获取的生物体震信息转发至云端服务器，该云端服务器从生物体震信息中提取心冲击信息，心冲击信息是一种被广泛的研究的生物体震信息。再从该心冲击信息中提取出心冲击特征信息，基于该心冲击特征信息查询确定佩戴可穿戴装置对应用户当前真实的情绪度。同时，在显示终端请求直播数据时，在显示终端的直播界面中播放直播内容时同步滚动显示观看同一直播频道的所有用户的表征其情绪度的文字或者动态图像，为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验。

请参考图1，本实用新型实施例提供的用户情绪显示系统。该用户情绪显示系统包括若干可穿戴装置、若干显示终端以及云端服务器300。其中，所述若干可穿戴装置包括有可穿戴装置100-1，…，可穿戴装置100-n。所述若干显示终端包括有显示终端200-1，…，显示终端200-n。所述可穿戴装置100-1 连接对应的显示终端200-1，类似的，所述可穿戴装置100-n连接对应的显示终端200-n。所述显示终端200-1，…，显示终端200-n均连接云端服务器300，并且，所述显示终端200-1，…，显示终端200-n均可接收该云端服务器300 的直播视频数据。所述云端服务器300也是直播平台的服务器，同时所述云端服务器300还可提供直播视频流数据。

以下介绍以可穿戴装置100-1和显示终端200-1为例加以说明。

请参考图2，本实用新型实施例中的可穿戴装置100-1为了获取用户的生物体震信息，设置有体震传感器50。所述体震传感器50可以为贴近心脏直接接触人体的电极或者传感器，也可以是不直接接触人体的体震传感器。其中，直接接触人体的电极或者传感器目前使用普遍，测量心率时需要使用电极或传感器直接接触人体，会对人体产生一定约束。而不直接接触人体的体震传感器，比如加速度传感器和/或陀螺仪传感器，可以不直接与人体接触而获取得到心脏跳动对人体产生的微弱震动信号，即生物体震信息。然后，通过对所述生物体震信息进行信号分析，便可达到不直接接触人体即可无感觉测量心率的效果。或者，所述体震传感器50也可以采用压阻式传感器，当心脏向外泵血时，身体就会产生与促使血液流动的力相反的反作用力，该反作用力可以在体表上通过敏感的力传感器测量出来。

在一些实施例中，该体震传感器50还可以是聚偏氟乙烯制作的传感器、重力传感器、织物电极、位移传感器、压电电缆、光电传感器或生物电电极。其中，生物电电极可以为氯化银电极(Ag/AgCl/Cl-)，该氯化银电极可用于检测基本生物体震信息，再通过心率变异性(Heart Rate Variability，HRV) 分析换算为人的情绪度，亦即兴奋程度。

其中，心率变异性是指逐次心跳间期，亦即瞬时心率，之间存在的微小差异或微小涨落现象。心率变异性分析是把心搏的微小变化，转换为波形方式进行分析，将人体自主神经对于压力的应急反应可视化，以实时确认人的健康状况或者精神、生理上的稳定状态。

具体的，所述可穿戴装置100-1包括带有第二存储器的第二处理器10、语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器 50。所述第二处理器10分别与所述语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50连接，该连接可以为通信连接。所述可穿戴装置100-1通过所述无线通信模块40与无线连接的显示终端200-1通信。其中，其它可穿戴装置100-2至可穿戴装置100-n的结构与所述可穿戴装置 100-1的结构相同，因此，在此处不赘述。

其中，所述体震传感器50可以为内嵌的加速度传感器或者陀螺仪传感器，对人体震动的微弱信息也即生物体震信息进行采样。例如，对心冲击运动图、呼吸运动、体动等基础信息基于时域进行采样。并且，所述可穿戴装置100-1 将采样数据发送至连接的显示终端200-1。具体的，所述体震传感器50将采集数据发送至所述第二处理器10，再通过所述无线通信模块40将所述采样数据发送至连接的显示终端200-1。类似的，所述可穿戴装置100-2将采样数据发送至连接的显示终端200-2，…，所述可穿戴装置100-n将采样数据发送至连接的显示终端200-n。

所述显示终端200-1，…，显示终端200-n接收到所述生物体震信息后，分别将所述生物体震信息发送至云端服务器300，以便所述云端服务器300进行运算处理形成对应用户的情绪度，亦称兴奋度。

可以理解的是，在一些实施例中，对于所述生物体震信息的运算处理，也可以在可穿戴装置100-1，…，可穿戴装置100-n中进行，以得到对应用户的情绪度，并将所述情绪度发送至所述显示终端200-1，…，显示终端200-n；然后，所述显示终端200-1，…，显示终端200-n将所述情绪度转发至所述云端服务器300。或者，在所述显示终端200-1，…，显示终端200-n进行运算处理，以得到所述情绪度，并将所述情绪度反馈至所述云端服务器300。

所述显示终端200-1在请求直播数据时，所述云端服务器300向所述显示终端200-1发送直播视频数据，同时，所述云端服务器300计算同一直播频道下所有用户的情绪度，并将所述所有用户的情绪度发送至请求的显示终端200-1。类似的，所述云端服务器300将所述所有用户的情绪度发送至请求的显示终端200-2，…，所述云端服务器300将所述所有用户的情绪度发送至请求的显示终端200-n，以便在每个显示终端中均可看到所有用户的情绪度。例如，在进行直播时，直播的主播持有所述显示终端200-1，听众A持有所述显示终端200-2，听众B持有所述显示终端200-n，则主播、听众A以及听众 B均可通过各自所持的显示终端，了解到主播、听众A以及听众B的情绪度，以便为直播平台提供真实的视频体验反馈和交互基础，提升用户粘性以及提升用户体验。

请一并参考图4，所述显示终端200-1创建直播界面400，所述直播界面 400包括视频窗口410以及滚动显示窗口420。所述显示终端200-1在所述视频窗口410播放直播视频数据，在所述滚动显示窗口420滚动显示所有用户对直播内容的兴奋度。

本实用新型实施例提供的用户情绪显示系统，通过分析由传感器检测的生物体震信息，推导出情绪度和兴奋度，再将情绪度或者兴奋度与直播平台进行联动，实现在直播平台上滚动显示同一直播频道的观看用户的真实情感响应度，内容粘性大，数据更真实，使直播平台更具有吸引力。

以下具体介绍该用户情绪显示系统。

如图2所示，所述可穿戴装置100-1包括带有第二存储器的第二处理器 10、语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50。所述第二处理器10分别与所述语音输入组件20、声光/振动指示组件30、无线通信模块40以及体震传感器50连接，该连接可以为通信连接。所述可穿戴装置100-1通过所述无线通信模块40与无线连接的显示终端 200-1通信。其中，其它可穿戴装置100-2至可穿戴装置100-n的结构与所述可穿戴装置100-1的结构相同，因此，在此处不赘述。

首先，所述体震传感器50，比如加速度传感器、重力传感器、位移传感器、光电传感器、生物电电极或者陀螺仪传感器用于采集用户的生物体震信息，具体的，负责采集接收人体心冲击图信息、呼吸信息、身体运动信息等生物体震信息，并将所述生物体震信息发送至所述第二处理器10。所述语音输入组件20负责采集及播放音频信息。然后，所述第二处理器10负责将所述体震传感器50所采集到生物体震信息(心冲击图信息、呼吸信息、身体运动信息等)以及所述语音输入组件20所采集到音频信息转换成传输标准数据包，再将所述传输标准数据包打包发送给所述无线通信模块40。最后，所述无线通信模块40负责将传输标准数据包(包括生物体震信息及音频信息)通过无线传输方式发送到所述显示终端200-1。并且，所述声光/振动指示组件 30用于提供提示信息，具体的，通过声光、震动等方式为用户提供可视或可感受的提示信息。其中，所述语音输入组件20可以包括麦克风等；所述声光 /振动指示组件30可以包括声光指示灯及振动马达等。所述无线通信模块40 可为蓝牙通信模块等。

为了实现直播同时滚动显示所有用户真实的观看感受，所述可穿戴装置 100-1获取用户的生物体震信息，并由所述显示终端200-1将所述生物体震信息转发给所述云端服务器。所述云端服务器300从所述生物体震信息，提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；以及用于对每一心冲击信息帧进行频域分析提取该心冲击信息的心冲击特征信息，根据该心冲击特征信息查询心冲击特征信息与情绪度对照库，查询确定目标情绪度。所述显示终端200-1实时滚动显示该目标情绪度。其中，所述目标情绪度为与该心冲击特征信息对应的第一情绪度。

其中，所述心冲击特征信息实施例具体介绍如下：所述心冲击特征信息从心冲击信息(Ballistocardiogram，BCG)中提取得到的特征信息。例如，所述心冲击特征信息可以为HRV的频域和时域参数：RR间期(RRI)、全部窦性心搏RR间期的标准差(standard diviation of NN intervals,SDNN)、高频(High Frequency，HF)、低频(Low Frequency，HF)、LF/HF和总功率(TP) 等。计算单位时段的参数值，记录每种参数的变化趋势，并与现有研究中已知的基本情绪状态的HRV参数RRI、SDNN、HF、LF、LF/HF和TP进行比对，结合心冲击特征信息与情绪度对照库，便可确定目标情绪度。

同时，为了从所述生物体震信息中提取更多的用户参数，所述云端服务器300从所述生物体震信息中分离出呼吸信息；对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。其中，结合呼吸信息可以分析出用户更多的心冲击特征信息，以使情绪度推算更准确。例如，所述云端服务器300可从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；以及对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；所述第二情绪度用于修正所述目标情绪度。通过呼吸信息分析出用户更多的心冲击特征信息，从而使得更准确反映用户的情绪。

请参考图3，本实施例的显示终端200-1包括第三处理器210、第三存储器220、蓝牙模块230、无线网络模块240及显示器250。所述第三处理器210 分别与所述第三存储器220、蓝牙模块230、无线网络模块240及显示器250 连接，该连接可以为通信连接。并且，所述第三处理器210还与所述可穿戴装置100-1及云端服务器300连接，所述第三处理器210通过所述蓝牙模块 230与无线连接的可穿戴装置100-1通信，通过所述无线网络模块240与无线连接的云端服务器300进行通信。其中，其它显示终端200-2至显示终端200-n 的结构与所述显示终端200-1的结构相同，因此，在此处不赘述。

所述第三存储器220存储有可被所述第三处理器210执行的指令，所述指令可被所述第三处理器210执行。当所述指令被所述第三处理器210执行，以使所述第三处理器210执行：获取所述可穿戴装置采集的用户的生物体震信息，并将所述生物体震信息转发至所述云端服务器；以及控制显示器250 实时显示来自所述云端服务器发送的所述目标情绪度。

所述第三处理器210执行控制显示器250实时显示所述目标情绪度，具体包括：获取相同直播频道下所有用户的目标情绪度，并记录与所述目标情绪度对应的时间戳；在所述显示终端显示的直播界面中设置视频窗口以及滚动显示窗口；在所述滚动显示窗口中，根据所述时间戳控制显示器250滚动显示接收的所述目标情绪度对应的文字或者动图。其中，为了合理显示所述目标情绪度对应的文字或者动图，采用先接收的先显示的方式显示于所述滚动显示窗口420。

其中，所述第三处理器210获取相同直播频道下所有用户的目标情绪度的每一目标情绪度的产生过程为：所述云端服务器300从所述生物体震信息提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息，并根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，查询得到每一目标情绪度。

请参考图5，本实施例的云端服务器300通过网络连接若干显示终端。所述云端服务器300包括第一处理器310与第一存储器320，所述第一处理器 310分别与所述第一存储器320及所述显示终端200-1，…，显示终端200-n 连接，该连接可以为通信连接。

所述第一存储器320存储有可被所述第一处理器310执行的指令，所述指令被所述第一处理器310执行，以使所述第一处理器执行：接收所述显示终端转发的所述生物体震信息；从所述生物体震信息中提取心冲击信息，并根据所述心冲击信息建立心冲击信息帧；对所述心冲击信息帧中的每一心冲击信息帧进行频域分析提取所述心冲击信息的心冲击特征信息；根据所述心冲击特征信息查询心冲击特征信息与情绪度对照库，确定目标情绪度，并将所述目标情绪度发送至所述显示终端，所述目标情绪度为与所述心冲击特征信息对应的第一情绪度。

其中，为了从所述生物体震信息中提取准确的用户参数，更准确反映用户的情绪，所述第一处理器310还用于执行：从所述生物体震信息中提取呼吸信息，并根据所述呼吸信息建立呼吸信息帧；对所述呼吸信息帧中的每一呼吸信息帧提取所述呼吸信息的呼吸特征信息，根据所述呼吸特征信息查询呼吸特征信息与情绪度对照库，确定与所述呼吸特征信息对应的第二情绪度；基于所述第一情绪度与所述第二情绪度修正所述目标情绪度。通过呼吸信息分析出用户更多的心冲击特征信息，从而使得更准确反映用户的情绪。其中，所述第一处理器310执行从所述生物体震信息中提取心冲击信息，具体包括：从所述生物体震信息中分离出呼吸信息；对分离出呼吸信息后的所述生物体震信息进行滤波降噪处理，再减去所述呼吸信息后获取所述心冲击信息。

并且，为了从所述生物体震信息中提取准确的用户参数，进一步的更准确反映用户的情绪，所述第一处理器还用于执行：从所述生物体震信息中提取体动信息，并根据所述体动信息建立体动信息帧；对所述体动信息帧中的每一体动信息帧提取所述体动信息的体动特征信息，根据所述体动特征信息查询体动特征信息与情绪度对照库，确定与所述体动特征信息对应的第三情绪度；利用所述第三情绪度修正所述目标情绪度。

所述第一处理器310还用于执行：根据请求的直播频道对用户进行分组。具体的，用户可以通过所述云端服务器300进行用户注册，所述云端服务器 300再根据请求的直播频道对注册的用户进行分组。用户通过所述显示终端 200-1请求直播视频数据时，所述第一处理器310向请求显示终端200-1提供直播视频数据，并将相同直播频道分组中所有用户的目标情绪度发送至所述显示终端200-1。以便于所述显示终端200-1创建直播界面400，并在视频窗口410播放直播视频数据，同时在该滚动显示窗口420实时滚动显示所有用户对直播内容的兴奋度。

本实施例的用户情绪显示系统，将情绪度或者兴奋度与直播平台进行联动，实现在直播平台上实时滚动显示同一直播频道的观看用户的真实情感响应度，内容粘性大，数据更真实。

最后应说明的是：以上实施例仅用以说明本实用新型的技术方案，而非对其限制；在本实用新型的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本实用新型的不同方面的许多其它变化，为了简明，它们没有在细节中提供；尽管参照前述实施例对本实用新型进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本实用新型各实施例技术方案的范围。