依据生理信号实时控制视频内容的方法和装置与流程

本发明涉及电子设备领域，具体涉及一种依据生理信号实时控制视频内容的方法和装置。

背景技术：

目前，旅游行业比较发达，但游客大都在旅行社的带领下对著名景点进行“走马观花”般的观看，且由于受到时间、精力、费用的限制，更不能对多个名胜古迹均亲身体验，特别对身患重病或残疾的朋友来说更是一种奢望。现在，vr产品主要以娱乐为主，也用于旅游行业，但主要是利用计算机程序生成一种模拟环境，用户在使用虚拟现实产品时能够在视觉上产生一种沉浸于虚拟现实的环境中体验，能够满足人们部分体验愿望，但不能满足人们对自己熟知的山川河流、名胜古迹的真实的进行多视角、多方位对四季风景的观赏，特别不能满足人们根据实时的感受控制对某一景观的全面观看、尽情享受。

技术实现要素：

为解决上述问题，本发明提供了一种依据生理信号实时控制视频内容的方法和装置，能够根据个人的喜好及身体状况首先选定一套最佳原vr视频，在观看的过程中可根据自己的生理需要随时调整观看vr视频的播放状态，包括实时切入相关所述原vr视频片段或由所述原vr视频片段状态切回至所述vr视频状态，满足用户多方位、多视角地享受观看vr视频的震撼体验，大大增加趣味性和满足感，同时，也确保了用户的身体健康，具有人性化。

本发明提供的具体技术方案如下：

一种依据生理信号实时控制视频内容的方法，用于vr设备，包括如下步骤：

摄像装置依据指令拍摄多个原视频；

获取用户信息，设定与兴趣点相关的生理特征阈值并保存；

识别与所述用户最佳匹配原视频并播放；

实时获取所述用户生理信号，与所述生理特征阈值比对，依据结果实时变换所述原视频的播放状态。

优选地，所述原视频包括vr视频，所述vr视频的播放状态变换方法包括：

正常播放、快速播放、慢速播放之间的切换；

对所述vr视频中目标物或场景的路经及焦距的变换；

相关原vr视频片段的切入或切回。

所述vr视频及vr视频片段包括360⁰全景vr视频。

优选地，播放所述vr视频的vr设备设有主控模块、图像采集装置、感应模块、储存模块、识别模块以及播放模块；

所述用户生理信号包括生理特征指标信号和生理特征状态信号；

所述生理特征指标信号的获取方法包括：

所述感应模块实时感应并获取用户生理特征指标信号，并传输至所述主控模块；

所述主控模块经比对获取用户兴趣点的类别；

依据预设的指令，所述主控模块控制所述播放模块变换所述vr视频的播放状态，或切入相关所述原vr视频片段。

优选地，获取所述生理特征指标信号的方法还包括：

所述感应模块实时获取所述用户的心率、血压、脑电波值,并实时传输至所述主控模块；

所述主控模块与预设的所述生理特征阈值比对，获取用户兴趣点类别；

所述生理特征阈值中的生理特征指标分组阈值设为：正常值、活跃值、兴奋值，及个性化时间阈值；相对应的用户兴趣点为一般感兴趣、感兴趣、非常感兴趣。

优选地，所述生理特征状态信号的获取方法包括：

所述图像采集装置实时采集眼睛状态图像，并传输至所述主控模块；

所述主控模块经比对获取用户兴趣点类别；

依据预设指令，所述主控模块控制所述播放模块切换所述vr视频的播放状态，或切换相关所述原vr视频片段。

优选地，获取所述生理特征状态变化的方法还包括：

所述图像采集装置实时采集用户眼睛的变化状态；

所述主控模块与所述生理特征阈值比对，获取用户兴趣点类别；

所述生理特征阈值中的生理特征状态分组阈值设为：正常、睁大、眼球上下和/或左右移动、眯起，及个性化时间阈值；

所对应所述用户的兴趣点分类为一般感兴趣、感兴趣、非常感兴趣、不再感兴趣。

优选地，所述原vr视频片段的形成方法：

对所述多个原vr视频进行分类、编码；

对每个所述原vr视频进行物质识别及场景识别，并对目标物、场景、路经切成片段，分类、编码；

对不同所述原vr视频中同一景物的vr频片段进行归类、编码；

形成原vr视频片段。

优选地，切入所述原vr视频片段或切回的方法：

所述主控模块依据所述用户的生理信号的变化结果,以及由所述识别模块传输的当前播放的视频内容综合判断：

所述主控模块从所述多个原vr视频片段中识别出与所述当前播放的vr视频内容相同的原vr视频片段并切入；

或由所述原vr视频片段切回至当前播放的所述vr视频。

优选地，所述vr设备与所述计算机通过互联网连接，所述互联网包含3g网络、4g网络、5g网络及wifi网络。

优选地，所述装置包括：

vr设备，所述vr设备包括：

主控模块，与计算机相连，用于传输数据，并控制vr视频的播放；

播放模块，与所述主控模块相连，用于控制显示屏播放所述vr视频；

感应模块，实时感应并获取生理特征信息，与所述主控模块相连；

识别模块，与所述主控模块相连，用于识别原vr视频及原vr视频片段；

图像采集装置，实时采集眼睛状态；

储存模块，用于储存缓存vr视频；

计算机，包括：

储存器，用于储存预设的生理特征指标分组阈值及个性化时间阈值、生理特征状态分组阈值及个性化时间阈值、原vr视频、原vr视频片段；

处理器，具有计算功能，用于处理用户生理信号；将拍摄的视频处理成vr视频；将所述原vr视频的分类、编码，生成所述原vr视频片段，将所述原vr视频片段的分类、编码；

摄像装置，用于拍摄原视频。

上述一种依据生理信号实时控制视频内容的方法和装置，根据预设要求以及对用户热衷景点的汇集、分析，由专业摄影师和/或由无人机对某一景区包括特定目标进行拍摄，形成多个原vr视频，所述原vr视频包括360⁰全景vr视频；用户根据自己的喜好、年龄、期望从中选取最佳所述原vr视频并播放，观看过程中，vr一体机设有主控模块根据用户实时的生理特征信息对所述原vr视频的正常播放转换为快速播放或减缓播放或切入相关所述原视频片段，满足用户多方位、多视角地享受观看vr视频的震撼体验，大大增加趣味性和满足感，同时，也确保了用户的身体健康，具有人性化。

本发明的有益效果为：

本发明提供了一种依据生理信号实时控制视频内容的方法和装置，能够根据个人的喜好及身体状况首先选取一套最佳原vr视频，在观看的过程中可根据自己的生理需要随时调整观看vr视频的播放状态，包括实时切入相关的所述原vr视频片段或切回到目前观看的vr视频中，满足多方位、多视角、包含不同季节地享受观看vr视频的震撼体验，大大增加趣味性和满足感，同时，也确保了用户的身体健康，具有人性化。

附图说明

图1是本发明结构关系示意图；

图2是本发明流程关系示意图；

图3是本发明依据生理信号实时变换播出状态的示意图。

其中：1-vr一体机；2-计算机；3-光场摄像机；4-显示屏；5-播放模块；6-识别模块；7-主控模块；8-感应装置；9-通信模块；10-图像采集装置；11-储存模块；12-处理器；13-储存器。

具体实施方式

如在说明书及权利要求当中使用了某些词汇来指称特定组件。本领域技术人员应可理解，硬件制造商可能会用不同名词来称呼同一个组件。本说明书及权利要求并不以名称的差异来作为区分组件的方式，而是以组件在功能上的差异来作为区分的准则。如在通篇说明书及权利要求当中所提及的“包含”为一开放式用语，故应解释成“包含但不限定于”；“多个”应解释成“多于或等于两个”。说明书后续描述为实施本申请的较佳实施方式，然所述描述乃以说明本申请的一般原则为目的，并非用以限定本申请的范围。本申请的保护范围当视所附权利要求所界定者为准。

如图1-图3所示，在一个实施例中，提供了一种依据生理信号实时控制视频内容的装置，包括vr一体机1、计算机2和光场摄像机3。vr一体机1和计算机2之间建立通信连接，通过通信模块9连接vr一体机1和计算机2之间传输数据，光场摄像机3和计算机2相连接。

所述vr一体机1包括：

主控模块7，所述主控模块7与计算机2相连，用于传送数据、原视vr频及原vr视频片段；

播放模块5，与所述主控模块7相连，控制所述播放模块5使显示屏4播放所述vr视频；

感应模块8，实时感应并获取生理特征信息，与所述主控模块7相连；

识别模块6，与所述主控模块7相连，用于识别相关所述原vr视频片段；

通信模块9，与所述主控模块7、计算机2相连；

储存模块11，用于缓存原vr视频、所述原vr视频片段；

图像采集装置10，与所述主控模块7、显示屏4相连，用于采集用户眼睛状态信息；

显示屏4，与所述播放模块5相连。

所述计算机2包括：

储存器13，用于储存预设的生理特征指标分组阈值及个性化时间阈值、生理特征状态分组阈值及个性化时间阈值、原vr视频、原vr视频片段；

通信模块9，与所述vr一体机1通信连接；

处理器12，具有计算功能，用于处理用户生理信号,并将处理结果储存在储存器13；将拍摄的视频处理成vr视频；将所述原vr视频的分类、编码，生成所述原vr视频片段，将所述原vr视频片段的分类、编码。

光场摄像机3，用于拍摄原视频。

本发明提供一种依据生理信号实时控制视频内容的方法，用于vr一体机1，包括如下步骤：

光场摄像机3依据指令拍摄多个原vr视频；

获取用户信息，设定与兴趣点相关的生理特征阈值并保存在计算机2的储存器13中；

vr一体机1的识别模块6识别与所述用户最佳匹配原视频并播放；

vr一体机1的感应装置8、图像采集装置10实时获取所述用户生理信号，与所述生理特征阈值比对，依据结果实主控模块7控制播放模块5时变换所述原视频在显示屏4的播放状态。

所述vr一体机1通过通信模块9从所述计算机2的储存器13中获取预设的生理特征指标分组阈值及个性化时间阈值、生理特征状态分组阈值及预设的个性化时间阈值、所述原vr视频、所述原vr视频片段，并缓存在所述储存模块11中。

在一个实施例中，摄像装置依据指令拍摄多个原视频，所述指令依据对以往用户热衷景点的汇集、分析，由专业摄影师和/或由无人机使用光场摄像机3对某一景区包括特定目标、场景、路经进行拍摄形成的摄影图像，所述摄影图像包括经所述计算机2的处理器12处理形成的360⁰全景vr视频。

优选地，所述用户信息包括用户的喜好、年龄、期望。

优选地，所述播放状态包括播放速度，即正常播放、快速播放、慢速播放之间的切换；对所述vr视频中目标物或场景的路经及焦距的变换；相关原vr视频片段的切入或切回。

优选地，所述生理信号包括由感应装置8实时获取的生理特征指标及由图像采集装置10实时获取的生理特征状态的信号。

所述生理特征指标的变化包括血压、心率、脑电波与观看vr视频前采集的指标的对比变化；

优选地，依据用户的年龄、测量的身体生理特征指标信息，将生理特征指标设为正常值、活跃值、兴奋值三组阈值，根据用户的不同将时间阈值设为个性化时间阈值，所述生理特征指标分组阈值对应的用户兴趣点分类为一般感兴趣、感兴趣、非常感兴趣，并储存在所述计算机2的储存器13中。

所述生理特征状态的变化包括眼睛的状态变化信息及时间信息，所述生理特征状态分组阈值设为：正常、睁大、眼球上下和/或左右移动、眯起，时间阈值设为个性化时间阈值；

所述生理特征状态分组阈值对应用户的兴趣点分类为一般感兴趣、感兴趣、非常感兴趣、不再感兴趣，并储存在所述计算机2的储存器13中。

优选地，所述主控模块7根据所述计算机2的储存器13中预设的针对不同用户的身体、年龄状况设置的参数，及时变换vr视频的播放状态，确保用户的身体健康。

优选地，所述vr一体机1包括主控模块7、图像采集装置10、感应模块8、储存模块11、识别模块6以及播放模块5，所述主控模块7分别与所述图像采集装置10、所述播放模块5、所述储存模块11、所述识别模块6、所述感应模块8电连接。

所述用户生理信号包括生理特征指标的变化信号，其获取方法包括：

所述感应模块8实时感应并获取用户生理特征指标，并传输至所述主控模块7；

所述主控模块7从所述生理特征指标的变化值中分析出用户兴趣点信息；

依据预设指令，所述主控模块7控制播放模块5对当前vr视频的播放状态，或切入相关所述原vr视频片段。

优选地，获取所述生理特征指标变化的方法包括：

所述感应模块8实时获取用户包括心率、血压、脑电波的生理特征指标并实时传输至所述主控模块7。

一个实施例中，用户在观看所述vr视频时，当所述感应装置8实时获取的生理特征指标传递给所述主控模块7，所述主控模块7将所述生理特征指标与所述储存器13的生理特征指标分组阈值比对，当分析得知所述用户生理特征指标属于活跃值，且时间达到预设的个性化时间阈值时，则获取用户对所述视频内容感兴趣，所述主控模块7控制所述vr视频的播放速度放慢，或焦距的变化，以满足用户的期望；当所述用户生理特征指标属于兴奋值时，且时间达到预设的个性化时间阈值时，则获取用户对所述视频内容非常感兴趣，所述主控模块7则实时切入相关的、从其他角度拍摄的多个vr视频片段，以满足用户的期望，当所述用户生理特征指标属于正常值时，则获取用户对所述视频内容一般感兴趣，则切回至当前播放的所述vr视频中继续播放。

优选地，所述用户生理信号还包括生理特征状态的变化信号，其获取方法包括：

所述图像采集装置10实时采集眼睛状态图像，并传输至所述主控模块7；

所述主控模块7从所述眼睛图像的状态变化中分析出用户期许信息；

依据预设指令，所述主控模块7切换所述播放模块5对当前vr视频的播放状态，或切换进相关所述原vr视频片段。

优选地，获取所述生理特征状态的变化方法包括：

所述图像采集装置10实时获取用户包括眼睛的睁大、眯起、眼球的移动方向状态并实时传输至所述主控模块7；

在一个实施例中，当所述图像采集装置10获取用户的眼睛处于睁大的状态时，所述主控模块7与所述储存器13中预设的生理特征状态分组阈值及个性化时间阈值比对，则分析得知所述用户对实时播放的所述vr视频感兴趣，控制所述vr视频的播放速度变慢，或焦距的改变；当所述图像采集装置10获取用户的眼球处于向上、向下和/或向左、向右移动的状态时，所述主控模块7与所述储存器13中预设的生理特征状态分组阈值及个性化时间阈值比对，则获知所述用户对实时播放的所述vr视频非常感兴趣，则实时切入相关的、从其他角度拍摄的多个原vr视频片段，满足用户的期望；当获取到用户的眼睛眯起时，则获知所述用户对实时播放的所述vr视频已不再感兴趣，则切回至当前播放的所述vr视频中继续播放。

优选地，所述原vr视频片段的形成方法：

所述计算机2设有的处理器12对所述多个原vr视频进行分类、编码；

对每个所述原vr视频中的目标物进行切片、分类、编码；

对每个所述原vr视频进行物质识别及场景识别，并对目标物、场景、路经切成片段，分类、编码；

形成原vr视频片段，所述原vr视频片段储存在所述储存器13内。

优选地，所述vr视频的播放状态变换方法包括：

所述播放模块5播放当前所述vr视频时由正常速度变换为快速播放或慢速播放，或快速播放与慢速播放之间的切换；

所述播放模块5播放当前所述vr视频时对目标物或场景的路经及焦距的变换；

以及与所述目标内容相关的所述原vr视频片段的切入或切回当前所述vr视频。

优选地，切入所述原vr视频片段或切回的方法：

所述主控模块7依据生理特征指标的变化值和/或生理特征状态的变化信号,以及由所述识别模块6传输的当前播放的视频内容综合判断：

所述主控模块7从所述多个原vr视频片段中识别出与所述当前播放的vr视频内容相同的原vr视频片段并切入；

根据用户的生理信号或预设的时间，由所述原vr视频片段切回至当前播放的所述vr视频。

优选地，所述原vr视频的形成方法：

从摄影图像样本中量化出原始数据，预设多个拍摄轨迹；

用光场摄像机3安装在球面上实施360度全景拍摄，获取多帧图片；

对相邻帧图片拼接，并用加权平均法拼接重叠部分；

对远帧、中帧、近帧的多帧图片分别进行场拼接，完整全景视频；

由所述计算机2设有的处理器12处理形成多个原vr视频，并储存在所述储存器13内。

所述通信模块9通过互联网连接，所述互联网包括3g、4g、5g网络或wifi网络。

上述描述了本申请的若干优选实施例，但如前所述，应当理解本申请并非局限于本文所披露的形式，不应看作是对其他实施例的排除，而可用于各种其他组合、修改和环境，并能够在本文所述申请构想范围内，通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本申请的精神和范围，则都应在本申请所附权利要求的保护范围内。