VR视频中图像的加载方法、装置及电子设备与流程

文档序号:11524821阅读:242来源:国知局
VR视频中图像的加载方法、装置及电子设备与流程

本发明涉及虚拟现实领域,具体而言,涉及一种vr视频中图像的加载方法、装置及电子设备。



背景技术:

随着虚拟现实技术的快速发展,vr(virtualreality,虚拟现实)影院的使用越来越普及。目前的vr影院能够使用户在佩戴vr头显设备时仿佛置身于电影院观看电影,但是却无法实现像真实的影院一样具有光影的变化,用户体验较差。



技术实现要素:

有鉴于此,本发明实施例的目的在于提供一种vr视频中图像的加载方法、装置及电子设备,以解决上述问题。

为了实现上述目的,本发明实施例采用的技术方案如下:

第一方面,本发明实施例提供了一种vr视频中图像的加载方法,该方法首先设置第一纹理贴图、第二纹理贴图和视频影像贴图,其中,该第一纹理贴图亮度低于该第二纹理贴图;若检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图;若检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时加载该视频影像贴图。

结合第一方面,本发明在第一方面的第一种实现方式中,该视频影像贴图对应的图层为该第三渐变纹理贴图的上层或下层。

结合第一方面,本发明在第一方面的第二种实现方式中,该视频影像贴图与该第三渐变纹理贴图在同一图层。

结合第一方面,本发明在第一方面的第三种实现方式中,该视频影像贴图为vr影院中当前时刻待播放视频帧,该第三渐变纹理贴图为vr影院当前时刻的影院环境图像。

结合第一方面或第一方面的第一种实现方式或第一方面的第二种实现方式或第一方面的第三种实现方式,在第一方面的第四种实现方式中,该渐变参数为线性变换参数、或该渐变参数为根据当前播放音视频的音频数据生成的第一随机数、或该渐变参数为根据当前播放音视频的视频帧的亮度值生成的第二随机数。

结合第一方面或第一方面的第一种实现方式或第一方面的第二种实现方式或第一方面的第三种实现方式,在第一方面的第五种实现方式中,该设置第二纹理贴图的步骤,包括:获取vr头显设备中摄像头所获取的当前环境中的图像数据,并将该第二纹理贴图设置为该获取的当前环境中的图像数据。

结合第一方面或第一方面的第一种实现方式或第一方面的第二种实现方式或第一方面的第三种实现方式,在第一方面的第六种实现方式中,该设置第二纹理贴图的步骤,包括:获取佩戴vr头显设备的用户的体征数据,根据该体征数据设置该第二纹理贴图。

结合第一方面或第一方面的第一种实现方式或第一方面的第二种实现方式或第一方面的第三种实现方式,在第一方面的第七种实现方式中,该方法还包括:在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容。

结合或第一方面的第七种实现方式,在第一方面的第八种实现方式中,在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容之前,根据该视频影像贴图中视频内容的关键字,匹配对应的广告内容。

结合第一方面或第一方面的第一种实现方式或第一方面的第二种实现方式或第一方面的第三种实现方式,在第一方面的第九种实现方式中,该设置第一纹理贴图及第二纹理贴图,包括:依据vr头显设备上加载的身份识别模块所识别出的当前佩戴该vr头显设备的用户身份,设置与该用户身份对应的该第一纹理贴图及该第二纹理贴图。

结合第一方面或第一方面的第一种实现方式或第一方面的第二种实现方式或第一方面的第三种实现方式,在第一方面的第十种实现方式中,该方法还包括:在该第一纹理贴图、该第二纹理贴图中加载与该视频影像贴图中的视频内容对应的推荐内容。

结合或第一方面的第十种实现方式,在第一方面的第十一种实现方式中,该与视频影像贴图中的视频内容对应的推荐内容包括:与该视频影像贴图中的视频内容的类别相同的另一视频的图像或链接,或与该视频影像贴图中的视频内容为同一剧集的视频内容。

第二方面,本发明实施例提供了一种vr视频中图像的加载装置,该装置包括设置模块、第一处理模块及第二处理模块。其中,设置模块,用于设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中第一纹理贴图亮度低于第二纹理贴图;第一处理模块,用于检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图;第二处理模块,用于检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时加载该视频影像贴图。

结合第二方面,本发明在第二方面的第一种实现方式中,该视频影像贴图对应的图层为该第三渐变纹理贴图的上层或下层。

结合第二方面,本发明在第二方面的第二种实现方式中,该视频影像贴图与该第三渐变纹理贴图在同一图层。

结合第二方面,本发明在第二方面的第三种实现方式中,该视频影像贴图为vr影院中当前时刻待播放视频帧,该第三渐变纹理贴图为vr影院当前时刻的影院环境图像。

结合第二方面或第二方面的第一种实现方式或第二方面的第二种实现方式或第二方面的第三种实现方式,本发明在第二方面的第四种实现方式中,该渐变参数为线性变换参数、或该渐变参数为根据当前播放音视频的音频数据生成的第一随机数、或该渐变参数为根据当前播放音视频的视频帧的亮度值生成的第二随机数。

结合第二方面或第二方面的第一种实现方式或第二方面的第二种实现方式或第二方面的第三种实现方式,本发明在第二方面的第五种实现方式中,所该设置模块,具体用于获取vr头显设备中摄像头所获取的当前环境中的图像数据,并将该第二纹理贴图设置为该获取的当前环境中的图像数据。

结合第二方面或第二方面的第一种实现方式或第二方面的第二种实现方式或第二方面的第三种实现方式,本发明在第二方面的第六种实现方式中,该设置模块,具体用于获取佩戴vr头显设备的用户的体征数据,根据该体征数据设置该第二纹理贴图。

结合第二方面或第二方面的第一种实现方式或第二方面的第二种实现方式或第二方面的第三种实现方式,本发明在第二方面的第七种实现方式中,该装置还包括第三处理模块,用于在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容。

结合第二方面的第七种实现方式,本发明在第二方面的第八种实现方式中,该装置还包括第四处理模块,用于在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容之前,根据该视频影像贴图中视频内容的关键字,匹配对应的广告内容。

结合第二方面或第二方面的第一种实现方式或第二方面的第二种实现方式或第二方面的第三种实现方式,本发明在第二方面的第九种实现方式中,该设置模块,具体用于依据vr头显设备上加载的身份识别模块所识别出的当前佩戴该vr头显设备的用户身份,设置与该用户身份对应的该第一纹理贴图及该第二纹理贴图。

结合第二方面或第二方面的第一种实现方式或第二方面的第二种实现方式或第二方面的第三种实现方式,本发明在第二方面的第十种实现方式中,该装置还包括第五处理模块,用于在该第一纹理贴图、该第二纹理贴图中加载与该视频影像贴图中的视频内容对应的推荐内容。

结合第二方面的第十种实现方式,本发明在第二方面的第十一种实现方式中,该与视频影像贴图中的视频内容对应的推荐内容包括:与该视频影像贴图中的视频内容的类别相同的另一视频的图像或链接,或与该视频影像贴图中的视频内容为同一剧集的视频内容。

第三方面,本发明实施例提供了一种电子设备。在一个可能的设计中,该移动终端的结构中包括显示装置、处理器和存储器,该存储器用于存储支持处理器执行上述方法的程序,该处理器被配置为用于执行该存储器中存储的程序。该电子设备还可以包括通信接口,用于该电子设备与其他设备或通信网络通信。

第四方面,本发明实施例提供了一种计算机存储介质,用于储存为上述vr视频中图像的加载装置所用的计算机软件指令,其包含用于执行上述方面为vr视频中图像的加载装置所设计的程序。

与现有技术相比,本发明实施例提供的一种vr视频中图像的加载方法、装置及电子设备,通过首先设置第一纹理贴图、第二纹理贴图和视频影像贴图,其中,该第一纹理贴图亮度低于该第二纹理贴图;若检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图;若检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时加载该视频影像贴图,这种方式下,使得用户仿佛置身于真实的电影院观看电影,在第一播放模式时,使得用户感受到在影片开始播放时影院周围环境暗下来的场景或在影片播放完成后周围环境会亮起来的场景,而在第二播放模式时,使得用户感受到在影片播放途中,影院环境会随着屏幕中播放视频的亮度发生变化,实现了vr影院中的光影变化,用户体验提升。

为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。

附图说明

为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本发明的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。

图1是本发明实施例提供的电子设备的结构框图。

图2是本发明第一实施例提供的一种vr视频中图像的加载方法的流程图。

图3是本发明第一实施例提供的一种第二纹理贴图的示意图。

图4是本发明第一实施例提供的一种第一纹理贴图的示意图。

图5是本发明第一实施例提供的一种在第一时刻同时加载了第三渐变纹理贴图及视频影像贴图后的示意图。

图6是本发明第一实施例提供的一种在第二时刻同时加载了第三渐变纹理贴图及视频影像贴图后的示意图。

图7是本发明第一实施例提供的一种在第三时刻同时加载了第三渐变纹理贴图及视频影像贴图后的示意图。

图8是本发明第二实施例提供的一种vr视频中图像的加载装置的结构框图。

具体实施方式

下面将结合本发明实施例中附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围,而是仅仅表示本发明的选定实施例。基于本发明的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。

应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本发明的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。

本发明实施例提供vr视频中图像的加载方法及装置可以运行于电子设备中,其中,该电子设备可以是vr头显设备或移动终端。进一步的,该移动终端可以是手机,平板电脑等。当该电子设备为移动终端时,可以将该移动终端置于具有光学成像系统的vr头显设备中,以使该移动终端与该vr头显设备配合使用,使得用户完成具有光影渐变效果的vr观影体验。

图1示出了本发明实施例提供的一种电子设备100的结构框图。如图1所示,该电子设备100包括:射频(radiofrequency,rf)电路110、存储器120、输入单元130、显示单元140、传感器150、音频电路160、无线保真(wirelessfidelity,wifi)模块170、处理器180、以及电源190等部件。本领域技术人员可以理解,图1中示出的电子设备100结构并不构成对电子设备100的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。

下面结合图1对电子设备100的各个构成部件进行具体的介绍:

rf电路110可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,给处理器180处理;另外,将设计上行的数据发送给基站。通常,rf电路110包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(lownoiseamplifier,lna)、双工器等。此外,rf电路110还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(globalsystemofmobilecommunication,gsm)、通用分组无线服务(generalpacketradioservice,gprs)、码分多址(codedivisionmultipleaccess,cdma)、宽带码分多址(widebandcodedivisionmultipleaccess,wcdma)、长期演进(longtermevolution,lte)、电子邮件、短消息服务(shortmessagingservice,sms)等。可以理解的是,若该电子设备100为vr头显设备时,可以不具备该rf电路110。

存储器120可用于存储软件程序以及模块,如本发明实施例中的vr视频中图像的加载方法以及装置对应的程序指令/模块,处理器180通过运行存储在存储器120的软件程序以及模块,从而执行电子设备100的各种功能应用以及数据处理,如本发明实施例提供的vr视频中图像的加载方法。存储器120可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备100的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元130可用于接收输入的数字或字符信息,以及产生与电子设备100的用户设置以及功能控制有关的键信号输入。具体地,输入单元130可包括触控面板131以及其他输入设备132。触控面板131,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板131上或在触控面板131附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板131可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器180,并能接收处理器180发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板131。除了触控面板131,输入单元130还可以包括指纹识别模块132和其他输入设备。具体地,其他输入设备可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。可以理解的是,若该电子设备100为vr头显设备时,该输入单元130可以是遥控杆,以使用户可以通过该遥控杆进行选择或者点击操作。

显示单元140可用于显示由用户输入的信息或提供给用户的信息以及电子设备100的各种菜单。显示单元140可包括显示面板141,可选的,可以采用液晶显示器(liquidcrystaldisplay,lcd)、有机发光二极管(organiclight-emittingdiode,oled)等形式来配置显示面板141。进一步的,触控面板131可覆盖显示面板141,当触控面板131检测到在其上或附近的触摸操作后,传送给处理器180以确定触摸事件的类型,随后处理器180根据触摸事件的类型做处理。虽然在图1中,触控面板131与显示面板141是作为两个独立的部件来实现电子设备100的输入和输入功能,但是在某些实施例中,可以将触控面板131与显示面板141集成而实现电子设备100的输入和输出功能。

电子设备100还可包括至少一种传感器150,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板141的亮度,接近传感器可在电子设备100移动到耳边时,关闭显示面板141和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备100姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于电子设备100还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。

音频电路160、扬声器161,传声器162可提供用户与电子设备100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,传声器162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器180处理后,经rf电路110以发送给比如另一电子设备100,或者将音频数据输出至存储器120以便进一步处理。

wifi属于短距离无线传输技术,电子设备100通过wifi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图1示出了wifi模块170,但是可以理解的是,其并不属于电子设备100的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。

处理器180是电子设备100的控制中心,利用各种接口和线路连接整个电子设备100的各个部分,通过运行或执行存储在存储器120内的软件程序和/或模块,以及调用存储在存储器120内的数据,执行电子设备100的各种功能和处理数据,从而对电子设备100进行整体监控。可选的,处理器180可包括一个或多个处理单元;优选的,处理器180可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器180中。

电子设备100还包括给各个部件供电的电源190(比如电池),优选的,电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

可以理解,图1所示的结构仅为示意,电子设备100还可包括比图1中所示更多或者更少的组件,或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。

图2示出了本发明第一实施例提供的一种vr视频中图像的加载方法的流程图,请参阅图2,本实施例描述的是电子设备的处理流程,该方法包括:

步骤s210,设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中,该第一纹理贴图亮度低于该第二纹理贴图。

该第一纹理贴图及第二纹理贴图的实施方式有多种。例如,该第一纹理贴图及该第二纹理贴图可以是具有不同亮度的纯色背景贴图,该第一纹理贴图及该第二纹理贴图也可以是具有不同亮度的影院场景画面贴图,其中,该第一纹理贴图亮度低于该第二纹理贴图。该视频影像贴图可以是用户当前时刻待播放视频帧。

请参阅图3至图4。图3示出了一种第一纹理贴图的示意图。图4示出了一种第二纹理贴图的示意图。请参阅图3,该第一纹理贴图是用于显示影院场景的贴图,如图所示,该影院场景中包括了沙发、茶几等让用户感受到身心放松的场景,当然,也可以设置为其它图案的用于显示影院场景的贴图,例如,可以是普通影院中多排座椅的场景贴图。图4是与图3具有相同影院场景图案但是不同亮度值的第二纹理贴图,可以理解的是,图3可以用来模拟影院开灯的场景,图4可以用来模拟影院关灯时的场景。

设置第一纹理贴图及第二纹理贴图的实施方式也很多。作为一种实施方式,可以预先存储多个候选的第一纹理贴图及候选的第二纹理贴图。根据用户的选择进行从多个候选的第一纹理贴图中选出一个作为第一纹理贴图,及多个候选的第二纹理贴图中选出一个作为第二纹理贴图。

作为另一种实施方式,可以实时采集当前环境中的图像数据作为第二纹理贴图,通过这种方式,使得用户即使戴上了vr头显设备也不会有种跟外界隔离的感觉,能够提高用户体验。具体的,可以通过获取vr头显设备中摄像头所获取的当前环境中的图像数据,并将该第二纹理贴图设置为该获取的当前环境中的图像数据。例如,当用户在移动时,也可以实时采集当前环境中的图像数据,使得用户能够感受到背景画面的变化。

另外,还可以实时采集用户数据作为设置第二纹理贴图的依据,通过这种方式,使得第二纹理贴图的设置策略与用户数据关联起来,用户体验更佳。作为一种实施方式,可以获取佩戴vr头显设备的用户的体征数据,根据该体征数据设置该第二纹理贴图。其中,可以通过vr头显设备的传感器获取用户的体征数据,该体征数据可以是用户的心跳,脉搏等。例如,当检测到用户的脉搏较快时,可能是由于用户的心情紧张,则可以设置一张画面较为平和的图片作为第二纹理贴图,用于舒缓用户当前的紧张情绪,使用用户体验更佳。

作为再一种实施方式,可以依据vr头显设备上加载的身份识别模块所识别出的当前佩戴该vr头显设备的用户身份,设置与该用户身份对应的该第一纹理贴图及该第二纹理贴图。例如,电子设备中可以预先存储与用户身份信息对应的该第一纹理贴图及该第二纹理贴图,vr头显设备上加载的身份识别模块可以采集用户的虹膜信息,电子设备通过虹膜信息获得当前佩戴该vr头显设备的用户身份,并根据该用户身份信息,设置与该用户身份对应的该第一纹理贴图及该第二纹理贴图。进一步的,对于不同用户身份存储的第一纹理贴图及第二纹理贴图,也可以根据用户选择或者根据用户喜好进行设置,例如,可以收集用户的观影习惯,若用户经常观看的影片为悬疑片,则可以将该用户对应的第一纹理贴图及第二纹理贴图设置为与悬疑场景更能匹配的图片场景。

步骤s220,检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图。

请参阅图3,该第一纹理贴图正中间位置为预留的用于加载视频影像贴图的区域。请参阅图5,当检测到vr视频中第一播放模式的加载请求时,将该视频影像贴图加载到该第一纹理贴图中预留的用于加载视频影像贴图的区域,形成一副完整的画面。通过这种方式,使得用户仿佛置身于影院中,且能够感受到在影片开始播放时影院周围环境暗下来的场景。

可以理解的是,当第一纹理贴图与第二纹理贴图亮度值设置不同时,使得用户的感受也不同,例如,当设置第一纹理贴图亮度高于所述第二纹理贴图时,当检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图时,则会使得用户仿佛置身于影院中,且能够感受到在影片播放完成后周围环境亮起来的场景。

另外,也可以设置第三播放模式,当检测到vr视频中第三播放模式的加载请求,加载该第二纹理贴图和该视频影像贴图,此时便能使得用户仿佛置身于影院中,且能够感受到在影片播放完成后周围环境亮起来的场景。

进一步的,加载该第一纹理贴图和该视频影像贴图的方式也可以不同,例如,可以将该第一纹理贴图和该视频影像贴图在同一图层进行加载,也可以将该第一纹理贴图和该视频影像贴图在不同图层进行加载,例如,该视频影像贴图可以在该第一纹理贴图的上层或下层。

步骤s230,检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时加载该视频影像贴图。

基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成该第二播放模式下的第三渐变纹理贴图的实施方式很多。作为一种实施方式,可以根据下述公式进行计算:

rescol=_cinemalights*brightcol+(1.0-_cinemalights)*i.color*darkcol

其中,rescol表示第三渐变纹理贴图在某个位置的像素点颜色值,brightcol表示第二纹理贴图在对应位置的像素点颜色值,i.color表示该视频影像贴图对应像素点平均颜色值,darkcol表示第一纹理贴图在对应位置的像素点颜色值,cinemalights为渐变参数。其中,像素点颜色值可以是rgb值,可以是rgbw值。

渐变参数的实施方式也有多种。作为一种实施方式,该渐变参数为线性变换参数,例如,可以取[0.0,1.0]中的一个浮点数作为该渐变参数。当该渐变参数取值为1.0时,对应模拟影院的开灯场景,即在影片播放完成后周围环境亮起来的场景;当该渐变参数取值为0时,对应模拟影院的关灯场景,及在影片开始播放时影院周围环境暗下来的场景。当渐变参数的值在[0.0,1.0]内进行渐变时,便能实现影院光影渐变的效果。

作为另一种实施方式,该渐变参数也可以为根据当前播放音视频的音频数据生成的第一随机数。例如,可以获取当前播放音视频的音频数据,对该音频数据采用hash算法获得hash值,将该值作为第一随机数。

作为又一种实施方式,该渐变参数为根据当前播放音视频的视频帧的亮度值生成的第二随机数。例如,可以获取当前播放音视频的视频帧的亮度值,对该亮度值采用hash算法获得hash值,将该值作为第二随机数。

可以理解的是,无论是上述哪一种算法确定的渐变参数,其在不同时刻的值都可能是不同的,因此,能够实现影院光影渐变的效果。

作为一种实施方式,当第一纹理贴图及第二纹理贴图为vr影院当前时刻的影院环境图像,则其生成的该第三渐变纹理贴图也为vr影院当前时刻的影院环境图像,该视频影像贴图为vr影院中当前时刻待播放视频帧。可以理解的是,vr影院中不同时刻待播放视频帧的亮度值不同,因此,在不同时刻,视频影像贴图对应像素点平均颜色值也是在变化,通过控制视频影像贴图对应像素点平均颜色值及该渐变参数的变化,例如,可以控制在视频影像贴图对应像素点平均颜色值属于某个区域时,采用对应的渐变参数值,来实现很好的光影渐变效果。

同时加载第三渐变纹理贴图及该视频影像贴图的实施方式也有多种,例如,可以将该第三渐变纹理贴图和该视频影像贴图在同一图层进行加载,也可以将该第三渐变纹理贴图和该视频影像贴图在不同图层进行加载,例如,该视频影像贴图可以在该第三渐变纹理贴图的上层或下层。

请参阅图5至图7,图5至图7分别示出了不同时刻的加载了第三渐变纹理贴图及该时刻的视频影像贴图的画面,可以发现的时,在不同的时刻,视频影像贴图中的亮度均不同,即视频影像贴图对应像素点平均颜色值也不同,通过控制不同视频影像贴图对应像素点平均颜色值对应的渐变参数的值,便能生成不同的第三渐变纹理贴图,当同时加载第三渐变纹理贴图及该时刻的视频影像贴图的画面时,便能形成在不同时刻具有不同光影效果的vr影院效果,大大提升了用户的观影体验。

作为一种实施方式,该方法还包括:在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容。进一步的,作为一种实施方式,在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容之前,该方法还包括:根据该视频影像贴图中视频内容的关键字,匹配对应的广告内容。例如,若检测该视频影像贴图中视频内容的台词中包括关键词“手机”,则可以获取预先存储的与关键词“手机”相关的广告内容,例如,该广告内容可以是不同品牌的手机的广告,以使用户在需要时在该第三渐变纹理贴图中进行点击,以获得其感兴趣的广告内容。

作为又一种实施方式,该方法还包括:在该第一纹理贴图、该第二纹理贴图中加载与该视频影像贴图中的视频内容对应的推荐内容。

进一步的,该与视频影像贴图中的视频内容对应的推荐内容的实施方式有多种。作为一种实施方式,可以与该视频影像贴图中的视频内容的类别相同的另一视频的图像或链接,例如,该视频影像贴图中的视频内容为悬疑类,则可以在该第一纹理贴图、该第二纹理贴图中加载另一个悬疑类的视频的图像或链接。作为另一种实施方式,也可以与该视频影像贴图中的视频内容为同一剧集的视频内容,例如,该视频影像贴图中的视频内容的上一集或下一集的内容。通过这种方式,使得用户可以方便的从第一纹理贴图、该第二纹理贴图中点击其可能感兴趣的推荐内容,使得用户观影不再单一,能够有更多的选择,观影体验进一步提升。

本发明实施例提供的一种vr视频中图像的加载方法,通过首先设置第一纹理贴图、第二纹理贴图和视频影像贴图,其中,该第一纹理贴图亮度低于该第二纹理贴图;若检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图;若检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时加载该视频影像贴图,这种方式下,使得用户仿佛置身于真实的电影院观看电影,在第一播放模式时,使得用户感受到在影片开始播放时影院周围环境暗下来的场景或在影片播放完成后周围环境会亮起来的场景,而在第二播放模式时,使得用户感受到在影片播放途中,影院环境会随着屏幕中播放视频的亮度发生变化,实现了vr影院中的光影变化,用户体验提升。

请参阅图8,是本发明第二实施例提供的vr视频中图像的加载装置300的功能模块示意图。该vr视频中图像的加载装置300运行于电子设备100。该vr视频中图像的加载装置300包括设置模块310,第一处理模块320、及第二处理模块330。

设置模块310,用于设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中第一纹理贴图亮度低于第二纹理贴图。

作为一种实施方式,设置模块310,具体用于获取vr头显设备中摄像头所获取的当前环境中的图像数据,并将该第二纹理贴图设置为该获取的当前环境中的图像数据。

作为另一种实施方式,设置模块310,具体用于获取佩戴vr头显设备的用户的体征数据,根据该体征数据设置该第二纹理贴图。

作为又一种实施方式,设置模块310,具体用于依据vr头显设备上加载的身份识别模块所识别出的当前佩戴该vr头显设备的用户身份,设置与该用户身份对应的该第一纹理贴图及该第二纹理贴图。

第一处理模块320,用于检测到vr视频中第一播放模式的加载请求,加载该第一纹理贴图和该视频影像贴图。

第二处理模块330,用于检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时加载该视频影像贴图。

作为一种实施方式,该视频影像贴图对应的图层为该第三渐变纹理贴图的上层或下层。

作为一种实施方式,该视频影像贴图与该第三渐变纹理贴图在同一图层。

作为一种实施方式,该视频影像贴图为vr影院中当前时刻待播放视频帧,该第三渐变纹理贴图为vr影院当前时刻的影院环境图像。

作为一种实施方式,该渐变参数为线性变换参数、或该渐变参数为根据当前播放音视频的音频数据生成的第一随机数、或该渐变参数为根据当前播放音视频的视频帧的亮度值生成的第二随机数。

作为一种实施方式,该装置还包括第三处理模块340,用于在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容。

作为一种实施方式,该装置还包括第四处理模块350,用于在该第一纹理贴图、该第二纹理贴图、该第三渐变纹理贴图中加载与该视频影像贴图的视频内容相应的广告内容之前,根据该视频影像贴图中视频内容的关键字,匹配对应的广告内容。

作为一种实施方式,该装置还包括第五处理模块360,用于在该第一纹理贴图、该第二纹理贴图中加载与该视频影像贴图中的视频内容对应的推荐内容。

进一步的,作为一种实施方式,该与视频影像贴图中的视频内容对应的推荐内容包括:与该视频影像贴图中的视频内容的类别相同的另一视频的图像或链接,或与该视频影像贴图中的视频内容为同一剧集的视频内容。

以上各模块可以是由软件代码实现,此时,上述的各模块可存储于电子设备100的存储器120内。以上各模块同样可以由硬件例如集成电路芯片实现。

本发明第三实施例还提供了一种电子设备,该电子设备包括:

显示装置;

一个或多个处理器;

存储器;

一个或多个应用程序,其中该一个或多个应用程序被存储在该存储器中并被配置为由该一个或多个处理器执行,该一个或多个程序配置用于:

设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中,该第一纹理贴图亮度低于该第二纹理贴图;

检测到vr视频中第一播放模式的加载请求,在该显示装置中加载该第一纹理贴图和该视频影像贴图;

检测到vr视频中第二播放模式的加载请求,基于该第一纹理贴图和该第二纹理贴图的每一像素点颜色值、渐变参数、及该视频影像贴图对应像素点平均颜色值生成并加载该第二播放模式下的第三渐变纹理贴图,并同时在该显示装置中加载该视频影像贴图。

需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。

本发明实施例所提供的vr视频中图像的加载装置及电子设备,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。

在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。

另外,在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者所述技术方案的部分可以以软件产品的形式体现出来,所述计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:u盘、移动硬盘、只读存储器(rom,read-onlymemory)、随机存取存储器(ram,randomaccessmemory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。

以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。

本发明实施例还揭示了:

a1、一种vr视频中图像的加载方法,该方法包括:

设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中,所述第一纹理贴图亮度低于所述第二纹理贴图;

检测到vr视频中第一播放模式的加载请求,加载所述第一纹理贴图和所述视频影像贴图;

检测到vr视频中第二播放模式的加载请求,基于所述第一纹理贴图和所述第二纹理贴图的每一像素点颜色值、渐变参数、及所述视频影像贴图对应像素点平均颜色值生成并加载所述第二播放模式下的第三渐变纹理贴图,并同时加载所述视频影像贴图。

a2、根据a1所述的方法,其中,所述视频影像贴图对应的图层为所述第三渐变纹理贴图的上层或下层。

a3、根据权利要求a1所述的方法,其中,所述视频影像贴图与所述第三渐变纹理贴图在同一图层。

a4、根据权利要求a1所述的方法,其中,所述视频影像贴图为vr影院中当前时刻待播放视频帧,所述第三渐变纹理贴图为vr影院当前时刻的影院环境图像。

a5、根据a1至a4中任一项所述的方法,其中,所述渐变参数为线性变换参数、或所述渐变参数为根据当前播放音视频的音频数据生成的第一随机数、或所述渐变参数为根据当前播放音视频的视频帧的亮度值生成的第二随机数。

a6、根据a1至a4中任一项所述的方法,其中,设置第二纹理贴图,包括:

获取vr头显设备中摄像头所获取的当前环境中的图像数据,并将所述第二纹理贴图设置为所述获取的当前环境中的图像数据。

a7、根据a1至a4中任一项所述的方法,其中,设置第二纹理贴图,包括:

获取佩戴vr头显设备的用户的体征数据,根据所述体征数据设置所述第二纹理贴图。

a8、根据a1至a4中任一项所述的方法,其中,所述方法还包括:

在所述第一纹理贴图、所述第二纹理贴图、所述第三渐变纹理贴图中加载与所述视频影像贴图的视频内容相应的广告内容。

a9、根据a8所述的方法,其中,在所述第一纹理贴图、所述第二纹理贴图、所述第三渐变纹理贴图中加载与所述视频影像贴图的视频内容相应的广告内容之前,所述方法还包括:

根据所述视频影像贴图中视频内容的关键字,匹配对应的广告内容

a10、根据a1至a4中任一项所述的方法,其中,所述设置第一纹理贴图及第二纹理贴图,包括:

依据vr头显设备上加载的身份识别模块所识别出的当前佩戴所述vr头显设备的用户身份,设置与该用户身份对应的所述第一纹理贴图及所述第二纹理贴图。

a11、根据a1至a4中任一项所述的方法,其中,所述方法还包括:

在所述第一纹理贴图、所述第二纹理贴图中加载与所述视频影像贴图中的视频内容对应的推荐内容。

a12、根据a11所述的方法,其中,与所述视频影像贴图中的视频内容对应的推荐内容包括:与所述视频影像贴图中的视频内容的类别相同的另一视频的图像或链接,或与所述视频影像贴图中的视频内容为同一剧集的视频内容。

b13、一种vr视频中图像的加载装置,该方法包括:

设置模块,用于设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中第一纹理贴图亮度低于第二纹理贴图;

第一处理模块,用于检测到vr视频中第一播放模式的加载请求,加载所述第一纹理贴图和所述视频影像贴图;

第二处理模块,用于检测到vr视频中第二播放模式的加载请求,基于所述第一纹理贴图和所述第二纹理贴图的每一像素点颜色值、渐变参数、及所述视频影像贴图对应像素点平均颜色值生成并加载所述第二播放模式下的第三渐变纹理贴图,并同时加载所述视频影像贴图。

b14、根据b13所述的装置,其中,所述视频影像贴图对应的图层为所述第三渐变纹理贴图的上层或下层。

b15、根据b13所述的装置,其中,所述视频影像贴图与所述第三渐变纹理贴图在同一图层。

b16、根据b13所述的装置,其中,所述视频影像贴图为vr影院中当前时刻待播放视频帧,所述第三渐变纹理贴图为vr影院当前时刻的影院环境图像。

b17、根据b13-b16中任一项所述的装置,其中,所述渐变参数为线性变换参数、或所述渐变参数为根据当前播放音视频的音频数据生成的第一随机数、或所述渐变参数为根据当前播放音视频的视频帧的亮度值生成的第二随机数。

b18、根据b13-b16中任一项所述的装置,其中,所述设置模块,具体用于获取vr头显设备中摄像头所获取的当前环境中的图像数据,并将所述第二纹理贴图设置为所述获取的当前环境中的图像数据。

b19、根据b13-b16中任一项所述的装置,其中,所述设置模块,具体用于获取佩戴vr头显设备的用户的体征数据,根据所述体征数据设置所述第二纹理贴图。

b20、根据b13-b16中任一项所述的装置,其中,所述装置还包括第三处理模块,用于在所述第一纹理贴图、所述第二纹理贴图、所述第三渐变纹理贴图中加载与所述视频影像贴图的视频内容相应的广告内容。

b21、根据b20所述的装置,其中,所述装置还包括第四处理模块,用于在所述第一纹理贴图、所述第二纹理贴图、所述第三渐变纹理贴图中加载与所述视频影像贴图的视频内容相应的广告内容之前,根据所述视频影像贴图中视频内容的关键字,匹配对应的广告内容。

b22、根据b13-b16中任一项所述的装置,其中,所述设置模块,具体用于依据vr头显设备上加载的身份识别模块所识别出的当前佩戴所述vr头显设备的用户身份,设置与该用户身份对应的所述第一纹理贴图及所述第二纹理贴图。

b23、根据b13-b16中任一项所述的装置,其中,所述装置还包括第五处理模块,用于在所述第一纹理贴图、所述第二纹理贴图中加载与所述视频影像贴图中的视频内容对应的推荐内容。

b24、根据b23所述的装置,其中,与所述视频影像贴图中的视频内容对应的推荐内容包括:与所述视频影像贴图中的视频内容的类别相同的另一视频的图像或链接,或与所述视频影像贴图中的视频内容为同一剧集的视频内容。

c25、一种电子设备,所述电子设备包括:

显示装置;

一个或多个处理器;

存储器;

一个或多个应用程序,其中所述一个或多个应用程序被存储在所述存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序配置用于:

设置第一纹理贴图、第二纹理贴图和视频影像贴图;其中,所述第一纹理贴图亮度低于所述第二纹理贴图;

检测到vr视频中第一播放模式的加载请求,在所述显示装置中加载所述第一纹理贴图和所述视频影像贴图;

检测到vr视频中第二播放模式的加载请求,基于所述第一纹理贴图和所述第二纹理贴图的每一像素点颜色值、渐变参数、及所述视频影像贴图对应像素点平均颜色值生成并加载所述第二播放模式下的第三渐变纹理贴图,并同时在所述显示装置中加载所述视频影像贴图。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1