虚拟现实媒体文件生成方法及装置与流程

本发明涉及计算机领域，具体而言，涉及一种虚拟现实媒体文件生成方法及装置。

背景技术：

目前，现有技术中所生成的用于播放的媒体文件，往往是使用物理硬件设备采集真实世界而得到的媒体文件。

然而，通过这种方式得到的媒体文件，不仅使得采集成本增加，而且所生成的媒体文件仍然只能观看到二维画面，媒体文件的内容过于单一。

针对上述的问题，目前尚未提出有效的解决方案。

技术实现要素：

本发明实施例提供了一种虚拟现实媒体文件生成方法及装置，以至少解决现有技术中无法生成虚拟现实媒体文件所导致的内容过于单一的技术问题。

根据本发明实施例的一个方面，提供了一种基于虚拟现实场景的虚拟现实媒体文件生成方法，包括：获取生成请求，其中，上述生成请求用于请求生成虚拟现实媒体文件，上述生成请求中携带有与上述虚拟现实媒体文件匹配的位置参考标识；响应上述生成请求按照预定策略获取图像组，其中，一组上述图像组用于指示三维场景中在预定时刻在上述位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；根据上述图像组生成上述虚拟现实媒体文件。

根据本发明实施例的另一方面，还提供了一种基于虚拟现实场景的虚拟现实媒体文件生成装置，包括：第一获取单元，用于获取生成请求，其中，上述生成请求用于请求生成虚拟现实媒体文件，上述生成请求中携带有与上述虚拟现实媒体文件匹配的位置参考标识；第二获取单元，用于响应上述生成请求按照预定策略获取图像组，其中，一组上述图像组用于指示三维场景中在预定时刻在上述位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；生成单元，用于根据上述图像组生成上述虚拟现实媒体文件。

在本发明实施例中，在获取到生成请求后，其中，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识，按照预定策略获取用于呈现三维场景中在参考位置上的三维画面的图像组，其中，一组图像组中包括在预定时刻从多个视角获取到的多个画面，以生成可以呈现三维场景中三维效果的虚拟现实媒体文件，从而达到丰富所播放的媒体文件的播放内容的目的，使得播放虚拟现实媒体文件的一方可以从多个视角看到参考位置上的三维画面，实现对播放内容进行内容扩展的效果，进而解决了现有技术中无法生成虚拟现实媒体文件所导致的内容过于单一的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的应用环境示意图；

图2是根据本发明实施例的一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的流程图；

图3是根据本发明实施例的一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的效果示意图；

图4是根据本发明实施例的另一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的示意图；

图5是根据本发明实施例的又一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的示意图；

图6是根据本发明实施例的一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的效果示意图；

图7是根据本发明实施例的又一种可选的基于虚拟现实场景的虚拟现实媒体文件生成方法的示意图；

图8是根据本发明实施例的一种可选的基于虚拟现实场景的虚拟现实媒体文件生成装置的示意图；

图9是根据本发明实施例的一种可选的基于虚拟现实场景的虚拟现实媒体文件生成服务器的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例1

在本发明实施例中，提供了一种基于虚拟现实场景的虚拟现实媒体文件生成方法的实施例，作为一种可选的实施方式，该基于虚拟现实场景的虚拟现实媒体文件生成方法可以但不限于应用于如图1所示的应用场景，应用于虚拟现实场景的智能设备(如图1所示虚拟现实眼镜102)中安装有第一客户端，服务器106通过网络104获取第一客户端发送的生成请求，其中，该生成请求用于请求生成虚拟现实媒体文件，且该生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识；服务器106响应上述生成请求按照预定策略获取图像组，其中，一组图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，其中，每张图像至少用于指示一个视角获取到的一个画面；然后，根据获取到上述图像组生成虚拟现实场景下的虚拟现实媒体文件。

在本实施例中，在获取到生成请求后，其中，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识，按照预定策略获取用于生成虚拟现实媒体文件的图像组，其中，一组该图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；从而利用上述图像组生成对应的虚拟现实媒体文件。也就是说，获取三维场景中的参考位置上用于呈现三维画面的图像组，其中，一组图像组中包括三维场景中在预定时刻从多个视角获取到的多个画面，以生成呈现三维场景中三维效果的虚拟现实媒体文件，从而达到丰富所播放的虚拟现实媒体文件的播放内容的目的，使得播放虚拟现实媒体文件的一方可以从多个视角看到参考位置上的三维画面，进而实现对虚拟现实媒体文件进行内容扩展的效果。

可选地，在本实施例中，上述应用于基于虚拟现实场景的虚拟现实媒体文件生成方法的设备可以包括但不限于：虚拟现实(virtualreality，简称vr)眼镜，及其他用于实现虚拟现实场景交互的硬件设备。上述只是一种示例，本实施例对此不做任何限定。

根据本发明实施例，提供了一种基于虚拟现实场景的虚拟现实媒体文件生成方法，如图2所示，该方法包括：

s202，获取生成请求，其中，生成请求用于请求生成虚拟现实媒体文件，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识；

s204，响应生成请求按照预定策略获取图像组，其中，一组图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；

s206，根据图像组生成虚拟现实媒体文件。

可选地，在本实施例中，上述虚拟现实媒体文件生成方法可以但不限于应用于不同具备虚拟现实场景的应用中，且该应用可以提供三维画面素材。例如，上述应用可以包括但不限于：游戏应用、购物应用等。例如，上述基于虚拟现实场景的虚拟现实媒体文件生成方法可以但不限于应用于具有虚拟现实场景的游戏应用中，采集游戏应用的三维场景中参考位置上的三维画面素材(如图像组)，以生成呈现三维效果的虚拟现实媒体文件的过程中，也就是说，可以录制三维场景中呈现三维效果的游戏视频)。上述仅是一种示例，本实施例中对此不做任何限定。

需要说明的是，在获取到生成请求后，其中，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识，按照预定策略获取用于生成虚拟现实媒体文件的图像组，其中，一组该图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；从而利用上述图像组生成对应的虚拟现实媒体文件。也就是说，获取三维场景中的参考位置上用于呈现三维画面的图像组，其中，一组图像组中包括三维场景中在预定时刻从多个视角获取到的多个画面，以生成呈现三维场景中三维效果的虚拟现实媒体文件，从而达到丰富所播放的虚拟现实媒体文件的播放内容的目的，使得播放虚拟现实媒体文件的一方可以从多个视角看到参考位置上的三维画面，进而实现对虚拟现实媒体文件进行内容扩展的效果。

可选地，在本实施例中，上述生成请求可以但不限于为使用第一账号的第一客户端发送的生成请求，所请求的虚拟现实媒体文件可以但不限于与第一账号具有关联关系，例如，上述与虚拟现实媒体文件匹配的位置参考标识所指示的位置可以包括但不限于：三维场景中第一账号所使用的虚拟人物角色所在的位置、三维场景中的固定预设位置。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，在根据图像组生成虚拟现实媒体文件之后，可以但不限于将虚拟现实媒体文件推送给第二账号，以使第二账号播放虚拟现实媒体文件，其中，第二账号与第一账号为关联账号。例如，第二账号与第一账号为互相关注的好友账号，或者具有授权的关联账号，本实施例中对此不做任何限定。

需要说明的是，上述第二账号可以但不限于为第一账号所在应用中与第一账号关联的好友账号，第二账号通过播放第一账号推送的虚拟现实媒体文件，其中，该虚拟现实媒体文件中包括基于参考位置上，从不同视角获取到的不同画面，以观看第一账号所在三维场景中的三维画面。举例来说，第一账号与第二账号所在应用可以为游戏应用，从而实现在应用内共享虚拟现实媒体文件；此外，在本实施例中，上述第二账号也可以但不限于为与第一账号所在应用不同的应用中的账号，两种应用具有关联关系，例如，第一账号所在应用授权第二账号所在应用播放上述虚拟现实媒体文件。举例来说，第一账号所在应用可以为游戏应用，第二账号所在应用可以为播放应用，其中，游戏应用授权播放应用，允许播放应用播放所生成的虚拟现实媒体文件，从而实现跨平台共享媒体数据。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，使用第二账号的第二客户端可以但不限于从虚拟现实媒体文件中获取与第二客户端的视角相匹配的画面进行播放。也就是说，第二账号受播放视角所限，将播放与视角相匹配的画面。需要说明的是，随着第二账号播放视角的改变，所播放的画面会随之变化，可以实现遍历虚拟现实媒体文件中从不同视角获取到的不同画面。

可选地，在本实施例中，响应生成请求按照预定策略获取图像组包括：

1)在生成请求指示所生成的虚拟现实媒体文件为媒体数据包的情况下，按照预定策略获取在预定时间段内的多组图像组，其中，预定时间段的时长为虚拟现实媒体文件的播放时长；和/或

2)在生成请求指示所生成的虚拟现实媒体文件为媒体流的情况下，按照预定策略实时获取图像组。

需要说明的是，在本实施例中，上述虚拟现实媒体文件可以但不限于为媒体数据包，例如，上述虚拟现实媒体文件可以为预先生成的完整的视频资源。通过获取预定时间段内的多组图像组，以利用上述多组图像组生成完整的视频资源，从而实现在播放端通过播放请求获取该视频资源，以播放上述所生成的虚拟现实媒体文件；此外，在本实施例中，上述虚拟现实媒体文件也可以但不限于为媒体流，例如，上述虚拟现实媒体文件可以为流数据。通过实时获取对应时刻的图像组，以生成媒体流，从而实现在直播过程中直播上述所生成的虚拟现实媒体文件。

可选地，在本实施例中，上述预定策略可以包括但不限于以下至少之一：

1)单眼策略，以上述参考位置标识所指示的参考位置为参考中心，相对参考中心构建立方体；将在立方体的每个表面上获取到的画面，作为图像组中的图像，其中，立方体的一个表面对应一个视角。

也就是说，将一个参考位置作为参考中心，将以该参考位置为中心构建的立方体的六个表面上的画面，作为图像组中的六张图像，从而实现基于上述图像组生成三维场景中基于单眼的虚拟现实媒体文件。

2)双眼策略，以上述参考位置标识所指示的参考位置为参考圆心，预定距离为参考半径，获取参考圆；在参考圆上均匀获取多个采集点，其中，多个采集点的视野范围覆盖360度全景；在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面，作为图像组中的图像，其中，一个采集点至少对应一个视角。

也就是说，以参考圆上的采集点作为左眼和右眼两个眼睛的参考，将左眼分别在每个采集点上获取到的预定视野角度范围内的画面，与右眼分别在每个采集点上获取到的预定视野角度范围内的画面，以及位于参考圆上方的顶图像及位于参考圆下方的底图像，作为图像组中的图像，从而实现基于上述图像组生成三维场景中基于双眼的虚拟现实媒体文件。

可选地，在本实施例中，在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面包括：按顺时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第一图像集中的图像；并按逆时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第二图像集中的图像；根据第一图像集和第二图像集获取图像组。其中，上述多个采集点可以但不限于为参考圆上均匀分布的四个采集点，每个残疾点的预定视野角度范围可以但不限于大于等于90度。上述仅是一种示例，本实施例对此不做任何限定。

可选地，在本实施例中，通过重复执行以下步骤，以获取一组图像组中的全部图像；

s12，获取当前视角中的画面作为图像组中的一张图像；

s14，判断是否获取到图像组中的全部图像；

s16，在未获取到图像组中的全部图像的情况下，调整视角，以获取下一个视角中的画面作为图像组中的下一张图像。

需要说明的是，在本实施例中可以但不限于自动切换视角，以获取不同视角上的画面作为图像组中的图像，在获取一组图像组中的全部图像后，可以推送至播放端进行播放。

具体结合以下示例进行说明，重复执行以下步骤，以生成可以呈现三维场景中三维效果的vr虚拟现实媒体文件：

(1)获取鼠标和/或键盘操作，屏蔽鼠标和/或键盘操作所生成的鼠标键盘事件。例如，对应输入源为窗口消息、directxinput等。由于视角改变时，屏幕上2d到3d的映射被改变了，这个时候响应鼠标和/或键盘操作所生成的鼠标键盘事件，会发生非预期的行为，因而，在本实施例中，将拦截屏蔽用户操作的消息、或者在当前周期里主动不获取用户操作的消息。

(2)修改调整视角。根据当前策略是需要生成基于单眼的虚拟现实媒体文件，还是基于双眼的虚拟现实媒体文件，在当前周期里必须不断的修改当前视角，例如，基于单眼的虚拟现实媒体文件将分别调整获取指定位置(如参考位置)的前、右、后、左、上、下，六个视角对应的视图画面，每个视角的视野角度分别可以但不限于为90度；或者，基于双眼的虚拟现实媒体文件将分别调整获取指定位置(如参考位置)前方向左看、前方向右看、右方向左看、右方向右看、后方向左看、后方向右看、左方向左看、左方向右看、上、下，每个视角的视野角度可以但不限于为100度。这样，获取到的图像组将可以覆盖基于参考位置的整个3d世界的画面。找到设置视角的地方，在本实施例中，可以但不限于主动通过directx的接口如d3dxmatrixlookatlh、d3dxmatrixperspectivefovlh、settransform等进行修改，或者游戏提供接口帮助修改。

(3)屏蔽2d内容的绘制。其中，2d内容可能会包括：提示信息、聊天信息等等。在本实施例中，可以但不限于通过2d渲染的入口进行屏蔽，或者在当前周期里不渲染2d元素。

(4)获取游戏3d部分对应投影成的2d图像，不渲染到屏幕。在调用类似directxendscene接口之后就可以生成对应的2d图像，通过类似lock接口就可以把图像数据取出来。但这些画面不显示到屏幕上，通过屏蔽present等方法可以做到。

(5)在本实施例中可以但不限于采用两种策略获取用于生成虚拟现实媒体文件，其中，单眼策略将生成基于立方体的一组六张的图像组，以生成虚拟现实媒体文件，双眼策略将生成一组10张的图像组。在本实施例中，可以但不限于截取中间部分的正方形，再将所有的图拼成一张大图。以此也可以匹配各种分辨率问题。其中，一组10张的图像组还可以但不限于转换融合成2张分别用于左眼和右眼观看的全景图像。

(6)将图像组发送到视频编码器里，生成对应的视频帧，进而得到最终所要播放的虚拟现实文件。虚拟现实文件可以但不限于采用开源解决方案ffmpeg。

通过本申请提供的实施例，获取用于呈现三维场景中在参考位置上的三维画面的图像组，其中，一组图像组中包括在预定时刻从多个视角获取到的多个画面，以生成三维场景中可以呈现三维效果的虚拟现实媒体文件，从而达到丰富所播放的虚拟现实媒体文件的播放内容的目的，使得播放虚拟现实媒体文件的一方可以从多个视角看到参考位置上的三维画面，进而实现对虚拟现实媒体文件进行内容扩展的效果。

作为一种可选的方案，响应生成请求按照预定策略获取图像组包括：

s1，以参考位置为参考中心，相对参考中心构建立方体；

s2，将在立方体的每个表面上获取到的画面，作为图像组中的图像，其中，立方体的一个表面对应一个视角。

具体结合图3所示进行说明，例如，参考位置以图3所示立方体中心位置为例，相对该参考中心构建立方体之后，可以但不限于将在立方体的每个表面上获取到的画面，如六个表面上的六个画面，作为图像组中的六张图像，其中，立方体的一个表面对应一个视角。也就是说，将一个表面上的画面作为一个视角的画面，作为获取到的图像组中的一张图像。

通过本申请提供的实施例，通过以参考位置为参考中心，相对参考中心构建立方体，从而实现将在立方体的每个表面上获取到的画面，作为图像组中的图像，以生成基于一个参考位置的虚拟现实媒体文件，从而达到丰富媒体文件的文件内容的效果。

作为一种可选的方案，响应生成请求按照预定策略获取图像组包括：

s1，以参考位置为参考圆心，预定距离为参考半径，获取参考圆；

s2，在参考圆上均匀获取多个采集点，其中，多个采集点的视野范围覆盖360度全景；

s3，在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面，作为图像组中的图像，其中，一个采集点至少对应一个视角。

具体结合图4所示进行说明，假设参考位置以o为参考圆心，预定距离r为参考半径，获取参考圆，并在参考圆上均匀获取四个采集点，如图4所示，分别为采集点a、采集点b、采集点c及采集点d，其中每个采集点的视野范围可以但不限于为大于等于90度，以90度为例。在多个采集点中的每个采集点上分别获取90度视野范围内的画面。也就是说，将一个采集点采集的画面作为一个视角的画面，作为获取到的图像组中的一张图像。

例如，假定左眼在a点上，看向a’，得到一个90度的视野成像p1。然后以o为中心点移动左眼到b点上，看向b’，得到一个90度的视野成像p2。合并p1和p2得到p，p将作为左眼从a点移动到b点这个过程中看到的图像，然后，移动至c点看向c`，移动至d点看向d`，就可以得到一张左眼旋转360度看到的全景图像。进一步，以a、b、c、d逆时针方向取图，可以得到右眼的360度看到的全景图像。

例如，以图5所示为例，左眼在a点上看向e’点，右眼在b点上看向e’点，通过双眼叠加观看，则可以得到双眼在三维场景中的三维成像效果。

通过本申请提供的实施例，通以参考位置为参考圆心，预定距离为参考半径，获取参考圆，从而实现将在参考圆上多个采集点获取到的画面，作为图像组中的图像，以实现基于多个采集点生成更加准确的虚拟现实媒体文件，从而达到丰富媒体文件的文件内容的效果。

作为一种可选的方案，在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面包括：

s1，按顺时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第一图像集中的图像；并按逆时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第二图像集中的图像；

s2，根据第一图像集和第二图像集获取图像组。

可选地，在本实施例中，根据第一图像集和第二图像集获取图像组包括：对第一图像集中两两相邻的两张图像执行图像融合处理，并对第二图像集中两两相邻的两张图像执行图像融合处理，其中，预定视野角度范围为大于等于90度。

需要说明的是，在a看向a’，b看向b’的图像时，因为是在不同位置看的成像，实际贴合的时候，两两相邻的两张图像将会存在一点的误差。为了减小误差，在本实施例中，可以但不限于将视野角度范围从90度调整到100度，并基于图像融合算法可以把过度区域做的更平滑。

可选地，在本实施例中，根据第一图像集和第二图像集获取图像组包括：将第一图像集中的图像合并为第一全景图像，并将第二图像集中的图像合并为第二全景图像，其中，图像组包括第一全景图像及第二全景图像。

具体结合图6所示进行说明，假设第一图像集为基于左眼采集到的图像，第二图像集为基于右眼采集到的图像，在本实施例中，可以但不限于在服务器中将第一图像集中的图像合并得到第一全景图像，如图6上方所示全景图像，将第二图像集中的图像合并得到第二全景图像，如图6下方所示全景图像。将上述第一全景图像及第二全景图像作为图像组中的部分图像，以生成包含三维画面的虚拟现实媒体文件。从而实现在成像过程中，左眼观看第一全景图像，右眼观看第二全景图像，以达到在三维场景中播放虚拟现实媒体文件的过程中，可以获取的更多虚拟现实媒体文件内容。

可选地，在本实施例中，图像组还包括：位于参考圆上方的顶图像及位于参考圆下方的底图像。

具体结合图7所示进行说明，假设仍以在参考圆上的四个采集点为例，双眼分别在四个采集点获取画面作为图像组中的图像，例如，在四个采集点顺时针旋转，以获取左眼的四个视图画面，如图7左侧所示，左眼的前视图、左视图、后视图及右视图；在四个采集点逆时针旋转，以获取右眼的四个视图画面，如图7右侧所示，右眼的前视图、左视图、后视图及右视图。进一步，再获取位于参考圆上方的顶图像及位于参考圆下方的底图像，从而实现获取基于双眼的十张图像作为一组图像组。

通过本申请提供的实施例，通过分别获取与左右眼对应的第一图像集和第二图像集，以生成基于双眼的虚拟现实媒体文件，并通过对第一图像和第二图像集进行进一步的融合合并处理，以使得所生成的虚拟现实媒体文件更加准确真实。

作为一种可选的方案，上述获取生成请求包括：获取使用第一账号的第一客户端发送的生成请求；在根据图像组生成虚拟现实媒体文件之后，还包括：将虚拟现实媒体文件推送给第二账号，以使第二账号播放虚拟现实媒体文件，其中，第二账号与第一账号为关联账号。

可选地，在将虚拟现实媒体文件推送给第二账号之后，还包括：使用第二账号的第二客户端获取虚拟现实媒体文件；第二客户端从虚拟现实媒体文件中获取与第二客户端的视角相匹配的画面进行播放。

需要说明的是，上述第二账号可以但不限于为第一账号所在应用中与第一账号关联的好友账号，第二账号通过播放第一账号推送的虚拟现实媒体文件，其中，该虚拟现实媒体文件中包括基于参考位置上，从不同视角获取到的不同画面，以观看第一账号所在三维场景中的三维画面。举例来说，第一账号与第二账号所在应用可以为游戏应用，从而实现在应用内共享虚拟现实媒体文件；此外，在本实施例中，上述第二账号也可以但不限于为与第一账号所在应用不同的应用中的账号，两种应用具有关联关系，例如，第一账号所在应用授权第二账号所在应用播放上述虚拟现实媒体文件。举例来说，第一账号所在应用可以为游戏应用，第二账号所在应用可以为播放应用，其中，游戏应用授权播放应用，允许播放应用播放所生成的虚拟现实媒体文件，从而实现跨平台共享媒体数据。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，使用第二账号的第二客户端可以但不限于从虚拟现实媒体文件中获取与第二客户端的视角相匹配的画面进行播放。也就是说，第二账号受播放视角所限，将播放与视角相匹配的画面。需要说明的是，随着第二账号播放视角的改变，所播放的画面会随之变化，可以实现遍历虚拟现实媒体文件中从不同视角获取到的不同画面。

通过本申请提供的实施例，第二账号可以通过第二客户端获取第一账号推送的虚拟现实媒体文件，从而实现媒体数据的共享，此外，第二账号通过第二客户端可以观看到第一账号在三维场景中的虚拟现实媒体文件，将吸引更多的用户参与，提高了应用的关注度。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

实施例2

根据本发明实施例，还提供了一种用于实施上述的基于虚拟现实场景的虚拟现实媒体文件生成方法的基于虚拟现实场景的虚拟现实媒体文件生成装置，如图8所示，该装置包括：

1)第一获取单元802，用于获取生成请求，其中，生成请求用于请求生成虚拟现实媒体文件，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识；

2)第二获取单元804，用于响应生成请求按照预定策略获取图像组，其中，一组图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；

3)生成单元806，用于根据图像组生成虚拟现实媒体文件。

可选地，在本实施例中，上述虚拟现实媒体文件生成装置可以但不限于应用于不同具备虚拟现实场景的应用中，且该应用可以提供三维画面素材。例如，上述应用可以包括但不限于：游戏应用、购物应用等。例如，上述基于虚拟现实场景的虚拟现实媒体文件生成方法可以但不限于应用于具有虚拟现实场景的游戏应用中，采集游戏应用的三维场景中参考位置上的三维画面素材(如图像组)，以生成呈现三维效果的虚拟现实媒体文件的过程中，也就是说，可以录制三维场景中呈现三维效果的游戏视频)。上述仅是一种示例，本实施例中对此不做任何限定。

需要说明的是，在获取到生成请求后，其中，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识，按照预定策略获取用于生成虚拟现实媒体文件的图像组，其中，一组该图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；从而利用上述图像组生成对应的虚拟现实媒体文件。也就是说，获取三维场景中的参考位置上用于呈现三维画面的图像组，其中，一组图像组中包括三维场景中在预定时刻从多个视角获取到的多个画面，以生成呈现三维场景中三维效果的虚拟现实媒体文件，从而达到丰富所播放的虚拟现实媒体文件的播放内容的目的，使得播放虚拟现实媒体文件的一方可以从多个视角看到参考位置上的三维画面，进而实现对虚拟现实媒体文件进行内容扩展的效果。

可选地，在本实施例中，上述生成请求可以但不限于为使用第一账号的第一客户端发送的生成请求，所请求的虚拟现实媒体文件可以但不限于与第一账号具有关联关系，例如，上述与虚拟现实媒体文件匹配的位置参考标识所指示的位置可以包括但不限于：三维场景中第一账号所使用的虚拟人物角色所在的位置、三维场景中的固定预设位置。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，还包括：推送单元，用于在根据图像组生成虚拟现实媒体文件之后，将虚拟现实媒体文件推送给第二账号，以使第二账号播放虚拟现实媒体文件，其中，第二账号与第一账号为关联账号。例如，第二账号与第一账号为互相关注的好友账号，或者具有授权的关联账号，本实施例中对此不做任何限定。

需要说明的是，上述第二账号可以但不限于为第一账号所在应用中与第一账号关联的好友账号，第二账号通过播放第一账号推送的虚拟现实媒体文件，其中，该虚拟现实媒体文件中包括基于参考位置上，从不同视角获取到的不同画面，以观看第一账号所在三维场景中的三维画面。举例来说，第一账号与第二账号所在应用可以为游戏应用，从而实现在应用内共享虚拟现实媒体文件；此外，在本实施例中，上述第二账号也可以但不限于为与第一账号所在应用不同的应用中的账号，两种应用具有关联关系，例如，第一账号所在应用授权第二账号所在应用播放上述虚拟现实媒体文件。举例来说，第一账号所在应用可以为游戏应用，第二账号所在应用可以为播放应用，其中，游戏应用授权播放应用，允许播放应用播放所生成的虚拟现实媒体文件，从而实现跨平台共享媒体数据。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，使用第二账号的第二客户端可以但不限于从虚拟现实媒体文件中获取与第二客户端的视角相匹配的画面进行播放。也就是说，第二账号受播放视角所限，将播放与视角相匹配的画面。需要说明的是，随着第二账号播放视角的改变，所播放的画面会随之变化，可以实现遍历虚拟现实媒体文件中从不同视角获取到的不同画面。

可选地，在本实施例中，响应生成请求按照预定策略获取图像组包括：

1)在生成请求指示所生成的虚拟现实媒体文件为媒体数据包的情况下，按照预定策略获取在预定时间段内的多组图像组，其中，预定时间段的时长为虚拟现实媒体文件的播放时长；和/或

2)在生成请求指示所生成的虚拟现实媒体文件为媒体流的情况下，按照预定策略实时获取图像组。

需要说明的是，在本实施例中，上述虚拟现实媒体文件可以但不限于为媒体数据包，例如，上述虚拟现实媒体文件可以为预先生成的完整的视频资源。通过获取预定时间段内的多组图像组，以利用上述多组图像组生成完整的视频资源，从而实现在播放端通过播放请求获取该视频资源，以播放上述所生成的虚拟现实媒体文件；此外，在本实施例中，上述虚拟现实媒体文件也可以但不限于为媒体流，例如，上述虚拟现实媒体文件可以为流数据。通过实时获取对应时刻的图像组，以生成媒体流，从而实现在直播过程中直播上述所生成的虚拟现实媒体文件。

可选地，在本实施例中，上述预定策略可以包括但不限于以下至少之一：

1)单眼策略，以上述参考位置标识所指示的参考位置为参考中心，相对参考中心构建立方体；将在立方体的每个表面上获取到的画面，作为图像组中的图像，其中，立方体的一个表面对应一个视角。

也就是说，将一个参考位置作为参考中心，将以该参考位置为中心构建的立方体的六个表面上的画面，作为图像组中的六张图像，从而实现基于上述图像组生成三维场景中基于单眼的虚拟现实媒体文件。

2)双眼策略，以上述参考位置标识所指示的参考位置为参考圆心，预定距离为参考半径，获取参考圆；在参考圆上均匀获取多个采集点，其中，多个采集点的视野范围覆盖360度全景；在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面，作为图像组中的图像，其中，一个采集点至少对应一个视角。

也就是说，以参考圆上的采集点作为左眼和右眼两个眼睛的参考，将左眼分别在每个采集点上获取到的预定视野角度范围内的画面，与右眼分别在每个采集点上获取到的预定视野角度范围内的画面，以及位于参考圆上方的顶图像及位于参考圆下方的底图像，作为图像组中的图像，从而实现基于上述图像组生成三维场景中基于双眼的虚拟现实媒体文件。

可选地，在本实施例中，在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面包括：按顺时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第一图像集中的图像；并按逆时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第二图像集中的图像；根据第一图像集和第二图像集获取图像组。其中，上述多个采集点可以但不限于为参考圆上均匀分布的四个采集点，每个残疾点的预定视野角度范围可以但不限于大于等于90度。上述仅是一种示例，本实施例对此不做任何限定。

可选地，在本实施例中，第二获取单元804包括：处理模块，用于通过重复执行以下步骤，以获取一组图像组中的全部图像；

s1，获取当前视角中的画面作为图像组中的一张图像；

s2，判断是否获取到图像组中的全部图像；

s3，在未获取到图像组中的全部图像的情况下，调整视角，以获取下一个视角中的画面作为图像组中的下一张图像。

需要说明的是，在本实施例中可以但不限于自动切换视角，以获取不同视角上的画面作为图像组中的图像，在获取一组图像组中的全部图像后，可以推送至播放端进行播放。

具体结合以下示例进行说明，重复执行以下步骤，以生成可以呈现三维场景中三维效果的vr虚拟现实媒体文件：

(1)获取鼠标和/或键盘操作，屏蔽鼠标和/或键盘操作所生成的鼠标键盘事件。例如，对应输入源为窗口消息、directxinput等。由于视角改变时，屏幕上2d到3d的映射被改变了，这个时候响应鼠标和/或键盘操作所生成的鼠标键盘事件，会发生非预期的行为，因而，在本实施例中，将拦截屏蔽用户操作的消息、或者在当前周期里主动不获取用户操作的消息。

(2)修改调整视角。根据当前策略是需要生成基于单眼的虚拟现实媒体文件，还是基于双眼的虚拟现实媒体文件，在当前周期里必须不断的修改当前视角，例如，基于单眼的虚拟现实媒体文件将分别调整获取指定位置(如参考位置)的前、右、后、左、上、下，六个视角对应的视图画面，每个视角的视野角度分别可以但不限于为90度；或者，基于双眼的虚拟现实媒体文件将分别调整获取指定位置(如参考位置)前方向左看、前方向右看、右方向左看、右方向右看、后方向左看、后方向右看、左方向左看、左方向右看、上、下，每个视角的视野角度可以但不限于为100度。这样，获取到的图像组将可以覆盖基于参考位置的整个3d世界的画面。找到设置视角的地方，在本实施例中，可以但不限于主动通过directx的接口如d3dxmatrixlookatlh、d3dxmatrixperspectivefovlh、settransform等进行修改，或者游戏提供接口帮助修改。

(3)屏蔽2d内容的绘制。其中，2d内容可能会包括：提示信息、聊天信息等等。在本实施例中，可以但不限于通过2d渲染的入口进行屏蔽，或者在当前周期里不渲染2d元素。

(4)获取游戏3d部分对应投影成的2d图像，不渲染到屏幕。在调用类似directxendscene接口之后就可以生成对应的2d图像，通过类似lock接口就可以把图像数据取出来。但这些画面不显示到屏幕上，通过屏蔽present等方法可以做到。

(5)在本实施例中可以但不限于采用两种策略获取用于生成虚拟现实媒体文件，其中，单眼策略将生成基于立方体的一组六张的图像组，以生成虚拟现实媒体文件，双眼策略将生成一组10张的图像组。在本实施例中，可以但不限于截取中间部分的正方形，再将所有的图拼成一张大图。以此也可以匹配各种分辨率问题。其中，一组10张的图像组还可以但不限于转换融合成2张分别用于左眼和右眼观看的全景图像。

(6)将图像组发送到视频编码器里，生成对应的视频帧，进而得到最终所要播放的虚拟现实文件。虚拟现实文件可以但不限于采用开源解决方案ffmpeg。

通过本申请提供的实施例，获取用于呈现三维场景中在参考位置上的三维画面的图像组，其中，一组图像组中包括在预定时刻从多个视角获取到的多个画面，以生成三维场景中可以呈现三维效果的虚拟现实媒体文件，从而达到丰富所播放的虚拟现实媒体文件的播放内容的目的，使得播放虚拟现实媒体文件的一方可以从多个视角看到参考位置上的三维画面，进而实现对虚拟现实媒体文件进行内容扩展的效果。

作为一种可选的方案，第二获取单元804包括：

1)第一获取模块，用于在生成请求指示所生成的虚拟现实媒体文件为媒体数据包的情况下，按照预定策略获取在预定时间段内的多组图像组，其中，预定时间段的时长为虚拟现实媒体文件的播放时长；和/或

2)第二获取模块，用于在生成请求指示所生成的虚拟现实媒体文件为媒体流的情况下，按照预定策略实时获取图像组。

具体结合图3所示进行说明，例如，参考位置以图3所示立方体中心位置为例，相对该参考中心构建立方体之后，可以但不限于将在立方体的每个表面上获取到的画面，如六个表面上的六个画面，作为图像组中的六张图像，其中，立方体的一个表面对应一个视角。也就是说，将一个表面上的画面作为一个视角的画面，作为获取到的图像组中的一张图像。

通过本申请提供的实施例，通过以参考位置为参考中心，相对参考中心构建立方体，从而实现将在立方体的每个表面上获取到的画面，作为图像组中的图像，以生成基于一个参考位置的虚拟现实媒体文件，从而达到丰富媒体文件的文件内容的效果。

作为一种可选的方案，第二获取单元804包括：

1)构建模块，用于以参考位置为参考中心，相对参考中心构建立方体；

2)第三获取模块，用于将在立方体的每个表面上获取到的画面，作为图像组中的图像，其中，立方体的一个表面对应一个视角。

具体结合图4所示进行说明，假设参考位置以o为参考圆心，预定距离r为参考半径，获取参考圆，并在参考圆上均匀获取四个采集点，如图4所示，分别为采集点a、采集点b、采集点c及采集点d，其中每个采集点的视野范围可以但不限于为大于等于90度，以90度为例。在多个采集点中的每个采集点上分别获取90度视野范围内的画面。也就是说，将一个采集点采集的画面作为一个视角的画面，作为获取到的图像组中的一张图像。

例如，假定左眼在a点上，看向a’，得到一个90度的视野成像p1。然后以o为中心点移动左眼到b点上，看向b’，得到一个90度的视野成像p2。合并p1和p2得到p，p将作为左眼从a点移动到b点这个过程中看到的图像，然后，移动至c点看向c`，移动至d点看向d`，就可以得到一张左眼旋转360度看到的全景图像。进一步，以a、b、c、d逆时针方向取图，可以得到右眼的360度看到的全景图像。

例如，以图5所示为例，左眼在a点上看向e’点，右眼在b点上看向e’点，通过双眼叠加观看，则可以得到双眼在三维场景中的三维成像效果。

通过本申请提供的实施例，通以参考位置为参考圆心，预定距离为参考半径，获取参考圆，从而实现将在参考圆上多个采集点获取到的画面，作为图像组中的图像，以实现基于多个采集点生成更加准确的虚拟现实媒体文件，从而达到丰富媒体文件的文件内容的效果。

作为一种可选的方案，第二获取单元804包括：

1)第四获取模块，用于以参考位置为参考圆心，预定距离为参考半径，获取参考圆；

2)第五获取模块，用于在参考圆上均匀获取多个采集点，其中，多个采集点的视野范围覆盖360度全景；

3)第六获取模块，用于在多个采集点中的每个采集点上分别获取预定视野角度范围内的画面，作为图像组中的图像，其中，一个采集点至少对应一个视角。

可选地，在本实施例中，第六获取模块包括：

(1)第一获取子模块，用于按顺时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第一图像集中的图像；并按逆时针方向旋转，将在每个采集点上获取到的预定视野角度范围内的画面，作为第二图像集中的图像；

(2)第二获取子模块，用于根据第一图像集和第二图像集获取图像组。

可选地，在本实施例中，第二获取子模块通过以下步骤实现根据第一图像集和第二图像集获取图像组：对第一图像集中两两相邻的两张图像执行图像融合处理，并对第二图像集中两两相邻的两张图像执行图像融合处理，其中，预定视野角度范围为大于等于90度。

需要说明的是，在a看向a’，b看向b’的图像时，因为是在不同位置看的成像，实际贴合的时候，两两相邻的两张图像将会存在一点的误差。为了减小误差，在本实施例中，可以但不限于将视野角度范围从90度调整到100度，并基于图像融合算法可以把过度区域做的更平滑。

可选地，在本实施例中，第二获取子模块通过以下步骤实现根据第一图像集和第二图像集获取图像组：将第一图像集中的图像合并为第一全景图像，并将第二图像集中的图像合并为第二全景图像，其中，图像组包括第一全景图像及第二全景图像。

具体结合图6所示进行说明，假设第一图像集为基于左眼采集到的图像，第二图像集为基于右眼采集到的图像，在本实施例中，可以但不限于在服务器中将第一图像集中的图像合并得到第一全景图像，如图6上方所示全景图像，将第二图像集中的图像合并得到第二全景图像，如图6下方所示全景图像。将上述第一全景图像及第二全景图像作为图像组中的部分图像，以生成包含三维画面的虚拟现实媒体文件。从而实现在成像过程中，左眼观看第一全景图像，右眼观看第二全景图像，以达到在三维场景中播放虚拟现实媒体文件的过程中，可以获取的更多虚拟现实媒体文件内容。

可选地，在本实施例中，图像组还包括：位于参考圆上方的顶图像及位于参考圆下方的底图像。

具体结合图7所示进行说明，假设仍以在参考圆上的四个采集点为例，双眼分别在四个采集点获取画面作为图像组中的图像，例如，在四个采集点顺时针旋转，以获取左眼的四个视图画面，如图7左侧所示，左眼的前视图、左视图、后视图及右视图；在四个采集点逆时针旋转，以获取右眼的四个视图画面，如图7右侧所示，右眼的前视图、左视图、后视图及右视图。进一步，再获取位于参考圆上方的顶图像及位于参考圆下方的底图像，从而实现获取基于双眼的十张图像作为一组图像组。

通过本申请提供的实施例，通过分别获取与左右眼对应的第一图像集和第二图像集，以生成基于双眼的虚拟现实媒体文件，并通过对第一图像和第二图像集进行进一步的融合合并处理，以使得所生成的虚拟现实媒体文件更加准确真实。

作为一种可选的方案，第一获取单元包括：第七获取模块，用于获取使用第一账号的第一客户端发送的生成请求；推送单元，用于在根据图像组生成虚拟现实媒体文件之后，将虚拟现实媒体文件推送给第二账号，以使第二账号播放虚拟现实媒体文件。。

可选地，在将虚拟现实媒体文件推送给第二账号之后，还包括：使用第二账号的第二客户端获取虚拟现实媒体文件；第二客户端从虚拟现实媒体文件中获取与第二客户端的视角相匹配的画面进行播放。

需要说明的是，上述第二账号可以但不限于为第一账号所在应用中与第一账号关联的好友账号，第二账号通过播放第一账号推送的虚拟现实媒体文件，其中，该虚拟现实媒体文件中包括基于参考位置上，从不同视角获取到的不同画面，以观看第一账号所在三维场景中的三维画面。举例来说，第一账号与第二账号所在应用可以为游戏应用，从而实现在应用内共享虚拟现实媒体文件；此外，在本实施例中，上述第二账号也可以但不限于为与第一账号所在应用不同的应用中的账号，两种应用具有关联关系，例如，第一账号所在应用授权第二账号所在应用播放上述虚拟现实媒体文件。举例来说，第一账号所在应用可以为游戏应用，第二账号所在应用可以为播放应用，其中，游戏应用授权播放应用，允许播放应用播放所生成的虚拟现实媒体文件，从而实现跨平台共享媒体数据。上述仅是一种示例，本实施例中对此不做任何限定。

可选地，在本实施例中，使用第二账号的第二客户端可以但不限于从虚拟现实媒体文件中获取与第二客户端的视角相匹配的画面进行播放。也就是说，第二账号受播放视角所限，将播放与视角相匹配的画面。需要说明的是，随着第二账号播放视角的改变，所播放的画面会随之变化，可以实现遍历虚拟现实媒体文件中从不同视角获取到的不同画面。

通过本申请提供的实施例，第二账号可以通过第二客户端获取第一账号推送的虚拟现实媒体文件，从而实现媒体数据的共享，此外，第二账号通过第二客户端可以观看到第一账号在三维场景中的虚拟现实媒体文件，将吸引更多的用户参与，提高了应用的关注度。

实施例3

根据本发明实施例，还提供了一种用于实施上述基于虚拟现实场景的虚拟现实媒体文件生成方法的基于虚拟现实场景的虚拟现实媒体文件生成服务器，如图9所示，该服务器包括：

1)通讯接口902，设置为获取生成请求，其中，生成请求用于请求生成虚拟现实媒体文件，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识；

2)处理器904，与通讯接口902连接，设置为响应生成请求按照预定策略获取图像组，其中，一组图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；还设置为根据图像组生成虚拟现实媒体文件。

3)存储器906，与通讯接口902、处理器904连接，设置为存储图像组及虚拟现实媒体文件。

可选地，本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例，本实施例在此不再赘述。

实施例4

本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以位于网络中的多个网络设备中的至少一个网络设备。

可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：

s1，获取生成请求，其中，生成请求用于请求生成虚拟现实媒体文件，生成请求中携带有与虚拟现实媒体文件匹配的位置参考标识；

s2，响应生成请求按照预定策略获取图像组，其中，一组图像组用于指示三维场景中在预定时刻在位置参考标识所指示的参考位置上，从多个视角获取到的多个画面，每张图像至少用于指示一个视角获取到的一个画面；

s3，根据图像组生成虚拟现实媒体文件。

可选地，在本实施例中，上述存储介质可以包括但不限于：u盘、只读存储器(rom，read-onlymemory)、随机存取存储器(ram，randomaccessmemory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

可选地，本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例，本实施例在此不再赘述。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。