一种新的全景视频传输投影模型的制作方法

文档序号:14993676发布日期:2018-07-20 23:05阅读:1151来源:国知局

本发明涉及一种vr视频领域,具体为一种新的全景视频传输投影模型。



背景技术:

vr视频又称全景视频,是指利用专业的vr摄影工具将现场环境真实的记录下来,然后通过计算机的后期处理,将其变成可以实现三维空间展示的视频。全景视频的传输需先将360度的全景图像进行投影,在平面上形成一幅图像,然后对平面全景图进行压缩后再传输。视频图像的投影方式影响着视频压缩算法的效率、视频的质量以及vr视频传输的实时性。

现阶段已存在的投影模型主要存在以下几种:

第一:等距球面投影模型(eq);

(1)等距投影要求图像点沿某一特定方向的距离在投影之后仍然保持不变。该投影方式是目前使用最为广泛的投影模型,现有的世界地图即是使用这种方法所绘制的。等距投影模型如图1所示。从该图可以看出:使用等距球面投影模型所获得的图像具有较强的直观性,但是该图像在用于vr视频传输时,存在着严重的缺陷。

(2)在全景视频图像中,重要的信息通常存在于赤道附近,而南北极相对较少,但是由图1左图可以直观的看出,使用等距球面模型进行投影时,与现实需要恰好相反,该方法所获得的图像在南北极处具有较多的像素点,而在赤道附近则相对较少。

(3)等距球面投影模型为了使投影后的距离仍然保持不变,因此,投影所获得的平面图存在严重的畸变。图1左图南北极附近的蓝色圆,在右图中产生了明显的形变。由视频图像投影产生的严重畸变还会降低视频压缩算法的效率。

第二:立方体投影(cubic);

(1)立方体投影方式是针对等距球面投影模型的缺点进行了改进。立方体投影是将球面放置在立方体内部,然后将球面上的图像投影到立方体上。其模型如图2所示。由该图可以直观的看出在投影之后图像还是存在着一定的畸变,且南北极像素密度较大。立方体投影模型的横截面如图3所示,离球面距离较近的部分像素密度低,而离球心远的部分像素密度高。因此仍然会导致赤道附近的图片质量下降。

第三:等角立方体投影(eac);

等角立方体投影模型的出现是建立在立方体投影的缺陷之上,其由google公司提出,针对图像像素在立方体上分布不均匀的情况,改变传统的立方体纹理采样坐标,使像素在立方体上分布均匀。等角立方体投影模型的横截面图与立方体投影的横截面图如图4所示。

相对于立方体模型投影得到的图像,等角立方体得到的图像像素点分布均匀,其二者纹理坐标可相互转化。假设传统立方体纹理坐标为p(px,py),等角立方体中对应的纹理坐标为q(qu,qv),则他们之间可用公式1进行转化。

等角立方体模型可以得到密度分布均匀的图像,且每个点的关注度相似,但是在vr视频图中,需要赋予关注图像区域或感兴趣区域较高的密度,使其在视觉上更清晰。



技术实现要素:

理想的投影模型应该具有均匀的色度分布图,在赤道附近应该具有更多的内容和关注度,且随着纬度的上升,关注度和内容逐渐减少,针对上述要求以及现有投影模型的不足,本发明的目的在于提供一种新的全景视频传输投影模型。

本发明采用的技术方案如下:1、一种新的全景视频传输投影模型,即为一种八面体投影模型,其特征在于:该投影模型由两个金字塔底部相连构成,如图5所示,在赤道中间区域是金字塔的底部,具有最长的周长,在南北极端仅是一个点;为了使图像具有均匀的像素密度,调整八面体模型为等角八面体模型。

2、在该模型中,本发明将全景球面放置在八面体的内部,然后将球面上的图像投影到该八面体上。再利用公式2中的变换,将八面体纹理坐标转换为等角八面体的纹理坐标。相对于八面体模型投影得到的图像,等角八面体体得到的图像像素点分布更加均匀,其二者纹理坐标可相互转化。如图5所示,假设八面体单个面上纹理坐标为p(px,py),图6中等角八面体中对应面上对应的纹理坐标为q(qu,qv),则他们之间可用公式2进行转化。

由于采用了上述技术方案,本发明的有益效果是:(1)采用八面体投影模型得到的图像在赤道周围具有较高的密度,在南北极具有较低的密度;(2)投影得到的图像畸变不明显,可以提高视频压缩算法的效率;(3)将八面体投影模型用于vr直播,可以在保证用户感兴趣的区域图像质量的前提下降低码率,从而可以保证视频的实时性,具有较好的用户体验;(4)在vr直播中可以保证用户感兴趣的区域具有最高的像素清晰度,在带宽有限的场景达到最优质量。

附图说明

图1为本发明背景技术中的等距球面投影模型示意图。左图为南北极附近的蓝色圆,在右图中产生了明显的形变。

图2为本发明背景技术中的立方体投影模型示意图。

图3为本发明背景技术中立方体投影模型横截面图。

图4为本发明背景技术中等角立方体与立方体模型投影横截面对比图。

图5为本发明中八面体投影模型示意图。

图6为八面体单个面上投影模型坐标示意图

图7为等角八面体单个面上投影模型坐标示意图。

图8为等距球面投影模型色度图。

图9为立方体投影模型色度图。

图10为等角立方体投影模型色度图。

图11为八面体投影模型色度图。

图12为等角八面体投影模型色度图。

图13为八面体投影模型图像质量示例。

图14为等距球面投影模型图像质量示例。

具体实施方式

本发明采用的技术方案如下:一种新的全景视频传输投影模型,即为一种八面体投影模型,其特征在于:该模型由两个金字塔底部相连构成,在赤道中间区域是金字塔的底部,具有最长的周长,在南北极端仅是一个点;为了使图像具有均匀的像素密度,调整八面体模型为等角八面体模型。

在该模型中,本发明将球面放置在八面体的内部,然后将球面上的图像投影到八面体上。再利用公式2中的变换,将八面体纹理坐标转换为等角八面体的纹理坐标。

将上述三种方法与本文案提出的八面体和等角八面体投影模型进行对比实验,得到的全景视频投影质量色度图如图8到12所示。

随着色度图由红色变为橘色,黄色,绿色,蓝色,像素密度逐渐增加。由上图可以清楚的看出等距模型(eq)具有最差的性能,其在南北极区域图像质量最高,赤道周围图像质量最低。立方体投影(cubic)较eq模型,色度分布稍微均匀,但同样存在着赤道附近图像质量低的情况。等角立方体(eac)具有最好的色度分布,但是赤道周围图像不能获得最高的像素。采用本文案提出的八面体模型可以得到色度分布较为均匀的图像,且赤道周围像素密度最高,南北极区域密度最低。等角八面体可以在八面体的基础上使图像色度分布更为均匀。

根据上述方案,能够获得感兴趣区域像素清晰的图像。通过这种方法得到的图像如图7左图所示,为了对比,同时使用等距球面模型对图像进行投影,得到的结果如图7右图所示。很明显,左图的中间区域比右图的中间区域更为清晰,视觉效果更好。

以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1