调整360度视频的截顶正方形棱锥投影的视场的制作方法

虚拟现实(vr)描述一种三维的、计算机生成的环境，可以看似真实或物理方式与其进行交互。通常，体验虚拟现实环境的用户可以向左或向右转，向上或向下看，和/或向前和向后移动，从而改变她对虚拟环境的视点。呈现给用户的360度视频可以相应地改变，使得用户的体验与现实世界中的尽可能一样。虚拟现实视频可以非常高的质量捕获和再现，从而可能提供真正身临其境的虚拟现实体验。为了提供顺畅的360度视图，由360度视频捕获系统捕获的视频通常经历图像拼接。在360度视频生成的状况下的图像拼接涉及在视频帧重叠或以其它方式连接的区域中组合或合并来自邻近相机的视频帧。结果将是近似球形的帧。然而，类似于墨卡托(mercator)投影，合并数据通常以平面方式呈现。举例来说，合并视频帧中的像素可以被映射到立方体形状的平面上，或者某一其它三维平面形状(例如，棱锥、八面体、十面体等)上。视频捕获和视频显示装置大体上以光栅原理操作—意指视频帧经处理为像素的栅格—因此正方形或矩形平面通常用以表示球形环境。技术实现要素：在各种实施方案中，描述用于将360度视频数据映射到截顶正方形棱锥形状的技术和系统。截顶正方形棱锥是已切掉其顶部的正方形棱锥。截顶正方形棱锥因此具有正方形基底、正方形顶部和四个梯形形状的侧面。360度视频帧可包含360度的像素数据量，且因此呈球形形状。通过将所述球形视频数据映射到由截顶正方形棱锥提供的平面，可减小360度视频帧的总大小，而仅牺牲观看者视场的边缘处的一些保真度。所述截顶正方形棱锥的所述平面可经定向成使得所述截顶正方形棱锥的基底表示前视图且所述截顶正方形棱锥的顶部表示后视图。以此方式，可以全分辨率捕获前视图，可以降低的分辨率捕获后视图，且可以降低的分辨率捕获左视图、右视图、上视图和底视图。在各种实施方案中，由截顶正方形棱锥映射几何结构提供的视场可变化。举例来说，90度、135度、180度或其它视场可映射到基底平面中，其中基底平面提供360度球形视频数据的前向视图。根据至少一个实例，提供用于对视频数据进行编码的方法。在各种实施方案中，所述方法包含获得表示虚拟环境的360度视图的虚拟现实视频数据，其中所述虚拟现实视频数据包含多个帧，且其中来自所述多个帧的每一帧包含对应球形视频数据。所述方法进一步包含确定来自所述多个帧的帧的视场。所述方法进一步包含确定从所述帧的所述球形视频数据的中心的偏移，所述偏移对应于所述视场。所述方法进一步包含使用所述偏移来确定所述球形视频数据在截顶正方形棱锥的平面上的投影，其中所述截顶正方形棱锥的基底平面表示所述球形视频数据的前视图，所述前视图对应于所述视场，其中所述截顶正方形棱锥的顶部平面表示所述球形视频数据的后视图，且其中所述顶部平面小于底部平面。所述方法进一步包含根据所述投影将所述球形视频数据映射到所述截顶正方形棱锥的所述平面，其中每一平面包含所述球形视频数据的部分。在另一实例中，提供一种设备，其包含经配置以存储视频数据的存储器以及处理器。所述处理器经配置以且可确定从所述帧的所述球形视频数据的中心的偏移，所述偏移对应于所述视场。所述处理器经配置以且可确定来自所述多个帧的帧的视场。所述处理器经配置以且可确定从所述帧的所述球形视频数据的中心的偏移，所述偏移对应于所述视场。所述处理器经配置以且可使用所述偏移来确定所述球形视频数据在截顶正方形棱锥的平面上的投影，其中所述截顶正方形棱锥的基底平面表示所述球形视频数据的前视图，所述前视图对应于所述视场，其中所述截顶正方形棱锥的顶部平面表示所述球形视频数据的后视图，且其中所述顶部平面小于底部平面。所述处理器经配置以且可根据所述投影将所述球形视频数据映射到所述截顶正方形棱锥的所述平面，其中每一平面包含所述球形视频数据的部分。在另一实例中，提供一种非暂时性计算机可读媒体，在其上存储有指令，所述指令在由一或多个处理器执行时，使所述一或多个处理器执行包含以下的操作：获得表示虚拟环境的360度视图的虚拟现实视频数据，其中所述虚拟现实视频数据包含多个帧，且其中来自所述多个帧的每一帧包含对应球形视频数据。所述指令可进一步使所述一或多个处理器执行包含以下的操作：确定来自所述多个帧的帧的视场。所述指令可进一步使所述一或多个处理器执行包含以下的操作：确定从所述帧的所述球形视频数据的中心的偏移，所述偏移对应于所述视场。所述指令可进一步使所述一或多个处理器执行包含以下的操作：使用所述偏移来确定所述球形视频数据在截顶正方形棱锥的平面上的投影，其中所述截顶正方形棱锥的基底平面表示所述球形视频数据的前视图，所述前视图对应于所述视场，其中所述截顶正方形棱锥的顶部平面表示所述球形视频数据的后视图，且其中所述顶部平面小于底部平面。所述指令可进一步使所述一或多个处理器执行包含以下的操作：根据所述投影将所述球形视频数据映射到所述截顶正方形棱锥的所述平面，其中每一平面包含所述球形视频数据的部分。在另一实例中，提供一种设备，其包含用于获得表示虚拟环境的360度视图的虚拟现实视频数据的装置，其中所述虚拟现实视频数据包含多个帧，且其中来自所述多个帧的每一帧包含对应球形视频数据。所述设备进一步包括用于确定来自所述多个帧的帧的视场的装置。所述设备进一步包含用于确定从所述帧的所述球形视频数据的中心的偏移的装置，所述偏移对应于所述视场。所述设备进一步包括用于使用所述偏移来确定所述球形视频数据在截顶正方形棱锥的平面上的投影的装置，其中所述截顶正方形棱锥的基底平面表示所述球形视频数据的前视图，所述前视图对应于所述视场，其中所述截顶正方形棱锥的顶部平面表示所述球形视频数据的后视图，且其中所述顶部平面小于底部平面。所述设备进一步包括用于根据所述投影将所述球形视频数据映射到所述截顶正方形棱锥的所述平面的装置，其中每一平面包含所述球形视频数据的部分。在一些方面中，上文所描述的方法、设备和计算机可读媒体进一步包括在来自所述截顶正方形棱锥的所述平面的平面上确定一点。这些方面进一步包含确定对应于所述平面上的所述点的来自所述球形视频数据的像素。在一些方面中，所述截顶正方形棱锥的所述平面包含第一侧平面、第二侧平面、第三侧平面和第四侧平面，其中所述第一侧平面、所述第二侧平面、所述第三侧平面和所述第四侧平面中的每一个包含邻近于所述基底平面的一个边缘、邻近于所述顶部平面的一个边缘以及邻近于所述第一侧平面、所述第二侧平面、所述第三侧平面和所述第四侧平面中的另外两个平面的两个边缘。在一些方面中，所述第一侧平面、所述第二侧平面、所述第三侧平面和所述第四侧平面中的每一个的分辨率从邻近于所述基底平面的所述边缘到邻近于所述顶部平面的所述边缘减小。在一些方面中，所述顶部平面具有比所述基底平面更低的分辨率。在一些方面中，所述顶部平面具有最小大小，无论所述偏移如何，其中所述最小大小大于零。在一些方面中，偏移对应于使所述顶部平面的大小为零的视场。在一些方面中，确定所述投影包含使用所述偏移来确定来自所述球形视频数据的数据的第一部分在所述基底平面上的第一投影。确定所述投影包含使用所述偏移来确定来自所述球形视频数据的数据的第二部分在所述顶部平面上的第二投影。在一些方面中，确定所述投影包含使用所述基底平面的大小和所述顶部平面的大小确定来自所述球形视频数据的数据的第三部分在第一侧平面上的第三投影，所述第三投影包含所述视场上方的视图。在这些方面中，确定所述投影进一步包含使用所述基底平面的大小和所述顶部平面的大小确定来自球形视频数据的数据的第四部分在第二侧平面上的第四投影，所述第四投影包含所述视场下方的视图。确定所述投影进一步包含使用所述第一正方形平面的大小和所述第二正方形平面的大小确定来自所述球形视频数据的数据的第五部分在第三侧平面上的第五投影，所述第五投影包含在所述视场的右侧的视图，且使用所述第一正方形平面的大小和所述第二正方形平面的大小确定来自所述球形视频数据的数据的第六部分在第四侧平面上的第六投影，所述第六投影包含在所述视场左侧的视图。在一些方面中，所述视场大于90度。在一些方面中，上文所描述的方法、设备和计算机可读媒体进一步包括以矩形格式打包所述平面中的每一个。本
发明内容并非意图识别所要求的主题的关键特征或基本特征，也并非意图单独用于确定所要求的主题的范围。主题应参考此专利的整个说明书的适当部分、任何或所有图式以及每一权利要求来理解。在参考以下说明书、权利要求书以及附图之后，前述内容连同其它特征和实施例将变得更显而易见。附图说明下文参考以下图式详细描述本发明的说明性实施例：图1是说明包含由虚拟现实视频捕获装置捕获的由球形表示的虚拟环境的实例的图式；图2a是说明可用以将呈虚拟现实环境的球形表示的像素映射成球形展开平面表示的参考坐标系的实例的图式；图2b是说明已映射成球形展开平面的视频帧的实例的图式；图3是说明已映射到截顶正方形棱锥形状的视频数据帧的帧打包结构的实例的图式；图4是说明可用以将视频数据存储到可经存储和传输的数据块中的帧打包结构的另一实例的图式；图5是说明已根据图3中说明的实例帧打包结构打包的帧的实例的图式；图6是说明已根据图4中说明的实例帧打包结构打包的视频帧的实例的图式；图7是说明在已根据截顶正方形棱锥几何结构打包视频帧时所看到的质量度量的实例的曲线图；图8是说明可用以将360度视频数据的立方体形的表示的面映射到视频数据的截顶正方形棱锥表示的帧打包结构中的比率的实例的图式；图9a到图9d是说明由于对360度视频帧的各种不同映射所产生的帧大小之间的比较的实例的图式；图10a和图10b是说明截顶正方形棱锥几何结构的纹理区与面之间的对应关系的图式。图11a到图11f是说明截顶正方形棱锥几何结构的每一区的位置、宽度和高度的图式。图12是说明将立方体的平面映射到截顶正方形棱锥的平面的另一实例的图式；图13是说明用于经修改截顶正方形棱锥映射的帧打包结构的实例的图式；图14是说明用于经修改截顶正方形棱锥映射的帧打包结构的另一实例的图式；图15是说明实例的图式，其中为了增大视场，使用保存后视图的分辨率的较大帧打包结构；图16a和图16b是说明一种技术的实例的图式，所述技术是基于从球形的中心的偏移1604，其中所述球形是360度视频数据的球形表示；图17a和图17b是说明技术的另一实例的图式，所述技术使用偏移来确定球形视频数据到由立方体的面提供的平面的映射；图18a和图18b是说明技术的另一实例的图式，所述技术使用偏移来确定球形视频数据到由立方体的面提供的平面的映射；图19是说明360度球形视频数据到由截顶正方形棱锥提供的平面的映射的实例的图式；图20是说明相同球形视频数据的不同视场的映射的三个实例的图式，其中使用后视图的最小大小；图21是说明用于在360度虚拟环境中映射像素的另一实例形状的图式；图22是说明用于图21中说明的棱锥形状的帧打包结构的实例的图式；图23是说明用于将360度视频帧映射到本文中所描述的截顶正方形棱锥的平面的过程的实例的流程图式；图24是说明实例编码装置的框图；且图25是说明实例解码装置的框图。具体实施方式下文提供本公开的某些方面和实施例。如对于所属领域的技术人员来说将显而易见的是，这些方面和实施例中的一些可独立地应用且它们中的一些可组合应用。在以下描述中，出于说明的目的，阐述特定细节以便提供对本发明的实施例的透彻理解。然而，将显而易见的是，可在无这些特定细节的情况下实践各种实施例。图式和描述并不意图是限制性的。以下描述仅提供实例，且并不意图限制本公开的范围、适用性或配置。实际上，各种实例的以下描述将为所属领域的技术人员提供用于实施实例中的任一个的启发性描述。应理解，在不脱离如在所附权利要求书中所阐述的本发明的精神和范围的情况下，可对元件的功能和布置进行各种改变。在以下描述中，给出特定细节以提供对实例的透彻理解。然而，所属领域的一般技术人员将理解，可在没有这些特定细节的情况下实践实例。举例来说，电路、系统、网络、过程和其它组件可以框图形式展示为组件，以免以不必要的细节混淆实例。在其它情况下，可以在没有不必要的细节的情况下展示众所周知的电路、过程、算法、结构以及技术，以免混淆实例。此外，应注意个别实例可描述为过程，将所述过程描述为流程图、流程图式、数据流图、结构图或框图。尽管流程图可将操作描述为连续过程，但许多操作可并行或同时执行。另外，可以重新安排操作的顺序。过程在其操作完成时终止，但可具有不包含在图中的额外步骤。过程可以对应于方法、功能、程序、子例程、子程序等。当过程对应于函数时，过程的终止可对应于函数返回到调用函数或主函数。术语“计算机可读媒体”包括但不限于便携式或非便携式存储装置、光学存储装置和能够存储、含有或携载指令和/或数据的各种其它媒体。计算机可读媒体可包含非暂时性媒体，在非暂时性媒体中可存储数据，且非暂时性媒体并不包含无线地或在有线连接上传播的载波和/或暂时性电子信号。非暂时性媒体的实例可包含但不限于磁盘或磁带、光学存储媒体，例如光盘(cd)或数字通用光盘(dvd)、快闪存储器、存储器或存储器装置。计算机可读媒体可具有存储在其上的可表示过程、函数、子程序、程序、例程、子例程、模块、软件包、类别的代码和/或机器可执行指令，或指令、数据结构或程序语句的任何组合。一个代码段可通过传递及/或接收信息、数据、自变量、参数或存储器内容耦合到另一代码段或硬件电路。信息、自变量、参数、数据等可经由包含存储器共享、消息传递、令牌传递、网络发射等等的任何合适的装置传递、转发或发射。此外，各种实例可通过硬件、软件、固件、中间件、微码、硬件描述语言或其任何组合来实施。当以软件、固件、中间件或微码实施时，用于执行必要任务的程序代码或代码段(例如，计算机程序产品)可存储在计算机可读或机器可读媒体中。处理器可以执行必要任务。虚拟现实(vr)描述一种三维的、计算机生成的环境，可以看似真实或物理方式与其进行交互。在一些状况下，体验虚拟现实环境的用户使用电子设备，例如头戴式显示器(hmd)，且任选地还使用可能磨损的其它物品，例如备有传感器的手套，以与虚拟环境进行交互。当用户在现实世界中移动时，在虚拟环境中再现的图像也会改变，从而给用户提供其在虚拟环境中移动的感受。在一些状况下，虚拟环境包含与用户的移动相关的声音，从而给用户提供声音源自特定方向或来源的效果。虚拟现实视频可以非常高的质量捕获和再现，从而可能提供真正身临其境的虚拟现实体验。虚拟现实应用包含游戏、培训、教育、体育视频和在线购物等。360度视频是所捕获的以在虚拟现实环境中显示的视频。举例来说，360度视频的帧可包含从给定点可见的全360度，使得帧包含以点为中心的球形的全部或部分的像素。360度视频的帧可以是计算机生成的，且用以呈现虚构环境。在一些应用中，来自现实世界的视频可用于虚拟现实环境的呈现。在这些应用中，用户可以用户可体验当前位置的相同方式体验另一位置。举例来说，用户在使用位于旧金山的360度视频系统时可体验柏林的徒步之旅。360度视频系统通常包含视频捕获装置和视频显示装置，且可能还包含其它中间装置，例如服务器、数据存储装置和数据发射设备。视频捕获装置可包含相机组，即，一组多个相机，每一相机定向在不同的方向上且捕获不同的视图。在各种应用中，两个到六个相机可用于捕获以相机组的位置为中心的全360度视图。一些视频捕获装置可以使用更少的相机，例如主要捕获边到边视图的视频捕获装置。视频包含帧，其中帧是场景的电子译码的静态图像。相机每秒捕获一定数量的帧，这被称为相机的帧速率。在一些状况下，为了提供顺畅的360度视图，由相机组中的每一个相机所捕获的视频会经历图像拼接。在360度视频生成的状况下的图像拼接涉及在视频帧重叠或以其它方式连接的区域中组合或合并来自邻近相机的视频帧。结果是大致球形视频数据帧。为了与现有视频系统集成，球形视频数据帧可映射成平面格式。对于例如那些用以生成墨卡托投影的映射技术可用以产生球形展开格式。作为另一实例，合并视频帧中的像素可以经映射到立方体形状的平面上，或者某一其它三维平面形状(例如，棱锥、八面体、十面体等)上。视频捕获和视频显示装置以光栅原理操作—意指视频帧经处理为像素的栅格—因此正方形或矩形平面通常用以表示球形环境。映射到平面表示的360度视频帧可以经编码和/或压缩以用于存储和/或发射。编码和/或压缩可使用视频编解码器(例如，与也称为h.265的高效视频译码(hevc)标准兼容的编解码器，或与也称为h.264的高级视频译码标准或另一合适的译码标准兼容的编解码器)来实现，且产生经编码和/或经压缩的视频比特流或一组比特流。下文进一步详细描述使用视频编解码器对视频数据进行编码。在一些实施方案中，经编码视频比特流可以媒体格式或文件格式存储和/或囊封。可例如通过网络将存储的比特流发射到可解码和再现视频以供显示的接收器装置。此接收器装置在本文中可以被称为视频显示装置。举例来说，360度视频系统可生成来自经编码视频数据的囊封文件(例如，使用国际标准组织(iso)基础媒体文件格式和/或导出的文件格式)。举例来说，视频编解码器可对视频数据进行编码且囊封发动机可通过将视频数据囊封在一或多个iso格式媒体文件中来生成媒体文件。替代地或另外，存储的比特流可直接从存储媒体提供到接收器装置。接收器装置还可实施编解码器以对经编码视频比特流进行解码和/或解压缩。在其中经编码视频比特流以媒体格式或文件格式存储和/或囊封的状况下，接收器装置可支持用以将视频比特流打包到(一或多个)文件中的媒体或文件格式，且可提取视频(且还可能音频)数据，以生成经编码视频数据。举例来说，接收器装置可使用囊封的视频数据解析媒体文件以生成经编码视频数据，且接收器装置中的编解码器可对经编码视频数据进行解码。接收器装置可接着将经解码视频信号发送到再现装置(例如，视频显示装置、玩家装置或其它合适的再现装置)。再现装置包含例如头戴式显示器、虚拟现实电视和其它180或360度显示装置。通常，头戴式显示器能够追踪穿戴者的头部的移动和/或穿戴者的眼部的移动。头戴式显示器可使用追踪信息来再现对应于穿戴者正在观看的方向的360度视频的部分，使得穿戴者以与她体验现实世界的相同方式体验虚拟环境。再现装置可以捕获视频的相同帧速率或以不同的帧速率再现视频。为了向观看者提供身临其境的体验，360度视频内容可以高质量分辨率且以高帧速率生成。然而，以高分辨率和高帧速率捕获的视频可能占用大量数据。人类视觉系统可以区分多达每度60个像素的视场(fov)，且普通人可以在所有方向上看到近180度。表1提供若干显示装置、每一装置提供的大致视场、每一装置的实例分辨率以及每一装置提供360度视频体验所需的等效分辨率的实例。表1如表1中所提及，可具有1920像素宽×1080像素高的分辨率且使用48像素每英寸(ppi)的现代40英寸电视可提供对普通观看者来说足够逼真的图片，但限于约30度视场。将48ppi电视扩展到360度视频分辨率将需要将分辨率大小扩展到7680×2160像素宽和高(假设视频以90度视场显示在电视上)。由于此图片是其八倍，因此其还将需要另外八倍的数据来表示每一视频帧。相比之下，头戴式显示器可以具有每只眼睛2.5"×2.5"的屏幕，但每一屏幕在2160ppi下可具有5400×5400的分辨率。将此头戴式显示器分辨率扩展到360度视频分辨率将需要21600×10800像素高和宽的分辨率和对应地每帧大量比特。视频内容经发射到例如家庭电视接收器、计算机、平板电脑、手持型装置或其它显示装置。视频内容也可存储在服务器上或在数据中心中，内容可从所述服务器或数据中心发射到显示装置。归因于虚拟现实视频内容的高分辨率和高帧率，虚拟现实视频的存储和发射需要有效地呈现视频内容。另外，一些解码装置可能需要将视频帧限于特定大小。举例来说，一些解码器需要一个视频帧的分辨率的大小不超过1920×1080或3840×2160像素。在一些应用中，向观看者提供全360度内容。在此状况下，所有可能的视口可供观看者同时使用，即使当观看者面朝特定方向时。观看者面朝的方向通常被称作视口，且观看者可从此视口看见的内容通常被称作视场。然而，为了为观看者提供全360度视频内容，可能需要大量数据，所述大量数据可能超过解码器装置可有效发射或解码的数据。另外，全360度视频可为观看者提供比观看者在任何给定时刻可看见的更多的视频。各种技术可用以格式化全360度视频内容，使得可以更高效地存储和/或发射数据。举例来说，一种技术是限制发射到观看者的当前视口的内容的内容。在观看者的头部位置改变后，可发射不同视口的内容。为了避免视口之间的间隙，可向观看者同时发射一或多个额外视口的内容。此替代方案可减少发射带宽，但是间隙填充视口可具有较低质量、较低分辨率和/或较低帧速率，这对于一些观看者来说可能是显而易见的。在图1中说明另一技术。图1说明包含由360度视频捕获装置捕获的像素的由球形100表示的虚拟环境的实例。在此实例中，球形100中的像素已映射到由立方体110(也被称作立方体形状)的六个面所提供的六个平面上，其中六个平面已指定为前112、左114、右116、后118、上120和底122。名称描述观看者在观看特定视频帧时正在观看的方向。在各种实施方案中，其它三维形状可用以表示球形帧数据。在此实例中，六个面表示全帧视频；也就是说，呈现所有360度视图，且立方体110的边缘处具有最小保真度损失。如上文所论述且在下文进一步详细论述，全帧视频可含有大量数据。另外，全帧视频可包含比观看者可在任何给定时刻看见的更多数据。因此，在各种实施方案中，由图1的立方体110提供的六个平面可映射到由截顶正方形棱锥形状130提供的六个平面。截顶正方形棱锥是具有正方形基底且垂直于基底移除棱锥的峰部的棱锥。在数学上，截顶正方形棱锥被描述为正方形棱锥的棱锥形平截头体。在此实例中，截顶正方形棱锥130的基底132经定向成与已指定为前112的立方体110的侧对准，使得表示立方体110的前112的平面可映射到由截顶正方形棱锥130的基底132表示的平面上。此外，表示立方体的后118的平面可映射到表示截顶正方形棱锥130的顶部138的平面上，立方体110的左114、右116、上120和底122平面中的每一个可映射到表示截顶正方形棱锥130的侧的对应平面上。虽然截顶正方形棱锥130的基底132平面可包含与立方体110的前112平面一样多的数据，但是截顶正方形棱锥130的顶138平面可能包含比立方体110的后118平面少得多的数据。由于前112视图是观看者正在观看的方向，因此应保存全帧数据，但观看者不大可能能够看见后118视图，由此可为后118视图存储更少的数据。然而，如下文所进一步论述，后118视图未完全消除，使得例如视图中的过渡可更平滑。归因于其梯形形状，截顶正方形棱锥130的左134、右136、上140和底142平面中的每一个可包含比由立方体110提供的对应平面更少的数据。在前112视图的方向上保存更多数据，而在后118视图的方向上保存更少的数据。使用截顶正方形棱锥130形状作为用于映射球形帧数据的基础，因此可能在全帧表示上减小视频帧的大小。在各种实例中，可通过改变截顶正方形棱锥130的尺寸，例如通过增大或缩小截顶正方形棱锥130的顶138平面的大小来调整大小减小。将来自立方体110形状的正方形平面数据映射到由截顶正方形棱锥130提供的平面上可以使用压缩、滤波和/或减少取样方法来实现。举例来说，截顶正方形棱锥130的顶138平面可包含与立方体110的后118平面相同的视图，但具有较低分辨率或质量。类似地，截顶正方形棱锥130的左134、右136、上140和底142平面还包含与立方体110的对应平面相同的视图，但具有降低的分辨率。具体来说，分辨率或质量可以降低，其中最高分辨率在截顶正方形棱锥的基底132的方向上，且最低分辨率朝向截顶正方形棱锥130的顶138。减少取样可以渐变的方式应用，例如从左134、右136、上140和底142平面的梯形形状的基底边缘向顶部边缘减少。在一些实施方案中，可为由虚拟环境的立方体形状表示提供的六个视图中的每一个提供一个截顶正方形棱锥映射。举例来说，在图1的实例中，截顶正方形棱锥130已定向成使得截顶正方形棱锥的基底132定向成朝向立方体110的前112面。此定向假设在此实例中观看者正在观看指定为前112的方向。如上文所论述，可使用由截顶正方形棱锥130的面提供的平面确定视频帧数据的映射。在此定向中，截顶正方形棱锥130产生映射，其中前112具有最高质量，且后118视图具有最低质量。截顶正方形棱锥130还可经定向成使得基底132定向成朝向立方体110的左114面。此定向假设在此实例中观看者正在观看指定为左114的方向。可在此方向上确定相同视频帧数据的映射，从而产生映射，其中左114视图具有最高质量且右116视图具有最低质量。可利用截顶正方形棱锥130获得类似的映射，使得基底132定向成朝向右116视图、后118视图、上120视图和底122视图，使得获得360度视频数据的相同帧的总共六个映射。具有六个映射能够使视频数据为给定视频帧提供最高可用质量，无论观看者正在观看哪个方向。在各种实施方案中，可使用多于或少于六个映射。举例来说，在一些实施方案中，一个视频帧可映射到仅前112视图，或仅前112、左114和右116视图。在一些实施方案中，用于给定视频帧的数个映射可经调谐到视频帧的内容。举例来说，在一些状况下，可假设观看者可能从不上下观看。作为另一实例，在一些实施方案中，可使用重叠映射。举例来说，可确定映射，其中截顶正方形棱锥130的基底132在前112与左114视图之间以45度角定向。在这些实施方案中，可获得球形数据的较好表示。截顶正方形棱锥映射还用以将需要在任何给定时刻提供给观看者的数据量降到最低。举例来说，发射装置可将一个截顶正方形棱锥映射提供给观看者，其中截顶正方形棱锥映射对应于观看者当前正在观看的方向。当观看者向左转动她的头部时，发射装置可切换到第二截顶正方形棱锥映射(例如，朝向左视图定向的一个)。如果第二截顶正方形棱锥映射的发射延迟(例如，归因于网络延迟、帧内周期或出于某一其它原因)，那么可为观看者呈现第一截顶正方形棱锥映射，直到第二截顶正方形棱锥可用为止。取决于观看者的头部位置和截顶正方形棱锥映射，观看者可能经历较低质量，直到接收到第二截顶正方形棱锥映射为止。图2a说明可用以将呈虚拟现实环境的球形表示的像素映射成球形展开平面表示的参考坐标系。在一些实施方案中，球形数据的球形展开平面表示可用于将数据映射到由截顶正方形棱锥的面提供的平面。在此实例中，提供视频像素的球形200具有x轴、y轴和z轴，其可用以表示球形200的表面上的三维坐标。出于此实例的目的，平面210以x轴与球形200的表面(用圆圈202标记)相交的点为中心，且定向成垂直于x轴。鉴于此布置，可使用以下等式将来自图2a的球形200的像素映射到平面210：在上文中，θ204的等式可视为球形200的中心与平面210的表面之间的线208(例如，图2a中的虚线208)，其中线208的旋转范围为θ＝-π到π(例如，大致-3.1415到3.1415)，其中x轴为θ＝0。在θ204的任何给定值下，可选择线208与球形200相交的点处的像素且将其映射到线208接触平面210的对应点(对于相同的θ204的值)。类似地，的等式可视为从球形200的中心到平面210的表面的线208，其中线208的旋转范围为-π/2到π/2(例如，大致-1.57到1.57)，其中由x和y轴形成的平面为在的任何给定值下，可选择线208与球形200相交的点处的像素且将其映射到线210接触平面210的对应点(对于相同的的值)。可通过同时旋转θ和来将球形200中的所有像素映射到平面210。图2b说明已使用上文所描述的等式和方法映射到球形展开平面的视频帧220的实例。结果例如类似于墨卡托投影或等距圆柱形投影。如此实例中所说明，上文θ204的等式提供从球形到平面的水平平移，且的等式提供竖直平移。图2b还说明全视频帧220的实例，其中已以平面表示捕获来自世界的球形表示的每一像素。如上文所提及，以高分辨率捕获的虚拟现实视频的全帧可包含大量数据，并非在给定时刻可能需要所有数据。还如上文所提及，将视频数据的立方体形状表示映射到截顶正方形棱锥形状可将数据量减少到可能更容易存储和传输的量。图3说明已映射到截顶正方形棱锥形状的视频数据帧的帧打包结构300的实例。帧打包结构可限定用于将用于视频帧的数据打包到可由视频解码器存储、传输和处理的单个数据块中的格式。也就是说，帧打包结构可指示哪个数据应位于数据块中的哪个点处。在各种实施方案中，例如在图3中说明的根据帧打包结构打包的帧可包含指示帧中使用的打包结构的信息(例如，标志、场和/或代码)。解码装置可使用所指示的打包结构来识别位于数据块中表示帧的特定点处的视频数据。如上文所论述，截顶正方形棱锥具有基底平面、顶部平面、左平面、右平面、上平面和底部平面。还如上文所论述，截顶正方形棱锥的平面中的每一个可与虚拟现实视频帧的特定视图相关联。具体来说，基底平面可指定为前312视图，顶部平面可指定为后338视图，左平面可指定为左334视图，右平面可指定为右336视图，上平面可指定为上340视图，且底部平面可指定为底342视图。使用这些名称，前312视图被视为“前”，这是由于其是假设观看者面朝的方向，而左344视图为观看者的左侧且右348视图为观看者的右侧。在图3的实例中，已围绕用于后338视图的数据打包用于左334、右336、上340和底342视图的数据。具体来说，左334视图已邻近于后338视图的左边缘(其表现为后338视图的右边缘，因为后338此处以镜像呈现)放置。类似地，右336视图已邻近于后338视图的右边缘放置。已在后338视图上方打包上340视图，且已在后338视图下方打包底342视图。在一些状况下，可翘曲左334、右336、上340和底342数据以刚好放入到正方形或矩形数据块中。在各种实施方案中，还可调整后338视图的大小。举例来说，后338视图可以是前312视图的大小的1/4或1/16。可将组合的左334、右336、上340、底342和后338数据打包到紧靠用于前312的以全分辨率保存的数据的帧打包结构300中。使用此实例帧打包结构300，可将用于帧的数据打包到矩形数据块中。根据其对后338视图的定向打包左334、右336、上340和底342视图可提供每一视图之间的平滑过渡(例如，从左到后、从后到右、从右到上、从上到左等)。举例来说，当对根据此实例帧打包结构300打包的帧进行编码时，编码过程可在视图之间的过渡处产生较少的失真。为进一步减少可能的失真，帧打包结构300可围绕边缘扩展，使得额外的可能重复的视频数据可围绕帧打包结构300的外边缘打包。在图3中通过虚线说明帧打包结构300的扩展。在如上文所描述的打包后，可处理视频数据帧以用于存储和/或发射。举例来说，可编码、压缩和/或囊封帧。可以类似方式打包虚拟现实视频数据的每一帧，且可以比特流依序对打包的帧进行打包。比特流可经存储和/或发射。图4说明可用以将视频数据存储到可经存储和传输的数据块中的帧打包结构400的另一实例。在此实例中，已围绕后448视图的一个半部连同左444视图或右446视图一起(可能通过翘曲数据)打包上440和底442视图中的每一个的一个半部。更具体地说，上440视图的左半部(upl)和底442视图的左半部(bottoml)已与左444视图一起围绕根据其对后448视图的相对位置定向的后448视图的左半部(backl)打包。类似地，上440视图的右半部(upr)和底442视图的左半部(bottomr)已与右446视图一起围绕后448视图的右半部(backr)打包。如此打包，左444视图打包到邻近于前412视图且在前412视图的左侧的帧打包结构400中。类似地，右446视图打包到邻近于前412视图且在前412视图的右侧中。前412视图以全分辨率保存。虽然其它打包方法是可能的，但是在此实例中，左444和右446视图已分别放置在前412视图的左侧和右侧以提高连续性。在此实例中，当译码过程穿过在左444和右446视图与前412视图之间的边界时，使用实例帧打包结构400对帧打包进行编码可产生较少边界失真。还可通过扩展帧打包结构400的边缘来减少边界伪影，使得帧的边缘包含更多视频数据。在图4中，通过虚线说明扩展的边缘。图3和图4仅提供可将映射到截顶正方形棱锥形状的视频数据帧打包到帧中以用于存储和/或发射的方式的两个实例。可以不同方式翘曲、分离和/或打包各种视图以满足不同需要或优先级。举例来说，在一些状况下，从左到右过渡更重要，但在其它状况下从上到底过渡更重要。在各种实施方案中，可以不同方式打包来自相同视频流的不同帧。在这些实施方案中，从这些帧产生的比特流可包含指示如何打包帧的标识符。图5说明已根据图3中说明的实例帧打包结构打包的视频帧500的实例。在图5的实例中，360度视频的帧500已映射到截顶正方形棱锥的平面。接着根据图3中说明的打包结构打包用于前532、左534、右536、后538、上540和后542视图中的每一个的数据。具体来说，在图5中，左534、右536、上540和底542视图已根据其相对于后538视图的位置围绕后538视图打包。也就是说，左534视图邻近于后538视图的左边缘放置且右536视图邻近于后538视图的右边缘放置。类似地，上540视图邻近于后538视图的上边缘放置且底542视图邻近于后538视图的下边缘放置。紧靠以全分辨率打包到帧500中的前532视图，将组合的左534、右536、后538、上540和底542视图打包到帧中。图6说明已根据图4中说明的实例帧打包结构打包的视频帧600的实例。在图6的实例中，360度视频的帧600已映射到截顶正方形棱锥的平面。在此实例中，用于左634、右636、上640和底642视图的数据已围绕后638视图打包，且所得数据已被一分为二。半部已进一步打包到邻近于前612视图的视频帧600中。具体来说，已连同左634视图一起围绕后638视图的左半部打包上640视图的左半部和底642视图的左半部。接着将组合的“左”视图打包到视频帧600中，使得左634视图邻近于以全分辨率打包的前612视图的左边缘。类似地，已连同右636视图一起围绕后638视图的右半部打包上640视图的右半部和底642视图的右半部。接着将组合的“右”视图打包到视频帧600中，使得右636视图邻近于前612视图。当视口水平地移动时，所得的打包视频帧600可提供较好水平过渡。在不考虑所用帧打包结构的情况下，截顶正方形棱锥映射可提供从前视图到后视图的更平滑的质量过渡。图7说明提供在已根据截顶正方形棱锥几何结构打包视频帧700时所看到的质量750度量的实例的曲线图。在此实例中，曲线图说明当从前712视图到右716视图到后718视图观看帧700时可检测到的质量750。从前712到右716到后718的过渡作为实例提供，且质量750改变也适用于从前到左到后、前到上到后以及前到底到后的过渡。在图7中说明的曲线图中，质量750被测量为图像中的显着变化，这可能归因于例如图像分辨率的变化。曲线图的水平轴说明当更新视图时质量750的改变。曲线图的线754说明当根据截顶正方形棱锥映射帧700时的可检测质量750。如所说明，线754说明当视图从前712过渡到右716时可以注意到质量750的逐渐变化。此外，在后718视图中可以注意到一致但较低的质量750。因此，截顶正方形棱锥映射可提供更顺畅和逼真的观看体验。曲线图说明当如本文中所论述映射和打包视频帧时可看见的质量过渡的一个实例。在其它实例中，线754的过渡可取决于是否使用截顶正方形棱锥形状、立方体形状或某一其它形状以及用以将视频帧中的像素打包到所选形状中的方法映射视频帧而变化。图8说明可用以将360度视频数据的立方体形的表示的面映射到视频数据的截顶正方形棱锥表示的帧打包结构800中的比率的实例。可使用下文实例等式将打包到立方体面中的视频数据直接地翘曲到截顶正方形棱锥的梯形形状的平面上。可根据下文实例等式将用于后面的视频数据翘曲到小正方形中。在图8的实例中，左下角860已指定为帧打包结构800的坐标(0，0)。在各种实施方案中，帧打包结构800中的另一点(例如，左上角862，底边缘的水平中点870等)可指定为坐标(0，0)。帧打包结构800的左上角862已指定为坐标(0，1)。在此实例中，值“1”不指示根据帧打包结构800打包的帧的大小，而是帧打包结构800内相对于坐标(0，0)的比率。帧的实际大小可例如1024像素高×2048像素宽，因此帧打包结构的左上角862可以是像素位置(0，1023)。帧打包结构800的右下角864类似地指定为坐标(1，0)，指示右下角864包含帧打包结构800的最左边缘。在此实例中，帧打包结构800的水平轴的中点870已指定为x＝0.5。比率“0.5”指示此中点870在帧打包结构800的正中间，使得帧打包结构800的左半部存储与右半部一样多的数据。另外，第一水平点872已指定为x＝0.6875(也就是说，x＝0.5+0.3875)且第二水平点874已指定为x＝0.875(也就是说，x＝0.5+0.625)。在此实例中，第一872和第二874水平点指示用于后838视图的数据的宽度。由于用于后838视图的数据是正方形形状，因此第一竖直点876已指定为y＝0.385和y＝0.625。图8中提供的比率说明可用以限定将视频数据打包到帧打包结构中的比率的一个实例。前面812是从x＝0.0到x＝0.5，且从y＝0.0到y＝1.0。在各种实施方案中，可使用其它比率。举例来说，在一些状况下，可能需要减小或增大后838视图的大小。关于图13论述此实例。使用图8中说明的实例比率，可使用以下等式确定将右立方体面中的点映射到帧打包结构800中的右836视图的坐标(x'，y')：类似地，可使用以下等式确定将左立方体面中的点映射到帧打包结构800中的左834视图的坐标(x'，y')：可使用以下等式确定将底立方体面中的点映射到帧打包结构800中的底842视图的坐标(x'，y')：可使用以下等式确定将顶立方体面中的点映射到帧打包结构800中的上840视图的坐标(x'，y')：还可出现从帧打包结构回到立方体的面的映射。举例来说，接收根据帧打包结构打包的帧的解码装置可在处理数据之前对帧中的视频数据进行解包。可使用以下等式获得右立方体面中的坐标(x，y)：x＝0.1875x′+0.5y＝0.375x′-0.75x′y′+y′可使用以下等式获得左立方体面中的坐标(x，y)：x＝0.1875x′+0.8125y＝0.25y′+0.75x′y′-0.375x′+0.375可使用以下等式获得底立方体面中的坐标(x，y)：x＝0.1875y′-0.375x′y′-0.125x′+0.8125y＝0.375-0.375y′可使用以下等式获得顶立方体面中的坐标(x，y)：x＝1.0-0.1875y′-0.5x′+0.375x′y′y＝1.0-0.375y′图9a到图9d说明从360度视频帧的各种不同映射得到的帧大小之间的比较。为了提供此比较，图9a到图9d中的实例映射相对于彼此按比例绘制。每一实例映射使用其相应映射方法映射相同视频帧(也就是说，相同数目个像素)。图9a到图9d中说明的实例映射包含球形展开平面902映射(图9a)、立方体904映射(图9b)，和截顶正方形棱锥906、908映射的两个实例(图9c和图9d)。如上文所论述，球形展开平面902映射可包含特定帧中的所有像素，且因此可视为全帧。在此实例中，球形展开平面902映射为四千像素宽和两千像素高，因此含有总共八百万像素。另外，一个帧仅需要一个表示，这是由于帧中的所有像素在全分辨率下可用。立方体904映射略微小于球形展开平面902映射。然而，立方体形状在上视图和底视图中具有更少失真。在此实例中立方体904映射为三千像素宽和两千像素高，因此含有六百万像素。在此实例中，左、前和右立方体面已在帧中紧靠彼此打包。上、下和后面也已紧靠彼此打包在左、前和右视图下方。如同球形展开平面902映射一样，帧中的所有像素在全分辨率下可用，因此帧仅需要一个表示。虽然立方体的904映射小于球形展开平面902映射，但是解码器装置可能需要进行更多工作以将帧部分一起拼接到其相应位置中。第一截顶正方形棱锥906映射是基于图3和图5中说明的帧打包结构。图9的实例截顶正方形棱锥906映射为两千像素宽和一千像素高，因此含有两百万像素。截顶正方形棱锥906映射为一个视图或视口提供全分辨率，且为所有其它视图提供降低的分辨率。因此，在一些状况下，可为一个帧编码六个表示，其中六个表示中的每一个编码为彼此成90度角。然而，是否需要所有六个表示可取决于帧的内容，和/或观看者在任何给定时刻正在观看的视口。第二截顶正方形棱锥908映射是基于图4和图6中说明的帧打包结构。图9的实例截顶正方形棱锥908映射也为两千像素宽和一千像素高，因此含有两百万像素。实例截顶正方形棱锥908也为一个视图提供全分辨率，且为所有其它视图提供降低的分辨率。在各种实施方案中，文件格式可描述360度视频帧。图4和图6说明可用以将已映射到截顶正方形棱锥形状的360度视频帧打包到矩形表示中的帧打包结构。在各种实施方案中，文件格式可含有用于将360度视频映射到截顶正方形棱锥几何结构的参数。文件格式可进一步含有用于描述如此映射到文本和/或二进制文件中的视频数据的参数。文件可经存储和/或传输。第一实例实施例在一些实施方案中，本文中所描述的技术可使用截顶正方形棱锥(tspyr)几何结构扩展在iso/iecjtc1/sc29/wg11/m37837“针对全向媒体应用格式的建议文本(proposedtextforomnidirectionalmediaapplicationformat)”mpeg114，2016年2月，或iso/iecjtc1/sc29/wg11n16189“关于iso/iec23000-20全向媒体应用格式的wd(wdoniso/iec23000-20omnidirectionalmediaapplicationformat)”mpeg115，2016年6月中建议的全向媒体应用格式(下文统称为“全向媒体应用格式标准”)。下文所描述的实施方案包含建议的对语法和语义的添加且参看全向媒体应用格式标准详细描述。在下文所论述的第一实例实施例中，引用来自全向媒体应用格式标准的文本，其中利用带下划线的文本(额外文本的实例)展示对文本的添加。在一些实施方案中，全向媒体应用格式标准的改变包含全向媒体纹理映射元数据样本条目。如下提供一个实例：语法以下改变为对全向媒体应用格式标准中章节3.2.2的建议的添加：语义下表中的改变和表之后的语义定义包含对全向媒体应用格式标准的章节3.2.3中的表3的建议的添加。表—全向媒体几何结构类型值geometry_type0x00保留0x01球形0x02挤扁的球形0x03圆柱形0x04立方体0x05棱锥形0x06截顶正方形棱锥0x07-0xff保留tspyr_height指示截顶正方形棱锥的高度或深度；例如，可相对于截顶正方形棱锥的前面的大小来规定高度或深度。tspyr_back_width和tspyr_back_height指示后面的宽度和高度；例如，可相对于截顶正方形棱锥的前面的大小来规定截顶正方形棱锥的宽度和高度。在一些实施方案中，如下提供包含全向媒体纹理映射元数据样本条目的全向媒体应用格式标准的改变的另一实例：语法以下改变为对全向媒体应用格式标准中章节3.3.1的建议的更新：语义下文的改变包含对全向媒体应用格式标准的章节3.3.2中的语义的建议的更新：tspyr_surface_id指示如在本文的“定义”章节中定义的截顶正方形棱锥的表面的识别符。表—tspyr表面的识别符值tspyr_surface_id0x00保留0x01前0x02顶0x03底0x04左0x05右0x06后0x07-0xff保留定义现描述几何结构类型、纹理映射和投影的各种定义。相对于截顶正方形棱锥(tsp)，如图10a和图10b中所展示布置将映射到tsp3-d几何结构的每一表面的纹理的区。具体地说，图10a和图10b说明纹理区与tspyr几何结构的面(前1012、后1038、左1034、右1036、顶1040和底1042)之间的对应关系。每一区的位置和大小由omnimediatexturemappingmetadatasample盒指示。图11a到图11f中指示达到区的位置(例如，(region_top_left_x，region_top_left_y))1150、宽度(例如，region_width)1152和高度(例如，region_height)1154。如由图11a提供，如果tspyr_surface_id等于前1112，那么前1112表面区域是纹理矩形的左半部。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的高度或深度限定region_width1152和region_height1154。如由图11b提供，如果tspyr_surface_id等于后1138，那么后表面区域位于纹理矩形的右半部。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就后面的宽度和高度限定region_width1152和region_height1154。如由图11c提供，如果tspyr_surface_id等于顶1140，那么表面区域位于纹理矩形的右半部的顶部处。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的高度或深度以及后面的宽度和高度限定region_width1152和region_height1154。如由图11d提供，如果tspyr_surface_id等于底1142，那么表面区域位于纹理矩形的右半部的底部处。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的高度或深度以及后面的宽度和高度限定region_width1152和region_height1154。如由图11e提供，如果tspyr_surface_id等于右1136，那么表面区域位于纹理矩形的右半部的左侧上。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的高度或深度以及后面的宽度和高度限定region_width1152和region_height1154。如由图11f提供，如果tspyr_surface_id等于左1134，那么表面区域位于纹理矩形的右半部的右侧上。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的高度或深度以及后面的宽度和高度限定region_width1152和region_height1154。第二实例实施例在一些实施方案中，本文中所描述的技术使用截顶正方形棱锥几何结构在n15946中建议的全向媒体应用格式上扩展。在下文的文本中，使用带下划线的文本(额外文本的实例)指示对mpegn15946的添加。针对vr/360度视频的方向性视口呈现，建议截顶正方形棱锥(tspyr)几何结构。tspyr的前面具有全分辨率，而分辨率朝向较小后面逐渐降低。如上文所提及，图10a和图10b说明纹理区与tspyr几何结构的面(前1012、后1038、左1034、右1036、顶1040和底1042)之间的对应关系。图10a说明截顶正方形棱锥几何结构且图10b说明对应的纹理区。tspyr视频信息可在tspyr视频信息盒中用信号发送，所述tspyr视频信息盒含于vr视频信息盒中，如iso/iecjtc1/sc29/wg11/n15946“处于研究中的针对全向媒体应用格式的技术(technologiesunderconsiderationforomnidirectionalmediaapplicationformat)”mpeg114，2016年2月中所描述。tspyr视频信息盒的语法和语义描述如下：语法语义vr_mapping_type是指示从球形视频到矩形格式的映射类型的整数。零值指示等矩形映射。值1指示立方体映射。值3指示截顶正方形棱锥映射，且格式由tspyrvideoinfobox描述。保留其它值。tspyr视频信息盒(tspyrvideoinfobox)的语法和语义如下：盒类型：‘tspyr’容器：方案信息盒(‘vrvd’)必选：是(当vr_mapping_type等于3时)数量：一个tspyr视频信息盒用以指示轨迹中所含tspyrvr/360视频的格式。信息将用于tspyrvr/360视频的呈现。tspyr_depth指示截顶正方形棱锥的深度。tspyr_back_width和tspyr_back_height指示后面的宽度和高度。tspyr_region_id指示tspyr纹理的区的识别符(表1)。表1—tspyr区的识别符值tspyr_region_id0x00前0x01后0x02顶0x03底0x04左0x05右center_pitch和center_yaw分别指示呈现视频的中心像素的点的坐标的俯仰和侧转角。中心像素是截顶正方形棱锥的前面的中心。俯仰和侧转确定视口，这意味着截顶正方形棱锥的定向。当不存在时，推断center_pitch和center_yaw的值等于0。center_pitch_offset和center_yaw_offset分别指示呈现视频的中心像素的点的坐标的俯仰和侧转角的偏移值。center_pitch_offset+center_pitch和center_yaw_offset+center_yaw分别指示当前样本的中心点。region_top_left_x和region_top_left_y分别指示矩形形状的参考轨迹中的视频区的左上角的水平和竖直坐标。region_width和region_height分别指示矩形形状的参考轨迹中的视频区的宽度和高度。如图11a到图11d中布置将映射到3d几何结构的每一表面的纹理的区。指示每一区的位置1150(例如，(region_top_left_x，region_top_left_y))、宽度1152(例如，region_width)和高度1154(例如，region_height)。如由图11a提供，如果tspyr_region_id等于前1112，那么前1112表面区域是纹理矩形的左半部。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的深度限定region_width1152和region_height1154。如由图11b提供，如果tspyr_region_id等于后1138，那么后1138表面区域位于纹理矩形的右半部。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就后面的宽度和高度限定region_width1152和region_height1154。如由图11c提供，如果tspyr_region_id等于顶1140，那么表面区域位于纹理矩形的右半部的顶部处。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的深度以及后面的宽度和高度限定region_width1152和region_height1154。如由图11d提供，如果tspyr_region_id等于底1142，那么表面区域位于纹理矩形的右半部的底部处。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的深度以及后面的宽度和高度限定region_width1152和region_height1154。如由图11e提供，如果tspyr_region_id等于右1136，那么表面区域位于纹理矩形的右半部的左侧上。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的深度以及后面的宽度和高度限定region_width1152和region_height1154。如由图11f提供，如果tspyr_region_id等于左1134，那么表面区域位于纹理矩形的右半部的右侧上。通过region_width1152和region_height1154给出表面区域。在各种实施方案中，可就截顶正方形棱锥的深度以及后面的宽度和高度限定region_width1152和region_height1154。图12说明将立方体1210的平面映射到截顶正方形棱锥1230的平面的另一实例。如上文所论述，可将虚拟环境的球形表示映射到由立方体1210的面提供的六个平面。立方体1210的一个面可指定为前1212视图，前1212的左侧的面为左1214视图，前1212的右侧的面为右1216视图，对应面为上1220视图，另一对应面为底1222视图，且最后一个面为后1218视图。将球形数据组映射到立方体1210的面提供视频数据的全帧，这是因为六个可能的视图中的每一个以全分辨率保存。同样如上文所论述，将由立方体1210提供的平面映射到由截顶正方形棱锥提供的平面可减少表示全360度视图需要的数据量。在图12的实例中，经修改的截顶正方形棱锥1230用以提供将立方体1210的面中的数据映射到的平面。在此实例中，截顶正方形棱锥1230已经修改以将基底或升高的平台添加到截顶正方形棱锥的基底。换句话说，在此实例中，截顶正方形棱锥1230的基底已经定向成朝向立方体的前1212面，但已在立方体的后1218面的方向上偏移某一量。因此，举例来说，截顶正方形棱锥1230的左侧包含矩形前-左1234a平面和梯形后-左1234b平面。前-左1234a平面正对应于左1214立方体面的对应区，且因此前-左1234a平面中的像素以全分辨率保存。后-左1234b平面中的像素可从全分辨率减小以适应平面的梯形形状。立方体的右1216、顶1220和底1222面中的每一个可以类似方式映射到由经修改截顶正方形棱锥提供的平面。具体来说，截顶正方形棱锥1230包含以全分辨率保存像素的前-右1236a平面和降低分辨率的后-右1236b平面。类似地，截顶正方形棱锥1230包含前-上1240a平面和后-上1240b平面，以及前-底1242a平面和后-底1242b平面。截顶正方形棱锥1230的后1238平面未经修改，且提供立方体1210的所有后1218面的降低的分辨率表示。进一步以全分辨率将立方体的前1212面映射到截顶正方形棱锥1230的经修改的基底1232。上文所描述的经修改截顶正方形棱锥1230映射可为朝向立方体1210的前1212面观看的观看者提供较好的90度视场。除前1212视图以全分辨率保存之外，左1214、右1216、上1220和底1222视图的量也以全分辨率保存。以全分辨率保存的左1214、右1216、上1220和底1222视图的量可正好在观看者的周边视觉内，或可以是仅在观看者的视觉的边缘处。在各种实施方案中，可通过修改前-左1234a、前-右1236b、前-上1240a和前-底1240b区的大小来调整提供给观看者的视场。可例如通过修改截顶正方形棱锥1230的顶1238平面的大小来实现此调整。图13说明用于经修改截顶正方形棱锥映射的帧打包结构1300的实例。在此实例中，前-左1334a视图已打包到前1312视图的左侧的帧打包结构1300中，且前-右1336a视图已打包到前1312视图的右侧。当对帧打包结构1300进行编码时将前-左1334a和前-右1336a放置到紧靠前1312的其相应位置中的帧打包结构1300中可提供从前到左或从前到右的更平滑过渡。如此实例中进一步所说明，后-左1334b、后-右1336b、后-上1340b和后-底1342b视图已围绕后1338视图打包到帧打包结构1300中。接着将后-左1334b、后-右1336b、后-上1340b、后-底1342b和后1338的组合打包到紧靠前到右1336的帧打包结构1300a中，使得后-右1336b邻近于前-右1336a视图。前-上1340a视图紧靠后-左1334b视图旋转和打包。前-底1342a也紧靠前-上视图1340a旋转和放置。最终结果是在此实例中帧打包结构1300为矩形。图14说明用于经修改截顶正方形棱锥映射的帧打包结构1400的另一实例。在此实例中，后上、底和后视图已一分为二，且已利用相应后-左1434b和后-右1436b视图打包半部。具体来说，已围绕后1438视图与后-左1434b视图的左半部一起打包后-上1440b视图的左半部和后-底1442b视图的左半部。组合的“左”视图邻近于前-左1434a视图打包，而后-左1434b视图邻近于前-左1434a视图放置。前-左1434a视图自身邻近于前1432视图的左边缘打包。类似地，已围绕后1438视图的右半部与后-右1436b视图一起打包后-上1440b视图的右半部和后-底1442b视图的左半部。接着组合的“右”视图邻近于前-右1436a视图打包，而后-右1436b视图邻近于前-右1436a视图放置。前-右1436a视图自身邻近于前1432视图打包。最后，前-底1442a视图旋转且打包到组合的左视图的左侧，且前-上1440a视图旋转和打包到组合的右视图的右侧。图13和图14提供图9中说明的经修改截顶正方形映射可打包到矩形帧结构中的各种方式的仅两个实例。其它变化是可能的，每一变化可能提供不同优势。举例来说，当对帧进行编码时图14的实例格式可在从左到右过渡中提供更少失真，同时在从上到底过渡中牺牲一些失真。作为另一实例，图13的实例格式可更易于生成。在各种实施方案中，上文所论述的帧打包结构中的前视图可表示90度视场。举例来说，当视频帧的360度球形表示经映射到立方体的面时，立方体的一个面可借助于包含可用像素的八分之一的每一面表示90度视场。当截顶正方形棱锥形状的基底平面(如上文所提及，其可指定为前视图)映射立方体的一个面时，基底平面可映射90度视场。在上文所论述的所述帧打包结构中，90度视场的区域外部可打包到在大小和/或形状上等效于前视图的帧打包结构中的区域中。在此帧打包结构中，以全分辨率保存的可视区域可仅为90度的视图，这是因为90度之外的任何区域可紧凑在左、右、上和底视图中。在各种实施方案中，包含全分辨率数据的视场可通过增大截顶正方形棱锥形状的基底平面的大小来增大。也就是说，可以全分辨率保存较大区域，其中区域可能大于前述立方体面。因此，后面的分辨率可能减小，或帧打包结构的大小可能增大，或可能出现两种情况。图15说明在其中为了增大视场使用保存后1588视图的分辨率的较大帧打包结构1550的实例。图15说明在其中前1512视图表示90度视场的第一帧打包结构1500的实例。在此第一帧打包结构1500中，将左1534、右1536、上1540和底1542视图与后1538一起打包在大小等效于前1512视图的区域中。图15还说明第二帧打包结构1550的实例，其中前1552视图大30％，且因此表示117度视场。为了创建此177度视场，原本在左1584、右1586、上1590和底1592视图中的像素实际上在前1552视图中。与由第一帧打包结构1500中的这些视图所占用的区域相比，用于左1584、右1586、上1590和底1592视图的第二帧打包结构1550中的区域可因此相对于前1552视图的大小较小。在此第二帧打包结构1550中，后1588视图的大小相同于第一帧打包结构1500中的后1538视图的大小，使得可维持后1588视图的分辨率。第二帧打包结构1550的总体大小因此较大：举例来说，第一帧打包结构可为2000像素宽和1000像素高，而第二帧打包结构可为2,600像素宽和1,300像素宽。图15说明其中以全分辨率保存的视场扩展超出90度的一个实例。在各种实施方案中，甚至可进一步增大视场。在各种实施方案中，还可降低后视图的分辨率，使得无需极大地增大帧打包结构的大小。各种技术可用以确定从球形视频数据到截顶正方形棱锥的平面的映射，其中所述映射包含特定视场。图16a和图16b说明一种技术的实例，所述技术是基于从球形1610的中心的偏移1604，其中所述球形1610是360度视频数据的球形表示。在一些实例中，球形1610包含一个视频帧的视频数据。在一些实例中，由图16a和图16b说明的技术和所附实例可跨多个视频帧使用。出于参考目的，在图16a和图16b的实例中，说明覆盖球形1610的立方体1600。如上文所论述，在一些实例中，来自球形1610的视频数据可映射到由立方体1600的面提供的平面。在这些实例中，平面可接着映射到由截顶正方形棱锥的面提供的平面。在一些实例中，球形视频数据可经映射导引到截顶正方形棱锥的面。进一步从球形1610和参考立方体1600的侧视图呈现图16a和图16b的实例，使得既定在观看者前方的视图在右侧，且既定在观看者后方的视图在左侧。因此，在图示中，立方体1600的前面1612在右侧上，且立方体的背面1638在左侧上。在此实例中，标记为c0的偏移1604为零。零的偏移对应于球形1610的中心和90度的前向视场1606。也就是说，如图16a中所说明，在从通过球形1610的中心和前向视图的中心的中心轴1650的所有方向上从0度到45度的像素可映射到立方体1600的前面1612。在零的偏移下，后向视场1608也是90度。如图16b中所说明，在从中心轴1650的所有方向上从0度到45度的像素可映射到立方体1600的背面1638。在图16b中，在来自用以确定前视图的像素的方向的中心轴1650上经确定处于180度的像素。在图16a和图16b的实例中，未映射到立方体1600的前面1612或背面1638的像素可映射到立方体1600的剩余上面、下面、左面和右面。图17a和图17b说明技术的另一实例，所述技术使用偏移1704来确定球形视频数据到由立方体1700的面提供的平面的映射。当在先前实例中时，偏移1704是从球形1710的中心，其中球形1710是360度视频数据的球形表示。出于参考目的，说明覆盖球形1710的立方体1700。当在先前实例中时，从侧视图说明球形1610和立方体1600，其中立方体1700的前面1712(对应于既定在观看者前方的视图)在右侧上，且立方体1700的背面1738(对应于既定是在观看者后方的视图的视图)在左侧上。在图17a和图17b的实例中，偏移1704是在球形1610的中心与球形1610的背侧之间的中间。也就是说，如果球形1610的半径是1，那么偏移1704在-1/2处。如图17a中所说明，使用负偏移1704可增大前向视场1706。举例来说，在球形1710的-1/2半径的偏移1704下，前向视场1706是135度。也就是说，从通过球形1710的中心和前向视图的中心的中心轴1750处于67.5度的像素可映射到立方体1700的前面1712。为了维持立方体1700的前面1712的分辨率，可增大前面1712的大小以包含超出90度视场的像素。如图17b中所说明，在负偏移下，减小后向视场1708。举例来说，在球形1710的-1/2半径的偏移1704下，后向视场1708是45度。也就是说，在从中心轴1750的所有方向上处于22.5度(从前视图处于180度)的像素可映射到立方体1700的背面1738。在此实例中，由于更少像素映射到立方体的背面1738，可减小背面1738的大小。图18a和图18b说明技术的另一实例，所述技术使用偏移1804来确定球形视频数据到由立方体1800的面提供的平面的映射。偏移1804是从球形1810的中心，其中球形1810是360度视频数据的球形表示。出于参考目的，说明覆盖球形1810的立方体1800。如先前实例中，从侧视图说明球形1810和立方体1800，其中立方体1800的前面1812在右侧上且立方体1800的背面1838在左侧上。在图18a和图18b的实例中，偏移1804是在球形1810的背侧处。也就是说，如果球形1810的半径是1，那么偏移1804在-1处。如图18a中所说明，在偏移1804在球形1810的背侧处的情况下，前向视场是180度。也就是说，来自球形1810的前向一半的像素(例如，来自从球形1810的中心到视场的中心的中心轴1850的所有90度像素)可映射到立方体1800的前面1812。为了维持前向视图的分辨率，可增大前面1812的大小以适应额外像素。如图18b中所说明，在偏移1804在球形1810的背侧处的情况下，后向视场是0度，使得没有来自球形1810的像素用于后向视图。无后向视图可用于其中假设观看者将不会看见后向视图的任何部分的状况。在其它状况下，可例如通过具有立方体的背面1838的最小大小来保存后向视图，如下文进一步所论述。在各种实施方案中，可针对任何所需前向视场计算在上述实例中描述的偏移δ。在这些实施方案中，偏移可计算如下：在确定偏移后，可如下计算后向视场：fov后＝90°(1+δ)图19说明360度球形视频数据到由截顶正方形棱锥提供的平面的映射的实例。如上文所论述，可将球形视频数据映射到由立方体的面提供的平面。平面数据可接着翘曲到由截顶正方形棱锥的面提供的平面。举例来说，立方体的背面可收缩(例如通过降低分辨率或质量)到截顶正方形棱锥的顶部。如另外实例，立方体的顶面、底面、左面和右面可翘曲到截顶正方形棱锥的侧的梯形形状，例如通过逐渐降低立方体平面中的数据的分辨率或质量以拟合梯形形状。在其它实例中，球形360度视频数据可使用各种数学变换直接映射到由截顶正方形棱锥的面提供的平面。图19说明针对相同球形视频数据的不同视场的映射的三个实例。第一实例映射1900、第二实例映射1910和第三实例映射1920中的每一个均展示映射到由截顶正方形棱锥提供的平面的数据。为了易于说明，平面展示为在打包时将呈现的数据，其中前视图的数据打包成正方形格式，上视图、底视图、左视图、右视图和后视图的数据打包成与前视图相同大小的正方形。应理解，每一平面的数据可打包成不同配置和定向，例如上文所论述那些。第一实例映射1900说明90度视场的实例映射。在此实例中，前1912的大小使得前1912视图中的像素呈全分辨率。也就是说，前1912视图具有充足空间以供90度视场中的每一像素以全分辨率译码。还在此实例中，已选择后1938视图的特定大小，其中大小可确定后1938视图的分辨率。也就是说，90度视场的像素可能是紧凑的(例如，通过向下缩放、减少取样或某一其它方法)以在无后1938视图的情况下适合。可根据前1912视图和/或后1938视图的大小来确定映射上1940视图、底1942视图、左1934视图和右1936视图中的每一个的像素的数目以及这些视图中的每一个的分辨率。举例来说，上1940视图、下1942视图、左1934视图和右1936视图邻近于前1912视图的边缘可呈全分辨率，而上1940视图、下1942视图、左1934视图和右1936视图邻近于后1938视图的边缘可以是与后1938视图相同的分辨率。在前1912视图与后1938视图之间，上1940视图、下1942视图、左1934视图和右1936视图的分辨率可逐渐减小。在第二实例映射1910中，前向视场已增大。举例来说，前向视场可以是135度，或大于90度的某一其它值。在此实例中，后方偏移可用以确定将映射到前向和后向视图的球形视频数据的部分。可维持前1922视图的分辨率，这意指前1922视图可包含所有像素，其具有与当视场是90度时前1922视图中所包含的像素相同的分辨率。为了适应于较大视场，前1922视图的大小可增大以包含额外像素。前1922视图的较大大小可包含先前映射到上1950视图、底1952视图、左1944视图和右1946视图的像素。在第二实例映射1910中，后1948视图已与前1922视图的增大成比例地减小。举例来说，后1948视图可包含35度视场，或小于90度的某一其它视场。在此实例中，映射到后1948视图的像素的数目可减小，和/或后1948的分辨率或质量可降低。也可针对较大前向视场和较小后向视场调整上1950视图、底1952视图、左1944视图和右1946视图的映射。举例来说，上1950视图、底1952视图、左1944视图和右1946视图中的每一个邻近于前1922视图的边缘可经调整以具有与前1922视图相同的分辨率，且邻近于后1948视图的边缘可具有与后视图相同的分辨率，其中分辨率从前1922到后1948逐渐地改变。在一些状况下，上1950视图、底1952视图、左1944视图和右1946视图具有在前向视场是90度时的相同数目个像素。在一些状况下，相比于当前向视场是90度时，上1950视图、底1952视图、左1944视图和右1946视图具有观看者像素。第三实例映射1920说明180度前向视场的实例。如先前实例中，前1932视图的大小已增大，以适应较大视场。举例来说，放大的前1932视图可包含当前向视场是90度时包含在前1932视图中的所有像素，加上包含180度的前向视场的额外像素。在导致180度前向视场的偏移下，如由第三实例映射1920说明，后向视场减小到零。因此，在第三实例映射1920中，上1960视图、底1962视图、左1954视图和右1956视图可各自包含在邻近于前1932视图的边缘处呈全分辨率的像素和朝向后视图呈接近零的分辨率的像素，可能在两者之间逐渐改变。在一些状况下，无映射后视图的球形视频数据的部分是可接受的。在这些状况下，当观看者转向左或右时可为观看者提供来自例如左1954视图和右1956视图的数据。当系统提供对应于观看者现在正面对的方向的新映射时，允许暂时的质量降低。在一些状况下，保存所有前向视场的后视图，使得可以减少当观看者转动时产生的任何暂时的质量降低。第一实例映射2000、第二实例映射2010和第三实例映射2020中的每一个均展示映射到由截顶正方形棱锥提供的平面的数据。为了易于说明，平面展示为在打包时将呈现的数据，其中前视图的数据打包成正方形格式，上视图、底视图、左视图、右视图和后视图的数据打包成与前视图相同大小的正方形。应理解，每一平面的数据可打包成不同配置和定向，例如上文所论述那些。第一实例映射2000说明90度视场的实例映射。在此实例中，前2012的大小使得前2012视图中的像素呈全分辨率。还在此实例中，已选择后2038视图的特定大小，其中大小可确定后2038视图的分辨率。可根据前2012视图和/或后2038视图的大小来确定映射上2040视图、底2042视图、左2034视图和右2036视图中的每一个的像素的数目以及这些视图中的每一个的分辨率。在第二实例映射2010中，前向视场已增大到大于90度，例如135度的视图。在此实例中，后方偏移可用以确定将映射到前向2022视图的球形视频数据的部分。还在此实例中，后2048视图的大小已限于最小大小。举例来说，在第二实例映射2010中，后2048视图至少包含与当前向视场是90度时包含在后2038视图中的相同数据。在其它实例中，后2048视图的最小大小可小于90度，且大于此实例的后方偏移所决定的大小。在第二实例映射2020中，可针对前2022视图中的较大视场和/或后2048视图的大小调整上2050视图、底2052视图、左2044视图和右2046视图。举例来说，上2050视图、底2052视图、左2044视图和右2046视图可包含较少像素，这是在第一实例映射2010中的状况下，其中从上2050视图、底2052视图、左2044视图和右2046视图移除的像素以全分辨率包含在前2022视图中。在第三实例映射2020中，前向视场已增大到包含180度的视图，且前2032视图的大小已相应地增大。如在先前实例中，后2058的视场已限于最小大小，在此状况下为90度视场。尽管可能映射球形视频数据的较小部分，但是上2060视图、底2062视图、左2054视图和右2056视图中的每一个可包含邻近于前2032视图的边缘与邻近于后2058视图边缘之间的分辨率的逐渐改变。在第二实例映射2010和第三实例映射2020中的每一个中，且在其它类似实例中，当前向视场增大时保存后视图。在这些实例中，当视口从前向后移动时可实现更平滑的过渡，如先前所论述。图21说明用于在由像素的球形2100表示的360度虚拟环境中映射像素的另一实例形状。在此实例中，数据的球形2100可映射到立方体2110的面。立方体2110的面可指定为前2112面、后2118面、左2114面、右2116面、上2120面和底2122面。如上文所论述，立方体2110的六个面可以全分辨率表示来自球形2100的视频数据。为了减小视频数据的大小，立方体2110的六个面可映射到正方形棱锥形状2130，其中棱锥2130的正方形基底2132经定向成朝向立方体的前2112面，且已相对于立方体2110的前2112面转动45度。棱锥形状2130的顶部进一步与后2118视图的中心对准。棱锥形状2130的四个侧中的每一个可进一步指定为p12134、p22136、p32138和p42140。来自立方体的左2114、右2116、上2120和底2122面的像素可以不同方式分配到p12134、p22136、p32138和p42140。举例来说，一个面可映射棱锥形状2130的一侧(例如p12134映射右2116面，p22136映射顶2120面，p3映射左2114面，且p4映射底2122面)。替代地，棱锥形状2130的一侧可映射若干面的部分。举例来说，p12134可映射右2116面和顶2120面中的一些，p22136可映射顶2120面和左2114面中的一些，p3可映射左2114面和底2122面中的一些，且p421140可映射底2122面和右2116面中的一些。在这些实例中的每一个中，不包含后2118面。图22说明用于图25中说明的棱锥形状的帧打包结构2200的实例。在图22中，前视图2232(也就是说，棱锥形状的基底)安置于帧打包结构2200的中间中，而棱锥的正方形基底的侧与帧打包结构2200的侧成45度角。棱锥形状的侧p12234、p22236、p32238和p42240可安置于帧打包结构2200的拐角中。如上文所论述，p12234、p22236、p32238和p42240可存储左、右、上和底视图的全部或部分。在各种实施方案中，可扩展帧打包结构2200，使得p12234、p22236、p32238和p42240中的每一个捕获更多可能的重叠数据。扩展帧打包结构2200可提高p12234、p22236、p32238和p42240的边界处的分辨率。扩展的区域在图22中由虚线说明。本文中论述的译码技术可实施于实例视频编码和解码系统中。在一些实例中，系统包含源装置，其提供在稍后时间将由目的地装置解码的经编码视频数据。具体来说，源装置通过计算机可读媒体将视频数据提供到目的地装置。源装置和目的地装置可包括广泛范围的装置中的任一个，包含台式计算机、笔记本电脑(即，便携式计算机)、平板计算机、机顶盒、例如所谓的“智能”电话等电话手持机、所谓的“智能”板、电视、相机、显示装置、数字媒体播放器、视频游戏控制台、视频流式传输装置等。在一些状况下，源装置和目的地装置可经装备以用于无线通信。目的地装置可通过计算机可读媒体接收待解码的经编码视频数据。计算机可读媒体可包括能够将经编码视频数据从源装置移动到目的地装置的任何类型的媒体或装置。在一个实例中，计算机可读媒体可包括使源装置能够实时将经编码视频数据直接发射到目的地装置的通信媒体。经编码视频数据可根据例如无线通信协议等通信标准加以调制，且传输到目的地装置。通信媒体可包括任何无线或有线通信媒体，例如射频(radiofrequency，rf)频谱或一或多个物理发射线路。通信媒体可形成例如局域网等基于包的网络、广域网、或例如因特网等全球网络的一部分。通信媒体可包含路由器、交换机、基站或可用于促进从源装置到目的地装置的通信的任何其它设备。在一些实例中，经编码数据可从输出接口输出到存储装置。类似地，经编码数据可由输入接口从存储装置存取。存储装置可包含多种分布式或本地存取式数据存储媒体中的任一个，例如硬盘驱动器、蓝光光盘、dvd、cd-rom、快闪存储器、易失性或非易失性存储器或用于存储经编码视频数据的任何其它合适的数字存储媒体。在另一实例中，存储装置可对应于文件服务器或可存储由源装置产生的经编码视频的另一中间存储装置。目的地装置可通过流式传输或下载从存储装置存取所存储视频数据。文件服务器可以是能够存储经编码视频数据和将所述经编码视频数据传输到目的地装置的任何类型的服务器。实例文件服务器包含网络服务器(例如，用于网站)、ftp服务器、网络附接存储(networkattachedstorage，nas)装置或本地磁盘驱动器。目的地装置可通过任何标准数据连接(包含因特网连接)来存取经编码视频数据。这可包含无线信道(例如，wi-fi连接)、有线连接(例如，dsl、电缆调制解调器等等)或适合于存取文件服务器上存储的经编码视频数据的两者的组合。经编码视频数据从存储装置的发射可以是流式传输发射、下载发射或其组合。本公开的技术不必限于无线应用或设置。所述技术可以应用于视频译码并且支持多种多媒体应用中的任一个，例如空中协议电视广播、有线电视发射、卫星电视发射、因特网串流视频发射(例如动态自适应http串流(dynamicadaptivestreamingoverhttp，dash))、经编码到数据存储媒体上的数字视频，存储在数据存储媒体上的数字视频的解码或其它应用。在一些实例中，系统可经配置以支持单向或双向视频发射，以支持例如视频流式传输、视频重放、视频广播和/或视频电话等应用。在一个实例中，源装置包含视频源、视频编码器和输出接口。目的地装置可包含输入接口、视频解码器和显示装置。源装置的视频编码器可经配置以应用本文所公开的技术。在其它实例中，源装置和目的地装置可包含其它组件或布置。举例来说，源装置可从外部视频源(例如，外部摄像机)接收视频数据。同样，目的地装置可与外部显示装置介接，而非包含集成显示装置。以上实例系统仅为一个实例。用于并行处理视频数据的技术可由任何数字视频编码和/或解码装置来执行。尽管本公开的技术通常由视频编码装置执行，但是所述技术也可通过视频编码器/解码器(通常被称作“编解码器”)执行。此外，本公开的技术还可通过视频预处理器执行。源装置和目的地装置仅为源装置在其中产生经译码视频数据以供发射到目的地装置的此类译码装置的实例。在一些实例中，源装置和目的地装置可以基本上对称的方式操作以使得所述装置中的每一个包含视频编码和解码组件。因此，实例系统可支持视频装置之间的单向或双向视频发射，例如用于视频串流、视频重放、视频广播或视频电话。视频源可包含视频捕获装置，例如视频相机、含有先前所捕获视频的视频档案和/或用于从视频内容提供者接收视频的视频馈入接口。作为另一替代方案，视频源可产生基于计算机图形的数据作为源视频，或实况视频、存档视频与计算机产生的视频的组合。在一些状况下，如果视频源是摄像机，那么源装置和目的地装置可形成所谓的摄像机电话或视频电话。然而，如上文所提到，本公开中所描述的技术一般可适用于视频译码，且可应用于无线和/或有线应用。在每一状况下，所捕获、预先捕获或计算机产生的视频可由视频编码器编码。经编码视频信息可随后由输出接口输出到计算机可读媒体上。如所提到，计算机可读媒体可包含暂时性媒体，例如无线广播或有线网络发射，或存储媒体(即，非暂时性存储媒体)，例如硬盘、快闪驱动器、压缩光盘、数字视频光盘、蓝光光盘或其它计算机可读媒体。在一些实例中，网络服务器(未展示)可从源装置接收经编码视频数据，并例如通过网络传输将经编码视频数据提供给目的地装置。类似地，例如光盘冲压设施等媒体生产设施的计算装置可从源装置接收经编码视频数据并产生含有经编码视频数据的光盘。因此，在各种实例中，计算机可读媒体可理解为包含各种形式的一或多个计算机可读媒体。目的地装置的输入接口从计算机可读媒体接收信息。计算机可读媒体的信息可包含由视频编码器定义的还由视频解码器使用的语法信息，包含描述块和其它经译码单元，例如图片群组(groupofpicture，gop)，的特性和/或处理的语法要素。显示装置向用户显示经解码视频数据，并可包括多种显示装置中的任一个，例如阴极射线管(cathoderaytube，crt)、液晶显示器(liquidcrystaldisplay，lcd)、等离子体显示器、有机发光二极管(organiclightemittingdiode，oled)显示器或另一类型的显示装置。已描述本发明的各种实施例。图23说明用于将360度视频帧映射到如本文中所描述的截顶正方形棱锥的平面的过程2300的实例。在2302处，过程2300包含获得虚拟现实视频数据，所述虚拟现实视频数据表示虚拟环境的360度视图，其中所述虚拟现实视频数据包含多个帧，且其中来自所述多个帧的每一帧包含对应球形视频数据。如上文所论述，可使用视频捕获装置来获得360度视频数据，所述视频捕获装置经配置以捕获来自相机的视点的在所有方向上的所有或大多数视图。在2304处，过程2300包含确定来自多个帧中的一个帧的视场。确定视场可包含例如确定观看者可以看见球形视频数据的多少度。举例来说，视场可以是90度或更大。在一些状况下，确定视场还可包含确定既定在观看者的前方的球形视频数据内的方向。在2306处，过程2300包含确定从帧的球形视频数据的中心的偏移，所述偏移对应于视场。举例来说，对于给定视场，可根据上文提供的等式计算偏移。在2308处，过程2300包含使用偏移来确定球形视频数据在截顶正方形棱锥的平面上的投影，其中截顶正方形棱锥的基底平面表示球形视频数据的前视图，所述前视图对应于视场，其中截顶正方形棱锥的顶部平面表示球形视频数据的后视图，且其中所述顶部平面小于底部平面。根据截顶正方形棱锥的几何结构，基底平面和顶部平面各自呈正方形形状。确定投影可包含在来自截顶正方形棱锥的平面的平面上确定一点并确定对应于平面上的点的来自球形视频数据的像素。在一些状况下，所述顶部平面具有比所述基底平面更低的分辨率。在2310处，过程2300包含根据投影将球形视频数据映射到截顶正方形棱锥的平面，其中每一平面包含球形视频数据的部分。映射球形视频数据可包含使用平面上确定的点和对应像素，且根据平面的形状布置像素的数据。在一些状况下，映射还可包含修改像素的分辨率，例如对像素数据进行向下缩放或减少取样，以适应截顶正方形棱锥的平面的较小区域。在一些实例中，截顶正方形棱锥的平面包含第一侧平面、第二侧平面、第三侧平面和第四侧平面，这些平面分别对应于例如上视图、下视图、左视图和右视图，其中方向相对于所确定的视场。在这些实例中，第一侧平面、第二侧平面、第三侧平面和第四侧平面中的每一个包含邻近于基底平面的一个边缘、邻近于顶部平面的一个边缘和邻近于第一侧平面、第二侧平面、第三侧平面和第四侧平面中的另外两个平面的两个边缘。在一些实例中，第一侧平面、第二侧平面、第三侧平面和第四侧平面中的每一个的分辨率从邻近于基底平面的边缘到邻近于顶部平面的边缘减小。在一些状况下，顶部平面具有最小大小，无论所述偏移如何，其中所述最小大小大于零。在这些状况下，球形视频数据的至少一些部分映射到顶部平面，且后视图可用。在一些状况下，例如当顶部平面不具有最小大小时，偏移可对应于使顶部平面的大小为零的视场。在一些实例中，确定投影包含使用偏移来确定来自球形视频数据的数据的第一部分在基底平面上的第一投影。确定投影还可包含使用偏移确定来自球形视频数据的数据的第二部分在顶部平面上的第二投影，其中顶部平面包含从视场的中心点为180度的视图。在一些实例中，确定投影包含使用基底平面的大小和顶部平面的大小确定来自球形视频数据的数据的第三部分在第一侧平面上的第三投影，所述第三投影包含视场上方的视图。举例来说，第三投影可包含在视场上方90度(或其它合适的角度)的视图。确定投影可进一步包含使用基底平面的大小和顶部平面的大小确定来自球形视频数据的数据的第四部分在第二侧平面上的第四投影，所述第四投影包含视场下方的视图。举例来说，第四投影可包含在视场下方90度(或其它合适的角度)的视图。确定投影可进一步包含使用第一正方形平面的大小和第二正方形平面的大小确定来自球形视频数据的数据的第五部分在第三侧平面上的第五投影，所述第五投影包含在视场右侧的视图。举例来说，第五投影可包含在视场右侧90度的(或其它合适的角度)视图。确定投影可进一步包含使用第一正方形平面的大小和第二正方形平面的大小确定来自球形视频数据的数据的第六部分在第四侧平面上的第六投影，所述第六投影包含在视场左侧的视图。举例来说，第六投影可包含在视场左侧90度(或其它合适的角度)的视图。在一些实例中，球形视频数据在映射到截顶正方形棱锥的平面后可打包成矩形格式。举例来说，基底平面可打包成正方形格式。顶部平面可与上视图、底视图、左视图和右视图中的每一个的平面一起打包成与基底平面相同大小的正方形格式。在各种组合中，组合的顶部平面和侧平面可紧靠基底平面放置，包含以不同方式分隔组合的平面。在打包成矩形格式后，可编码、存储和/或发射视频数据。在一些实例中，过程2300可由例如视频视频编码装置等计算装置或设备执行。在一些状况下，计算装置或设备可包含处理器、微处理器、微计算机或经配置以执行过程2300的步骤的装置的其它组件。在一些实例中，计算装置或设备可包含经配置以捕获包含视频帧的视频数据(例如，视频序列)的相机。举例来说，计算装置可包含相机装置(例如，ip相机或其它类型的相机装置)，其可包含视频编解码器。在一些实例中，相机或捕获视频数据的其它捕获装置与计算装置分开，在此情况下计算装置接收所捕获的视频数据。计算装置可进一步包含经配置以传达视频数据的网络接口。网络接口可经配置以传达基于因特网协议(ip)的数据。过程2300经说明为逻辑流程图，其操作表示可以硬件、计算机指令或其组合实施的操作的序列。在计算机指令的情形下，操作表示存储在一或多个计算机可读存储媒体上的计算机可执行指令，这些计算机可执行指令在由一或多个处理器执行时执行所叙述的操作。通常，计算机可执行指令包含例程、程序、对象、组件、数据结构以及执行特定功能或实施特定数据类型等等。描述操作的次序并不意图解释为限制，且任何数目的所描述操作可以任何次序组合和/或并行以实施所述过程。另外，过程2300可以在配置有可执行指令的一或多个计算机系统的控制下执行且可以实施为在一或多个处理器上通过硬件或其组合共同地执行的代码(例如，可执行指令、一或多个计算机程序或一或多个应用程序)。如上文所提及，代码可例如以包括可由一或多个处理器执行的多个指令的计算机程序的形式存储在计算机可读或机器可读存储媒体上。计算机可读或机器可读存储媒体可为非暂时性的。在图24和图25中分别展示编码装置2404和解码装置2512的具体细节。图24是说明可以实施本公开中描述的技术中的一或多个的实例编码装置2404的方块图。举例来说，编码装置2404可以产生本文中描述的语法结构(例如，vps、sps、pps的语法结构或其它语法元素)。编码装置2404可以在视频切片内执行视频块的帧内预测和帧间预测译码。如先前描述，帧内译码至少部分依赖于空间预测来减少或去除给定视频帧或图片内的空间冗余。帧间译码至少部分依赖于时间预测来减少或去除视频序列的邻近或周围帧内的时间冗余。帧内模式(i模式)可指若干基于空间压缩模式中的任一个。例如单向预测(p模式)或双向预测(b模式)等帧间模式可以指若干基于时间的压缩模式中的任一个。编码装置2404包含分割单元35、预测处理单元41、滤波器单元63、图片存储器64、求和器50、变换处理单元52、量化单元54以及熵编码单元56。预测处理单元41包含运动估计单元42、运动补偿单元44和帧内预测处理单元46。对于视频块重构，编码装置2404还包含逆量化单元58、逆变换处理单元60和求和器62。滤波器单元63意图表示一或多个环路滤波器，例如解块滤波器、自适应环路滤波器(adaptiveloopfilter，alf)和样本自适应偏移(sampleadaptiveoffset，sao)滤波器。尽管在图24中将滤波器单元63展示为环内滤波器，但在其它配置中，可将滤波器单元63实施为环路后滤波器。后处理装置57可以对由编码装置2404产生的经编码的视频数据执行额外处理。本公开的技术在一些情况下可以通过编码装置2404实施。然而，在其它情况下，本公开的技术中的一或多个可以通过后处理装置57实施。如图24中所展示，编码装置2404接收视频数据，且分割单元35将所述数据分割成视频块。分割还可包含例如根据lcu和cu的四叉树结构而分割成切片、切片段、影像块或其它更大单元，以及视频块分割。编码装置2404总体上说明对待编码的视频切片内的视频块进行编码的组件。所述切片可划分成多个视频块(并且可能划分成被称作单元片的视频块的集合)。预测处理单元41可以选择多个可能的译码模式中的一个，例如多个帧内预测译码模式中的一或多个帧间预测译码模式中的一个，以用于基于错误结果的当前视频块(例如，译码速率和失真的层级或类似物)。预测处理单元41可将所得经帧内或帧间译码块提供到求和器50以产生残余块数据，并提供到求和器62以重构经编码的块以用作参考图片。预测处理单元41内的帧内预测处理单元46可相对于与待译码的当前块在相同帧或切片中的一或多个相邻块执行当前视频块的帧内预测译码，以提供空间压缩。预测处理单元41内的运动估计单元42和运动补偿单元44相对于一或多个参考图片中的一或多个预测块执行当前视频块的帧间预测译码以提供时间压缩。运动估计单元42可经配置以根据用于视频序列的预定模式来确定用于视频切片的帧间预测模式。预定模式可将序列中的视频切片指定为p切片、b切片或gpb切片。运动估计单元42和运动补偿单元44可高度集成，但出于概念的目的分别加以说明。运动估计单元42执行的运动估计是生成运动向量的过程，所述过程估计视频块的运动。运动向量例如可指示当前视频帧或图片内的视频块的预测单元(predictionunit，pu)相对于参考图片内的预测块的位移。预测块是被发现在像素差方面与待译码的视频块的pu密切匹配的块，像素差可通过绝对差总和(sumofabsolutedifference，sad)、平方差总和(sumofsquaredifference，ssd)或其它差度量来确定。在一些实例中，编码装置2404可计算存储在图片存储器64中的参考图片的子整数像素位置的值。举例来说，编码装置2404可内插四分之一像素位置、八分之一像素位置或参考图片的其它分数像素位置的值。因此，运动估计单元42可相对于全像素位置和分数像素位置执行运动搜索并输出具有分数像素精度的运动向量。运动估计单元42通过比较帧间译码片段中的视频块的pu的位置与参考图片的预测块的位置来计算pu的运动矢量。参考图片可以选自第一参考图片列表(列表0)或第二参考图片列表(列表1)，其中的每一个识别存储在图片存储器64中的一或多个参考图片。运动估计单元42将计算出的运动向量发送到熵编码单元56和运动补偿单元44。通过运动补偿单元44执行的运动补偿可以涉及基于通过运动估计(可能执行对子像素精确度的内插)确定的运动向量取出或产生预测块。在接收到当前视频块的pu的运动向量后，运动补偿单元44即刻可以在参考图片列表中定位所述运动向量指向的预测块。编码装置2404通过从正被译码的当前视频块的像素值减去预测块的像素值从而形成像素差值来形成残余视频块。像素差值形成用于所述块的残余数据，并可包含明度和色度差分量两者。求和器50表示可执行此减法运算的一或多个组件。运动补偿单元44还可产生与视频块和视频切片相关联的语法元素以供解码装置2512在对视频切片的视频块进行解码时使用。作为如上文所描述的由运动估计单元42和运动补偿单元44执行的帧间预测的替代方案，帧内预测处理单元46可对当前块进行帧内预测。具体来说，帧内预测处理单元46可确定用于对当前块进行编码的帧内预测模式。在一些实例中，帧内预测处理单元46可例如在单独编码遍次期间使用各种帧内预测模式来对当前块进行编码，帧内预测单元处理46(或在一些实例中，模式选择单元40)可从经测试模式选择适当的帧内预测模式以使用。举例来说，帧内预测处理单元46可以使用速率失真分析来计算用于各种经测试帧内预测模式的速率失真值，并且可从所述经测试模式当中选择具有最佳速率失真特性的帧内预测模式。速率失真分析大体上确定经编码块与经编码以产生所述经编码块的原始未编码块之间的失真(或误差)的量，以及用于产生经编码块的比特速率(也就是说，比特数目)。帧内预测处理单元46可以从用于各种经编码块的失真和速率计算比率，以确定哪个帧内预测模式对于所述块来说展现最佳速率失真值。在任何状况下，在选择用于块的帧内预测模式之后，帧内预测处理单元46可将指示用于所述块的选定帧内预测模式的信息提供到熵编码单元56。熵编码单元56可对指示选定帧内预测模式的信息进行编码。编码装置2404可以在所传输的比特流中包含用于各种块的编码上下文的配置数据定义以及最可能帧内预测模式的指示、帧内预测模式索引表和经修改帧内预测模式索引表以供每种上下文使用。比特流配置数据可包含多个帧内预测模式索引表和多个经修改帧内预测模式索引表(也被称作码字映射表)。在预测处理单元41通过帧间预测或帧内预测产生当前视频块的预测块之后，编码装置2404通过从当前视频块减去预测块来形成残余视频块。残余块中的残余视频数据可包含在一或多个tu中且应用于变换处理单元52。变换处理单元52使用例如离散余弦变换(discretecosinetransform，dct)或概念上类似的变换的变换来将残余视频数据变换成残余变换系数。变换处理单元52可将残余视频数据从像素域转换到变换域，例如频域。变换处理单元52可将所得变换系数发送到量化单元54。量化单元54将变换系数量化以进一步降低比特速率。量化过程可减小与系数中的一些或全部相关联的比特深度。可通过调节量化参数来修改量化的程度。在一些实例中，量化单元54可随后执行对包含经量化变换系数的矩阵的扫描。替代地，熵编码单元56可执行扫描。在量化之后，熵编码单元56熵编码经量化的变换系数。举例来说，熵编码单元56可执行上下文自适应可变长度译码(contextadaptivevariablelengthcoding，cavlc)、上下文自适应二进制算术译码(contextadaptivebinaryarithmeticcoding，cabac)、基于语法的上下文自适应二进制算术译码(syntax-basedcontext-adaptivebinaryarithmeticcoding，sbac)、概率区间分割熵(probabilityintervalpartitioningentropy，pipe)译码或另一熵编码技术。在熵编码单元56进行的熵编码之后，可将经编码比特流传输到解码装置2512，或将经编码比特流存档以供稍后传输或由解码装置2512取回。熵编码单元56还可对正经译码当前视频切片的运动向量和其它语法元素进行熵编码。反量化单元58和反变换处理单元60分别应用反量化和反变换来重建构像素域中的残余块，以供稍后用作参考图片的参考块。运动补偿单元44可通过将残余块添加到在参考图片列表内的参考图片中的一个的预测块来计算参考块。运动补偿单元44还可将一或多个内插滤波器应用于经重构残余块以计算子整数像素值以用于运动估计。求和器62将经重构残余块加到由运动补偿单元44产生的经运动补偿的预测块以产生参考块以用于存储在图片存储器64中。参考块可由运动估计单元42和运动补偿单元44使用作为用以对后续视频帧或图片中的块进行帧间预测的参考块。以此方式，图24的编码装置2404表示经配置以产生用于经编码视频比特流的语法的视频编码器的实例。举例来说，如上文所描述，编码装置2404可产生vps、sps和pps参数集。编码装置2404可执行本文中所描述的技术中的任一个，包含上文所描述的过程。已关于编码装置2404总体上描述了本公开的技术，但是如上文所提到，本公开的技术中的一些也可以通过后处理装置57实施。图25是说明实例解码装置2512的框图。解码装置2512包含熵解码单元80、预测处理单元81、逆量化单元86、逆变换处理单元88、求和器90、滤波器单元91和图片存储器92。预测处理单元81包含运动补偿单元82和帧内预测处理单元84。在一些实例中，解码装置2512可执行总体上与关于图24的编码装置2404描述的编码遍次互逆的解码遍次。在解码过程期间，解码装置2512接收表示经编码视频切片的视频块和由编码装置2404发送的相关联语法元素的经编码视频比特流。在一些实施例中，解码装置2512可以从编码装置2404接收经编码视频比特流。在一些实施例中，解码装置2512可以从网络实体79接收经编码视频比特流，所述网络实体例如服务器、媒体感知网络元件(media-awarenetworkelement，mane)、视频编辑器/拼接器或经配置以实施上文所述的技术中的一或多个的其它此类装置。网络实体79可包含或可不包含编码装置2404。本公开中描述的技术中的一些可以在网络实体79将经编码视频比特流传输到解码装置2512之前通过网络实体79实施。在一些视频解码系统中，网络实体79和解码装置2512可以是单独的装置的部分，而在其它情况下，关于网络实体79描述的功能性可由包括解码装置2512的同一装置执行。解码装置2512的熵解码单元80对比特流进行熵解码以产生经量化系数、运动向量和其它语法元素。熵解码单元80将运动向量和其它语法元素转发到预测处理单元81。解码装置2512可接收视频切片层级和/或视频块层级的语法元素。熵解码单元80可以处理并剖析在例如vps、sps和pps中的一或多个参数集中的固定长度语法元素和可变长度语法元素这两者。当视频切片经译码为经帧内译码(i)切片时，预测处理单元81的帧内预测处理单元84可基于用信号发送的帧内预测模式和来自当前帧或图片的先前经解码块的数据产生用于当前视频切片的视频块的预测数据。当视频帧经译码为经帧间译码(即，b、p或gpb)切片时，预测处理单元81的运动补偿单元82基于从熵解码单元80接收到的运动矢量和其它语法元素而产生当前视频切片的视频块的预测块。可从参考图片列表内的参考图片中的一个产生预测块。解码装置2512可基于存储在图片存储器92中的参考图片使用默认建构技术建构参考帧列表，即列表0和列表1。运动补偿单元82通过解析运动向量和其它语法元素确定用于当前视频切片的视频块的预测信息，并且使用所述预测信息产生用于经解码的当前视频块的预测块。举例来说，运动补偿单元82可使用参数集中的一或多个语法元素以确定用于对视频切片的视频块进行译码的预测模式(例如，帧内预测或帧间预测)、帧间预测切片类型(例如，b切片、p切片或gpb切片)、切片的参考图片列表中的一或多个的建构信息、切片的每一经帧间编码的视频块的运动向量、切片的每一经帧间译码的视频块的帧间预测状态和用以对当前视频切片中的视频块进行解码的其它信息。运动补偿单元82还可基于内插滤波器而执行内插。运动补偿单元82可使用如由编码装置2404在视频块的编码期间所使用的内插滤波器来计算参考块的子整数像素的内插值。在此状况下，运动补偿单元82可从所接收的语法元素确定编码装置2404所使用的内插滤波器，且可使用所述内插滤波器来产生预测块。逆量化单元86对在比特流中提供且由熵解码单元80解码的经量化变换系数进行逆量化或解量化。逆量化过程可包含使用针对视频切片中的每一视频块由编码装置2404计算的量化参数，以确定应施加的量化程度以及同样地逆量化程度。逆变换处理单元88将逆变换(例如，逆dct或其它合适的逆变换)、逆整数变换或概念上相似的逆变换过程应用于所述变换系数以便产生像素域中的残余块。在运动补偿单元82基于运动向量和其它语法元素产生用于当前视频块的预测块之后，解码装置2512通过将来自逆变换处理单元88的残余块与运动补偿单元82产生的对应预测块求和来形成经解码视频块。求和器90表示可执行此求和运算的组件。如果需要，还可使用环路滤波器(在译码环路中或在译码环路之后)来使像素转变平滑或者以其它方式改进视频质量。滤波器单元91意图表示一或多个环路滤波器，例如解块滤波器、自适应环路滤波器(alf)和样本自适应偏移(sao)滤波器。尽管在图25中将滤波器单元91展示为环内滤波器，但在其它配置中，可将滤波器单元91实施为环路后滤波器。随后将给定帧或图片中的经解码视频块存储于图片存储器92中，所述图片存储器存储用于随后运动补偿的参考图片。图片存储器92还存储经解码视频以供稍后在显示装置上呈现。在以上描述中，参考具体实施例描述应用的方面，但是所属领域的技术人员将认识到本发明不限于此。因此，虽然已经在本文中详细地描述了应用的说明性实施例，但是应理解本发明概念可以其它方式不同地实施和采用，并且除了现有技术所限制的之外，所附权利要求书意图解释为包含此类变化。上文描述的本发明的各种特征和方面可以单独或共同地使用。此外，实施例可以在本文中描述的那些环境和应用之外的任何数目的环境和应用中使用而不脱离本说明书的广泛的精神和范围。应将本说明书和图式相应地视为说明性的而非限制性的。出于说明的目的，方法是以特定次序描述的。应了解，在替代实施例中，方法可以与所描述的次序不同的次序执行。在组件被描述为“经配置以”执行特定操作的情况下，可例如通过设计电子电路或其它硬件以执行所述操作、通过编程可编程电子电路(例如，微处理器或其它适合电子电路)以执行所述操作或其任何组合来实现此类配置。结合本文中所公开的实施例描述的各种说明性逻辑块、模块、电路和算法步骤可实施为电子硬件、计算机软件、固件或其组合。为了清楚地说明硬件与软件的这个互换性，上文已大体上关于其功能性而描述了各种说明性组件、块、模块、发动机、电路和步骤。此类功能性是实施为硬件还是软件取决于特定应用和强加于整个系统的设计约束。熟练的技术人员可针对每一特定应用以不同方式来实施所描述的功能性，但这样的实施决策不应被解释为会引起脱离本发明的范围。本文中描述的技术也可以在电子硬件、计算机软件、固件或其任何组合中实施。此类技术可实施于多种装置中的任一个中，例如通用计算机、无线通信装置手持机或集成电路装置，其具有包含在无线通信装置手持机和其它装置中的应用的多种用途。被描述为模块或组件的任何特征可一起实施于集成逻辑装置中或分开来实施为离散但可互操作的逻辑装置。如果以软件实施，那么所述技术可至少部分地由包括程序代码的计算机可读数据存储媒体来实现，所述程序代码包含在执行时执行上文所描述的方法中的一或多个的指令。计算机可读数据存储媒体可形成计算机程序产品的一部分，所述计算机程序产品可包含封装材料。计算机可读媒体可包括存储器或数据存储媒体，例如随机存取存储器(randomaccessmemory，ram)，例如同步动态随机存取存储器(synchronousdynamicrandomaccessmemory，sdram))、只读存储器(read-onlymemory，rom)、非易失性随机存取存储器(non-volatilerandomaccessmemory，nvram)、电可擦除可编程只读存储器(electricallyerasableprogrammableread-onlymemory，eeprom)、闪存器、磁性或光学数据存储媒体等等。另外或替代地，所述技术可至少部分地由计算机可读通信媒体来实现，所述计算机可读通信媒体携载或传达指令或数据结构的形式的程序代码且可由计算机存取、读取和/或执行(例如，传播的信号或波)。程序代码可由处理器执行，所述处理器可包含一或多个处理器，例如一或多个数字信号处理器(digitalsignalprocessor，dsp)、通用微处理器、专用集成电路(applicationspecificintegratedcircuit，asic)、现场可编程逻辑阵列(fieldprogrammablelogicarray，fpga)或其它等效集成或离散逻辑电路。此处理器可经配置以执行本公开中所描述的技术中的任一个。通用处理器可以是微处理器，但在替代方案中，处理器可以是任何常规的处理器、控制器、微控制器或状态机。处理器还可实施为计算装置的组合，例如dsp与微处理器的组合、多个微处理器的组合、一或多个微处理器与dsp核心结合或任何其它此类配置。因此，如本文中所使用的术语“处理器”可指前述结构中的任一个、上述结构的任何组合或适合于实施本文中所描述的技术的任何其它结构或设备。另外，在一些方面中，可将本文中所描述的功能性提供于经配置以用于编码和解码的专用软件模块或硬件模块内或并入组合的视频编码器-解码器(encoder-decoder，codec)中。当前第1页12