使用2d-3d多维内容文件的多维内容服务提供系统、该服务提供方法以及该多维内容文件的制作方法
【技术领域】
[0001] 本发明设及使用2D-3D多维内容文件的多维内容服务提供系统W及该服务提供 方法，具体设及能够通过单个播放单元来提供一个文件里同时包含2D图像部分和3D图像 部分的多维内容的、使用2D-3D多维内容文件的多维内容服务提供系统W及该服务提供方 法。
【背景技术】
[0002] W往，使用普通相机来拍摄不同角度的多个照片，制作成全景照片或者图像的服 务而言，即使具备能够进行拍摄的设备和能够观看它的特殊的看片器，如果用户的电脑配 置不高的话，视频本身就无法流杨地播放。然而，随着能够更为方便地拍摄3D图像设备的 出现，W及用户电脑配置的逐渐升级，现如今的问题是到底能为用户提供多好的内容。
[000引 3D图像和2D图像分别带给用户的感染力是不同的。因此，若出现将2D图像和3D 图像复合在一个内容里的多维内容，则会受到大量用户的青睐。
[0004] 另一方面，分别拍摄2D图像和3D图像，并通过能够分别观看的2D或3D播放器W 在一个结束的时间点上用另一播放器接着播放的方式进行播放时，在连接的时间点上，即 在不同类型的图像相互交替的时间点上所出现的播放器的刷新现象所耗时间较长，因此会 让用户误W为图像播放结束。 阳0化]因此，有必要提供通过2D和3D图像的整合编辑而构成的多维内容。然而，整合编 辑方式有各种问题，例如，在进行整合编辑时，由于2D和3D图像的大小不同而引起的在2D 上下部分出现的黑色空白部分的控制问题、W及判断播出2D和3D图像的时间点W控制3D 擅染的问题等。
[0006] 因此，迫切需要能够解决导入多维内容、构成多维内容、提供多维内容服务的技术 问题的方法。
[0007] 一般来说，向用户提供图像（视频等）时，2D内容通过2D播放器来播放给用户。 而且，全景图像只能通过专口播放3D内容的3D播放器来提供。
[0008] 此时，2D和3D内容并没有通过相同的播放单元来提供给用户，特别是至少一个部 分的2D图像部分与至少一个部分的3D图像部分整合于一个单一文件的情况，未曾提供通 过单个播放单元播放运种单一文件的服务。
[0009] 特别是，如果在体育、音乐、电影、纪录片、教育、广告等各种内容中提供将2D图像 部和3D图像部结合在一起的内容的话，能给用户提供独特的体验。因此，迫切需要开发出 将2D图像部和3D图像部结合在一起的多维内容的提供系统及其提供方法。
【发明内容】
[0010] 所要解决的技术问题
[0011] 本发明所要解决的第一个问题是提供多维内容提供系统。
[0012] 本发明所要解决的第二个问题是提供多维内容提供系统的信息处理方法。
[0013] 本发明所要解决的第=个问题是提供多维内容文件。
[0014] 解决问题的方法
[0015] 为了实现本发明的目的，提供一种多维内容提供系统的信息处理方法，向用户提 供至少一个2D图像部分与至少一个3D图像部分相结合的多维内容，其特征在于，包括W 下步骤:A步骤，通过2D播放单元来播放2D图像部分巧步骤，通过2D播放单元来播放 3D图像部分；C步骤，获取在所述B步骤中所播放的失真播放图像；D步骤，通过3D擅染 (rendering)引擎对在所述C步骤中所获取的所述失真播放图像进行擅染处理；W及E步 骤，将所述擅染处理后的图像提供给用户。
[0016] 优选为，所述多维内容提供系统获取构成所述多维内容的所述2D图像部分和所 述3D图像部分各自的起始位置信息或者区间位置信息，在所述2D图像部分的起始位置执 行所述A步骤，在所述3D图像部分的起始位置执行所述B步骤。
[0017] 优选为，所述起始位置信息或所述区间位置信息存储在所述多维内容的外部，或 者包含在所述多维内容文件的标头中。
[0018] 优选为，所述起始位置信息或者所述区间位置信息作为所述多维内容的管理信 息，存储在与存储有所述多维内容的存储装置相同的存储装置或存储系统上，或者在播放 所述多维内容之前通过有线或无线网络从提供所述起始位置信息的第=系统接收。
[0019] 优选为，所述起始位置信息或所述区间位置信息包括时间区间单位或起始时刻， 或者包括帖号区间单位或起始帖号。
[0020] 优选为，进一步包括W下步骤：F步骤，获取所述2D图像部分和所述3D图像部分 的边界信息；G步骤，基于所获取的边界信息，从所述2D图像部分和所述3D图像部分的边 界部起在预设的边界范围内进行维度转换处理。
[0021] 优选为，在所述C步骤中W帖单位获取位图图像，在所述D步骤中W帖单位进行擅 染处理。
[0022] 优选为，在所述D步骤中W球体（S地ere)型来进行擅染处理，或者W立方体 (cube)型来进行擅染处理。
[0023] 优选为，所述多维内容提供系统在用户终端上驱动，所述E步骤中，提供给包括在 所述用户终端上或者通过有线或无线网络连接于所述用户终端的至少一个显示装置，所述 多维内容存储在所述用户终端上，或者从通过有线或无线网络连接于所述用户终端的至少 一个服务器实时提供。
[0024] 优选为，将所述多维内容提供给所述用户终端的方法为，使用HTTP或者RTMP中的 任一协议，将多维内容图像信息从所述服务器传输至所述用户终端。
[00巧]优选为，将所述多维内容提供给所述用户终端的方法为，通过渐进式下载方式或 者实时流方式，将多维内容图像信息从所述服务器传输至所述用户终端。
[00%] 优选为，在所述E步骤中，将所述2D播放单元播放的声音信息与在所述D步骤中 经擅染处理的图像进行同步（sync)，W同时提供声音信息和图像信息。
[0027] 优选为，在所述E步骤中，将所述经过擅染处理的图像中的至少一个预设区域作 为显示给用户的观看画面区域而提供。
[0028] 优选为，有关设定所述观看画面区域的信息存储在所述多维内容的标头信息中， 或者从提供所述多维内容的服务器接收，或是在所述多维内容提供系统中进行设定或根据 预设的观看画面区域设定规则来进行变更。
[0029] 优选为，所述观看画面区域的设定，由所述用户进行设定，并且所述用户能够在所 述多维内容播放过程中对所述观看画面区域的设定进行变更。
[0030] 优选为，所述观看画面区域的设定是所述用户指定或者变更用于设定观看画面区 域的观看区域方向，指定或者变更所述观看区域方向通过键盘输入、小键盘输入、触摸输 入、语音输入、动作输入中的任一种或多种输入来实现。
[0031] 优选为，当所述观看画面区域的设定有变更时，所述多维内容提供系统使用所变 更的观看画面区域设定信息来变更在所述擅染处理后的图像中显示给用户的观看画面区 域。
[0032] 优选为，当所述观看区域方向变更时，所述多维内容提供系统在所述擅染处理后 的图像上反映所变更的观看区域方向，从而连续地变更显示给用户的观看画面区域。
[0033] 优选为，当向用户提供所述2D图像部分的播放结果时，所述多维内容提供系统进 行控制W去除所述2D图像部分的预设空白区域后提供给用户。
[0034] 优选为，所述边界信息使用构成所述多维内容的所述2D图像部分和所述3D图像 部分各自的起始位置信息或者区间位置信息，进行所述维度转换处理是，W所述边界部为 基准对预设的时间区间或预设的帖区间进行处理W呈现淡入（fadein)或淡出（化deout) 效果。
[0035] 为了实现本发明的目的，提供一种多维内容提供系统，向用户提供至少一个2D图 像部分与至少一个3D图像部分相结合的多维内容，其特征在于，所述多维内容提供系统包 括：2D播放部，播放2D图像部分和3D图像部分；播放区间属性信息获取部，获取有关作为 播放对象的图像部分是2D图像部分还是3D图像部分的播放区间属性信息；失真图像获取 部，获取由所述2D播放部播放3D图像部分的结果；擅染部，使用3D擅染引擎来对所述失真 图像获取部所获取的失真图像进行擅染处理。
[0036] 优选为，所述播放区间属性信息获取部获取构成所述多维内容的所述2D图像部 分和所述3D图像部分各自的起始位置信息或区间位置信息，或者获取构成所述多维内容 的所述2D图像部分和所述3D图像部分各自的时间区间对应信息或帖区间对应信息。
[0037] 优选为，所述播放区间属性信息获取部从所述多维内容文件的标头部、或者独立 于所述多维内容文件而存在于外部的播放区间属性信息文件、或者从提供所述多维内容图 像信息的多维内容提供服务器，获取所述起始位置信息或所述区间位置信息或者所述时间 区间对应信息或所述帖区间对应信息。
[0038] 优选为，所述起始位置信息或所述区间位置信息或者所述时间区间对应信息或所 述帖区间对应信息包括时间区间单位或起始时刻，或者包括帖号区间单位或起始帖号。
[0039] 优选为，进一步包括维度转换处理部，该维度转换处理部获取所述2D图像部分和 所述3D图像部分的边界信息，并基于所获取的边界信息，从所述2D图像部分与所述3D图 像部分的边界部起在预设的边界范围内进行维度转换处理。
[0040] 优选为，所述失真图像为帖单位的位图图像，所述擅染部W帖单位进行擅染处理。
[0041] 优选为，所述擅染处理部W球体（S地ere)型进行擅染处理，或者W立方体（cube) 型进行擅染处理。
[0042] 优选为，所述多维内容提供系统在用户终端上驱动，所述用户终端为个人电脑、智 能手机、平板电脑、便携式电脑、游戏机