使用2d-3d多维内容文件的多维内容服务提供系统、该服务提供方法以及该多维内容文件的制作方法_4

文档序号:9439580阅读:来源:国知局
存储在所述多维内容的标 头信息中,或者从提供所述多维内容的多维内容提供服务器200接收,或者是在所述多维 内容提供系统1000中进行设定,或者也可W根据预设的观看画面区域设定规则进行变更。
[0115] 图5示出并非由用户而是从外部设定观看画面区域620的方式的示意图。所述观 看画面区域选择支持部1170获取用于设定显示给用户的观看画面区域620的信息(S31), 再使用所获取的观看画面区域620设定信息来获取对应于观看画面区域620的3D部分图 像信息(S32)。
[0116] 图6示出了所述观看画面区域选择支持部1170的信息处理方法的一实施例的示 意图。所述观看画面区域选择支持部1170从用户获取有关用户想要观看的3D图像部分的 选择信息(S41),并获取所获取到的选择信息的3D图像部分(S42)。
[0117] 在播放3D图像部分的过程中,用户可W通过设定观看画面区域620来观看自己想 要方向的3D图像。所述观看画面区域620的设定是所述用户指定或者变更用于设定观看 画面区域620的观看区域方向,而指定或变更所述观看区域方向,优选通过键盘输入、小键 盘输入、触摸输入、语音输入、动作输入中的至少一种输入来实现。优选为,当通过运种输入 变更所述观看画面区域620的设定时,所述多维内容提供系统1000使用所变更的观看画面 区域设定信息来变更在所述擅染处理后的图像中显示给用户的观看画面区域620。例如, 在所述图10中将观看画面区域620指定为左侧方向时(在显示在用户终端100上的选择 3D图像630画面上用手指等进行将画面从右侧推向左侧等的动作),可W从显示抱着小狗 的成年人和小孩子的当前画面(显示在630的图像)控制成在所述3D图像610中显示位 于当前观看画面区域620左侧的图像(例如,位于大人推着婴儿车的那一侧的图像)。
[0118] 如果利用本发明的思想,尤其是3D图像部分W将从多个摄像机镜头获取的图像 合并显示在一个画面上的方式构成的情况,当用户为了变更观看画面区域620而移动方向 时,能够提供对应于所移动方向的图像。目P,可W在一个摄像机上具备用于获取对应于上下 左右前后方向中的两个W上方向的图像的多个镜头,且从运些镜头所获取的每个图像被合 并形成一个3D图像。并且,图像被合并时,可W对通过特定镜头获取的图像进行控制或者 编辑,使其配置在3D图像的特定的位置或者区域。在运种情况下,在用户当前所观看的画 面下按下左侧按键或者向左侧方向触摸时,可W将位于当前所观看的图像左侧的图像作为 新的观看画面区域而提供给用户。运类似于直视的人向左转头看向左侧时位于左侧方向的 光景映入眼帘的情况。此时,优选为,当所述观看区域方向变更时,所述多维内容提供系统 1000在所述擅染处理后的图像上反映所变更的观看区域方向而连续地变更显示给用户的 观看画面区域。
[0119] 本发明的3D图像的一例可W是全景图像。可W在一个摄像机上具备用于获取对 应于上下左右前后方向中的两个W上方向的图像的多个镜头,并将从运些镜头所获取的每 个图像进行合并而形成所述全景图像,或者可W使用多个摄像机,并将从各摄像机所获取 的图像进行合并而形成一个全景图像。在运种情况下,所述3D图像部分可W是全景图像部 分。
[0120] 图10示出了关于如上所述的选择观看画面区域620的本发明思想的概念图。由 图10可知,用户观看的3D图像部分为实际正在播放的3D图像部分中的一部分。在图10 中示出了如下的本发明的思想概念,在实际正在播放的3D图像部分、即3D图像610中,将 框型的观看画面区域620内的被选择图像作为提供给用户的选择的3D图像630。此时,如 果用户想从自己正在观看的画面变更观看方向,则设定变更方向,则向用户提供位于所变 更的方向侧的、对应于预设尺寸(例如,横向n*竖向m的尺寸)的另一图像。 阳121] 此时,成为所述擅染部140的擅染对象的可W是对所述3D图像部分整个的播放结 果,然而也可W只对提供给所述用户的观看画面区域620进行擅染。在前一种情况下,所述 观看画面区域选择支持部1170选择观看画面区域620的结果,在所擅染的图像中发挥作用 (带来所选择的观看画面区域),而在后一种情况下,则可W在被擅染目标图像、即失真图 像中发挥作用。
[0122] 接着,参照图9及图11对本发明的空白处理部1180进行说明。图9示出了本发 明的3D图像和2D图像的一实施例的比较例。由图9及图11可知,在2D中2D图像660的 外周存在黑色的边框部650。所述多维内容提供系统1000的空白处理部1180可W在播放 2D图像时除去所述2D图像部分的空白,而只将实际图像提供给用户。虽然2D图像和3D图 像其制作方法有可能不同,但有时两种图像均W2400X1200像素(pixel)的一般2D图像 的形式构成一个单一文件(如图9所例示,可W看出,将包括3D图像610和2D图像660的 边框部650的外缘作为基准时,具有相同的像素数)。此时,由于单个文件W相同的分辨率 制作而成,因此会发生2D图像在全高清(化11皿)分辨率下W上下各留60像素、左右各留 240像素余量的方式制作的情况。因为2D部分图像的图像中在2400X1200的尺寸下除了 被播放的1920X1080的中屯、部之外,存在框架型的黑色边框部650。在多维内容图像中,由 于在2D图像部分始终存在该黑色边框,因此所述多维内容提供系统1000可W检测该部分 的黑色并将其作为元数据自动记录在视频标头中,或者进行信息处理,W记录如表1的时 间表值。其结果,在播放所述多维内容时,也可W读取该时间表值并W其作为基准,从而容 易地实现图像转换。
[0123] 可举例说明本发明的空白处理部1180的信息处理如下。在播放2D图像部分时,可 W通过papervision3D库(library)中的称为Camera0bject3D类(class)(该类是播放 3D对象时用于指定缩放(zoom)、焦距(化CUS)等部分)来调节图像的实际大小。此时,在 2D图像部分的播放区间内,当开始播放2D图像部分时,若将camera.Z(设定缩放的函数) 设定为-200等,则图像被放大(zoomin),控制为向用户不显示所述空白(黑色边框)。图 11示出了本发明的空白处理部1180的信息处理对象化60W及650)与进行空白处理后的 结果图像670之间的对比。
[0124] 从所述多维内容提供服务器200向包含有所述多维内容提供系统1000的用户 终端100传输图像信息的方法可W利用各种方法。传输时的通信协议优选使用HTTP或 者RTMP中的任一个。并且,将所述多维内容提供给用户终端100的方法,优选为从所述多 维内容提供服务器200通过渐进式下载(progressivedownload)方式或者实时流(live streaming)方式向所述用户终端100传输所述图像信息。
[01巧]使用HTTP协议的渐进式下载方式使用在网页浏览器中使用的基本协议,使用80 端口,是下载服务图像时进行一定程度的缓冲而播放图像的方法。 阳1 %] RTMP协议为进行实时流图像传输时所使用的协议,使用1935端口,是通过实时传 送的标头元数据值在用户指定的时间点上进行设定的post缓冲而播放的方法。优选基本 上能够实时接收图像标头值的RTMP(实时流)方式。
[0127] 在表2中对渐进式下载方式和实时流方式的特性进行了比较。 阳12引【表2】 阳129]
[0130]【产业上的利用可能性】 阳131] 本发明能够广泛利用于体育、音乐、电影、纪录片、教育、广告等各种内容相关业务 W及图像相关产业。 阳132] 附图标记 阳13引 100:用户终端
[0134] 200 :多维内容提供服务器 阳135] 210 :多维内容文件管理部
[0136] 220 :多维内容图像信息传输部 阳137] 221 :多维内容串流提供部
[0138] 222 :多维内容渐进式下载提供部 阳139] 310:多维内容标题部
[0140] 310a:常规文件标题部 阳14U 310b:多维内容播放区间信息标题部
[0142] 320:多维内容数据部 阳1创 410 :2D图像部分
[0144] 410a、410b、410c:个别的 2D图像部分 阳145] 420 :3D图像部分 阳146] 420a、420b、420c:个别的3D图像部分
[0147] 430 :边界部
[0148] 430a、430b、430c:个别的边界部
[0149] 610 :3D图像 阳1加]620 :观看画面区域 阳151] 630:选择3D图像 阳152] 650 :边框部 阳15引 660 :2D图像
[0154] 670 :进行空白处理后的图像 阳155] 1000 :多维内容提供系统
[0156] 1100:多维内容提供引擎 阳157] 1110:2D播放部 阳158] 1120 :播放区间属性信息获取部
[0159] 1130:失真图像获取部 阳16〇] 1140:擅染部 阳161] 1142:擅染图像获取部 阳162] 1141 :擅染处理部 阳163] 1143:擅染图像提供部
[0164] 1150:同步处理部 阳1化]1160:维度转换处理部阳166] 1161 :边界信息获取部
[0167] 1170 :观看画面区域选择支持部
[0168] 1171 :观看画面区域选择获取部
[0169] 1180:空白处理部 阳170] 1200 :多维内容图像信息获取部 阳17U 1300:多维内容文件部 阳172] 1310:多维内容文件 阳17引 1320 :多维内
当前第4页1 2 3 4 5 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1