深度信息产生器、深度信息产生方法及深度调整装置的制作方法

文档序号:7887328阅读:153来源:国知局
专利名称:深度信息产生器、深度信息产生方法及深度调整装置的制作方法
技术领域
本发明有关于产生深度信息,特别是有关于一种仅通过处理所接收到的具有不同视角的影像的一部份来产生深度信息输出的深度信息产生器,以及相关深度信息产生方法及其深度调整装置。
背景技术
随着科技发展,使用者所追求的是立体(stereo)/三维(three-dimensional)及更真实的影像显示(image display),已不再是高画质的影像。呈现立体影像显示的技术有两种,一种是使用搭配眼镜(例如,红绿眼镜(anaglyph glasses)、偏光眼镜(polarization glasses)及快门眼镜(shutter glasses))的视频(video)输出装置,而另一种则是直接使用不需搭配任何眼镜的视频输出装置。无论所使用的技术是哪一种,立体影像显示的主要原理在于使左眼与右眼看到不同的影像,因此,人脑会将此两眼所看到的不同影像视为立体影像。 图I为人类深度知觉(human depth perception)如何创造出三维视觉(three-dimensional vision, 3D vision)的示意图。想要产生立体感的视觉,需要两眼以重叠视场(overlapping visual field)来观看景物。举例来说,如图I所示,两眼以稍微不同的角度来观看同一影像点(image point),并将所述影像点聚焦至视网膜(retina),接着,人脑会将上述的位于视网膜的二维影像(two-dimensional, 2D)加以合并以形成三维视觉。所述影像点的视差(disparity)D与由左眼及右眼所看到影像点的影像位置的差异(来自于特定的两眼间距(eye separation))有关,以及人脑会将其解读为与所述影像点相关的深度(depth),换言之,当所述影像点距离眼睛很近时,视差D会比较大;然而,当所述影像点距离眼睛很远时,视差D则会比较小。更具体地说,视差D反比于人脑所解读的深
度,即
小O当使用者观看利用显示立体视频流中的左眼影像及右眼影像所呈现的三维视频内容时,使用者可能会想调整所接收到的深度以满足他/她的观看偏好(viewingpreference),因此,左眼影像及右眼影像应被适当地调整以改变使用者的深度知觉。可采用传统三维视频深度调整机制(3D video depth adjustment scheme)来达成此目标,举例来说,传统三维视频深度调整机制通过对一对左眼影像及右眼影像进行立体匹配操作(stereo matching operation)以取得深度 / 视差图(depth/disparity map),依据原始左眼影像(original left-eye image)及所得到的深度/视差图来进行视角合成/影像绘图操作(view synthesis/image rendering operation),以产生调整后的左眼影像(adjusted left-eye image),以及依据原始右眼影像(original right-eye image)及所得到的深度/视差图来进行视角合成/影像绘图操作,以产生调整后的右眼影像(adjustedright-eye image)。基于上述的调整后的左眼影像及调整后的右眼影像,深度调整后的三维视频输出便呈现给使用者。
—般来说,立体匹配操作需要同时从存储装置(memory device)(例如,动态随机存取存储器(dynamic random access memory, DRAM))取得左眼影像及右眼影像,故会耗费大量的存储器频宽(memory bandwidth),此外,立体匹配操作需要执行基于像素(pixel-based)或基于块(block-based)的匹配,因而导致较高的硬件成本(hardwarecost)以及计算复杂度(computational complexity)。因此,需要一种创新的设计,其可耗费较少的存储器频宽、较低的硬件成本及/或较低的计算复杂度,来取得深度信息(depthinformation)(例如,深度图或视差图)。

发明内容
由此,本发明的目的为提供一种仅处理所接收到的具有不同视角的影像的一部份来产生深度信息输出的深度信息产生器,以及相关深度信息产生方法及其深度调整装置,来解决上述问题。—种深度信息产生器的范例实施方式,包括接收电路及具有第一深度信息产生 电路的深度信息产生块。所述接收电路用以接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像。所述第一深度信息产生电路耦接于所述接收电路,用以通过对所接收到的所述多个影像的一部份进行处理来产生第一深度信息输出。一种深度信息产生方法的范例实施方式,包括下列步骤接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像;以及通过对所接收到的所述多个影像的一部份进行处理来产生第一深度信息输出。一种深度信息产生器的另一范例实施方式,包括接收电路、深度信息产生块以及混合电路。所述接收电路用以接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像。所述深度信息产生块耦接于所述接收电路,用以针对所接收到的所述多个影像进行处理来产生多个深度信息输出。所述混合电路耦接于所述深度信息产生块,用以将所述多个深度信息输出加以混合,来产生混合深度信息输出。一种深度调整装置的范例实施方式,包括深度信息产生器以及视角合成块。所述深度信息产生器包括接收电路以及深度信息产生块。所述接收电路用以接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像。所述深度信息产生块包括第一深度信息产生电路,所述第一深度信息产生电路耦接于所述接收电路,用以通过对所接收到的所述多个影像的一部份进行处理来产生第一深度信息输出。所述视角合成块用以依据所述多个影像以及由至少所述第一深度信息输出所得到的至少一目标深度信息输出,来执行视角合成/影像绘图操作以产生调整后影像。本发明的深度信息输出并未采用传统三维视频深度调整设计所使用的立体匹配技术,因此,提供了一种具有较少的存储器频宽耗费、较低的硬件成本及/或较低的计算复杂度的深度信息产生机制。对于已经阅读后续由各附图及内容所显示的较佳实施方式的本领域的技术人员来说,本发明的各目的是明显的。


图I为人类深度知觉如何创造出三维视觉的示意图。
图2为本发明广义的深度调整装置的一实施例的示意图。图3为本发明深度信息产生器的第一实施例的示意图。图4为本发明深度信息产生器的第二实施例的示意图。图5为本发明深度信息产生器的第三实施例的示意图。图6为本发明深度信息产生器的第四实施例的示意图。图7为本发明深度信息产生器的第五实施例的示意图。
具体实施例方式在权利要求书及说明书中使用了某些词汇来指称特定的组件。所属领域中的技术人员应可理解,硬件制造商可能会用不同的名词来称呼同样的组件。本权利要求书及说明 书并不以名称的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的准贝U。在权利要求书及说明书中所提及的「包括」为开放式的用语,故应解释成「包括但不限定于」。另外,「耦接」一词在此包括任何直接及间接的电气连接手段。因此,若文中描述第一装置耦接于第二装置,则代表所述第一装置可直接电气连接于所述第二装置,或通过其他装置或连接手段间接地电气连接至所述第二装置。图2为本发明广义的深度调整装置(depth adjustment apparatus)的一实施例的示意图。深度调整装置200包括深度信息产生器(depth information generator) 202以及视角合成块(view synthesizing block) 204,其中深度信息产生器202包括(但并不局限于)接收电路(receiving circuit) 206以及深度信息产生块(depth infprmationgenerating block) 208。接收电路 206 用以接收多视角视频流(multi-view video stream)S_IN (例如,立体视频流(stereo video stream)),举例来说,多视角视频流S_IN传输分别对应于不同视角(view)的多个影像F_1、F_2、...及F_M。当多视角视频流S_IN为立体视频流时,上述不同视角的视角个数等于2,以及具有不同视角的多个影像?_1、?_2、...及FM因而会包括左眼影像以及右眼影像。举例来说(但本发明并不局限于此),接收电路206可包括缓冲装置(buffer device)(例如,动态随机存取存储装置)以缓冲由多视角视频流S_IN所传输的多个影像,并传输已缓冲的多个影像至下一处理级(例如,深度信息产生块208)以供进一步的处理。深度信息产生块208用以依据所接收到的多个影像?_1 F_M,来产生多个深度信息输出(depth information output)DI_1 DI_N至视角合成块204。在本实施例中,深度信息产生块208并不会通过同时参照所接收到的具有不同视角的多个影像F_1 F_M的全部影像来产生深度信息输出,反而是多个深度信息输出DI_1 DI_N之中的至少一个深度信息输出通过仅处理所接收到的所述多个影像F_1 F_M的一部份来产生。举例来说,多个深度信息输出DI_1 DI_N其中之一通过仅对所接收到的所述多个影像F_1 F_M的一部份来进行处理所产生,以及多个深度信息输出DI_1 DI_N其中之另一则是通过仅对所接收到的所述多个影像F_1 F_M的另一部份来进行处理所产生。在一实施范例中,深度信息产生块208可采用单一视角(single-view)深度信息产生机制,以通过处理所接收到的影像F_1 F_M中的每一个影像来产生深度信息输出DI_1 DI_N中的每一个深度信息输出,其中具有不同视角的所接收到的多个影像F_1 F_M的个数等于多个深度信息输出DI_1 DI_N的个数。在多视角视频流S_IN为挟带左眼影像及右眼影像的立体视频流的情形下,由于所提出的多个深度信息输出DI_1 DI_N并未采用传统三维视频深度调整设计所使用的立体匹配技术,因此,可实现一种具有较少的存储器频宽耗费、较低的硬件成本及/或较低的计算复杂度的深度信息产生机制。视角合成块204用以依据多个原始影像F_1 F_M及多个深度信息输出DI_1 DI_N来执行视角合成/影像绘图操作,并据以产生多个调整后影像(adjusted image)F_l’ F_M’,以进行具有调整后的使用者感知深度的视频播放。如图2所示,视角合成块204另接收深度调整参数(depth adjustment parameter) P_ADJ,其用来对施加于使用者所感知到的深度的调整进行控制/调校。在多视角视频流S_IN为挟带左眼影像及右眼影像的立体视频流的情形下,当使用者观看利用显示左眼影像及右眼影像所呈现的三维视频输出时,使用者可通过他/她的观看偏好来适当地设定深度调整参数P_ADJ,以看到所要的三维视频深度,因此,当显示由视角合成块204所产生的调整后左眼影像及调整后右眼影像时,会产生具有所要的三维视频深度的调整后三维视频输出。请注意,视角合成块204可采用任何可用的视角合成/影像绘图机制来产生调整后影像F_l’ F_M’,举例来说,视角合成块204可参照深度/视差图以及影像来产生调整后影像;而在设计变化中,视角合成块204 可参照多个深度/视差图以及影像来产生调整后影像。由于本发明着重于深度信息产生而不是视角合成/影像绘图,因此,关于视角合成块204的进一步说明,在此便不再赘述,以求简洁。以下提供图2所示的深度信息产生器202的多个实施方式,以便更清楚地绘示出本发明的技术特征。为求清楚及简明,在此假设上述的多视角视频流S_IN为挟带交错的左眼影像及右眼影像的立体视频流(即左眼影像与右眼影像经由所述立体视频流来轮流传送出),因此,具有不同视角的多个影像F_1 F_M的个数等于2,以及多个影像F_1 F_M包括左眼影像Fl以及右眼影像FK,然而,以上仅作为说明用,并非用来作为本发明的限制。如图3所示,图3为本发明深度信息产生器的第一实施例。图2所示的深度信息产生器202可由图3所示的深度信息产生器300来加以实施。在本实施例中,深度信息产生器300包括接收电路302以及具有第一深度信息产生电路(depth information generatingcircuit) 306的深度信息产生块304。如图3所示,接收电路302依序地接收左眼影像Fl (作为所接收到的具有不同视角的多个影像的一部份)以及右眼影像FK(作为所接收到具有不同视角的多个影像的另一部份),以及依序地将所接收到的左眼影像^及右眼影像Fk输出至第一深度信息产生电路306。在本实施例中,第一深度信息产生电路306采用单一视角深度信息产生机制,其中所述单一视角深度信息产生机制可能会使用物件切割技术(objectsegmentation technique)、基于对比(contrast)/色彩信息、纹理 / 边缘(texture/edge)信息及/或移动(motion)信息的深度线索提取技术(depth cue extraction technique)或者前景 / 背景检测技术(foreground/background detection technique)。此外,第一深度信息产生电路306以分时多工(time sharing)的方式来产生两个深度信息输出DI_R及DI_L,换言之,在接收左眼影像Fl之后,第一深度信息产生电路306针对单一左眼影像^进行单一视角深度信息产生操作,因而产生并输出深度信息输出DI_L ;相似地,在接收右眼影像Fk (紧接着左眼影像FJ之后,第一深度信息产生电路306针对单一右眼影像Fk进行单一视角深度信息产生操作,因而产生并输出深度信息输出DI_R,其中深度信息输出DI_L及深度信息输出DI_R提供给后续的视角合成块204用。接着,视角合成块204可依据深度信息输出DI_L&左眼影像^来产生调整后左眼影像(例如,多个调整后影像F_1’ F_M’其中之一),以及依据深度信息输出DI_R及右眼影像Fk来产生调整后右眼影像(例如,多个调整后影像F_l’ F_M’其中之另一)。如图4所示,图4为本发明深度信息产生器的第二实施例。图2所示的深度信息产生器202可由图4所示的深度信息产生器400来加以实施。在本实施例中,深度信息产生器400包括接收电路402以及深度信息产生块404,其中深度信息产生块404包括具有第一深度信息产生单元(depth information generating unit) 407_1及第二深度信息产生单元407_2的第一深度信息产生电路406。如图4所示,接收电路402依序地接收左眼影像FJ作为所接收到具有不同视角的多个影像的一部份)以及右眼影像Fk(作为所接收到具有不同视角的多个影像的另一部份),接着,接收电路402分 别将左眼影像^输出至第一深度信息产生单元407_1,以及将右眼影像匕输出至第二深度信息产生单元407_2。在本实施范例中,第一深度信息产生单元407_1及第二深度信息产生单元407_2均采用单一视角深度信息产生机制,其中所述单一视角深度信息产生机制可能会使用物件切割技术、基于对比/色彩信息、纹理/边缘信息及/或移动信息的深度线索提取技术或者前景/背景检测技术。在接收左眼影像^之后,第一深度信息产生单元407_1针对单一左眼影像Fl进行单一视角深度信息产生操作,因而产生并输出深度信息输出DI_L ;相似地,在接收右眼影像Fk之后,第二深度信息产生单元407_2针对单一右眼影像Fk进行单一视角深度信息产生操作,因而产生并输出深度信息输出DI_R。举例来说(但本发明并不局限于此),接收电路402可同时将所接收到的左眼影像^传输至第一深度信息产生单元407_1以及将所接收到的右眼影像Fk传输至第二深度信息产生单元407_2,因此,第一深度信息产生电路406允许以平行处理(parallel processing)的方式来处理左眼影像FL及右眼影像FK。此外,深度信息输出DI_L及深度信息输出DI_R提供给图2所示的后续视角合成块204用。接下来,视角合成块204可依据深度信息输出DI_L及左眼影像Fl来产生调整后左眼影像(例如,多个调整后影像F_l’ F_M’其中之一),以及依据深度信息输出DI_R及右眼影像Fk来产生调整后右眼影像(例如,多个调整后影像F_l’ F_M’其中之另一)。如图5所示,图5为本发明深度信息产生器的第三实施例。图2所示的深度信息产生器可由图5所示的深度信息产生器500来加以实施出。深度信息产生器300与深度信息产生器500之间主要的差别在于深度信息产生块504具有混合电路(blendingcircuit) 506。在深度信息输出DI_L及DI_R由第一深度信息产生电路306依序地产生之后,混合电路506通过将深度信息输出DI_L及DI_R加以混合,来产生混合深度信息输出(blended depth information output)DI_LR。举例来说,混合深度信息输出DI_LR可以是深度信息输出DI_L& DI_R的平均值。然而,以上仅作为说明用,也就是说,在一设计变化中,将深度信息输出DI_L及DI_R加以混合所得到不同的混合结果,也可用来当作混合深度信息输出DI_LR。混合深度信息输出DI_LR提供给图2所示的后续的视角合成块204用。接下来,视角合成块204可依据混合深度信息输出DI_LR及左眼影像Fl来产生调整后左眼影像(例如,多个调整后影像F_l’ F_M’其中之一),以及依据混合深度信息输出DI_LR及右眼影像Fk来产生调整后右眼影像(例如,多个调整后影像F_l’ F_M’其中之另一)。如图6所示,图6为本发明深度信息产生器的第四实施例。图2所示的深度信息产生器202可由图6所示的深度信息产生器600来加以实施。深度信息产生器400与深度信息产生器600之间主要的差别在于深度信息产生块604具有混合电路606。在深度信息输出DI_L及DI_R分别由第一深度信息产生单元407_1及第二深度信息产生单元407_2产生之后,混合电路606通过将深度信息输出DI_L及DI_R加以混合,来产生混合深度信息输出DI_LR。举例来说,混合深度信息输出DI_LR可以是深度信息输出DI_L&DI_R的平均值,然而,以上仅作为说明用,也就是说,在一设计变化中,将深度信息输出DI_L&DI_RW以混合所得到不同的混合结果,也可用来当作混合深度信息输出DI_LR。混合深度信息输出DI_LR提供给图2所示的后续的视角合成块204用。接下来,视角合成块204可依据混合深度信息输出DI_LR及左眼影像Fl来产生调整后左眼影像(例如,多个调整后影像F_l’ F_M’其中之一),以及依据混合深度信息输出DI_LR及右眼影像Fk来产生调整后右眼影像(例如,多个调整后影像F_l’ F_M’其中之另一)。如图7所示,图7为本发明深度信息产生器的第五实施例。图2所示的深度信息产生器202可由图7所示的深度信息产生器700来加以实施。深度信息产生器700包括接收电路702以及深度信息产生块704,其中深度信息产生块704包括上述的第一深度信息产生电路306/406、第二深度信息产生电路705以及混合电路706。除了提供所接收到的左眼 影像Fl及右眼影像Fk给第一深度信息产生电路306/406之外,接收电路702同时将所接收到的左眼影像^及右眼影像Fk传输至第二深度信息产生电路705。在本实施例中,第二深度信息产生电路705通过处理所接收到具有不同视角的多个影像(即左眼影像^及右眼影像Fk)的全部影像,来产生深度信息输出DI_S,举例来说,第二深度信息产生电路705可采用传统的立体匹配技术来产生深度信息输出DI_S。对于混合电路706来说,其用以依据由上述的第一深度信息产生电路306/406及第二深度信息产生电路705所产生的多个深度信息输出,来产生一个或多个混合深度信息输出。在第一设计范例中,混合电路706可通过将深度信息输出DI_L、DI_R及DI_S加以混合,来产生单一混合深度信息输出DI_SLR。在第二设计范例中,混合电路706可通过将深度信息输出DI_L及DI_S加以混合,来产生混合深度信息输出DI_SL,以及另将深度信息输出DI_R&DI_SW以混合,来产生另一混合深度信息输出DI_SR。在第三设计范例中,混合电路706可通过将深度信息输出DI_L& DI_S加以混合,来产生单一混合深度信息输出DI_SL0在第四设计范例中,混合电路706可通过将深度信息输出DI_R& DI_S加以混合,来产生单一混合深度信息输出DI_SR。此外,混合深度信息输出提供给图2所示的后续的视角合成块204用。接下来,视角合成块204可依据混合深度信息输出、左眼影像Fl及右眼影像Fk来产生调整后左眼影像(例如,多个调整后影像F_l’ F_M’其中之一)以及调整后右眼影像(例如,多个调整后影像F_l’ F_M’其中之另一)。在图3 图7所示的实施例中,第一深度信息产生电路306/406得以针对单一影像执行单一视角深度图产生(single-view depth map generation)操作来产生深度信息输出,因此,当视频输入为单一视角视频流(例如,二维视频流)而不是多视角视频流时,本发明所揭示的深度信息产生器也可用于二维至三维的转换(2D-to-3D conversion)。换言之,二维影像及由第一深度信息产生电路306/406通过处理所述二维影像所得到的深度信息输出,可被传输至后续的视角合成块204,接着,视角合成块204可产生对应于所述二维影像的左眼影像及右眼影像。因此,通过硬件共享技术(hardware sharing technique)来使本案所提出的深度信息产生器共享于三维视频深度调整电路(3D video depthadjustment circuit)与二维至三维转换电路(2D_to_3D conversion circuit)之间,有成本效益的设计(cost-efficient design)便得以实现。以上所述仅为本发明的较佳实施方式,凡依本发明权利要求所做的 均等变化和修饰,均应属本发明的涵盖范围。
权利要求
1.ー种深度信息产生器,其特征在于,包括 接收电路,用以接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像;以及 深度信息产生块,包括 第一深度信息产生电路,耦接于所述接收电路,用以通过对所接收到的所述多个影像的一部份进行处理,来产生第一深度信息输出。
2.如权利要求I所述的深度信息产生器,其特征在于,所接收到的所述多个影像的所述部份仅包括对应单ー视角的単一影像。
3.如权利要求I所述的深度信息产生器,其特征在于,所述第一深度信息产生电路另用以通过对所接收到的所述多个影像的另一部份进行处理,来产生第二深度信息输出。
4.如权利要求3所述的深度信息产生器,其特征在于,所接收到的所述多个影像的所述部份仅包括对应第一视角的第一影像,以及所接收到的所述多个影像的所述另一部份仅包括对应第二视角的第二影像。
5.如权利要求3所述的深度信息产生器,其特征在于,所述接收电路依序地接收所述多个影像,并依序地将所接收到的所述多个影像的所述部份及所接收到的所述多个影像的所述另一部份输出至所述第一深度信息产生电路;以及所述第一深度信息产生电路以分时多エ的方式来依序地产生所述第一深度信息输出及所述第二深度信息输出。
6.如权利要求3所述的深度信息产生器,其特征在于,所述第一深度信息产生电路包括 第一深度信息产生单元,用以从所述接收电路接收所述多个影像的所述部份,并依据所接收到的所述多个影像的所述部份来产生所述第一深度信息输出;以及 第二深度信息产生单元,用以从所述接收电路接收所述多个影像的所述另一部份,井依据所接收到的所述多个影像的所述另一部份来产生所述第二深度信息输出。
7.如权利要求3所述的深度信息产生器,其特征在于,所述深度信息产生块还包括 混合电路,耦接于所述第一深度信息产生电路,用以通过将至少所述第一深度信息输出及所述第二深度信息输出加以混合,来产生混合深度信息输出。
8.如权利要求I所述的深度信息产生器,其特征在于,所述深度信息产生块还包括 第二深度信息产生电路,耦接于所述接收电路,用以通过对所接收到的所述多个影像的全部影像进行处理,来产生第二深度信息输出;以及 混合电路,耦接于所述第一深度信息产生电路及所述第二深度信息产生电路,用以通过将至少所述第一深度信息输出及所述第二深度信息输出加以混合,来产生混合深度信息输出。
9.如权利要求I所述的深度信息产生器,其特征在于,所述多视角视频流为立体视频流,以及所述多个影像包括左眼影像及右眼影像。
10.ー种深度信息产生方法,其特征在于,包括 接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像;以及 通过对所接收到的所述多个影像的一部份进行处理,来产生第一深度信息输出。
11.如权利要求10所述的深度信息产生方法,其特征在于,所接收到的所述多个影像的所述部份仅包括对应单ー视角的単一影像。
12.如权利要求10所述的深度信息产生方法,其特征在于,还包括 通过对所接收到的所述多个影像的另一部份进行处理,来产生第二深度信息输出。
13.如权利要求12所述的深度信息产生方法,其特征在于,所接收到的所述多个影像的所述部份仅包括对应第一视角的第一影像,以及所接收到的所述多个影像的所述另一部份仅包括对应第二视角的第二影像。
14.如权利要求12所述的深度信息产生方法,其特征在于,接收所述多视角视频流的步骤包括 依序地接收所述多个影像;以及 依序地输出所接收到的所述多个影像的所述部份及所接收到的所述多个影像的所述另一部份; 其中所述第一深度信息输出及所述第二深度信息输出为依序地产生。
15.如权利要求12所述的深度信息产生方法,其特征在干, 所述产生第一深度信息输出的步骤包括 利用第一深度信息产生单元,从接收电路接收所述多个影像的所述部份,并依据所接收到的所述多个影像的所述一部份来产生所述第一深度信息输出;以及 所述产生第二深度信息输出的步骤包括 利用第二深度信息产生单元,从所述接收电路接收所述多个影像的所述另一部份,并依据所接收到的所述多个影像的所述另一部份来产生所述第二深度信息输出。
16.如权利要求12所述的深度信息产生方法,其特征在于,还包括 通过将至少所述第一深度信息输出及所述第二深度信息输出加以混合,来产生混合深度ィ目息输出。
17.如权利要求10所述的深度信息产生方法,其特征在于,还包括 通过对所接收到的所述多个影像的全部影像进行处理,来产生第二深度信息输出;以及 通过将至少所述第一深度信息输出及所述第二深度信息输出加以混合,来产生混合深度ィ目息输出。
18.如权利要求10所述的深度信息产生方法,其特征在于,所述多视角视频流为立体视频流,以及所述多个影像包括左眼影像及右眼影像。
19.ー种深度信息产生器,其特征在于,包括 接收电路,用以接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像; 深度信息产生块,耦接于所述接收电路,用以通过对所接收到的所述多个影像进行处理,来产生多个深度信息输出;以及 混合电路,耦接于所述深度信息产生块,用以通过将所述多个深度信息输出加以混合,来产生混合深度信息输出。
20.如权利要求19所述的深度信息产生器,其特征在于,所述多视角视频流为立体视频流,以及所述多个影像包括左眼影像及右眼影像。
21.ー种深度调整装置,其特征在干,包括深度信息产生器和视角合成块,所述深度信息产生器包括接收电路以及深度信息产生块, 所述接收电路,用以接收多视角视频流,其中所述多视角视频流传输分别对应于不同视角的多个影像; 所述深度信息产生块包括第一深度信息产生电路,所述第一深度信息产生电路耦接于所述接收电路,用以对所接收到的所述多个影像的一部份进行处理,来产生第一深度信息输出; 所述视角合成块,用以依据所述多个影像及由至少所述第一深度信息输出所得到的至少一目标深度信息输出来执行视角合成/影像绘图操作,以产生调整后影像。
22.如权利要求21所述的深度调整装置,其特征在于,所接收到的所述多个影像的所述部份仅包括对应单ー视角的単一影像。
23.如权利要求21所述的深度调整装置,其特征在于,所述第一深度信息产生电路另用以通过对所接收到的所述多个影像的另一部份进行处理,来产生第二深度信息输出;以及所述至少一目标深度信息输出由至少所述第一深度信息输出及所述第二深度信息输出所取得。
24.如权利要求23所述的深度调整装置,其特征在于,所接收到的所述多个影像的所述部份仅包括对应第一视角的第一影像,以及所接收到的所述多个影像的所述另一部份仅包括对应第二视角的第二影像。
25.如权利要求23所述的深度调整装置,其特征在于,所述接收电路依序地接收所述多个影像,并依序地将所接收到的所述多个影像的所述部份及所接收到的所述多个影像的所述另一部份,输出至所述第一深度信息产生电路;以及所述第一深度信息产生电路以分时多エ的方式来依序地产生所述第一深度信息输出及所述第二深度信息输出。
26.如权利要求23所述的深度调整装置,其特征在于,所述第一深度信息产生电路包括 第一深度信息产生单元,用以从所述接收电路接收所述多个影像的所述部份,并依据所接收到的所述多个影像的所述部份来产生所述第一深度信息输出;以及 第二深度信息产生单元,用以从所述接收电路接收所述多个影像的所述另一部份,井依据所接收到的所述多个影像的所述另一部份来产生所述第二深度信息输出。
27.如权利要求23所述的深度调整装置,其特征在于,所述深度信息产生块还包括 混合电路,耦接于所述第一深度信息产生电路,用以通过将至少所述第一深度信息输出及所述第二深度信息输出加以混合,来产生混合深度信息输出,其中所述至少一目标深度信息输出由所述混合深度信息输出而得。
28.如权利要求21所述的深度调整装置,其特征在于,所述深度信息产生块还包括 第二深度信息产生电路,耦接于所述接收电路,用以通过对所接收到的所述多个影像的全部影像进行处理,来产生第二深度信息输出;以及 混合电路,耦接于所述第一深度信息产生电路及所述第二深度信息产生电路,用以通过将至少所述第一深度信息输出及所述第二深度信息输出加以混合,来产生混合深度信息输出,其中所述至少一目标深度信息输出由所述混合深度信息输出而得。
29.如权利要求21所述的深度调整装置,其特征在于,所述多视角视频流为立体视频流,所述多个影像包括左眼影像及右眼影像,以及所述调整后影像包括调整后左眼影像及调整后右眼 影像。
全文摘要
本发明公开一种深度信息产生器、深度信息产生方法及深度调整装置。所述深度信息产生器包括接收电路及具有第一深度信息产生电路的深度信息产生块。所述接收电路用以接收多视角视频流,所述多视角视频流传输分别对应于不同视角的多个影像。所述第一深度信息产生电路耦接于所述接收电路,用以通过对所接收到的所述多个影像的一部份进行处理,来产生第一深度信息输出。本发明的深度信息输出并未采用传统三维视频深度调整设计所使用的立体匹配技术,因此,提供了一种具有较少的存储器频宽耗费、较低的硬件成本及/或较低的计算复杂度的深度信息产生机制。
文档编号H04N13/04GK102685523SQ201210012429
公开日2012年9月19日 申请日期2012年1月16日 优先权日2011年3月18日
发明者張德浩, 方弘吉 申请人:联发科技股份有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1