摄像装置、其控制方法和程序的制作方法
【专利摘要】在接收到通过一个摄像光学系统的光束时，输出左眼和右眼摄取图像，并且检测包含在左眼和右眼摄取图像中的每个被摄体的左眼和右眼摄取图像之间的差。针对左眼和右眼摄取图像中的每一个，输出从包括主被摄体并且具有预定大小的区域中提取的提取图像。这时，设置该区域，使得与包含在两个提取图像中的与主被摄体不同的被摄体的左眼和右眼摄取图像之间的差具有预定值。
【专利说明】摄像装置、其控制方法和程序
【技术领域】
[0001]本发明涉及一种摄像装置、其控制方法和程序，尤其涉及一种创建双眼立体视觉图像的技术。
【背景技术】
[0002]近年来，例如，随着运算电路的处理能力的改进和显示区域中的像素数量的增加，可以获得能够允许观看者感知三维视觉效果的一些种类的显示设备，即所谓的三维图像显示设备(下文中称为3D电视)。
[0003]3D电视经常利用例如以预定刷新速率选择性地显示针对左眼和右眼的图像，或者同时显示左眼图像和右眼图像，以允许观看者使用诸如双凸透镜片的光学构件，通过他或她的两只眼来观看不同的图像的方法。3D电视显示由具有给定差(视差)的针对左眼和右眼的图像表示的图像或视频，这使得观看者能够感知深度信息。
[0004]当在因为由连接被摄体与每个眼球的直线形成的角度大于由连接该眼球与注视点(无视差)的视线形成的会聚角、而出现视差的情况下，人观看物体时，他们感知到物体像相对于注视点在前景中。然而，当在因为由连接被摄体与每个眼球的直线形成的角度小于由连接该眼球与注视点的视线形成的会聚角、而出现视差的情况下，人观看物体时，他们感知到物体像相对于注视点在背景中。
[0005]现今，为了跟随家庭用3D电视的普及的步伐，诸如数字照相机和数字视频照相机的家庭用摄像装置(3D照相机)已经投入市场。在这些情形下，用户变得能够在家庭用3D电视上显示和浏览他自己或她自己摄取的图像或视频。
[0006]作为能够摄取双眼立体视觉图像的3D照相机，不仅可以使用包括针对左眼和右眼的两个摄像光学系统的3D照相机，还可以使用利用一个摄像光学系统的3D照相机。更具体地，独立地摄取通过一个摄像光学系统的出射光瞳中的不同区域的光束，以获得与由以光束通过的区域的重心之间的距离作为其基线长度的、包括两个摄像光学系统的摄像装置获得的双眼立体视觉图像等同的图像。如在日本专利第4027113号中所描述的，这可以使用具有复合像素结构(参见图2)的图像传感器来实现，该图像传感器用于相差检测方案的焦点检测，在每个像素中包括多个光接收元件，并且使用微透镜在各个光接收元件上形成不同光束的图像。
[0007]在相差检测方案的焦点检测中，通过出射光瞳中的不同区域的光束，在不同的像素上形成在焦点位置的被摄体的图像以及相对于焦点位置分别在背景和前景中的被摄体的图像，如图12A至12C所示。
[0008]当图像传感器的复合像素结构包括两个水平布置的光接收元件时，对于各个距离处的被摄体图像，在从所有像素的光接收元件输出的图像A和B之间产生的被摄体图像在水平位置的移位不同，如图12D至12F所示。在实际焦点检测操作中，与来自各自具有相同颜色的像素胞元组的输出相同，在列方向(或者行方向)上组合使用来自光接收元件a和b的输出，以创建图像A和B并且将它们转换为数据，由此通过相关计算获得图像A和B之间的对应点的移位。
[0009]以这种方式，当使用具有复合像素结构的图像传感器，根据通过摄像光学系统的出射光瞳中的不同区域的光束，创建双眼立体视觉图像时，包括两个摄像光学系统的摄像装置中的存在注视点的平面，对应于几乎没有视差的焦点位置。也就是说，当摄像装置使用一个摄像光学系统聚焦在主被摄体上以拍摄图像时，主被摄体在针对左眼的图像(图像A)和针对右眼的图像(图像B)中，被成像在几乎相同的像素上，自然没有视差。
[0010]当显示由包括一个摄像光学系统和具有复合结构的图像传感器的摄像装置(单眼摄像装置)拍摄的这种双眼立体视觉图像时，因为主被摄体总是没有视差，因此观看者难以感知到主被摄体的立体视觉效果。
[0011]此外，当依次读出并且在显示设备上再现在聚焦在主被摄体上时拍摄的运动图像或者连续拍摄的静止图像时，即使在主被摄体移动之后，与主被摄体相关联的图像也没有视差，因此不在焦点位置处的被摄体的视差改变。
[0012]例如，在场景I中，当摄像装置、主被摄体、近被摄体和远被摄体具有如图13A所示的位置关系时，如图13B所示拍摄针对左眼的图像1301和针对右眼的图像1302。从针对左眼和右眼的图像1301和1302可以看到，相对于位于焦点位置的主被摄体在前景中的近被摄体和相对于主被摄体在背景中的远被摄体，在这些图像之间具有水平差(Zn和Zfl)。当在显示设备上显示这种双眼立体视觉图像时，处于焦点位置的主被摄体在针对左眼和右眼的摄取图像之间没有差，因此观看者感知到其像在显示面的位置，如图13C所示。此外，观看者感知到近被摄体和远被摄体像分别相对于显示面在前景和背景中。
[0013]然后，在场景2中，当如图13D所示，主被摄体移动到与近被摄体相同的深度位置，同时近被摄体和远被摄体保持不动时，如图13E所示拍摄针对左眼的图像1303和针对右眼的图像1304。如上所述，在聚焦在主被摄体上时，焦点位置所在的平面上的被摄体没有视差，因此近被摄体和主被摄体在针对左眼和右眼所摄取的图像之间没有差。与此相反，远被摄体沿深度方向移动远离焦点位置，因此在针对左眼和右眼所摄取的图像之间具有大于场景I中的这些图像之间的差Zfl的差Zf2。
[0014]这时，当在显示设备上显示针对左眼和右眼的图像1303和1304时，观看者感知到主被摄体和近被摄体像保持在显示面上限定的位置不动，如图13F所示，因此观看者难以感知到主被摄体的移动。也就是说，近被摄体保持不动，但是尽管如此，观看者感知到其像移动到了主被摄体所在的显示面的位置。此外，远被摄体保持不动，但是尽管如此，观看者感知到其像相对于主被摄体所在的显示面移动到了背景。
【发明内容】
[0015]考虑到上述传统问题作出了本发明。本发明提供一种技术，其在再现使用通过一个摄像光学系统的光束创建的双眼立体视觉图像时，使得观看者能够适当地感知到主被摄体的立体视觉效果，同时防止主被摄体的视差丢失。
[0016]根据本发明的一个方面，提供一种摄像装置，其包括:一个摄像光学系统；图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像；检测部件，用于检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差；控制部件，用于基于所述检测部件所检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及提取部件，用于针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像，其中，所述提取部件设置所述区域，使得包含在两个提取图像中的与所述给定被摄体不同的被摄体的左眼摄取图像和右眼摄取图像之间的差，具有预定值。
[0017]根据本发明的另一方面，提供一种摄像装置，其包括:一个摄像光学系统；图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像；检测部件，用于检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差；控制部件，用于基于所述检测部件所检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及提取部件，用于针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像，所述提取部件设置所述区域，使得与所述给定被摄体和所述摄像装置之间的距离不同的预定距离处的左眼摄取图像和右眼摄取图像之间的差具有预定值，其中，所述提取部件基于分别用来输出所述左眼摄取图像和所述右眼摄取图像的光束的重心之间的距离、所述图像传感器和所述一个摄像光学系统的出射光瞳之间的距离、以及根据所述预定距离获得的所述预定距离处的左眼摄取图像和右眼摄取图像之间的差，来设置所述区域。
[0018]根据本发明的又一方面，提供一种摄像装置的控制方法，所述摄像装置包括:一个摄像光学系统；以及图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像，所述控制方法包括:检测步骤，检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差；控制步骤，基于在所述检测步骤中检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及提取步骤，针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像，其中，在所述提取步骤中，设置所述区域，使得包含在两个提取图像中的与所述给定被摄体不同的被摄体的左眼摄取图像和右眼摄取图像之间的差，具有预定值。
[0019]根据本发明的再一方面，提供一种摄像装置的控制方法，所述摄像装置包括:一个摄像光学系统；以及图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像，所述控制方法包括:检测步骤，检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差；控制步骤，基于在所述检测步骤中检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及提取步骤，针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像，所述提取步骤设置所述区域，使得与所述给定被摄体和所述摄像装置之间的距离不同的预定距离处的左眼摄取图像和右眼摄取图像之间的差具有预定值，其中，在所述提取步骤中，基于分别用来输出所述左眼摄取图像和所述右眼摄取图像的光束的重心之间的距离、所述图像传感器和所述一个摄像光学系统的出射光瞳之间的距离、以及根据所述预定距离获得的所述预定距离处的左眼摄取图像和右眼摄取图像之间的差，来设置所述区域。
[0020]从以下参考附图对示例性实施例的描述，本发明的其它特征将变得明显。
【专利附图】
【附图说明】
[0021]图1是示出根据本发明的实施例的数字照相机的功能配置的框图；
[0022]图2是示出根据本发明的实施例的图像传感器的单位像素的配置的视图；
[0023]图3是用于说明根据本发明的实施例的摄取图像的配置的视图；
[0024]图4A和4B是用于说明根据本发明的实施例的计算图像之间的差的方法的视图；
[0025]图5是示出根据本发明的实施例的拍摄处理的示例的流程图；
[0026]图6是示出根据本发明的实施例的图像差调整处理的示例的流程图；
[0027]图7A和7B是用于说明离焦量和图像之间的差之间的关系的视图；
[0028]图8是用于说明根据本发明的实施例的图像差调整处理的曲线图；
[0029]图9A和9B是用于说明根据本发明的实施例的图像差调整处理的其它视图；
[0030]图1OA和IOB是用于说明根据本发明的实施例的图像差调整处理的变形例的曲线图；
[0031]图1lA和IlB是示出根据本发明的实施例的双眼立体视觉图像数据的记录格式的视图；
[0032]图12A、12B、12C、12D、12E和12F是用于说明相差检测方案的焦点检测的视图；以及
[0033]图13A、13B、13C、13D、13E和13F是用于说明使用具有复合像素结构的图像传感器摄取的双眼立体视觉图像的视图。
【具体实施方式】
[0034][实施例]
[0035]下面，参考附图，详细描述本发明的示例性实施例。注意，下面描述的实施例通过将本发明应用于包括具有复合像素结构的图像传感器，并且能够根据通过一个摄像光学系统的出射光瞳中的不同区域的光束，创建双眼立体视觉图像的数字照相机，来示例性地说明摄像装置。然而，本发明适用于能够根据通过一个摄像光学系统的光束来创建双眼立体视觉图像的任意装置。
[0036]此外，在本说明书中，“图像之间的差”意为针对每个像素表示在针对左眼和右眼的图像(左眼图像和右眼图像)之间产生的同一被摄体在这些图像中的相对水平位置的移位的量。图像之间的差对于没有视差的被摄体为零，对于比没有视差的被摄体远的被摄体具有正值，并且对于比没有视差的被摄体近的被摄体具有负值。此外，“移位量”意为针对每个像素表示左眼摄取图像和右眼摄取图像中的每一个的有效像素区域中的提取要输出的图像的记录像素区域的相对水平位置的移位的量。
[0037]注意，本实施例在“摄取图像”和“提取图像”之间进行区分，“摄取图像”由通过使用图像传感器进行光电转换获得且产生根据摄像光学系统的设置条件确定的立体视觉效果的图像信号来定义，并且“提取图像”由通过提取摄取图像的部分区域进行输出以产生希望的立体视觉效果而获得的图像信号来定义。
[0038]<数字照相机100的功能配置>
[0039]图1是示出根据本发明的实施例的数字照相机100的功能配置的框图。
[0040]系统控制单元101例如是CPU，其对在数字照相机100中设置的每个块的操作进行控制。更具体地，系统控制单元101例如通过读出存储在R0M102中的立体视觉图像拍摄处理(稍后描述)的工作程序，将其展开到RAM103中并执行，来对每个块的操作进行控制。
[0041]R0M102例如是可再写非易失性存储器，其不仅存储立体视觉图像拍摄处理的工作程序，还存储数字照相机100的每个块的操作所需的参数或者例如数字照相机100的摄像设置的信息。
[0042]RAM103是易失性存储器，其不仅用来临时存储工作程序的展开区域，还用来临时存储例如在数字照相机100的每个块工作时输出的中间数据。
[0043]摄像光学系统104是例如由物镜、聚焦透镜和光圈形成的单元，其透镜位置和F数例如由驱动单元105响应于来自系统控制单元101的控制信号进行控制。此外，快门106是用于对一次拍摄的曝光量进行控制的构件，其在系统控制单元101的控制下在适当的定时打开/关闭，由此对形成经由摄像光学系统104入射到摄像单元107 (稍后描述)上的光束的图像所花费的时间进行控制。
[0044]摄像单元107是诸如CMOS传感器的图像传感器，其对摄像光学系统104在图像传感器的表面上形成的光学图像进行光电转换，由此输出模拟图像信号。在本实施例中，如上面参考图2所描述的，图像传感器的每个像素具有包括两个水平布置的左眼和右眼光接收元件Ia和Ib以及微透镜2的复合像素结构。摄像单元107对在各个光接收元件上形成图像并且通过摄像光学系统104的出射光瞳中的不同区域的光束进行光电转换，并且向信号处理单元108输出获得的左眼和右眼模拟图像信号。
[0045]虽然在本实施例中以在每个单位像素胞元中包括两个光接收元件的复合像素结构为例，但是本发明的实施不限于此，而可以采用在每个单位像素胞元中包括三个或更多个光接收元件的复合像素结构。在这种情况下，例如通过将来自设置在每个单位像素胞元中的各个光接收元件的输出相加，可以获得两种类型的分离的图像信号输出，至少作为左眼和右眼摄取图像信号。当例如每个单位像素包括以方形矩阵布置的四个光接收元件时，可以通过将来自右侧和左侧中的每一个的两个垂直相邻的光接收元件的输出相加，或者使用来自从左侧和右侧中的每一个的光接收元件中选择的光接收元件的输出，来获得左眼和右眼摄取图像信号。当每个单位像素包括五个光接收元件:四个光接收元件以方形矩阵布置，并且一个光接收元件位于中心时，可以使用中心光接收元件之外的光接收元件，类似地获得左眼和右眼摄取图像信号。
[0046]信号处理单元108是例如由AFE (模拟前端)和DFE (数字前端)实现的信号处理电路，其在对从摄像单元107输入的模拟图像信号进行各种处理后，输出数字图像信号。例如，AFE施加诸如用于将光学黑水平调整到基准水平的OB箝位的处理以及A/D转换处理，由此将模拟图像信号转换为数字图像信号(图像)，并将其输出。此外，DFE对左眼和右眼摄取图像中的像素，进行各种校正处理或者诸如分拣的数字处理。
[0047]注意，摄像单元107和信号处理单元108的操作根据从TG (定时生成电路)109输出的定时信号执行。系统控制单元101对TG109进行的定时信号的生成进行控制。
[0048]距离测量单元110对从信号处理单元108输出的左眼和右眼摄取图像，进行水平方向相关计算，由此计算摄像光学系统104的离焦量，并且将其输出到系统控制单元101。注意，在本实施例中，距离测量单元110包括图像差检测单元120，图像差检测单元120对输入的左眼和右眼摄取图像进行相关计算，以计算存在于这些图像中的每个被摄体的在这些图像之间的差。
[0049]图像差检测单元120针对每个像素点或者通过将每个图像划分为预定数量的区域而获得的预定区域中的每个块，计算在左眼和右眼摄取图像之间产生的差，由此生成将这些图像之间的差映射在图像差基准图像中的已知视差映射。视差映射表示由于形成左眼和右眼摄取图像的光束通过的出射光瞳中的区域之间的差，而在这些图像之间产生的每个对应点的差，并且可以使用该视差映射来估计每个被摄体的距离。
[0050]输入到距离测量单元110的左眼和右眼摄取图像中的每一个，由如在例如图3所示的图像300中例示的在图像处理方面作为基准的光学黑(OB)像素区域301和有效像素区域302形成。这时，对于左眼和右眼摄取图像两者，使用与有效像素区域302同心地形成的基本记录像素区域303的图像，作为用于水平方向相关计算的图像。可以使用例如立体匹配，通过特征点关联，来生成视差映射。
[0051]注意，没有包含在有效像素区域302的基本记录像素区域303中的区域，是在调整要创建的双眼立体视觉图像中的被摄体的视差时使用的空白区域。在调整双眼立体视觉图像中的被摄体的视差时，通过设置并提取具有与基本记录像素区域303相同的大小的记录像素区域，使得其包括有效像素区域302中的空白区域，来获得左眼和右眼提取图像中的至少一个。也就是说，在本实施例中，在从信号处理单元108输出的图像信号的有效像素区域302中，提取图像的记录像素区域的位置沿水平方向移位，由此获得具有调整后的视差的双眼立体视觉图像。
[0052](图像差检测方法(立体匹配))
[0053]立体匹配可以使用各种方法。然而，下面描述使用基于差总和的简单模板匹配方法的左眼和右眼摄取图像之间的特征点关联。
[0054]首先，在将左眼和右眼摄取图像中的一个定义为基准图像后，将基准图像中的基本记录像素区域303，划分为具有相同大小的预定数量的(η个)块400-1至400-η，如图4Α所示。虽然在本实施例中，将包括多个像素的区域划分为块，但是一个块可以由单位像素形成。在其它图像(查找图像)中，在沿水平方向移动具有与每个块相同的大小的窗口，以搜索与包含在该块中的像素的位置相对应的像素的位置的同时，计算该窗口的面积相关值，由此计算查找图像中的该块的左眼和右眼摄取图像之间的差。
[0055]例如，使用包括关注点402的块403的图像作为模板，搜索与如图4Β所示的作为基准图像的左眼摄取图像401中的关注点402 (X，y)相对应的、作为查找图像的右眼摄取图像411中的点。根据与关注点402相同的坐标位置，以及在将该坐标位置定义为中心后，沿水平方向假定的左眼和右眼摄取图像401和411之间的差K，来确定针对模板计算面积相关值的作为右眼摄取图像411中的范围的对应点搜索区域412。注意，在本实施例中，在图像传感器的每个单位像素中，沿水平方向并置了两个光接收元件，因此仅计算针对沿水平方向的搜索的一维相关。
[0056]依次选择对应点搜索区域412中的每个像素作为查找像素413，并且针对包含在以该像素作为其中心并且具有与模板相同的面积的窗口区域414中的图像，计算与模板的相似度。这时，如下式，通过像素值之间的差的平方和，来计算作为查找像素413的对应点候选对象附近的相似度:
【权利要求】
1.一种摄像装置，其包括: 一个摄像光学系统； 图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像； 检测部件，用于检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差； 控制部件，用于基于所述检测部件所检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及 提取部件，用于针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像， 其中，所述提取部件设置所述区域，使得包含在两个提取图像中的与所述给定被摄体不同的被摄体的左眼摄取图像和右眼摄取图像之间的差，具有预定值。
2.根据权利要求1所述的摄像装置，其中，与所述给定被摄体不同的所述被摄体是位于距所述摄像装置比所述给定被摄体远的被摄体。
3.根据权利要求1或2所述的摄像装置，其中，与所述给定被摄体不同的所述被摄体，是包含在所述左眼摄取图像和所述右眼摄取图像中的被摄体中的、被确定为在获得所述左眼摄取图像和所述右眼摄取图像之前获得的多个摄取图像之间保持不动的被摄体。
4.根据权利要求1至3中的任一项所述的摄像装置，其中，与所述给定被摄体不同的所述被摄体，是具有所述检测部件所检测到的、在进行用于记录的拍摄之前进行的预拍摄期间获得的左眼摄取图像和`右眼摄取图像之间的最大差的被摄体。
5.一种摄像装置，其包括: 一个摄像光学系统； 图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像； 检测部件，用于检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差； 控制部件，用于基于所述检测部件所检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及 提取部件，用于针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像，所述提取部件设置所述区域，使得与所述给定被摄体和所述摄像装置之间的距离不同的预定距离处的左眼摄取图像和右眼摄取图像之间的差具有预定值， 其中，所述提取部件基于分别用来输出所述左眼摄取图像和所述右眼摄取图像的光束的重心之间的距离、所述图像传感器和所述一个摄像光学系统的出射光瞳之间的距离、以及根据所述预定距离获得的所述预定距离处的左眼摄取图像和右眼摄取图像之间的差，来设置所述区域。
6.根据权利要求1至5中的任一项所述的摄像装置，其中，当针对所述左眼摄取图像和所述右眼摄取图像设置的所述区域中的至少一个落在所述图像传感器的有效像素的范围外时，所述提取部件将该区域设置在所述有效像素的范围内。
7.根据权利要求1至5中的任一项所述的摄像装置，其中，当针对所述左眼摄取图像和所述右眼摄取图像设置的所述区域中的至少一个落在所述图像传感器的有效像素的范围外时，所述提取部件将该区域设置成消除所述给定被摄体的左眼摄取图像和右眼摄取图像之间的差。
8.根据权利要求1至7中的任一项所述的摄像装置，其中，所述左眼光接收元件和所述右眼光接收元件接收通过所述一个摄像光学系统的出射光瞳中的不同区域的光束。
9.一种摄像装置的控制方法，所述摄像装置包括:一个摄像光学系统；以及图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像，所述控制方法包括: 检测步骤，检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差； 控制步骤，基于在所述检测步骤中检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及 提取步骤，针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像， 其中，在所述提取步骤中，设置所述区域，使得包含在两个提取图像中的与所述给定被摄体不同的被摄体的左眼摄取图像和右眼摄取图像之间的差，具有预定值。
10.一种摄像装置的控制方法，所述摄像装置包括:一个摄像光学系统；以及图像传感器，其包括左眼光接收元件和右眼光接收元件，并且在接收到通过所述一个摄像光学系统的光束时，输出针对左眼的左眼摄取图像和针对右眼的右眼摄取图像，所述控制方法包括: 检测步骤，检测包含在所述左眼摄取图像和所述右眼摄取图像中的每一个被摄体的左眼摄取图像和右眼摄取图像之间的差； 控制步骤，基于在所述检测步骤中检测到的包含在所述左眼摄取图像和所述右眼摄取图像中的给定被摄体的左眼摄取图像和右眼摄取图像之间的差，控制所述摄像光学系统的聚焦部件聚焦在所述给定被摄体上；以及 提取步骤，针对所述左眼摄取图像和所述右眼摄取图像中的每一个，使用从包括所述给定被摄体并且具有预定大小的区域中提取的提取图像，创建双眼立体视觉图像，所述提取步骤设置所述区域，使得与所述给定被摄体和所述摄像装置之间的距离不同的预定距离处的左眼摄取图像和右眼摄取图像之间的差具有预定值， 其中，在所述提取 步骤中，基于分别用来输出所述左眼摄取图像和所述右眼摄取图像的光束的重心之间的距离、所述图像传感器和所述一个摄像光学系统的出射光瞳之间的距离、以及根据所述预定距离获得的所述预定距离处的左眼摄取图像和右眼摄取图像之间的差，来设置所述区域。
11.一种程序，用于使计算机执行在权利要求9或10中限定的摄像装置的控制方法中的每 个步骤。
【文档编号】G03B35/08GK103733133SQ201280039771
【公开日】2014年4月16日 申请日期:2012年7月11日 优先权日:2011年8月15日
【发明者】上田敏治, 岸隆史 申请人:佳能株式会社