专利名称：图像处理装置、图像处理方法和程序的制作方法
技术领域：
本公开涉及图像处理装置、图像处理方法和程序。
背景技术：
作为已知的图像处理装置，存在拍摄人物、风景和其它被摄体图像的照相机、视频摄录机和其它成像装置。上述一些成像装置拍摄被摄体图像，并且以立体方式(三维方式)在显示部分上显示所拍摄的被摄体图像。用户在看着所显示图像时具有深度感。另外，成像装置使用的一种已知技术是检测人(特定被摄体)的面部并且在显示部分上显示对应于所检测面部的面部框(參见JP-A-2009-290255)。以ニ维方式在显示部分上显示面部框。
发明内容
当以立体方式在显示部分上显示图像时，有时还要求显示面部框(被摄体框)。然而，根据JP-1-2009-290255中所述的技术，因为在三维图像上显示ニ维面部框，所以将具有深度的图像与没有深度的面部框混合，使用户感觉到好像所显示的图像有点问题。因此，希望提供以立体方式在显示部分上显示图像并且使用户能自然地识别出与图像中的特定被摄体对应的被摄体框的显示图像处理装置、图像处理方法和程序。本公开的实施例涉及ー种图像处理装置，其包括被摄体检测器，其检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及合成器，其将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。本公开的另一个实施例涉及ー种图像处理方法，其包括检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。本公开的又ー个实施例涉及ー种指示计算机执行如下处理的程序检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第ニ输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。根据上述本公开的实施例，当以立体方式在显示部分上显示图像时，用户能够自然地地识别出与图像中的特定被摄体对应的被摄体框。
图I是示出成像装置的构造的框图；图2是执行第一面部框合成处理的成像装置的功能框图；图3是用于说明第一面部框合成处理的示意图；图4是用于说明立体图像的图解视图；图5是执行第二面部框合成处理的成像装置的功能框图；图6是用于说明第二面部框合成处理的示意图；图7是执行第三面部框合成处理的成像装置的功能框图；图8是用于说明对面部框合成处理的选择的流程图。
具体实施例方式以下，将參照附图详细说明本公开的优选实施例。在本说明书和附图中，实际具有相同功能的组件具有相同的附图标记，并且将不再对其进行冗余说明。将按照以下次序进行说明。I.图像处理装置的构造2.面部框合成处理3.对面部框合成处理的选择4.总结〈I.图像处理装置的构造〉在本实施例中，举出成像装置作为图像处理装置的例子，并且将參照图I说明成像装置100的构造。图I是示出成像装置100的构造的框图。例如，成像装置100是能够拍摄视频图像的视频摄录机或者能够拍摄静止图像的数码相机。如图I所示，成像装置100包括对焦镜头101、变焦镜头102、成像组件103、模拟信号处理器104、A/D转换器105、定时发生器106、垂直驱动器107、数字信号处理器108、控制器110、电机驱动器112、记录装置115、显示部分116、操作部分118,EEPROM 119,ROM 120、RAMl21和检测器130。对焦镜头101在光轴方向上来回移动使得被摄体被聚焦。变焦镜头102在光轴方向上来回移动使得所拍摄的被摄体图像缩放到所需大小。例如，成像组件103是CCD组件或CMOS组件，并且将透过对焦镜头101和变焦镜头102入射的光转换成电信号。模拟信号处理器104去除从成像组件103输出的电信号中的噪声，并且对电信号执行其它类型的处理。A/D转换器105将成像组件103产生的信号转换成数字信号，以产生原始图像数据。定时发生器106产生控制信号，所述控制信号控制成像组件103和模拟信号处理器104执行处理的处理定吋。垂直驱动器107驱动成像组件103。数字信号处理器108对所产生的原始图像数据执行图像处理，如，光量増益校正和白平衡调节。控制器110包括CPU，并且运行ROM 120或任何其它存储装置中存储的程序，以控制成像装置100所执行的各种处理。电机驱动器112驱动与对焦镜头101关联地设置的对焦镜头驱动电机113和与变焦镜头102关联地设置的变焦镜头驱动电机114。记录装置115存储已经历数字信号处理器108所执行的图像处理的图像数据。显示部分116显示即时显示(live-view)图像和已经过图像处理的图像数据。操作部分118包括释放开关、变焦按钮和操作按钮，用户通过操作按钮输入各种与操作相关的信息。EEPROM 119是非易失性存储器并存储图像数据、各种辅助信息和程序。ROM 120例如存储控制器110使用的程序和计算參数。RAM 121存储控制器110中使用的任一程序和当执行程序时适当变化的參数。检测器130包括传感器并且分析通过镜头输入的图像数据。例如，检测器130用作深度检测器，检测图像数据中包含的深度。检测器130还用作面部检测器，检测图像数据中人的面部。控制聚焦位置的控制器110判断检测器130检测到的面部位置是否与聚焦位
置一致。成像装置100可以在显示部分116上以立体方式显示所拍摄的图像(视频图像或静止图像)(下文中也被称作3D显示)。具体来讲，成像装置100拍摄之间存在视差的左眼图像和右眼图像，并且在显示部分116上显示所拍摄的左眼图像(为了便于说明，称作左图 像)和所拍摄的右眼图像(为了便于说明，称作右图像)，以便进行立体显示。用户因而将显示部分116上显示的图像识别为具有深度信息的图像。虽然在图I中为了便于说明分开绘制了对焦镜头101、变焦镜头102和成像组件103 (这三个组件统称为成像器)，但是能够进行立体显示的成像装置100实际上包括用于拍摄左图像的成像器和用于拍摄右图像的成像器。该两个成像器拍摄之间存在视差的图像。<2.面部框合成处理〉当在显示部分116上以立体方式显示图像时，有时还要求显示面部框。为了满足上述要求，以立体方式显示图像的显示部分116需要使用户能自然地识别面部框。为了满足需要，根据本实施例的成像设备100执行面部框合成处理，以使用户识别的被摄体(例如，面部)的深度与被摄体框(例如，面部框)的深度彼此一致。在本实施例中，作为面部框合成处理，成像装置100首先检测之间存在视差的第一输入图像(例如，左图像)和第二输入图像(例如，右图像)中的至少ー个中的预定被摄体(例如，面部)。然后，成像装置100将与所检测面部对应的面部框与以立体方式显示在显示部分116上的左图像和右图像分别合成，使得与左图像和右图像合成的面部框也提供深度感。根据面部框合成处理，因为用户识别的面部的深度和面部框的深度彼此一致，所以所得的显示图像被用户自然地识别出。以下，将參照第一面部框合成处理、第二面部框合成处理和第三面部框合成处理详细说明面部框合成处理。在本实施例中，第一面部框合成处理对应于第一处理，并且第二或第三面部框合成处理对应于第二处理。(第一面部框合成处理)首先，将说明第一面部框合成处理。第一面部框合成处理包括分别地对形成立体图像的左图像和右图像检测人面部，基于对左图像执行的面部检测将面部框与左图像合成，并且基于对右图像执行的面部检测将面部框与右图像合成。将參照图2和图3说明第一面部框合成处理。图2是执行第一面部框合成处理的成像装置100的功能框图。图3是用于说明第一面部框合成处理的示意图。如图2中所示，成像装置100包括图像处理器212、面部检测器214、面部框合成器216、图像处理器222、面部检测器224、面部框合成器226和图像合成器232。用图I所示的数字信号处理器108实现图像处理器212和222、面部框合成器216和226以及图像合成器232，并且用图I所示的检测器130实现面部检测器214和224。在形成立体图像的左图像和右图像之中，用于拍摄左图像的成像器将关于左图像的数据输入到图像处理器212。图像处理器212对所输入的左图像执行各种类型的图像处理，并且向面部检测器214和面部框合成器216输出已经过图像处理的图3所示的左图像Al。 面部检测器214检测从图像处理器212输入的左图像Al中的人面部(对应于面部的区域)。当在左图像中存在多个人面部时，面部检测器214检测多个面部。面部检测器214还检测面部的位置。面部检测器214向面部框合成器216输出面部检测的結果。基于面部检测器214的检测結果，面部框合成器216将面部框Fl与从图像处理器212输入的左图像Al合成。也就是说，面部框合成器216将与人面部对应的面部框Fl与左图像Al合成，产生图3所示的左图像A2。面部框合成器216向图像合成器232输出与面部框Fl合成的左图像A2。用于拍摄右图像的成像器将关于形成立体图像的右图像的数据输入到图像处理器222。图像处理器222对所输入的右图像执行各种类型的图像处理，并且向面部检测器224和面部框合成器226输出已经过图像处理的图3所示的右图像BI。在由不同成像器拍摄的右图像BI和左图像A之间存在视差。面部检测器224检测从图像处理器222输入的右图像BI中的人面部(对应于面部的区域)。当在右图像中存在多个人面部时，面部检测器224检测多个面部。面部检测器224向面部框合成器226输出面部检测的结果。基于面部检测器224的检测結果，面部框合成器226将面部框F2与从图像处理器222输入的右图像BI合成。也就是说，面部框合成器226将与人面部对应的面部框F2与右图像BI合成，产生图3所示的右图像B2。面部框合成器226向图像合成器232输出与面部框F2合成的右图像B2。图像合成器232将从面部框合成器216输入的左图像A2与从面部框合成器226输入的右图像B2合成为单个帧Cl，这单个帧Cl具有如图3所示并排排列的两个图像(所谓的“并排法”(side-by-side method))。在并排法中，通过压缩左图像A2使得其水平宽度减半来得到帧Cl中的左图像，并且通过压缩右图像B2使得其水平宽度减半来得到帧Cl中的右图像。图像合成器232向显示部分116 (图I)输出合成的帧Cl。显示部分116扩展所输入帧Cl中的左图像和右图像中每个的水平宽度并将其顺序显示。在顺序显示左图像和右图像的时间段内，用户例如通过快门眼镜(shutteringglasses)用右眼在视觉上识别到右图像并且用左眼在视觉上识别到左图像。可供选择地，成像装置100可以通过使用所谓的偏光法来显示图像，并且使用户能在视觉上识别到右图像和左图像。因为包含面部框的右图像和左图像之间存在视差，所以如图4中所示，用户识别被摄人物的深度以及面部框的深度，图4是用于说明立体图像的图解视图。根据第一面部框合成处理，因为左图像和右图像之间具有视差，所以与左图像合成的面部框Fl和与右图像合成的面部框F2之间也具有视差。因为面部框Fl和面部框F2之间的视差等于左图像和右图像之间的视差，所以用户识别的人面部的深度和面部框的深度彼此一致。结果，用户能够自然地识别在显示部分116上以立体方式显示的图像中的面部框。(第二面部框合成处理)接着，将说明第二面部框合成处理。在第二面部框合成处理中，首先，对左图像或右图像(在以下说明中是左图像)执行面部检测和深度检测。然后，基于对左图像执行的面部检测的结果，将面部框与左图像合成，并且基于左图像中的面部框和对左图像执行的深度检测的结果，将面部框与右图像合成。将參照图5和图6说明第二面部框合成处理。图5是执行第二面部框合成处理的成像装置100的功能框图。图6是用于说明第二面部框合成处理的示意图。如图5中所示，成像装置100包括图像处理器212、面部检测器214、深度检测器218、图像处理器222、图像合成器232。用图I所示的数字信号处理器108实现图像处理器212和222以及图像合成器232，并且用图I所示的检测器130实现面部检测器214和深度 检测器218。在形成立体图像的左图像和右图像之中，将关于左图像的数据输入到图像处理器212。图像处理器212对所输入的左图像执行各种类型的图像处理，并且向面部检测器214、深度检测器218和图像合成器232输出已经过图像处理的图6所示的左图像Al。面部检测器214检测从图像处理器212输入的左图像Al中的人物的面部(对应于面部的区域)。面部检测器214向图像合成器232输出面部检测的結果。深度检测器218检测左图像Al中被摄体(如，面部)的深度。例如，深度检测器218通过获取图像中关于被摄体亮度对比度的信息来检测被摄体的深度。深度检测器218向图像合成器232输出深度检测的結果。将关于形成立体图像的右图像的数据输入到图像处理器222。图像处理器222对所输入的右图像执行各种类型的图像处理，并且向面部合成器232输出已经过图像处理的图6所示的右图像BI。图像合成器232基于面部检测器214的检测结果产生与左图像Al中检测到的面部对应的面部框F1，并且将所产生的面部框Fl与左图像Al合成。图像合成器232还基于与左图像Al中检测到的面部对应的面部框Fl和深度检测器218检测到的深度，产生与右图像BI对应的面部框F2。具体来讲，图像合成器232基于检测到的深度获取视差，并且通过将面部框Fl移动对应于所获取视差的距离，产生面部框F2。然后，图像合成器232将所产生的面部框F2与右图像BI合成(參见图6)。因为基于第二面部框合成处理中深度检测器218检测到的深度来确定视差，所以与第一面部框合成处理中不同，在第二面部框合成处理中，对右图像没有执行面部检测。图像合成器232将与面部框Fl合成的左图像和与面部框F2合成的右图像合成为单个帧Cl，这单个帧Cl具有如图6所示并排排列的两个图像(上述的“并排法”)。图像合成器232向显不部分116输出合成的巾贞Cl。显示部分116扩展所输入帧Cl中的左图像和右图像中每个的水平宽度并将其顺序显示。在顺序显示左图像和右图像的时间段内，用户例如通过快门眼镜用右眼在视觉上识别到右图像并且用左眼在视觉上识别到左图像。因为包含面部框的右图像和左图像之间存在视差，所以如上述图4中一祥，用户识别被摄人物的深度以及面部框的深度。
根据第二面部框合成处理，如在第一面部框合成处理中一祥，与左图像合成的面部框Fl和与右图像合成的面部框F2之间也具有视差。因为面部框Fl和面部框F2之间的视差等于左图像和右图像之间的视差，所以用户识别的人面部的深度和面部框的深度彼此一致。结果，用户能够自然地识别以立体方式显示在显示部分116上的图像中的面部框。因为如上所述在第二面部框合成处理中不需要对右图像执行面部检测，所以与第一面部框合成处理相比，能够减少处理量并且因此能够缩短处理时间段。(第三面部框合成处理)接着，将说明第三面部框合成处理。在第三面部框合成处理中，首先对左图像或右图像(以下说明中为左图像)执行面部检测，并且对左图像和右图像都执行深度检测。然后，基于对左图像执行的面部检测的结果将面部框与左图像合成，并且基于左图像中的面部框以及对左图像和右图像执行的深度检测的结果，将面部框与右图像合成。将參照图7说明第三面部框合成处理。图7是执行第三面部框合成处理的成像装置100的功能框图。如图7中所示，成像装置100包括图像处理器212、面部检测器214、深度检测器218、图像处理器222和图像合成器232。图7中的图像处理器212、面部检测器214和图像处理器222与图5中的图像处理器212、面部检测器214和图像处理器222具有相同的功能，因此将不再对其进行说明。与只基于左图像Al检测深度的第二面部框合成处理不同的是，深度检测器218基于左图像Al和右图像BI检测诸如面部的被摄体的深度。例如，深度检测器218通过从左图像Al中提取特定部分并且从右图像BI中提取对应的特定部分进行块匹配，来检测被摄体的深度。深度检测器218向图像合成器232输出深度检测的結果。图像合成器232基于面部检测器214的检测结果产生与左图像Al中检测到的面部对应的面部框F1，并且将所产生的面部框Fl与左图像Al合成。图像合成器232还基于与左图像Al中检测到的面部对应的面部框Fl和深度检测器218检测到的深度，产生与右图像BI对应的面部框F2。然后，图像合成器232将所产生的面部框F2与右图像BI合成(參见图6)。通过在考虑到深度检测器218检测到深度的情况下产生面部框F2，面部框F2相对于面部框Fl存在视差。图像合成器232将与面部框Fl合成的左图像和与面部框F2合成的右图像合成为单个帧Cl，这单个帧Cl具有如图6所示并排排列的两个图像，并且向显示部分116输出合成的帧Cl。显示部分116顺序显示与面部框Fl合成的左图像和与面部框F2合成的右图像，使得不仅被摄人物而且面部框将伴随深度信息显示，如上述图4中一祥。根据第三面部框合成处理，如在第二面部框合成处理中一祥，与左图像合成的面部框Fl和与右图像合成的面部框F2之间也存在视差。因为面部框Fl和面部框F2之间的视差等于左图像和右图像之间的视差，所以用户识别到的人面部的深度和面部框的深度彼此一致。结果，用户能够自然地识别到以立体方式显示在显示部分116上的图像中的面部框。另外，根据第三面部框合成处理，因为基于左图像和右图像检测到深度，所以与仅基于左图像和右图像中的一个检测深度的情况相比，能够以更高精度检测深度。以上已说明了三种类型的面部框合成处理，但是成像装置100可以执行的面部框、合成处理不限于此。将參照上述图5说明另ー个面部框合成处理。在另ー个面部框合成处理中，深度检测器218通过使用连续的两个左图像来检测深度。因为是在不同的时间点拍摄连续的两个图像，所以这两个图像互不相同。依据这ー事实，深度检测器218通过使用在不同时间点拍摄的两个左图像来检测深度。例如，深度检测器218通过从两个左图像之一中提取特定部分并且从另ー个左图像提取对应的特定部分并且执行块匹配来检测深度。图像合成器232基于检测到的深度和对左图像执行面部检测的结果来产生右图像的面部框。由此在右图像中产生的面部框相对于左图像中的面部框存在视差，如在上述第三面部框合成处理中一祥。<3.对面部框合成处理的选择>以上已说明了成像装置100可以执行的多个面部框合成处理。成像装置100中的控制器110根据如何拍摄被摄体图像从多个面部框合成处理中选择ー个面部框合成处理， 并且执行所选择的这个处理。以此方式，当以立体方式实时显示图像时，可以在考虑到例如深度检测的检测精度和执行面部框合成处理所需时间的情况下，执行多个面部框合成处理中最佳的面部框合成处理。例如，控制器110根据同一平面内检测到的面部位置与聚焦位置(例如，取景器中的中心位置)是否一致，选择并执行多个面部框合成处理中的ー个面部框合成处理。具体来讲，当同一平面内检测到的面部位置与聚焦位置一致时，控制器110选择并执行第二面部框合成处理。另ー方面，当同一平面内检测到的面部位置与聚焦位置不一致时，控制器110选择并执行第一或第三面部框合成处理。与当在同一平面内检测到的面部位置与聚焦位置不一致时相比，当同一平面内检测到的面部位置与聚焦位置一致时，检测深度的精度更高。依据这一事实，当面部位置与聚焦位置一致时，基于左图像或右图像检测深度(第二面部框合成处理)的精度仍然足够高，并且能够缩短处理时间段。另ー方面，当面部位置与聚焦位置不一致吋，同时基于左图像和右图像检测深度(第一或第三面部框合成处理)防止深度检测的精度降低。另外，例如，控制器110根据面部检测器214(面部检测器224)检测到的面部数量选择并执行三个面部框合成处理中的ー个面部框合成处理。具体来讲，当检测到的面部数量大于预定数量时，控制器110选择并执行第三面部框合成处理，而当检测到的面部数量小于预定数量时，控制器110选择并执行第一面部框合成处理。如下地确定预定数量依据深度检测器218在固定时间段内检测深度而面部检测器214在与面部数量成比例的时间段内检测面部这一事实，预定数量是使检测面部所需时间段比检测深度所需时间段更长的面部的最少数量。根据面部数量选择并执行三个面部框合成处理中的ー个面部框合成处理具有以下优点当图像中面部的数量增加时，控制器110需要执行的处理量増加。因为在第三面部框合成处理中不需要对右图像执行面部检测，所以当待检测的面部数量增加时，第三面部框合成处理中所需的处理量小于对右图像执行面部检测的第一面部框合成处理中所需的处理量。当面部数量多时，选择并执行第三面部框合成处理从而防止面部框合成处理中所需的处理量增加。另ー方面，当面部数量少时，执行第一面部框合成处理使面部框Fl和面部框F2之间的视差更精确。(对面部框合成处理的选择的具体实例)
将參照图8说明对面部框合成处理的选择的具体实例。图8是用于说明对面部框合成处理的选择的流程图。控制器110运行ROM 120或任何存储装置中存储的程序，以执行流程图中的程序。图8中的流程图始于面部检测器214检测所输入的左图像中的面部的时间点。假设，在以下处理中，选择第一面部框合成处理至第三面部框合成处理中的ー个面部框合成处理。首先，控制器110判断面部检测器214是否已经以高精度检测了面部(步骤S102)。例如，控制器110预先掌握表示面部检测中精确程度的值(阈值)或任何其它类似值，当判断出的精度高于阈值时，控制器110判定精度足够高，而当判断出的精度低于阈值时，控制器110判定精度不够高。当步骤S102中的判断表示面部检测的精度足够高时(是)，控制器110判断检测到的面部数量是否为I以及检测到的面部位置是否与聚焦位置一致(步骤S104)。 当步骤S104中的判断结果为“是”时，控制器110执行图5所示的第二面部框合成处理(步骤S106)。以这种方式，能够提高深度检测的精度，并且能够缩短处理时间段。当步骤S104中的判断结果为“否”时，控制器110判断检测到的面部数量是否大于或等于预定数量(步骤S108)。当步骤S108中的判断表示面部数量大于预定数量时(是)，控制器110选择并执行图7所示的第三面部框合成处理(步骤S110)。如上所述通过当面部数量多时选择并执行第三面部框合成处理，与选择并执行任何其它面部框合成处理的情况相比，防止了面部框合成处理中所需的处理量增加。当步骤S108中的判断表示面部数量小于预定数量时(否)，控制器110选择并执行图2所示的第一面部框合成处理(步骤S112)。通过执行第一面部框合成处理，提高了面部框Fl和F2之间的视差的精度。当步骤S102中的判断表示面部检测中的精度不够高时(否)，控制器110判断检测到的面部数量是否为I以及检测到的面部位置是否与聚焦位置一致(步骤S114)。当步骤S114中判断为“是”时，控制器110执行第二面部框合成处理(步骤S116)。以这种方式，能够提高深度检测的精度，并且能够缩短处理时间段。当步骤S114中的判断结果为“否”时，控制器110执行第三面部框合成处理(步骤S118)，由此防止降低深度检测的精度。根据上述处理，当以立体方式实时显示图像时，能够在考虑到例如深度检测的检测精度和执行面部框合成处理所需时间的情况下，执行多个面部框合成处理中最佳的面部框合成处理。<4.总结 >如上所述，根据本实施例的成像装置100检测之间存在视差的第一输入图像(例如，左图像)和第二输入图像(例如，右图像)中的至少ー个中的预定被摄体(例如，面部)。然后，成像装置100将与检测到的面部对应的面部框与以立体方式在显示部分116上显示的左图像和右图像分别合成，使得与左图像和右图像合成的面部框也具有深度感。因为上述面部框合成处理使形成立体图像的两个图像能合成与两个图像之间的视差对应的两个面部框，所以用户识别到的被摄体的深度和被摄体框的深度彼此一致。结果，当以立体方式在显示部分116上显示图像时，用户能够自然地识别到被摄体框。
已參照附图详细说明了本公开的优选实施例，但是本公开不限于实施例。本公开技术领域中的普通技术人员显而易见可以在所附权利要求书阐述的技术精神范围内想到各种变化形式和修改形式，并且这些变化形式和修改形式当然落入本公开的技术范围内。已參照作为被摄体的人面部进行了以上说明，但是被摄体不限于此。例如，可供选择地，被摄体可以是整个人、宠物、植物和任何其它特定被摄体。已參照作为图像处理装置的成像装置(如，视频摄录机)进行了以上说明，但是图像处理装置不限于此。例如，图像处理装置可以是用于以立体方式在显示部分上显示图像数如，移动电话、PDA、游戏机、电子词典和笔记本个人电脑。可供选择地，图像处理装置可以在外部显示装置上显示图像。上述实施例的流程图中所示的步骤不仅包括以所述次序按时间序列执行的处理，而且包括不必按时间序列而是并行或独立执行的处理。当然，在一些情况下，视情况而定，可以按其它时间序列执行按以上说明的时间序列执行的步骤。
本公开还可以实现为以下构造。(I) ー种图像处理装置，包括被摄体检测器，其检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及合成器，其将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。(2)根据(I)中所述的图像处理装置，其中，所述被摄体检测器检测所述被摄体的面部，并且所述被摄体框是与所述面部对应的面部框。(3)根据(I)或(2)中所述的图像处理装置，其中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将与所述第二输入图像中检测到的所述被摄体对应的第二被摄体框与所述第二输入图像合成。(4)根据(I)或(2)中所述的图像处理装置，还包括深度检测器，所述深度检测器基于所述第一输入图像检测所述被摄体的深度，其中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将基于所述第一被摄体框和所述深度检测器检测到的所述深度而产生的第二被摄体框与所述第二输入图像合成。(5)根据(I)或(2)中所述的图像处理装置，还包括深度检测器，所述深度检测器基于所述第一输入图像和所述第二输入图像检测所述被摄体的深度，其中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将基于所述第一被摄体框和所述深度检测器检测到的所述深度而产生的第二被摄体框与所述第二输入图像合成。(6)根据(I)至(4)中的任ー项所述的图像处理装置，还包括深度检测器，其基于所述第一输入图像检测所述被摄体的深度；以及控制器，其选择并执行第一处理和第二处理中的ー个，在所述第一处理中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将与所述第二输入图像中检测到的所述被摄体对应的第二被摄体框与所述第二输入图像合成，并且在所述第二处理中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将基于所述第一被摄体框和所述深度检测器检测到的所述深度而产生的第二被摄体框与所述第二输入图像合成。(7)根据(6)中所述的图像处理装置，其中，当所述被摄体检测器检测到的被摄体数量大于或等于预定数量吋，所述控制器选择并执行所述第二处理，而当所述被摄体检测器检测到的被摄体数量小于预定数量时，所述控制器选择并执行所述第一处理。(8)根据出)中所述的图像处理装置，其中，所述控制器检测输入图像中的聚焦位置和被摄体的位置，并且当所述聚焦位置与所述被摄体的位置一致吋，所述控制器选择并执行所述第二处理，而当所述聚焦位置与所述被摄体的位置不一致时，所述控制器选择并执行所述第一处理。(9) ー种图像处理方法，包括
检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。(10) ー种指示计算机执行如下处理的程序检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。本公开包含与2011年4月11日在日本专利局提交的日本优先权专利申请JP2011-087211中公开的主题相关的主题，该优先权专利申请的全部内容以引用方式并入本文。本领域的技术人员应该理解，可以根据设计要求和其它因素进行各种修改、合成、子合成和替代，只要它们落入所附权利要求书或其等价物的范围内。
权利要求
1.一种图像处理装置，包括 被摄体检测器，其检测之间存在视差的第一输入图像和第二输入图像中的至少一个中的预定被摄体；以及 合成器，其将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。
2.根据权利要求I所述的图像处理装置，其中，所述被摄体检测器检测所述被摄体的面部，并且 所述被摄体框是与所述面部对应的面部框。
3.根据权利要求I所述的图像处理装置，其中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将与所述第二输入图像中检测到的所述被摄体对应的第二被摄体框与所述第二输入图像合成。
4.根据权利要求I所述的图像处理装置，还包括深度检测器，所述深度检测器基于所述第一输入图像检测所述被摄体的深度， 其中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将基于所述第一被摄体框和所述深度检测器检测到的所述深度而产生的第二被摄体框与所述第二输入图像合成。
5.根据权利要求I所述的图像处理装置，还包括深度检测器，所述深度检测器基于所 述第一输入图像和所述第二输入图像检测所述被摄体的深度， 其中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将基于所述第一被摄体框和所述深度检测器检测到的所述深度而产生的第二被摄体框与所述第二输入图像合成。
6.根据权利要求I所述的图像处理装置，还包括 深度检测器，其基于所述第一输入图像检测所述被摄体的深度；以及 控制器，其选择并执行第一处理和第二处理中的一个， 在所述第一处理中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将与所述第二输入图像中检测到的所述被摄体对应的第二被摄体框与所述第二输入图像合成，并且 在所述第二处理中，所述合成器不仅将与所述第一输入图像中检测到的所述被摄体对应的第一被摄体框与所述第一输入图像合成，而且将基于所述第一被摄体框和所述深度检测器检测到的所述深度而产生的第二被摄体框与所述第二输入图像合成。
7.根据权利要求6所述的图像处理装置，其中，当所述被摄体检测器检测到的被摄体数量大于或等于预定数量时，所述控制器选择并执行所述第二处理，而当所述被摄体检测器检测到的被摄体数量小于预定数量时，所述控制器选择并执行所述第一处理。
8.根据权利要求6所述的图像处理装置，其中， 所述控制器检测输入图像中的聚焦位置和被摄体的位置，并且 当所述聚焦位置与所述被摄体的位置一致时，所述控制器选择并执行所述第二处理，而当所述聚焦位置与所述被摄体的位置不一致时，所述控制器选择并执行所述第一处理。
9.一种图像处理方法，包括检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及 将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。
10.ー种指示计算机执行如下处理的程序 检测之间存在视差的第一输入图像和第二输入图像中的至少ー个中的预定被摄体；以及 将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第 一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。
全文摘要
本发明提供了一种图像处理装置、图像处理方法和程序，该图像处理装置包括被摄体检测器，其检测之间存在视差的第一输入图像和第二输入图像中的至少一个中的预定被摄体；以及合成器，其将与检测到的所述被摄体对应的被摄体框与以立体方式在显示部分上显示的所述第一输入图像和所述第二输入图像中的每个合成，使得与所述第一输入图像和所述第二输入图像合成的所述被摄体框也具有深度感。
文档编号H04N5/232GK102739958SQ201210096079
公开日2012年10月17日 申请日期2012年4月1日 优先权日2011年4月11日
发明者铃木纯 申请人:索尼公司