图像处理装置、摄像装置、图像处理方法及图像处理程序的制作方法
【技术领域】
[0001]本发明涉及图像处理装置、摄像装置、图像处理方法及图像处理程序。
【背景技术】
[0002]作为数码相机，除了具备使用了相位差检测方式、对比度检测方式的自动对焦外还具备能够由使用者手动进行调焦的所谓手动对焦模式的相机已经广为人们所知。
[0003]作为具有手动对焦模式的数码相机，已知采用了如下方法的结构:以能够对被摄体进行确认并进行调焦的方式设置反射镜，使用了显示目视的相位差的分裂式微棱镜屏。另外，也已知采用了确认基于目视的对比度的方法。
[0004]然而，在近年来普及的省略了反射镜的数码相机中，由于没有反射镜，因此没有显示相位差并对被摄体像进行确认的方法，不得不依赖于对比度检测方式。可是，在该情况下，不能显示(liquid crystal display:液晶显示器)等显示装置的分辨率以上的对比度，不得不采用进行局部放大等而显示的方法。
[0005]因此，近年来，为了在手动对焦模式时操作者容易进行使焦点与被摄体对焦的作业，将裂像显示在即时预览图像(也称作实时取景图像)内。在此，裂像例如是指如下的分割图像:是分割成两份的分割图像(例如沿上下方向分割后的各图像)，且根据焦点的偏离而沿视差产生方向(例如左右方向)产生偏离，当处于对焦的状态时视差产生方向的偏离消失。操作者(例如摄影者)操作手动聚焦环而进行对焦，以使裂像(例如沿上下方向分割后的各图像)的偏离消失。
[0006]日本特开2009-147665号公报(以下，称作专利文献I)记载的摄像装置中，生成对由来自摄像光学系统的光束中的、由瞳分割部分割后的光束形成的第一被摄体像和第二被摄体像分别进行光电转换而成的第一图像和第二图像。并且，使用这些第一图像和第二图像来生成裂像，并且对由没有被瞳分割部分割的光束形成的第三被摄体像进行光电转换而生成第三图像。并且，将第三图像显示于显示部，并且在第三图像内显示所生成的裂像，且将从第三图像提取的颜色信息附加于裂像。通过如此将从第三图像提取的颜色信息附加于裂像，能够使裂像的视觉确认性良好。
[0007]日本特开2000-078607号公报(以下，称作专利文献2)记载的图像处理装置具有对从图像输入装置输入的图像信号进行色彩平衡调整的色彩平衡调整处理单元。该色彩平衡调整处理单元根据图像信号来推定图像信号的图像取得时的照明光源的色度，并基于所推定的照明光源的色度对图像信号进行色彩平衡调整。
【发明内容】
[0008]发明要解决的课题
[0009]然而，专利文献I记载的摄像装置中，存在第三图像的显示颜色的颜色特性和裂像的显示颜色的颜色特性近似的情况。在该情况下，存在第三图像与裂像的边界线变得难于目视确认这样的问题点。
[0010]另外，即使利用专利文献2记载的图像处理装置而对裂像、除裂像以外的图像(例如背景图像)进行色彩平衡调整，也存在除裂像以外的图像与裂像的边界线变得难于目视确认这样的问题点。
[0011]本发明鉴于这种实际情况而提出，其目的在于提供能够提高第一显示用图像与用于对焦确认的第二显示用图像的边界线的视觉确认性的图像处理装置、摄像装置、图像处理方法及图像处理程序。
[0012]用于解决课题的手段
[0013]本发明的第一方式所涉及的图像处理装置包括:第一显示用图像生成部，基于从包含第一像素组和第二像素组的摄像元件输出的图像信号而生成第一显示用图像，上述第一像素组和第二像素组使通过了摄影透镜中的第一区域和第二区域的被摄体像进行光瞳分割而分别成像；第二显示用图像生成部，基于从上述第一像素组和第二像素组输出的第一图像信号和第二图像信号，生成用于对焦确认的第二显示用图像；获取部，取得由上述第一显示用图像生成部生成的上述第一显示用图像的颜色信息；确定部，基于由上述获取部取得的颜色信息，将具有与上述第一显示用图像的颜色特性不同的颜色特性的颜色确定为上述第二显示用图像的显示颜色；显示部，显示图像；及显示控制部，使上述显示部显示由上述第一显示用图像生成部生成的上述第一显示用图像并且在该第一显示用图像的显示区域内显示由上述第二显示用图像生成部生成的上述第二显示用图像。由此，与不具有本结构的情况相比，能够提高第一显示用图像与用于对焦确认的第二显示用图像的边界线的视觉确认性。
[0014]本发明的第二方式在本发明的第一方式的基础上，也可以将具有上述不同的颜色特性的颜色设为能够目视确认是与上述第一显示用图像的颜色特性不同的颜色特性这一情况的颜色。由此，与不具有本结构的情况相比，能够视觉性地识别第一显示用图像和第二显不用图像。
[0015]本发明的第三方式在本发明的第一方式或第二方式的基础上，也可以是，上述获取部从上述第一显示用图像的一部分或全部取得上述颜色信息。由此，与不具有本结构的情况相比，能够以简单的结构使第二显示用图像的颜色特性和第一显示用图像的颜色特性高精度地不同。
[0016]本发明的第四方式在本发明的第一方式或第二方式的基础上，也可以是，上述获取部基于上述第一显示用图像和上述第一图像、或者基于上述第一显示用图像和上述第二图像、或基于上述第一显示用图像和上述第二显示用图像，取得上述颜色信息。由此，与不具有本结构的情况相比，能够使第二显示用图像的颜色特性和第一显示用图像的颜色特性高精度地不同。另外，根据第四技术方案记载的发明，即使第一显示用图像发白，第一像素组和第二像素组的灵敏度也较低，因此能够取得颜色信息。
[0017]本发明的第五方式在本发明的第一方式至第四方式中的任一方式的基础上，也可以是，上述摄像元件具有:用于拍摄上述第一显示用图像的通常摄像区域和用于拍摄上述第二显示用图像并且与上述通常摄像区域相邻的对焦确认摄像区域，上述获取部从上述第一显示用图像中的、从上述通常摄像区域中的与上述对焦确认摄像区域的边界侧的边缘部输出的图像取得上述颜色信息。由此，与不具有本结构的情况相比，能够使第一显示用图像与第二显示用图像的边界鲜明。
[0018]本发明的第六方式在本发明的第一方式至第五方式中的任一方式的基础上，也可以将上述颜色信息设为表示上述第一显示用图像的物体颜色的颜色特性的颜色信息。由此，与不具有本结构的情况相比，即使在第一显示用图像中与光源色相比物体颜色处于支配地位的情况下，也能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0019]本发明的第七方式在本发明的第六方式的基础上，也可以将上述颜色特性设为色相。由此，与不具有本结构的情况相比，能够以简单的结构更进一步提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0020]本发明的第八方式在本发明的第六方式或第七方式的基础上，也可以将具有上述不同的颜色特性的颜色设为在色相环中与上述第一显示用图像的物体颜色隔开预先规定的角度的颜色。由此，与不具有本结构的情况相比，能够容易地确定适当的物体颜色作为具有与第一显示用图像的颜色特性不同的颜色特性的颜色。
[0021]本发明的第九方式在本发明的第六方式至第八方式中的任一方式的基础上，也可以将上述第一显示用图像的物体颜色的颜色特性设为上述第一显示用图像中的原色成分的构成比。由此，与不具有本结构的情况相比，能够在提高第一显示用图像与第二显示用图像的边界线的视觉确认性的基础上容易地确定适当的颜色特性作为第一显示用图像的物体颜色的颜色特性。
[0022]本发明的第十方式在本发明的第九方式的基础上，也可以将利用包含减函数的输入输出函数对上述构成比进行转换而得到的转换后的上述构成比设为上述不同的颜色特性。由此，与不具有本结构的情况相比，能够以简单的结构提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0023]本发明的第十一方式在本发明的第九方式的基础上，也可以将利用颜色转换数据对上述构成比进行转换而得到的转换后的上述构成比设为上述不同的颜色特性。由此，与不具有本结构的情况相比，能够以简单的结构提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0024]本发明的第十二方式在本发明的第十一方式的基础上，也可以将上述颜色转换数据设为基于包含减函数的输入输出函数而生成的颜色转换数据。由此，与不具有本结构的情况相比，能够以简单的结构提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0025]本发明的第十三方式在本发明的第一方式至第五方式中的任一方式的基础上，也可以将上述颜色信息设为表示上述第一显示用图像的光源色的颜色特性的颜色信息。由此，与不具有本结构的情况相比，即使在第一显示用图像中与物体颜色相比光源色处于支配地位的情况下，也能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0026]本发明的第十四方式在本发明的第一方式至第十三方式中的任一方式的基础上，也可以是，将上述第一像素组和第二像素组分别设为单色的像素组，上述第二显示用图像生成部基于从上述第一像素组和第二像素组输出的上述第一图像信号和第二图像信号，生成无彩色的图像作为上述第二显示用图像。由此，与不具有本结构的情况相比，能够以简单的结构得到无彩色的第二显示用图像。
[0027]本发明的第十五方式在本发明的第十四方式的基础上，也可以是，在上述第二显示用图像是无彩色图像的情况下，上述确定部基于由上述获取部取得的颜色信息，将具有与上述第一显示用图像的颜色特性不同的颜色特性的有彩色确定为上述第二显示用图像的显示颜色。由此，与不具有本结构的情况相比，能够以简单的结构确定作为第二显示用图像的显示颜色的有彩色。
[0028]本发明的第十六方式在本发明的第一方式至第十五方式中的任一方式的基础上，也可以是，在上述第一显示用图像和第二显示用图像是无彩色图像的情况下，上述确定部基于由上述获取部取得的颜色信息，将具有与上述第一显示用图像的颜色特性不同的颜色特性的有彩色确定为上述第二显示用图像的显示颜色。由此，与不具有本结构的情况相比，能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0029]本发明的第十七方式在本发明的第一方式至第十六方式中的任一方式的基础上，也可以是，上述确定部基于由上述获取部取得的颜色信息，将在上述第二显示用图像中的基于上述第一图像的区域和基于上述第二图像的区域中不同的有彩色确定为所述第二显示用图像的显示颜色，该有彩色具有与上述第一显示用图像的颜色特性不同的颜色特性。由此，与不具有本结构的情况相比，在第二显示用图像中基于第一图像的图像和基于第二图像的图像变得易于视觉性地识别。
[0030]本发明的第十八方式在本发明的第一方式至第十七方式中的任一方式的基础上，也可以是，在满足使上述第一显示用图像的颜色特性和上述第二显示用图像的颜色特性接近的预先规定的条件的情况下，上述确定部基于由上述获取部取得的颜色信息，将具有以预先规定的程度与上述第一显示用图像的颜色特性接近的颜色特性的颜色进一步确定为上述第二显示用图像的显示颜色。由此，与不具有本结构的情况相比，能够使第一显示用图像与第二显示用图像的边界难于视觉性地识别。
[0031]本发明的第十九方式在本发明的第一方式至第十八方式中的任一方式的基础上，也可以是，上述摄像元件具有第三像素组，该第三像素组使被摄体像不进行光瞳分割而成像并输出第三图像信号，上述第一显示用图像生成部基于从上述第三像素组输出的上述第三图像信号，生成上述第一显示用图像。由此，与不具有本结构的情况相比，能够提高第一显示用图像的画质。
[0032]本发明的第二十方式所涉及的摄像装置包括:本发明的第一方式至第十九方式中的任一图像处理装置；及存储从上述摄像元件输出的图像的存储部。由此，与不具有本结构的情况相比，能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0033]本发明的第二十一方式所涉及的图像处理方法包括:第一显示用图像生成工序，基于从包含第一像素组和第二像素组的摄像元件输出的图像信号而生成第一显示用图像，上述第一像素组和第二像素组使通过了摄影透镜中的第一区域和第二区域的被摄体像进行光瞳分割而分别成像；第二显示用图像生成工序，基于从上述第一像素组和第二像素组输出的第一图像信号和第二图像信号，生成第二显示用图像；获取工序，取得由上述第一显示用图像生成部生成的上述第一显示用图像的颜色信息；确定工序，基于由上述获取工序取得的颜色信息，将具有与上述第一显示用图像的颜色特性不同的颜色特性的颜色确定为上述第二显示用图像的显示颜色；及显示控制工序，使显示图像的显示部显示由上述第一显示用图像生成工序生成的上述第一显示用图像并且在该第一显示用图像的显示区域内显示由上述第二显示用图像生成工序生成的上述第二显示用图像。由此，与不具有本结构的情况相比，能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0034]为了实现上述目的，本发明的第二十二方式所涉及的程序用于使计算机作为本发明的第一方式至第十九方式中的任一图像处理装置中的上述第一显示用图像生成部、上述第二显示用图像生成部、上述获取部、上述确定部和上述显示控制部而发挥功能。由此，与不具有本结构的情况相比，能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性。
[0035]发明效果
[0036]根据本发明，可得到能够提高第一显示用图像与第二显示用图像的边界线的视觉确认性这样的效果。
【附图说明】
[0037]图1是表示第一实施方式所涉及的作为镜头互换式相机的摄像装置的外观的一例的立体图。
[0038]图2是表示图1所示的摄像装置的背面侧的后视图。
[0039]图3是表示第一实施方式所涉及的摄像装置的电气系统的结构的一例的框图。
[0040]图4是表示设于第一实施方式所涉及的摄像装置所包含的摄像元件上的滤色器的配置的一例的概略配置图。
[0041]图5是用于说明根据图4所示的滤色器所包含的2X2像素的G像素的像素值来判别相关方向的方法的图。是用于说明基本排列图案的概念的图。
[0042]图6是用于说明图4所示的滤色器所包含的基本排列图案的概念的图。
[0043]图7是表示设于第一实施方式所涉及的摄像装置所包含的摄像元件上的遮光构件的配置的一例的概略配置图。
[0044]图8是表示第一实施方式所涉及的摄像装置的摄像元件所包含的相位差像素(第一像素和第二像素)的结构的一例的概略结构图。
[0045]图9是表示第一实施方式所涉及的摄像装置的主要部分功能的一例的框图。
[0046]图10是表示第一实施方式所涉及的摄像装置的显示装置中的通常图像和裂像各自的显示区域的一例的示意图。
[0047]图11是表示作为相对于第一实施方式的比较例而显示于显示装置的即时预览图像中的通常图像和裂像的一例的画面形态图。
[0048]图12是表示第一实施方式所涉及的摄像装置中使用的第一输入输出函数的一例的曲线图。
[0049]图13是表示第一实施方式所涉及的摄像装置中使用的第二输入输出函数的一例的曲线图。
[0050]图14是表示由第一实施方式所涉及的摄像装置所包含的图像处理部进行的图像输出处理的流程的一例的流程图。
[0051]图15是表示由第一实施方式所涉及的摄像装置所包含的图像处理部进行的WB处理的流程的一例的流程图。
[0052]图16是表示由第一实施方式所涉及的摄像装置所包含的图像处理部进行的有彩色赋予处理的流程的一例的流程图。
[0053]图17是表示由第一实施方式所涉及的摄像装置所包含的图像处理部进行的显示颜色差别化处理的流程的一例的流程图。
[0054]图18是表示由第一实施方式所涉及的摄像装置所包含的图像处理部进行的显示颜色同化处理的流程的一例的流程图。
[0055]图19是表示是在第一实施方式中显示于摄像装置的显示装置上的即时预览图像且为执行了显示颜色差别化处理后的情况下的通常图像和裂像的一例的画面形态图。
[0056]图20是表示是在第一实施方式中显示于摄像装置的显示装置上的即时预览图像且为执行了显示颜色差别化处理后的情况下的通常图像和用颜色进行区分后的裂像的一例的画面形态图。
[0057]图21是表示是在第一实施方式中显示于摄像装置的显示装置上的即时预览图像且分别为无彩色的通常图像和裂像的一例的画面形态图。
[0058]图22是表示是在第一实施方式中显示于摄像装置的显示装置上的即时预览图像且为无彩色的通常图像和有彩色的裂像的一例的画面形态图。
[0059]图23是表示是在第一实施方式中显示于摄像装置的显示装置上的即时预览图像且为颜色特性近似的通常图像和裂像的一例的画面形态图。
[0060]图24是表示第二实施方式所涉及的智能手机的外观的一例的立体图。
[0061]图25是表示第二实施方式所涉及的智能手机的电气系统的主要部分结构的一例的框图。
【具体实施方式】
[0062]以下，根据附图，对本发明所涉及的摄像装置的实施方式的一例进行说明。
[0063][第一实施方式]
[0