图像处理装置、摄像装置、图像处理方法及图像处理程序的制作方法_4

文档序号:8417895阅读:来源:国知局
定的误差内一致这一条件。
[0137]在步骤414中,由图像处理部28执行显示颜色差别化处理。图17表示显示颜色差别化处理的流程的一例。在图17所示的步骤414A中,判定在上述步骤406设定的关注像素是否是最初的处理对象像素。在本步骤414A中,在关注像素是最初的处理对象像素的情况下,判定为肯定而移向步骤414B。在本步骤414A中,在关注像素并非最初的处理对象像素的情况下,判定为否定而移向步骤414C。
[0138]在步骤414B中,由图像处理部28从特定的图像取得R、G、B的像素值(例如关于特定的图像中包含的全部的像素的像素值)。在此,作为“特定的图像”,采用了在上述步骤400生成的通常图像的一部分,但是不限于此,也可以是通常图像以及在上述步骤402生成的左眼图像和右眼图像。另外,在本步骤414B中,作为上述的“通常图像的一部分”,采用了在上述步骤400生成的通常图像中的、从通常摄像区域的与裂像摄像区域的边界侧的边缘部输出的图像,但是在此所说的“边缘部”的大小例如是指通常图像区域宽度的1/3的大小。“通常图像区域宽度的1/3的大小”毕竟是一例,只要是为了取得有效的像素值(颜色信息的一例)而充分的区域即可,根据通常图像区域的大小、裂像的大小等,取得有效的像素值所需的“边缘部”的大小不同,这是不言而喻的。另外,不限于边缘部,也可以是通常图像中的其他区域。通常图像中的其他区域是指通常图像中的上述的“边缘部”以外的区域。另外,“特定的图像”不必一定是通常图像的一部分,也可以是通常图像的全部区域的图像。另外,上述的“通常摄像区域”是摄像元件20中的用于通常图像的摄像的区域,例如是指与图10所示的“通常图像的显示区域”对应的摄像装置20的区域。另外,上述的“裂像摄像区域”是指摄像元件20中的用于裂像的摄像并且与通常摄像区域相邻的区域,例如是指与图10所示的“裂像的显示区域”对应的摄像装置20的区域。
[0139]在下一个步骤414D中,由图像处理部28算出在上述步骤414B取得的R、G、B的像素值的每个颜色的平均值。在下一个步骤414E中,由图像处理部28基于在上述步骤414D算出的R、G、B的像素值的每个颜色的平均值而算出R、G、B的像素值的构成比。在此,图像处理部28例如以总和成为“I”的方式对在上述步骤414D算出的R、G、B的像素值的每个颜色的平均值进行标准化,从而算出R、G、B的构成比。
[0140]在下一个步骤414F中,由图像处理部28从预定的存储区域取得第一输入输出函数F(W)。在下一个步骤414G中,由图像处理部28使用第一输入输出函数F(W)算出裂像中的R、G、B的像素值的构成比。即,利用第一输入输出函数F(W)将在上述步骤414E算出的R、G、B的像素值的构成比转换为裂像中的R、G、B的像素值的构成比。
[0141]在下一个步骤414H中,由图像处理部28判定是否满足不同颜色赋予条件。在此所说的“不同颜色赋予条件”是指执行对裂像中的基于左眼图像的图像和基于右眼图像的图像分别赋予不同的有彩色的处理(不同颜色赋予处理)的条件。作为不同颜色赋予条件,例如能够列举经由操作部14而进行开始执行不同颜色赋予处理的指示的条件。另外,在此所说的“不同颜色赋予处理”例如是指后述的步骤4141、414K、414L、414M、414N。在本步骤414H中,在满足不同颜色赋予条件的情况下,判定为肯定而移向步骤4141。在本步骤414H中,在不满足不同颜色赋予条件的情况下,判定为否定而移向步骤414J。
[0142]在步骤4141中,由图像处理部28判定在上述步骤406设定的关注像素是否是右眼图像所包含的像素。在本步骤414J中,在关注像素并非是右眼图像所包含的像素的情况下(关注像素是左眼图像所包含的像素的情况下),判定为否定而移向步骤414L。在本步骤4141中,在关注像素是右眼图像所包含的像素的情况下,判定为肯定而移向步骤414K。
[0143]在步骤414K中,由图像处理部28对在上述步骤414G算出的构成比赋予右眼图像用的校正项,从而算出右眼图像构成比。例如,当将在上述步骤414G算出的R、G、B的像素值的构成比设为F(Wr)、F(Wg)、F(Wb)时,通过对F(Wr)附加校正项AR,算出右眼图像构成比的R成分即“F(Wr) + AR”。另外,通过对F(Wg)附加校正项Δ G,算出右眼图像构成比的G成分即“F(Wg)+ AG”。此外,通过对F(Wb)附加校正项ΔΒ,算出右眼图像构成比的B成分即 “F(Wb) + AB”。
[0144]在下一个步骤414M中,由图像处理部28通过将在上述步骤414K算出的右眼图像构成比的每个颜色的成分与关注像素的相同颜色的像素值相乘而对关注像素的R、G、B的各色的像素值进行校正,之后,移向步骤414P。通过如此由图像处理部28执行本步骤414M,将具有与通常图像的颜色特性不同的颜色特性的颜色确定为关注像素的显示颜色。
[0145]在步骤414L中,由图像处理部28对在上述步骤414G算出的构成比赋予左眼图像用的校正项,从而算出左眼图像构成比。例如,当将在上述步骤414G算出的R、G、B的像素值的构成比设为F(Wr)、F(Wg)、F(Wb)时,通过从F(Wr)减去校正项AR,算出左眼图像构成比的R成分即“F(Wr) — AR”。另外,通过从F(Wg)减去校正项AG,算出左眼图像构成比的G成分即“F(Wg) - AG”。此外,通过从F(Wb)减去校正项ΔΒ,算出左眼图像构成比的B成分即“F(Wb) - ΛΒ”。另外,校正项AR、AG、ΔB只要是能够目视确认差的值即可,例如能够如 AR=pF (Wr)、Δ G = P F (Wg)、Δ B = P F (Wb)那样采用将 F (Wr)、F (Wg)、(Wb)单纯地线性倍增后的值。
[0146]在下一个步骤414N中,由图像处理部28将在上述步骤414L算出的左眼图像构成比的每个颜色的成分与关注像素的相同颜色的像素值相乘,从而对关注像素的R、G、B的各色的像素值进行校正,之后,移向步骤414P。通过如此由图像处理部28执行本步骤414N,将具有与通常图像的颜色特性不同的颜色特性的颜色确定为关注像素的显示颜色。另外,通过由图像处理部28执行本步骤414N和上述步骤414,将在裂像中的左眼图像和右眼图像中不同的有彩色确定为裂像的显示颜色。
[0147]在步骤414J中,由图像处理部28将在上述步骤414G算出的构成比的每个颜色的成分与关注像素的相同颜色的像素值相乘,从而对关注像素的R、G、B的各色的像素值进行校正,之后,移向步骤414P。通过如此由图像处理部28执行本步骤414J,将具有与通常图像的颜色特性不同的颜色特性的颜色确定为关注像素的显示颜色。
[0148]在步骤414P中,由图像处理部28将在上述步骤414J、414M、414N中的任一步骤校正后的关注像素的R、G、B的像素值存储于预定的存储区域(例如存储器26)而存储图像,之后,移向步骤418。
[0149]另一方面,在步骤414C中,判定是否对先前的处理对象像素执行了不同颜色赋予处理。在本步骤414C中,在对先前的处理对象像素执行了不同颜色赋予处理的情况下,判定为肯定而移向步骤414Q。在本步骤414C中,在没有对先前的处理对象像素执行不同颜色赋予处理的情况下,判定为否定而移向步骤414J。
[0150]在步骤414Q中,由图像处理部28判定在上述步骤406设定的关注像素是否是右眼图像所包含的像素。在本步骤414Q中在关注像素并非右眼图像所包含的像素的情况下(关注像素是左眼图像所包含的像素的情况下),判定为否定而移向步骤414N。在本步骤414Q中在关注像素是右眼图像所包含的像素的情况下,判定为肯定而移向步骤414M。
[0151]返回到图14,在步骤416中,由图像处理部28执行显示颜色同化处理。图18表示显示颜色同化处理的流程的一例。在图18所示的步骤416A中,判定在上述步骤406设定的关注像素是否是最初的处理对象像素。在本步骤416A中,在关注像素是最初的处理对象像素的情况下,判定为肯定而移向步骤416B。在本步骤416A中,在关注像素并非最初的处理对象像素的情况下,判定为否定而移向步骤416G。
[0152]在步骤416B中,由图像处理部28从特定的图像取得R、G、B的像素值(例如关于特定的图像中包含的全部的像素的像素值)。作为在此所说的“特定的图像”,例如是指与在步骤414B所使用的“特定的图像”相当的图像。
[0153]在下一个步骤416C中,由图像处理部28算出在上述步骤416B取得的R、G、B的像素值的每个颜色的平均值。在下一个步骤416D中,由图像处理部28基于在上述步骤416C算出的R、G、B的像素值的每个颜色的平均值来算出R、G、B的像素值的构成比。在此,图像处理部28例如以总和成为“I”的方式对在上述步骤416C算出的R、G、B的像素值的每个颜色的平均值进行标准化,从而算出R、G、B的构成比。
[0154]在下一个步骤416E中,由图像处理部28从预定的存储区域取得第二输入输出函数G(W)。在下一个步骤416F中,由图像处理部28使用第二输入输出函数G(W)算出裂像中的R、G、B的像素值的构成比。即,利用第二输入输出函数G(W)将在上述步骤416D算出的R、G、B的像素值的构成比转换为裂像中的R、G、B的像素值的构成比。
[0155]在下一个步骤416G中,由图像处理部28将在上述步骤416F算出的构成比的每个颜色的成分与关注像素的相同颜色的像素值相乘,从而对关注像素的R、G、B的各色的像素值进行校正,之后,移向步骤416H。通过如此由图像处理部28执行本步骤416G,将具有以预先规定的程度与通常图像的颜色特性接近的颜色特性的颜色确定为关注像素的显示颜色。
[0156]在下一个步骤416H中,由图像处理部28将在上述步骤416G校正后的关注像素的R、G、B的像素值存储于预定的存储区域(例如存储器26),从而存储图像,之后,移向步骤418。
[0157]返回到图14,在步骤418中,对在上述步骤406设定的关注像素(i,j)进行除了WB处理、有彩色赋予处理、显示颜色差别化处理和显示颜色同化处理以外的图像处理(例如伽玛校正、去马赛克算法处理等)。
[0158]在下一个步骤420中,由图像处理部28将通过在上述步骤418进行的图像处理而得到的像素值对应每个像素存储于预定的存储区域(例如存储器26),从而存储图像,之后,移向步骤422。
[0159]在下一个步骤422中,由图像处理部28判定对全部的像素的有彩色赋予处理、显示颜色差别化处理或显示颜色同化处理是否结束。在本步骤422中,在对全部的像素的有彩色赋予处理、显示颜色差别化处理或显示颜色同化处理已结束的情况下,判定为肯定而移向步骤424。在本步骤422中,在对全部的像素的有彩色赋予处理、显示颜色差别化处理或显示颜色同化处理未结束的情况下,判定为否定而移向步骤406。
[0160]在步骤424中,由图像处理部28将在上述步骤400、420中存储于预定的存储区域的图像输出到预定的输出处后,结束本图像处理。另外,作为上述的“预定的输出处”,例如能够列举显示控制部36,除此之外,在由摄影者等经由操作部14指示了向外部装置的输出的情况下,作为上述的“预定的输出处”还适用外部I/F40。
[0161]当将在上述步骤400、420中存储于预定的存储区域的图像输出到显示控制部36时,作为一例,如图19、图20、图22或图23所示,在显示装置显示即时预览图像。即时预览图像包括通常图像和裂像。裂像大体分为左眼图像和右眼图像(例如参照图20)。
[0162]在此,在摄影透镜16的焦点相对于被摄体没有对焦的情况下,裂像中的左眼图像和右眼图像沿视差产生方向(作为一例是水平方向)偏离。另外,通常图像与裂像的边界的图像也沿视差产生方向偏离。这表示产生了相位差,摄影者能够通过裂像而视觉性地识别产生了相位差这一情况以及视差产生方向。
[0163]另一方面,在摄影透镜16的焦点相对于被摄体对焦的情况下,裂像中的左眼图像和右眼图像不偏离。通常图像与裂像的边界的图像也不偏离。这表示没有产生相位差,摄影者能够通过裂像而视觉性地识别没有产生相位差这一情况。
[0164]如此,摄影者能够利用显示于显示装置的裂像来确认摄影透镜16的对焦状态。另夕卜,在手动对焦模式时,通过手动操作摄影透镜16的聚焦环302,能够使焦点的偏离量(散焦量)为零。另外,能够分别以没有颜色偏差的彩色图像来显示通常图像和裂像,能够利用彩色的裂像对通过摄影者的手动进行的调焦进行支援。
[0165]在图17所示的显示颜色差别化处理中,当由图像处理部28执行步骤414J的处理时,作为一例,如图19所示,在显示装置上显示通常图像,并且以具有与通常图像的颜色特性不同的颜色特性的颜色显示裂像。在图19所示的例子中,通常图像的显示颜色被设为红色系(在此作为一例是橙色系)的颜色,裂像的显示颜色被设为蓝色系的颜色。在该情况下,例如作为通常图像的R、G、B的像素值的构成比能够列举“R:G:B = 0.35:0.35:0.3”,作为裂像的R、G、B的像素值的构成比能够列举“R:G:B = 0.31:0.31:0.38”。如此,在场景整体(作为一例是通常图像)的颜色比例是红色系的物体颜色的影响较强的情况下,作为裂像的显示颜色采用蓝色系的颜色。相反,在场景整体的颜色比例是蓝色系的物体颜色的影响较强的情况下,作为裂像的显示颜色采用红色系的颜色。因此,能够使裂像相对于通常图像特别显眼。
[0166]另外,在图17所示的显示颜色差别化处理中,当由图像处理部28执行步骤414K、414L、414M、414N的处理时,作为一例,如图20所示,显示左眼图像和右眼图像的颜色特性不同的裂像。在图20所示的例子中,裂像中的左眼图像设为蓝色系的颜色,裂像中的右眼图像设为绿色系的颜色。另外,通常图像的显示颜色与图19所示的例子同样地设为红色系(在此作为一例是橙色系)的颜色。由此,能够使裂像相对于通常图像特别显眼,且能够在裂像中使左眼图像和右眼图像变得易于识别。
[0167]在通常图像是无彩色图像的情况下(步骤408:否),裂像也是无彩色图像,因此作为一例,如图21所示,通常图像与裂像的边界变得难于目视确认。因此,本第一实施方式所涉及的图像处理部28通过执行图16所示的有彩色赋予处理,作为一例,如图22所示,对裂像赋予有彩色。在图22所示的例子中,作为裂像的显示颜色采用蓝色系的颜色。由此,能够使裂像相对于无彩色的通常图像特别显眼。另外,也可以由图像处理部28推定光源色,若所推定的光源色中红色系的颜色为支配性的,则将裂像的显示颜色设为蓝色系的颜色,若所推定的光源色中蓝色系的颜色为支配性的,则将裂像的显示颜色设为红色系的颜色。
[0168]另外,当由图像处理部28执行图18所示的显示颜色同化处理时,作为一例,如图23所示,显示彼此的显示颜色被同化后的通常图像和裂像。在图23所示的例子中,作为通常图像的物体颜色,红色系(作为一例是橙色系)是支配性的,因此作为裂像的显示颜色采用红色系的颜色,由此,以裂像与通常图像融合的方式显示。因此,能够使通常图像与裂像的边界难于视觉性地识别。
[0169]如以上说明的那样,本第一实施方式所涉及的摄像装置100包括对通过了摄影透镜16的出射光瞳的光束的光轴的左侧和右侧(通过了第一区域和第二区域后的被摄体像的一例)进行光瞳分割而分别成像的第一像素组和第二像素组。另外,作为通常图像生成部的一例的图像处理部28基于从具有第一像素组和第二像素组的摄像元件20输出的图像,生成作为第一显示用图像的一例的通常图像(步骤400)。另外,作为第二显示用图像生成部的一例的图像处理部28基于从第一像素组和第二像素组输出的第一图像和第二图像,生成作为第二显示用图像的一例的裂像(步骤402)。另外,作为获取部的一例的图像处理部28取得所生成的通常图像的颜色信息(步骤414B)。另外,作为确定部的一例的图像处理部28基于所取得的颜色信息,将具有与通常图像的颜色特性不同的颜色特性的颜色确定为裂像的显示颜色(步骤414J、414M、414N)。由此,与不具有本结构的情况相比,能够提高通常图像与裂像的边界线的视觉确认性。
[0170]另外,本第一实施方式所涉及的摄像装置100中,作为具有与通常图像的颜色特性不同的颜色特性的颜色,采用能够目视确认是与通常图像的颜色特性不同的颜色特性这一情况的颜色。由此,与不具有本结构的情况相比,能够视觉性地识别通常图像和裂像。
[0171]另外,在本第一实施方式所涉及的摄像装置100中,图像处理部28从通常图像取得颜色信息。由此,与不具有本结构的情况相比,能够以简单的结构使裂像的颜色特性和通常图像的颜色特性高精度地不同。
[0172]另外,在本第一实施方式所涉及的摄像装置100中,图像处理部28基于通常图像和裂像而取得颜色信息。由此,与不具有本结构的情况相比,能够使裂像的颜色特性和通常图像的颜色特性高精度地不同。另外,即使通常图像发白,第一像素组和第二像素组的灵敏度也较低,因此能够取得颜色信息。另外,可以基于通
当前第4页1 2 3 4 5 6 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1