理，并将图像在显示 输入部220中显示的功能。
[0239] 进一步，主控制部200执行对于显示面板221的显示控制和检测通过了操作部 240、操作面板222的用户操作的操作检测控制。
[0240] 通过显示控制的执行，主控制部200显示用于启动应用软件的图标或滚动条等的 软件键，或者用于制作电子邮件的窗。另外，滚动条是指，关于不能在显示面板221的显示 区域中容纳的大的图像等，用于接受移动图像的显示部分的指示的软件键。
[0241] 此外，通过操作检测控制的执行，主控制部200检测通过了操作部240的用户操 作，或者通过操作面板222接受对于上述图标的操作、对于上述窗的输入栏的字符串的输 入，或者接受通过了滚动条的显示图像的滚动请求。
[0242] 进一步，通过操作检测控制的执行，主控制部200具有判定对于操作面板222的操 作位置是与显示面板221重叠的重叠部分（显示区域）还是除此以外的不与显示面板221 重叠的外缘部分（非显示区域），并对操作面板222的感应区域或软件键的显示位置进行控 制的触摸面板控制功能。
[0243] 此外，主控制部200还能够检测对于操作面板222的手势操作，并与检测到的手势 操作对应地执行预先设定的功能。手势操作意味着，不是现有的单纯的触摸操作，而是通过 手指等而描画轨迹，或者同时指定多个位置，或者将这些进行组合而从多个位置至少对一 个位置描画轨迹的操作。
[0244] 相机部241是使用CMOS (互补金属氧化物半导体（Complementary Metal Oxide Semiconductor))或CO)(电荷親合器件（Charge-Coupled Device))等的摄像元件进行 电子摄影的数码相机。此外，相机部241通过主控制部200的控制，能够将通过拍摄而得 到的图像数据例如转换为JPEG(联合图像专家组（Joint Photographic coding Experts Group))等的压缩的图像数据，并记录在存储部250中，或者通过输入输出部260或无线通 信部210而输出。虽然在图17所示的智能手机201中，相机部241搭载在与显示输入部 220相同的面，但相机部241的搭载位置并不限定于此，也可以搭载在显示输入部220的背 面，或者，也可以搭载多个相机部241。此外，在搭载了多个相机部241的情况下，也能够切 换供于拍摄的相机部241而单独拍摄，或者同时使用多个相机部241而拍摄。
[0245] 此外，相机部241能够利用于智能手机201的各种功能。例如，作为在显示面板 221中显示在相机部241中取得的图像或者操作面板222的操作输入之一，能够利用相机部 241的图像。此外，在GPS接收部270检测位置时，还能够参照来自相机部241的图像而检 测位置。进一步，还能够参照来自相机部241的图像，不使用3轴的加速度传感器或者与3 轴的加速度传感器并用地，判断智能手机201的相机部241的光轴方向或者判断当前的使 用环境。当然，还能够在应用软件内利用来自相机部241的图像。
[0246] 除此之外，也可以在静止画面或者动画的图像数据中附加由GPS接收部270取得 的位置信息、由话筒232取得的声音信息（也可以由主控制部等进行声音文本转换而成为 文本信息）、由运动传感器部280取得的姿势信息等而记录在存储部250中，或者通过外部 输入输出部260或无线通信部210而输出。
[0247] 在上述的智能手机201中，与点像复原处理有关的上述的各处理部例如能够通过 主控制部200、存储部250等而适当实现。
[0248] 本发明能够作为用于使设备（例如，数码相机、附带相机的便携电话、智能手 机）进行上述的处理的计算机能够读取的程序代码、存储有该程序代码的非临时性 (non-transitory)且计算机能够读取的记录介质（例如，光盘（例如，⑶（紧凑盘（Compact Disc))、DVD (数字多功能盘（Digital Versatile Disc))、BD(蓝光盘（(Blu_ray(注册商 标）Disc)))、磁盘（例如，硬盘、光磁盘）、USB(通用串行总线（Universal Serial Bus))存 储器）以及存储用于该方法的能够执行的代码的计算机程序产品而提供。
[0249] 本发明并不限定于上述的实施方式，在不脱离本发明的精神的范围内能够进行各 种变形而不言而喻的。
[0250] 另外，本发明并不限定于在本说明书中说明的例和在附图中图示的例，当然可以 在不脱离本发明的宗旨的范围内进行各种设计变更或改良。
[0251] 附图标记说明
[0252] 数码相机10、光学系统14、摄像元件16、摄像部18、亮度系图像数据生成部22 (亮 度系图像数据生成单元）、复原滤波器存储部24 (复原滤波器存储单元）、复原处理部 26 (复原处理单元）、复原滤波器生成装置80、信息取得部82 (信息取得单元）、复原滤波器 生成部84 (复原滤波器生成单元）、切换部86 (切换单元）。
【主权项】
1. 一种复原滤波器生成装置，生成用于对亮度系图像数据进行复原处理的复原滤波 器，该亮度系图像数据是基于由具有光学系统的摄像单元所得到的多个颜色的每个颜色的 图像数据而生成的与亮度有关的图像数据，其中，所述复原滤波器生成装置包括： 信息取得单元，按所述多个颜色的每个颜色取得与所述光学系统中的点像分布对应的 传递函数信息；以及 复原滤波器生成单元，基于由所述信息取得单元所取得的所述传递函数信息而生成所 述复原滤波器，并且，生成根据所述多个颜色中的单色的所述传递函数信息而进行所述亮 度系图像数据的相位校正的所述复原滤波器。2. 如权利要求1所述的复原滤波器生成装置，其中， 所述复原滤波器生成单元从根据所述多个颜色的每个颜色的所述传递函数信息而分 别得到的所述多个颜色的每个颜色的相位偏移量中，选择绝对值最小的单色的相位偏移 量，生成以与所选择的单色的相位偏移量对应的相位校正量来对所述亮度系图像数据的相 位偏移进行校正的所述复原滤波器。3. 如权利要求2所述的复原滤波器生成装置，其中， 所述复原滤波器生成单元按图像面内的每个位置选择所述单色的相位偏移量，生成根 据该单色的相位偏移量来对所述亮度系图像数据的相位偏移进行校正的所述复原滤波器。4. 如权利要求2所述的复原滤波器生成装置，其中， 所述复原滤波器生成单元按每个空间频率选择所述单色的相位偏移量，生成根据该单 色的相位偏移量来对所述亮度系图像数据的相位偏移进行校正的所述复原滤波器。5. 如权利要求3或4所述的复原滤波器生成装置，其中， 所述复原滤波器生成单元在所述多个颜色中所述相位偏移量的符号不同的情况下，将 对于所述亮度系图像数据的相位校正量设定为零，在所述多个颜色的全部中所述相位偏移 量的符号相同的情况下，选择所述绝对值最小的单色的相位偏移量，采用与该单色的相位 偏移量对应的相位校正量，生成所述复原滤波器。6. 如权利要求1至5的任一项所述的复原滤波器生成装置，其中， 所述复原滤波器生成单元包括运算部，该运算部将所述复原滤波器的抽头数作为输入 参数，且按每个空间频率，使所述复原滤波器的相位校正量的绝对值为所述光学系统中的 相位偏移量的绝对值以下来运算所述复原滤波器的滤波器系数。7. 如权利要求1所述的复原滤波器生成装置，其中， 所述多个颜色中的一个颜色为绿色（G)， 所述信息取得单元取得所述多个颜色中的至少绿色（G)的传递函数信息， 所述复原滤波器生成单元生成以与所述绿色（G)的传递函数信息对应的相位校正量 来对所述亮度系图像数据的相位偏移进行校正的所述复原滤波器。8. 如权利要求1至7的任一项所述的复原滤波器生成装置，其中， 包括切换单元，该切换单元切换是否使所述复原滤波器进行对于所述亮度系图像数据 的所述相位校正， 在使所述复原滤波器不进行所述相位校正的情况下，所述复原滤波器生成单元将所述 传递函数信息在多个颜色间混合，基于在该多个颜色间混合而得到的传递函数信息，生成 对所述亮度系图像数据不改变相位分量而进行复原处理的所述复原滤波器。9. 一种复原滤波器生成装置，生成用于对亮度系图像数据进行复原处理的复原滤波 器，该亮度系图像数据是基于由具有光学系统的摄像单元所得到的多个颜色的每个颜色的 图像数据而生成的与亮度有关的图像数据，其中，所述复原滤波器生成装置包括： 信息取得单元，按所述多个颜色的每个颜色取得与所述光学系统中的点像分布对应的 传递函数信息；以及 复原滤波器生成单元，基于由所述信息取得单元所取得的所述传递函数信息而生成所 述复原滤波器， 所述复原滤波器生成单元将所述传递函数信息在多个颜色间混合，基于在该多个颜色 间混合而得到的传递函数信息，生成用于对所述亮度系图像数据不改变相位分量而进行复 原处理的复原滤波器。10. 如权利要求8或9所述的复原滤波器生成装置，其中， 所述信息取得单元通过对所述光学系统中的多个颜色的每个颜色的点像分布函数分 别进行傅里叶变换，取得所述光学系统中的多个颜色的每个颜色的光学传递函数， 在使所述复原滤波器不进行相位校正的情况下，所述复原滤波器生成单元将作为各颜 色的所述光学传递函数的振幅分量的各颜色的调制传递函数在所述多个颜色之间混合，基 于在该多个颜色之间混合而得到的调制传递函数，生成对所述亮度系图像数据不改变相位 分量而进行复原处理的所述复原滤波器。11. 如权利要求1至10的任一项所述的复原滤波器生成装置，其中， 所述信息取得单元取得表示在生成所述亮度系图像数据前是否对所述多个颜色的每 个颜色的图像数据实施倍率色差校正的倍率色差校正信息， 在基于所述倍率色差校正信息而检测出实施所述倍率色差校正的情况下，所述复原滤 波器生成单元对由所述信息取得单元所取得的各颜色的所述传递函数信息进行所述倍率 色差校正中的校正量的坐标移动处理，将进行了该坐标移动处理之后的各颜色的所述传递 函数信息在多个颜色间混合。12. 如权利要求1至11的任一项所述的复原滤波器生成装置，其中， 所述光学系统具有透镜部，该透镜部对相位进行调制而使景深扩大。13. -种图像处理装置，包括： 图像数据取得单元，取得亮度系图像数据，该亮度系图像数据是基于由具有光学系统 的摄像单元所得到的多个颜色的每个颜色的图像数据而生成的与亮度有关的图像数据； 复原滤波器存储单元，存储由权利要求1至12的任一项所述的复原滤波器生成装置所 生成的所述复原滤波器；以及 复原处理单元，对由所述图像数据取得单元所取得的所述亮度系图像数据，使用在所 述复原滤波器存储单元中存储的所述复原滤波器而实施复原处理。14. 一种图像处理装置，包括： 图像数据取得单元，取得亮度系图像数据，该亮度系图像数据是基于由具有光学系统 的摄像单元所得到的多个颜色的每个颜色的图像数据而生成的与亮度有关的图像数据； 权利要求1至12的任一项所述的复原滤波器生成装置； 复原滤波器存储单元，存储由所述复原滤波器生成装置所生成的所述复原滤波器；以 及 复原处理单元，对由所述图像数据取得单元所取得的所述亮度系图像数据，使用在所 述复原滤波器存储单元中存储的所述复原滤波器而实施复原处理。15. -种摄像装置，包括： 摄像单元，具有光学系统，且输出多个颜色的每个颜色的图像数据；以及 权利要求13或14所述的图像处理装置。16. -种复原滤波器生成方法，生成用于对亮度系图像数据进行复原处理的复原滤波 器，该亮度系图像数据是基于由具有光学系统的摄像单元所得到的多个颜色的每个颜色 的图像数据而生成的与亮度有关的图像数据，其中，所述复原滤波器生成方法包括以下步 骤： 信息取得步骤，按所述多个颜色的每个颜色取得与所述光学系统中的点像分布对应的 传递函数信息；以及 复原滤波器生成步骤，基于通过所述信息取得步骤取得的所述传递函数信息而生成所 述复原滤波器，并且，生成根据所述多个颜色中的单色的所述传递函数信息而进行所述亮 度系图像数据的相位校正的所述复原滤波器。17. -种图像处理方法，包括以下步骤： 图像数据取得步骤，取得亮度系图像数据，该亮度系图像数据是基于由具有光学系统 的摄像单元所得到的多个颜色的每个颜色的图像数据而生成的与亮度有关的图像数据；以 及 复原处理步骤，使用通过权利要求16所述的复原滤波器生成方法而生成的所述复原 滤波器，对在所述图像数据取得步骤中取得的所述亮度系图像数据实施复原处理。18. -种程序，用于生成用于对亮度系图像数据进行复原处理的复原滤波器，该亮度系 图像数据是基于由具有光学系统的摄像单元所得到的多个颜色的每个颜色的图像数据而 生成的与亮度有关的图像数据，其中，所述程序用于使计算机执行如下步骤： 信息取得步骤，按所述多个颜色的每个颜色取得与所述光学系统中的点像分布对应的 传递函数信息；以及 复原滤波器生成步骤，基于通过所述信息取得步骤取得的所述传递函数信息而生成所 述复原滤波器，并且，生成根据所述多个颜色中的单色的所述传递函数信息而进行所述亮 度系图像数据的相位校正的所述复原滤波器。19. 一种计算机能够读取的记录介质，在由处理器读取了在所述记录介质中存储的指 令的情况下，所述处理器执行复原滤波器生成方法，该复原滤波器生成方法生成用于对亮 度系图像数据进行复原处理的复原滤波器，该亮度系图像数据是基于由具有光学系统的摄 像单元所得到的多个颜色的每个颜色的图像数据而生成的与亮度有关的图像数据，其中， 所述复原滤波器生成方法包括以下步骤： 信息取得步骤，按所述多个颜色的每个颜色取得与所述光学系统中的点像分布对应的 传递函数信息；以及 复原滤波器生成步骤，基于通过所述信息取得步骤取得的所述传递函数信息而生成所 述复原滤波器，并且，生成根据所述多个颜色中的单色的所述传递函数信息而进行所述亮 度系图像数据的相位校正的所述复原滤波器。
【专利摘要】复原滤波器生成装置(80)生成用于对亮度系图像数据进行复原处理的复原滤波器，该亮度系图像数据与基于由具有光学系统(14)的摄像单元(18)所得到的多个颜色的每个颜色的图像数据而生成的亮度有关，所述复原滤波器生成装置(80)包括：信息取得部(82)，按多个颜色的每个颜色取得与光学系统(14)中的点像分布对应的传递函数信息；以及复原滤波器生成部(84)，基于传递函数信息而生成复原滤波器，并且，生成根据多个颜色中的单色的传递函数信息而进行亮度系图像数据的相位校正的复原滤波器。
【IPC分类】G06T5/20, H04N1/409, H04N9/04, H04N5/232
【公开号】CN105009168
【申请号】CN201380074234
【发明人】成濑洋介, 林健吉, 杉本雅彦
【申请人】富士胶片株式会社
【公开日】2015年10月28日
【申请日】2013年11月13日
【公告号】WO2014136322A1