图像处理设备、图像处理方法、以及非瞬时计算机可读介质的制作方法
【技术领域】
[0001]本发明涉及图像处理设备、图像处理方法、以及非瞬时计算机可读介质。
【背景技术】
[0002]已知在一般的单反相机中，可以通过改变镜头的光阑(stop)来改变景深。然而，在例如蜂窝电话等等的小的图像获取设备中，存在由于成本或大小的问题而造成不能配备光阑的情况。
[0003]然后，在近几年，一种被称为光场(光照射场)相机的技术引起了人们的注意。在使用光场相机的情况下，可以在成像之后改变图像数据的景深。例如，在专利文献I到专利文献3等等中描述了涉及光场相机的技术。光场相机是对通过使用全光(plenoptic)相机获得的图像数据进行重构以生成重聚焦图像数据的技术。
[0004]引用列表
[0005]专利文献
[0006]专利文献1:日本未审专利申请公开N0.2012-191376
[0007]专利文献2:日本未审专利申请公开N0.2012-147167
[0008]专利文献3:日本未审专利申请公开N0.2012-142918
[0009]非专利文献
[0010]非专利文献1:Nikkei_electronics 2012 年 8 月 2O 日 “arayuru tokoronikasikoi Camera，，
【发明内容】
[0011]技术问题
[0012]在上述光场相机的领域中，通常使用在成像之后改变景深的技术。然而，其并未充分考虑到:在用户侧改变景深时使用哪种类型的界面来设置景深或焦点。因此，出现了不能快速获得充分设置了景深或焦点的图像数据的问题。
[0013]为解决上述问题提出了本发明，并且本发明的主要目的是提供图像处理设备、图像处理方法和非瞬时计算机可读介质，它们具有除了调整焦点以外还调整并操作景深的操作界面。
[0014]问题的解决方案
[0015]根据本发明的图像处理设备的一方面是一种图像处理设备，包括:
[0016]存储装置，用于存储包括各对象与镜头焦点之间的距离数据的图像数据；
[0017]显示装置，用于基于图像数据来显示显示图像，并且被执行关于景深和焦点位置的操作；以及
[0018]图像调整装置，用于检测所执行的涉及显示装置的第一操作和第二操作，以及针对图像数据，根据第一操作和距离数据来调整焦距，并根据第二操作和距离数据来调整景深，以生成显示图像。
[0019]根据本发明的图像处理方法的一方面是一种图像处理方法，包括:
[0020]显示步骤，基于包括各对象与镜头之间的距离数据在内的图像数据来显示显示图像，并且执行关于景深和焦点位置的操作；以及
[0021]图像控制步骤，检测所执行的涉及显示装置的第一操作和第二操作，以及针对图像数据，根据第一操作和距离数据来调整焦距，并根据第二操作和距离数据来调整景深，以生成显示图像。
[0022]根据本发明的图像处理方法的方面是一种非瞬时计算机可读介质，用于使计算机执行以下步骤:
[0023]从存储设备中读出包括各对象与镜头之间的距离数据在内的图像数据；以及
[0024]检测所执行的涉及基于图像数据来显示显示图像的第一操作和第二操作，以及针对图像数据，根据第一操作和距离数据来调整焦距，并根据第二操作和距离数据来调整景深，以生成显示图像。
[0025]本发明的有益效果
[0026]根据本发明，可以提供图像处理设备、图像处理方法、以及非瞬时计算机可读介质，它们具有除了调整焦点以外还调整和操作景深的操作界面。
【附图说明】
[0027]图1是示出了根据示例实施例1的图像处理设备I的配置的框图；
[0028]图2是示意性地示出了根据示例实施例1的图像处理设备I的控制结构的框图；
[0029]图3是示出了根据示例实施例1的图像处理设备I的操作示例的概念图；
[0030]图4是示出了根据示例实施例1的在显示器180上显示的滑动条SI的图；
[0031]图5是示出了根据示例实施例1的在显示器180上显示的滑动条SI的图；
[0032]图6是示出了根据示例实施例1的图像处理设备I的操作示例的概念图；
[0033]图7是示出了根据示例实施例1的图像处理设备I的操作示例的概念图；
[0034]图8是示出了根据示例实施例1的图像处理设备I的操作示例的概念图；
[0035]图9A是示出了根据示例实施例1的焦点位置设置的概念图；
[0036]图9B是示出了根据示例实施例1的焦点位置设置的概念图；
[0037]图10是示出了根据示例实施例1的图像处理设备I的操作示例的概念图；
[0038]图11是示出了根据示例实施例1的在显示器180上显示的滑动条SI的图；以及
[0039]图12是示出了根据本发明的图像处理设备I的配置的框图。
【具体实施方式】
[0040]示例I
[0041]在下文中将会参照附图对本发明的示例实施例进行描述。图1是示出了根据示例实施例1的图像处理设备的配置的框图。注意到:在下文中图像处理设备被解释为智能电话，然而图像处理设备不限于此。图像处理设备I可以是具有操作界面(操作部)(例如触摸面板等等)的可选终端。
[0042]图像处理设备I包括图像部100、RAM(随机存取存储器)110、图像处理电路120、YC转换电路130、压缩和伸展电路140、中央(median)控制器150、存储卡160、IXD驱动器170、显示器180、闪存190、CPU (中央处理单元)200、以及数据总线210。
[0043]图像部100包括镜头101、微镜头阵列102、CXD (电荷耦合器件)103、以及数据处理部104。镜头101是用于对对象进行成像的主镜头。微镜头阵列102是例如以二维矩阵方式布置的多个微镜头，并且微镜头阵列102布置在镜头101的图像形成面上。平面形状是圆形或六边形的每个微镜头是由固体镜头、液晶镜头、液体镜头、衍射镜头等等构成的。
[0044]在CCD 103中布置多个光接收元件，该光接收元件用于根据光接收量来积累电荷，该光接收量是随着光经由CCD 103的光接收面来自微镜头矩阵102的光所输入的光接收量。CCD 103输出通过成像在各光接收元件中积累的电荷作为图像信号。微镜头阵列102是由多个微镜头构成的。因此，可以获得各对象与镜头焦点之间的物理距离(例如，在对儿童成像的情况下，图像部101的镜头焦点的位置与儿童的位置之间的物理距离(10米))。注意到:可以使用CMOS (互补金属氧化物半导体)来代替CXD 103。数据处理部104是由例如CDS (相关双取样)、放大器、A/D (模拟/数字)转换器等等构成，在一般图像设备中执行一般处理，并且生成包括图像范围内的各对象与镜头焦点之间的距离在内的图像数据，以存储到RAM 110中。
[0045]注意到:图像部100的上述组成仅是示例。如果可以获得包括图像范围内的各对象与镜头焦点之间的距离在内的图像数据，则组成可以是可选的。组成可以是用于实现光场相机的结构的已知镜头模块。例如，图像部100可以包括针对右眼的镜头和针对左眼的镜头，并且可以通过各镜头来生成视差图像数据。关于通过光场相机等等获得对象的距离数据的处理，结构与非专利文献I等等中描述的结构相同，因此，适当地对其进行参照。
[0046]图像处理电路120执行例如灰阶转换、白平衡校正、gamma校正等等的处理。YC转换电路130将成像之后的数据转换为亮度信号Y和色差信号Cr、Cb。压缩和伸展电路140根据预定压缩格式在可选定时上压缩图像数据，以写入可选存储部(例如存储卡160、闪存190)中。
[0047]中央控制器150写入并读取存储卡160的各种数据。存储卡160是经由中央控制器150读取并写入数据的存储部。存储卡160被构造为能够与图像处理设备I连接和分离。显示器180由IXD驱动器170驱动。IXD驱动器170对从各种存储部(例如存储卡160、闪存190等等)中读出的并由CPU 200执行数字处理的图像数据转换成具有NSC(国家电视系统委员会)格式的模拟信号，并向显示器180输出经转换的模拟信号。
[0048]显示器180设置在图像处理设备I (智能电话)的正面。显示器180由液晶显示设备、有机EL (电致发光)显示器等等实现，然而其不受限于