专利名称：糢糊校正装置以及糢糊校正方法
技术领域：
本发明涉及对拍摄静止图像的相机的拍摄图像中出现的模糊(blur)进行校正的糢糊校正装置以及糢糊校正方法。
背景技术：
糢糊校正技术是一种检测在静止图像的拍摄时出现的糢糊并根据该检测量进行校正从而减轻图像中出现的糢糊的技术。作为检测糢糊的方法有利用装配于相机的运动检测传感器(例如陀螺仪等角速度传感器或加速度传感器等)的方法或者分析拍摄图像来检测的方法。并且，作为校正糢糊的方法有在拍摄时控制透镜或摄像元件的位置来校正糢糊的光学式校正或传感器移动 (sensor shift)式校正以及在拍摄后通过图像处理来电子式校正糢糊的电子式校正。光学式校正或者传感器移动式校正，多通过利用角速度传感器在拍摄时检测糢糊的轨迹并控制透镜或摄像元件的位置以消除检测出的轨迹，从而减轻拍摄图像中的糢糊的出现。也有提出这样的方法，即分析拍摄图像来推定糢糊的轨迹，并通过基于推定出的糢糊的轨迹的图像处理来校正为无糢糊的图像(例如，参照非专利文献1)。该非专利文献 1所公开的技术中，通过利用无糢糊的自然图像具有的性质或者平坦区域应满足的性质这样的统计性信息，来反复执行与糢糊的轨迹有关的推定以及校正为无糢糊的图像的校正处理，从而渐渐地使糢糊的轨迹以及校正后的图像这双方接近所期待的结果。参照图11，说明拍摄图像中出现糢糊的原理以及通过图像处理在拍摄后校正糢糊的方法的原理。拍摄图像中出现糢糊的原因是在不产生糢糊时应以1个像素来被拍摄的光线，也分布到周边像素而被拍摄而引起。在此，以i(X，y)表示在未出现糢糊时被拍摄的清晰的图像(以下，称为“清晰图像”)。并且，以j(x，y)表示出现了糢糊的拍摄图像。并且，以p(x，y)表示在未出现模糊时应以1个像素来被拍摄的光线因为糢糊也扩散到周边像素而被拍摄时的点像(point image)的分布函数(点扩散函数PSF(PointSpread Function))。此时，这样的i(x，y)、 j(x，y)以及P(x，y)之间成立以下的公式(1)的关系。[算式1]在此，[算式2]0 表示卷积运算，(x,y)表示像素位置。而且，如果以I (m，n)、J(m，η)以及P(m，n) 来表示分别对i (X，y)、j (χ, y)以及ρ (χ, y)进行傅立叶变换而得到的频率成分的值，则这些之间成立以下的公式O)的关系。页[算式3]J(u, ν) = I (u, ν) XP(u, ν)(2)在此，(u，ν)表示频率成分的阶数。这样，在频域上，拍摄图像以清晰图像与PSF 之乘积来表示。相反，如果能够分析拍摄图像来推定出PSF，则能够通过在频域上使拍摄图像除以PSF来算出推定清晰图像的结果(以下称为“校正图像”)。并且，专利文献1公开了利用角速度传感器来取得糢糊信息并进行校正处理的方法。通过该方法，即使不从拍摄图像来推定PSF也能够取得PSF。而且，专利文献2公开了这样一种方法，即从由角速度传感器取得的角速度数据算出PSF之后，从PSF生成一般的逆滤波器来对拍摄图像适用校正处理。该方法中，因为具备对PSF进行平滑化处理的平滑化处理单元以及按照合焦状态控制平滑化处理单元的平滑化强度的控制单元，因此不仅能够校正糢糊而且能够校正与离焦(defocus)有关的画质退化。先行技术文献专利文献专利文献1 (日本)特开平11-24122号公报专利文献2 (日本)特开2006-279807号公报非专利文献非专利文献 1 :“High-quality Motion Deblurring from a single image,，，Qi Shan, Jiaya Jia and Aseem Agarwala, SIGGRAPH 2008发明概要发明要解决的问题作为上述的专利文献1、2的课题可举出原封不动地利用从角速度传感器得到的糢糊信息来进行校正处理这一点。存在的问题是因为角速度传感器的输出中包括装配误差、标度因数(scale factor)误差、漂移、线性误差、分辨能力的限制、温度特性误差等各种各样的误差，所以通过上述专利文献1、2的方法不能得到正确的校正图像。并且，非专利文献1所公开的技术中，因为从拍摄图像推定PSF，所以存在PSF的精确度变低的情况。
发明内容
本发明用于解决上述课题，目的在于提供能够对拍摄图像中出现的模糊高精确度地进行校正的糢糊校正装置。用于解决问题的手段为了达到上述目的，本发明的一个方面所涉及的糢糊校正装置，通过对由相机拍摄的拍摄图像中出现的模糊进行电子式校正，从而从所述拍摄图像生成校正图像，该糢糊校正装置具备糢糊信息生成部，根据传感数据，生成用于校正所述拍摄图像中出现的糢糊的糢糊信息，所述传感数据示出拍摄图像被拍摄时由运动检测传感器检测出的相机的运动；糢糊校正部，通过根据由所述糢糊信息生成部生成的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出部，算出由所述糢糊校正部生成的候选校正图像的评价值，该评价值示出模糊的校正程度；结束判定部，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新部，在由所述结束判定部判定为不结束糢糊的校正的情况下，更新由所述糢糊信息生成部生成的糢糊信息，所述糢糊校正部，在糢糊信息被所述糢糊信息更新部更新了的情况下，通过根据被更新后的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，所述结束判定部，在判定为结束糢糊的校正的情况下，根据由所述评价值算出部算出的评价值，从由所述糢糊校正部生成的至少一个候选校正图像中决定校正图像。根据本构成，通过更新基于由运动检测传感器检测出的传感数据的糢糊信息，从而能够生成糢糊校正程度高的校正图像。也就是说，能够高精确度地校正在拍摄图像中出现的糢糊。并且，优选为，所述糢糊信息以至少由一个线段来构成的线段群来表不。根据本构成，能够以少的信息量来表现糢糊信息，能够容易地使其与由运动检测传感器检测出的传感数据对应。并且，优选为，所述糢糊信息更新部，通过使构成表示所述糢糊信息的线段群的至少一个线段的至少一个端点的位置变化，从而更新所述糢糊信息。根据本构成，通过使构成线段群的线段的端点的位置变化，从而能够容易地更新
糢糊信息。并且，优选为，所述糢糊信息更新部，在以示出从所述传感数据得到的拍摄方向的位置为中心的区域内，使所述端点的位置变化，所述区域的大小与所述运动检测传感器的检测性能对应。根据本构成，能够抑制不需要的范围的糢糊信息的更新，从而能够有效地更新糢
糊信息。并且，优选为，所述糢糊信息生成部，通过将按照时刻顺序以直线连接了多个位置而得到的线段群作为糢糊的轨迹来算出，并针对构成所算出的线段群的各个点，将与示出所述拍摄方向的位置的移动速度成反比的值作为光量来算出，从而生成以所述线段群来表示的糢糊信息，所述多个位置是从所述传感数据得到的且示出多个时刻的拍摄方向的多个位置。根据本构成，能够基于传感数据生成精确度更高的糢糊信息。并且，优选为，所述相机具备曝光控制单元，所述曝光控制单元在拍摄所述拍摄图像时能够进行多次快门的开闭控制，所述糢糊信息生成部，进一步，从所述线段群提取示出所述快门开放期间的位置的变化的部分，并生成以所提取的部分表示的糢糊信息。根据本构成，能够高精确度地对曝光编码的拍摄图像的糢糊进行校正。并且，优选为，所述结束判定部，根据由所述评价值算出部算出的评价值是否满足所述预先规定的条件，判定是否结束糢糊的校正。根据本构成，能够在生成了糢糊校正程度高的候选校正图像时结束糢糊校正，从而能够有效地进行糢糊的校正。并且，优选为，所述评价值算出部，算出所述评价值，以使相邻的像素间的像素值的差分值之和越大则糢糊校正程度越高。根据本构成，能够将边缘鲜明的候选校正图像决定为校正图像，因此能够高精确度地进行糢糊的校正。并且，优选为，所述评价值算出部，算出所述评价值，以使在拍摄图像中像素值平坦的区域，即使在候选校正图像中也是像素值越是维持平坦则糢糊校正程度就越高。根据本构成，能够将振铃(ringing)被抑制的候选校正图像决定为校正图像，从而能够高精确度地进行糢糊的校正。并且，优选为，所述运动检测传感器是角速度传感器。根据本构成，能够简便地进行糢糊的运动检测。并且，优选为，所述糢糊信息示出点扩散函数。根据本构成，能够容易地进行糢糊的校正。并且，优选为，所述糢糊校正部，通过将所述拍摄图像和所述糢糊信息示出的点扩散函数从空域变换到频域，在变换后使拍摄图像除以点扩散函数，并将除法运算结果从频域变换到空域，从而生成所述候选校正图像。根据本构成，能够容易地进行糢糊的校正。并且，本发明的一个方面所涉及的集成电路，通过对由相机拍摄的拍摄图像中出现的模糊进行电子式校正，从而从所述拍摄图像生成校正图像，该集成电路具备糢糊信息生成部，根据传感数据，生成用于校正所述拍摄图像中出现的糢糊的糢糊信息，所述传感数据示出拍摄图像被拍摄时由运动检测传感器检测出的相机的运动；糢糊校正部，通过根据由所述糢糊信息生成部生成的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出部，算出由所述糢糊校正部生成的候选校正图像的评价值，该评价值示出模糊的校正程度；结束判定部，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新部，在由所述结束判定部判定为不结束糢糊的校正的情况下，更新由所述糢糊信息生成部生成的糢糊信息，所述糢糊校正部，在糢糊信息被所述糢糊信息更新部更新了的情况下，通过根据被更新后的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，所述结束判定部，在判定为结束糢糊的校正的情况下，根据由所述评价值算出部算出的评价值，从由所述糢糊校正部生成的至少一个候选校正图像中决定校正图像。根据本构成，能够达到与上述糢糊校正装置同样的效果。并且，本发明的一个方面所涉及的糢糊校正方法，通过对由相机拍摄的拍摄图像中出现的模糊进行电子式校正，从而从所述拍摄图像生成校正图像，该糢糊校正方法包括 糢糊信息生成步骤，根据传感数据，生成用于校正所述拍摄图像中出现的糢糊的糢糊信息， 所述传感数据示出拍摄图像被拍摄时由运动检测传感器检测出的相机的运动；糢糊校正步骤，通过根据在所述糢糊信息生成步骤中生成的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出步骤，算出在所述糢糊校正步骤中生成的候选校正图像的评价值，该评价值示出模糊的校正程度；结束判定步骤，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新步骤，在所述结束判定步骤中判定为不结束糢糊的校正的情况下，更新在所述糢糊信息生成步骤中生成的糢糊信息，在所述糢糊校正步骤中，在糢糊信息在所述糢糊信息更新步骤中被更新了的情况下，通过根据被更新后的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，在所述结束判定步骤中，在判定为结束糢糊的校正的情况下，根据在所述评价值算出步骤中算出的评价值，从在所述糢糊校正步骤中生成的至少一个候选校正图像中决定校正图像。根据本构成，能够达到与上述糢糊校正装置同样的效果。并且，本发明能够作为使计算机执行糢糊校正方法中包括的各步骤的程序来实现。并且，不言而喻，这样的程序能够通过CD-ROM等记录介质或者互联网等传输介质来分发。发明效果从上述说明很清楚，根据本发明的一个方面所涉及的糢糊校正装置，能够通过更新基于由运动检测传感器检测出的传感器数据的糢糊信息来生成糢糊校正程度高的校正图像。也就是说，能够高精确度地校正拍摄图像中出现的糢糊。
图1是本发明的实施例1的糢糊校正装置的硬件构成图。图2是示出本发明的实施例1的糢糊校正装置的功能构成的框图。图3是示出本发明的实施例1的糢糊校正处理的流程的流程图。图4是用于说明本发明的实施例1的糢糊信息生成处理的图。图5是表示评价函数的第二项的函数的特性的说明图。图6是用于说明本发明的实施例1的糢糊信息更新处理的图。图7是用于说明本发明的实施例1的糢糊信息更新处理的变形例的图。图8是本发明的实施例2的糢糊校正装置的硬件构成图。图9是示出本发明的实施例2的糢糊校正装置的功能构成的框图。图10是用于说明本发明的实施例2的糢糊信息生成处理的图。图11是用于说明拍摄图像中出现糢糊的原理以及在拍摄后通过图像处理来校正糢糊的方法的原理的图。
具体实施例方式以下，参照附图来说明本发明的实施例。(实施例1)首先，利用图1来说明本实施例的糢糊校正装置的硬件构成。图1是本发明的实施例1的糢糊校正装置的硬件构成图。如图1所示，糢糊校正装置100具备CPU(中央运算处理装置Central ProcessingUnit) 101、R0M(只读存储器Read Only Memory) 102、总线 103、RAM(随机存取存储器Random Access Memory) 104、 HDD(硬盘驱动器Hard DiskDrive) 105 以及 I/F(接口)106。CPU101，经由总线103，将R0M102中保存的程序加载到RAM104，并执行加载的程序。RAM104以及HDD105作为暂时保存被拍摄的拍摄图像的图像记忆区域等来使用。 并且，RAM104以及HDD105也作为以CPU101执行的各处理所需要的暂时记忆区域来使用。I/F106从相机107接受拍摄图像以及传感数据的输入。相机107除了具备图中未示出的透镜、摄像元件以及定时器等之外，还具备运动检测传感器108。运动检测传感器108检测相机107的运动。具体而言，运动检测传感器108，例如是陀螺仪等角速度传感器或者加速度传感器等。并且，相机107将对拍摄图像进行拍摄时由运动检测传感器108检测出的、示出相机107的运动的传感数据连同拍摄图像输出到糢糊校正装置100。接着，利用图2来说明本实施例的糢糊校正装置的功能构成。图2是示出本发明的实施例1的糢糊校正装置的功能构成的框图。具体而言，图 2是示出通过在图1示出的硬件构成来发挥的、糢糊校正装置的功能构成的框图。糢糊校正装置100，通过对由相机107拍摄的拍摄图像中出现的糢糊进行电子式校正，从而从拍摄图像生成校正图像。如图2所示，糢糊校正装置100具备图像记忆部201、传感数据记忆部202、糢糊信息生成部203、糢糊校正部204、评价值算出部205、结束判定部206以及糢糊信息更新部 207。图像记忆部201与RAM104或HDD105对应，用于记忆由相机107拍摄的拍摄图像。传感数据记忆部202与RAM104或HDD105对应，用于记忆示出相机107的运动的传感数据。具体而言，传感数据示出由图像记忆部201记忆的拍摄图像在被拍摄期间(曝光期间中)的拍摄方向的变化。更具体而言，例如，传感数据是在曝光期间中按一定的时间间隔检测出的角速度数据。糢糊信息生成部203是由CPUlOl以及RAM104等来实现的处理部。糢糊信息生成部203，根据传感数据，生成用于校正拍摄图像中出现的糢糊的糢糊信息。具体而言，例如， 糢糊信息生成部203，根据传感数据，来生成示出糢糊的轨迹和该糢糊的轨迹上的光量的分布的糢糊信息。糢糊校正部204是由CPUlOl以及RAM104等来实现的处理部。糢糊校正部204， 根据被生成的糢糊信息，对拍摄图像中出现的糢糊进行校正，从而生成候选校正图像。也就是说，糢糊校正部204，利用糢糊信息，降低拍摄图像中出现的糢糊。具体而言，糢糊校正部 204，利用糢糊信息对拍摄图像即模糊图像进行电子式校正，以使糢糊图像成为清晰图像。并且，糢糊校正部204，在模糊信息被糢糊信息更新部207更新了的情况下，根据更新后的糢糊信息，对拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像。评价值算出部205是由CPUlOl以及RAM104等来实现的处理部。评价值算出部 205算出被生成的候选校正图像的评价值，该评价值示出模糊校正程度。在此，糢糊校正程度示出拍摄图像中出现的糢糊的降低程度。换而言之，糢糊校正程度示出与无模糊的图像有多近似。结束判定部206是由CPUlOl以及RAM104等来实现的处理部。结束判定部206根据预先规定的条件来判定是否结束糢糊的校正。具体而言，例如，结束判定部206，根据被算出的评价值是否满足预先规定的条件，来判定是否结束糢糊的校正。并且，也可以是，例如， 结束判定部206，根据糢糊信息的更新次数是否在预先规定的次数以上，来判定是否结束糢糊的校正。而且，结束判定部206，在判定为结束糢糊的校正的情况下，根据被算出的评价值， 从被生成的至少一个候选校正图像中决定校正图像。具体而言，例如，结束判定部206将被算出的评价值最高的候选校正图像决定为校正图像。糢糊信息更新部207是由CPUlOl以及RAM104等来实现的处理部。糢糊信息更新部207，在由结束判定部206判定为不结束糢糊的校正的情况下，更新由糢糊信息生成部 203生成的糢糊信息。具体而言，例如，糢糊信息更新部207，通过变更由糢糊信息生成部 203生成的糢糊信息所示出的糢糊的轨迹，从而更新糢糊信息。接着，详细地说明按上述说明来构成的糢糊校正装置100的各种工作。另外，在以下的说明中，说明传感数据是角速度数据的情况。图3是示出本发明的实施例1的糢糊校正处理的流程的流程图。在以下的状态下，执行在图3示出的糢糊校正处理。首先，由图1的相机107拍摄的拍摄图像被保存在图像记忆部201。并且，由角速度传感器检测出的拍摄时的相机107的角速度数据也被保存在传感数据记忆部202。在此，例如，检测出的角速度数据表示按照一定的时间间隔T采样的、与相机的拍摄方向有关的移动矢量。在这样的状态下，首先，糢糊信息生成部203，读出传感数据记忆部202中记忆的角速度数据，并从读出的角速度数据生成糢糊信息(S201)。以下，利用图4来说明步骤S201 的糢糊信息生成处理的详细情况。图4是用于说明本发明的实施例1的糢糊信息生成处理的图。具体而言，图4是将作为移动矢量来被示出的角速度数据连续地接起来在二维空间上表示的图。在图4中，分别作为线段来表示按照每个时间间隔T的拍摄方向的变化。因此，能够通过分别连接各线段的端点，来表示曝光期间中的拍摄方向的变化。在此，表示为各线段的粗细与移动速度成反比。也就是说，各线段表示为时间间隔T之中的移动量大的情况下，线段的粗细细，而在移动量小的情况下，线段的粗细粗。这样来表示的线段群表示糢糊的轨迹，该糢糊的轨迹示出未出现糢糊时应在1 点(1个像素)受光的光，因为出现糢糊而扩散到多个像素受光时的、该多个像素的位置。并且，各线段的粗细表示由各线段上的位置的像素受光的光量。因此，示出在图4示出的线段群的轨迹上的位置中的与线段的粗细成正比的值的分布信息相当于示出糢糊的PSF。于是，糢糊信息生成部203将相当于在图4示出的线段群的信息作为糢糊信息来生成。具体而言，糢糊信息生成部203将线段群作为模糊的轨迹来算出，该线段群是将从传感数据得到的多个位置按照时刻顺序以直线来连接而得到的，该多个位置示出多个时刻的拍摄方向。而且，糢糊信息生成部203，针对构成所算出的线段群的各个点，将示出拍摄方向的位置的与移动速度成反比的值作为光量来算出。并且，糢糊信息生成部203，将由这样算出的糢糊的轨迹和该糢糊的轨迹上的光量的分布来表示的PSF作为糢糊信息来生成。但是，糢糊信息生成部203，在生成糢糊信息时，需要将示出各点的光量的值进行归一化，以使构成线段群的各点的值的合计为1。具体而言，将与第K个时间间隔T对应的线段设定为linek，并将该线段的长度设定为Iength(Iinek),则示出该第k个线段上的点所具有的光量的值P可由以下的公式C3)来求出。在此，设定N表示线段的总数。[算式4]
权利要求
1.一种糢糊校正装置，通过对由相机拍摄的拍摄图像中出现的模糊进行电子式校正， 从而从所述拍摄图像生成校正图像，该糢糊校正装置具备糢糊信息生成部，根据传感数据，生成用于校正所述拍摄图像中出现的糢糊的糢糊信息，所述传感数据示出拍摄图像被拍摄时由运动检测传感器检测出的相机的运动；糢糊校正部，通过根据由所述糢糊信息生成部生成的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出部，算出由所述糢糊校正部生成的候选校正图像的评价值，该评价值示出模糊的校正程度；结束判定部，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新部，在由所述结束判定部判定为不结束糢糊的校正的情况下，更新由所述糢糊信息生成部生成的糢糊信息，所述糢糊校正部，在糢糊信息被所述糢糊信息更新部更新了的情况下，通过根据被更新后的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，所述结束判定部，在判定为结束糢糊的校正的情况下，根据由所述评价值算出部算出的评价值，从由所述糢糊校正部生成的至少一个候选校正图像中决定校正图像。
2.如权利要求1所述的糢糊校正装置，所述糢糊信息以至少由一个线段来构成的线段群来表示。
3.如权利要求2所述的模糊校正装置，所述糢糊信息更新部，通过使构成表示所述糢糊信息的线段群的至少一个线段的至少一个端点的位置变化，从而更新所述糢糊信息。
4.如权利要求3所述的模糊校正装置，所述糢糊信息更新部，在以示出从所述传感数据得到的拍摄方向的位置为中心的区域内，使所述端点的位置变化，所述区域的大小与所述运动检测传感器的检测性能对应。
5.如权利要求2所述的模糊校正装置，所述糢糊信息生成部，通过将按照时刻顺序以直线连接了多个位置而得到的线段群作为糢糊的轨迹来算出，并针对构成所算出的线段群的各个点，将与示出所述拍摄方向的位置的移动速度成反比的值作为光量来算出，从而生成以所述线段群来表示的糢糊信息，所述多个位置是从所述传感数据得到的且示出多个时刻的拍摄方向的多个位置。
6.如权利要求5所述的模糊校正装置，所述相机具备曝光控制单元，所述曝光控制单元在拍摄所述拍摄图像时能够进行多次快门的开闭控制，所述糢糊信息生成部，进一步，从所述线段群提取示出所述快门开放期间的位置的变化的部分，并生成以所提取的部分表示的糢糊信息。
7.如权利要求1所述的模糊校正装置，所述结束判定部，根据由所述评价值算出部算出的评价值是否满足所述预先规定的条件，判定是否结束糢糊的校正。
8.如权利要求1所述的模糊校正装置，所述评价值算出部，算出所述评价值，以使相邻的像素间的像素值的差分值之和越大则糢糊校正程度越高。
9.如权利要求1所述的模糊校正装置，所述评价值算出部，算出所述评价值，以使在拍摄图像中像素值平坦的区域，即使在候选校正图像中也是像素值越是维持平坦则糢糊校正程度就越高。
10.如权利要求1所述的模糊校正装置， 所述运动检测传感器是角速度传感器。
11.如权利要求1所述的模糊校正装置， 所述糢糊信息示出点扩散函数。
12.如权利要求11所述的模糊校正装置，所述糢糊校正部，通过将所述拍摄图像和所述糢糊信息示出的点扩散函数从空域变换到频域，在变换后使拍摄图像除以点扩散函数，并将除法运算结果从频域变换到空域，从而生成所述候选校正图像。
13.一种集成电路，通过对由相机拍摄的拍摄图像中出现的模糊进行电子式校正，从而从所述拍摄图像生成校正图像，该集成电路具备糢糊信息生成部，根据传感数据，生成用于校正所述拍摄图像中出现的糢糊的糢糊信息，所述传感数据示出拍摄图像被拍摄时由运动检测传感器检测出的相机的运动；糢糊校正部，通过根据由所述糢糊信息生成部生成的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出部，算出由所述糢糊校正部生成的候选校正图像的评价值，该评价值示出模糊的校正程度；结束判定部，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新部，在由所述结束判定部判定为不结束糢糊的校正的情况下，更新由所述糢糊信息生成部生成的糢糊信息，所述糢糊校正部，在糢糊信息被所述糢糊信息更新部更新了的情况下，通过根据被更新后的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，所述结束判定部，在判定为结束糢糊的校正的情况下，根据由所述评价值算出部算出的评价值，从由所述糢糊校正部生成的至少一个候选校正图像中决定校正图像。
14.一种糢糊校正方法，通过对由相机拍摄的拍摄图像中出现的模糊进行电子式校正， 从而从所述拍摄图像生成校正图像，该糢糊校正方法包括糢糊信息生成步骤，根据传感数据，生成用于校正所述拍摄图像中出现的糢糊的糢糊信息，所述传感数据示出拍摄图像被拍摄时由运动检测传感器检测出的相机的运动；糢糊校正步骤，通过根据在所述糢糊信息生成步骤中生成的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出步骤，算出在所述糢糊校正步骤中生成的候选校正图像的评价值，该评价值示出模糊的校正程度；结束判定步骤，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新步骤，在所述结束判定步骤中判定为不结束糢糊的校正的情况下，更新在所述糢糊信息生成步骤中生成的糢糊信息，在所述糢糊校正步骤中，在糢糊信息在所述糢糊信息更新步骤中被更新了的情况下， 通过根据被更新后的糢糊信息来对所述拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，在所述结束判定步骤中，在判定为结束糢糊的校正的情况下，根据在所述评价值算出步骤中算出的评价值，从在所述糢糊校正步骤中生成的至少一个候选校正图像中决定校正图像。
15. 一种程序，该程序使计算机执行如权利要求14所述的糢糊校正方法。
全文摘要
糢糊校正装置(100)具备糢糊信息生成部(203)，根据示出相机的运动的传感数据来生成糢糊信息；糢糊校正部(204)，通过根据糢糊信息来对拍摄图像中出现的糢糊进行校正，从而生成候选校正图像；评价值算出部(205)，算出示出候选校正图像的模糊的校正程度的评价值；结束判定部(206)，根据预先规定的条件，判定是否结束糢糊的校正；以及糢糊信息更新部(207)，在判定为不结束糢糊的校正的情况下，更新糢糊信息，糢糊校正部(204)，在糢糊信息被更新了的情况下，通过根据被更新后的糢糊信息来对拍摄图像中出现的糢糊进行校正，从而重新生成候选校正图像，结束判定部(206)，在判定为结束糢糊的校正的情况下，根据评价值，从候选校正图像中决定校正图像。
文档编号G06T5/20GK102474572SQ20118000237
公开日2012年5月23日 申请日期2011年3月17日 优先权日2010年4月13日
发明者八木康史, 向川康博, 物部祐亮, 石井育规 申请人:松下电器产业株式会社