摄像设备和图像处理方法

专利名称：摄像设备和图像处理方法
技术领域：
本发明涉及一种能够使利用具有固态图像传感器的摄像设备所拍摄的图像模糊 的图像处理技术。
背景技术：
过去，在光学上已实现了拍摄包括上模糊区域和下模糊区域的图像的透视画拍摄 (dioramic shooting)。能够实现透视画拍摄的光学元件有例如诸如可用于进行鸟瞰图拍 摄的移轴(tilt-shift)镜头等的特殊镜头。此外，对拍摄的图像进行图像处理，这有利于 实现包括透视画效果的各种模糊效果。日本特开2000-69277号公报讨论了一种用于以适 当比率混合普通拍摄图像(原始图像)和从原始图像产生的模糊图像以获得柔焦效果的技 术。此外，如日本特开2004-1(^904号公报中所述，对普通拍摄图像顺次进行缩小、滤波和 放大处理，这有利于获取适当的模糊图像。然而，当采用图像处理来实现高质量的透视画静止图像时，通常通过在多个阶段 改变模糊程度来进行模糊处理。另一方面，当在准备静止图像拍摄操作期间显示实时图像 时，或者当进行运动图像的记录时，可能需要显示透视画图像。在这种情况下，以实现实时 生成许多帧的透视画图像这一方式进行图像处理。因此，如果需要在各种拍摄条件下适当 获取透视画图像，则在要求高质量图像时，处理速度趋于下降并且存储器或其它资源的使 用受限。

发明内容
根据本发明的一个方面，一种设备，其基于由摄像部件所获得的所拍摄图像来生 成要显示在显示部件上的显示图像和要记录在记录部件中的记录图像，所述设备包括生 成部件，用于根据所述所拍摄图像生成模糊程度不同的多个模糊图像；合成部件，用于将所 述所拍摄图像与所生成的模糊图像中的至少一个模糊图像进行合成，以生成所述显示图像 和所述记录图像；以及控制部件，用于控制所述生成部件和所述合成部件，以使得将生成所 述显示图像所使用的图像的数量设置得少于生成所述记录图像所使用的图像的数量。根据本发明的一个方面，一种设备，其基于由摄像部件所获得的所拍摄图像来记 录静止图像和运动图像，所述设备包括生成部件，用于根据所述所拍摄图像生成模糊程度 不同的多个模糊图像；合成部件，用于将所述所拍摄图像与所述模糊图像中的至少一个模 糊图像进行合成，以生成所述静止图像和所述运动图像；以及控制部件，用于控制所述生成 部件和所述合成部件，以使得将由所述生成部件所生成的、生成所述运动图像所使用的图 像的数量设置得少于生成所述静止图像所使用的图像的数量。根据本发明的另一方面，一种设备的控制方法，所述设备能够基于由摄像部件所 获得的所拍摄图像来记录静止图像和运动图像，所述控制方法包括根据所述所拍摄图像 生成模糊程度不同的多个模糊图像；以及将所述所拍摄图像与所生成的模糊图像中的至少 一个模糊图像进行合成，以生成所述静止图像和所述运动图像，其中，所生成的、生成所述运动图像所使用的图像的数量少于所生成的、生成所述静止图像所使用的图像的数量。根据本发明的另一方面，一种设备的控制方法，所述设备能够基于由摄像部件所 获得的所拍摄图像来生成要显示在显示部件上的显示图像和要记录在记录部件中的记录 图像，所述控制方法包括根据所述所拍摄图像生成模糊程度不同的多个模糊图像；以及 将所述所拍摄图像与所生成的所述多个模糊图像进行合成以生成所述记录图像，并且将所 述所拍摄图像与所生成的所述多个模糊图像中最模糊的模糊图像进行合成以生成所述显 示图像。根据本发明的又一方面，一种设备的控制方法，所述设备能够基于由摄像部件所 获得的所拍摄图像来生成要显示在显示部件上的显示图像和要记录在记录部件中的记录 图像，其中，所述设备包括缩小部件，用于缩小从所述记录部件所获得的图像；放大部件， 用于对缩小后的图像进行放大；以及合成部件，用于将放大后的图像与所述记录部件中所 记录的具有相同图像大小的图像进行合成，以及所述控制方法包括进行第一缩小处理，以 按照预定倍率对记录在所述记录部件中的第一图像进行缩小从而获得第二图像，并将所述 第二图像记录在所述记录部件中，并且进一步缩小所述第二图像以获得第三图像，并将所 述第三图像记录在所述记录部件中，其中，重复所述第一缩小处理，直到将第η图像记录在 所述记录部件中为止，η为满足条件η ^ 3的整数；以及进行第一合成处理，以使所述放大 部件按照所述预定倍率放大所述第η图像以获得放大图像，并且将所获得的放大图像与记 录在所述记录部件中的第(η-1)图像进行合成以生成第一合成图像，并且按照所述预定倍 率进一步放大所述第一合成图像以获得进一步放大的图像，并且将所述进一步放大的图像 与记录在所述记录部件中的第(η-2)图像进行合成以生成第二合成图像，其中，重复所述 第一合成处理，直到生成第(η-1)合成图像为止。通过以下参考附图对典型实施例的详细说明，本发明的其它特征和方面将显而易 见。


包含在说明书中并构成说明书的一部分的附图，示出本发明的典型实施例、特征 和方面，并与说明书一起用来解释本发明的原理。图1示出根据本发明典型实施例的摄像设备的示例性结构；图2是示出根据本发明典型实施例的摄像设备的数字信号处理单元的示例性结 构的框图；图3Α和:3Β是示出根据本发明典型实施例的摄像设备可进行的处理的示例性过程 的流程图；图4Α 4D示出可通过根据本发明典型实施例的摄像设备获得的效果的例子。
具体实施例方式下面参考附图详细说明本发明的各种典型实施例、特征和方面。图1示出根据本发明第一典型实施例的摄像设备的示例性结构。光学系统101具有用于将入射光聚焦在固态图像传感器103上以形成要拍摄的被 摄体的图像的机构。光学系统控制单元102可以控制光学系统101进行的各种操作(例如，曝光、变焦、聚焦和光学抖动补偿)。固态图像传感器103可以将拍摄的光学图像转换成电 信号。摄像系统控制单元104是能够驱动固态图像传感器103的控制系统。模拟信号处理 单元105对固态图像传感器103的输出信号进行箝位和增益调整处理。模拟/数字(A/D) 转换单元106可以将模拟图像信号转换成数字图像数据以作为图像数据而输出。光学系统101和上述相关构件102 106可以协作构成根据本典型实施例的摄像 单元。摄像设备可以以将从摄像单元输出的所拍摄图像的图像数据逐帧记录在外部存储装 置(未示出)中的方式，进行静止图像拍摄操作。此外，摄像设备可以以连续记录多个帧的 方式进行运动图像拍摄操作。数字信号处理单元107可以对所拍摄图像的A/D转换后的数字信号进行图像处理 以生成输出图像。在数字信号处理单元107进行上述输出图像生成处理时，内部存储单元 108可以临时存储图像数据。接口(I/F)单元109与可以最终存储所生成的图像数据的外 部存储装置连接。图像显示单元110在功能上可用作为可以将所生成的图像显示为实时图 像的电子取景器。中央处理单元(CPU) 100可以控制上述构件，并且可以控制如下所述由摄 像设备进行的各种操作。图2是示出根据本典型实施例的摄像设备的数字信号处理单元107的示例性结构 的框图。亮度信号处理单元201对所拍摄图像的图像数据进行亮度信号处理，并且将亮度 处理后的信号输出给合成图像生成单元203。颜色信号处理单元202对所拍摄图像的图像 数据进行颜色信号处理，并且将颜色处理后的信号输出给合成图像生成单元203。可以使用 内部存储单元108来临时存储合成图像或者在图像显示单元110上显示实时图像。图像压 缩单元204可以压缩从合成图像生成单元203所接收到的图像数据，并且可以经由接口单 元109将压缩后的图像数据输出给外部存储装置。此外，合成图像生成单元203包括可以缩小输入图像的图像缩小单元205、可以 放大缩小后的图像的图像放大单元206以及可以合成多个处理后的图像的图像合成单元 207。上述各功能单元205 207均与内部存储单元108连接。在正常拍摄操作中，CPU 100根据所选择的图像大小使上述单元205 207对输 入图像进行缩小和放大处理。此外，在合成处理中，CPU 100在使上述单元205 207进行 缩小和放大处理时，根据需要使内部存储单元108临时存储处理后的图像。图3A是示出当在拍摄或记录静止图像或运动图像之前显示实时图像以确定图像 的构图时要进行的处理的流程图。在实时图像显示中，摄像设备的CPU 100对所拍摄图像 进行透视画特殊效果处理，并且在不记录处理后的图像的情况下进行实时显示。在CPU 100 的控制下执行图3A中的流程图所示的处理。在显示实时图像时，如果生成透视画实时图像可使用的处理性能和存储器容量与 正常拍摄模式下的实时图像或者透视画静止图像拍摄模式下可使用的处理性能和存储器 容量相当，则透视画实时图像的显示处理可能由于处理速度的降低而延迟，或者帧频可能 下降。因此，优先防止在实时图像显示中发生这些不便。根据本典型实施例，如果指定透视画拍摄模式，那么在步骤S301，CPU 100输入已 经手动或自动确定的模糊程度，并且基于模糊程度确定图像的缩小比率。例如，用户可以在 “强”和“弱”之间选择模糊程度，并且，如果所选择的模糊程度是“强”，则CPU 100可以设置较大的缩小比率。例如，当所选择的模糊程度是“强”时，要设置的缩小比率为1/8，并且当 所选择的模糊程度是“弱”时，要设置的缩小比率为1/4。在本典型实施例中，假定所选择的 模糊程度是“强”。接着在步骤S302，CPU 100控制内部存储单元108临时存储输入的所拍摄图像的 图像数据。在步骤S303，CPU 100基于所确定的缩小比率控制图像缩小单元205缩小图像 数据，并且控制内部存储单元108临时存储缩小后的图像数据。根据示例性方法，以根据缩小比率简单间隔剔除一些像素的方式来进行根据本典 型实施例的缩小处理。在这种情况下，由于所选择的模糊程度是“强”(缩小比率=1/8)， 因而图像缩小单元205进行用于从连续的8个像素中剔除7个像素的处理。还可以使用诸 如双线性方法或双三次方法等的任何其它缩小方法。随后，在步骤S304，CPU 100控制图像放大单元206对缩小处理后的图像数据进行 放大处理(放大倍率=8)，以恢复具有原始图像大小的图像。根据步骤S304进行的处理， 与所拍摄图像的图像数据相比，可以获得具有相同图像大小的模糊图像的图像数据。接着在步骤S305，CPU 100对从内部存储单元108读出的所拍摄图像的图像数据 进行剪切，并且将剪切出的图像数据发送给图像合成单元207。在这种情况下，要剪切出的 区域是与图4C所示的区域406相对应的区域。然后，在步骤S306，图像合成单元207将在步骤S305剪切出的图像定位粘贴在步 骤S304放大的模糊图像上。更具体地，在粘贴所拍摄的图像数据时，在图像的中心附近的 区域405中，将模糊图像数据与所拍摄的图像数据的合成比率设置为0 1。此外，如果所 拍摄图像的图像数据的位置离区域405越远，则针对所拍摄图像要设置的合成比率变得越 小。相反，如果模糊图像的图像数据的位置离区域405越远，则针对模糊图像要设置的合成 倍率变得更大。通过如上所述设置合成比率，可以平滑地混合图像数据，并且粘贴区域的边 界部分将不明显。对输入的所拍摄图像的每一帧执行上述处理，这可以实现在中心部分保持原始分 辨率感觉的同时在上部分和下部分处模糊的实时图像的显示。上述方法在透视画图像的不 可见性方面劣于下面将说明的针对静止图像拍摄操作所使用的方法。然而，上述方法优于 针对静止图像拍摄操作所使用的方法在于，可以大大降低数字信号处理单元107的处理负 荷和内部存储单元108的使用存储器容量。因此，根据本典型实施例的摄像设备可以在正 常拍摄模式下保持实时图像的帧频的同时实现适当透视画图像显示。用户可以精确地进行 构图，并且可以在不错失拍照机会的情况下进行透视画静止图像的拍摄和记录。图;3B是示出在静止图像拍摄模式下要进行的处理的流程图。进行静止图像拍摄 模式下的操作，以相对于处理速度优先降低合成处理中的不自然，即，使可见性优先。如果在图3A所示的实时图像处理期间按下快门按钮，那么在步骤S307，CPU 100 输入已经手动或自动确定的模糊程度，并且基于所输入的模糊程度确定缩小处理中要进行 的循环处理的次数。如上所述，在本典型实施例中，用户可以在“强”和“弱”之间选择模糊 程度。当用户所选择的模糊程度是“强”时，将循环处理的次数设置成较大的值。作为整体图像，在按下快门按钮之前(即紧挨在按下快门按钮之前)在图像显示 单元110上要显示的实时图像与在静止图像拍摄操作中所获得的图像在模糊状态方面相 似。因此，对于图像质量，根据模糊程度(即“强”或“弱”)要设置的循环处理的次数与在实时图像显示模式下在步骤S303所进行的缩小处理的缩小比率相关。更具体地，将根据本典型实施例的缩小处理中的缩小比率设置成固定值(= 1/2)。因此，如果模糊程度是“强”，则CPU 100将循环处理的次数设置为3次(这对应于整 体1/8缩小)。如果模糊程度是“弱”，则CPU 100将循环处理的次数设置成2次(这对应 于整体1/4缩小)。如果按下快门按钮，那么在步骤S308，CPU 100使内部存储单元108临时存储所输 入的图像数据(即原始数据)。然后，在步骤S309，CPU 100使图像缩小单元205缩小图像 数据以具有根据固定值所确定的大小，并且使内部存储单元108临时存储缩小后的图像数 据。使用简单间隔剔除一些像素的方法进行根据本典型实施例的缩小处理，其中，该 方法类似于上述实时图像处理中所使用的方法。由于图像缩小单元205的固定值是1/2，因 而图像缩小单元205进行用于从连续两个像素中剔除一个像素的处理。接着在步骤S310，CPU 100判断所执行的缩小处理的循环处理的次数是否达到了 在步骤S307所确定的循环处理的次数。如果判断为所执行的循环处理的次数小于预定次 数(步骤S310为“否”)，则处理返回到步骤S308，在步骤S308，CPU 100使内部存储单元 108临时存储缩小后的图像数据。然后，在步骤S309，CPU 100读取在步骤S308所存储的 缩小后的图像数据，并且使图像缩小单元205再次缩小该图像以具有根据固定值所确定的 大小。如果判断为执行的循环处理的次数达到了预定次数(步骤S310为“是”)，则CPU 100终止缩小处理。在本典型实施例中，在完成缩小处理时被存储在内部存储单元108中的 数据包括所拍摄图像的图像数据(即原始数据)、1/2缩小图像的图像数据、1/4缩小图像的 图像数据以及1/8缩小图像的图像数据。接着在步骤S311，CPU 100从内部存储单元108读取最缩小的图像的图像数据 (即，最下层的图像，更具体地，本典型实施例中的1/8缩小图像的图像数据)，并且使图像 放大单元206放大所读出的图像数据以具有根据固定值的倒数所确定的大小(放大倍率= 2)。然后，CPU 100将放大图像的图像数据存储在内部存储单元108中。上述处理可以生 成具有与上层(即1/4缩小图像)相当的图像大小、但比上层的缩小图像更模糊的模糊图 像的图像数据。接着在步骤S312，CPU 100对从内部存储单元108读出的上层的缩小图像(S卩1/4 缩小图像)的图像数据进行剪切，并且将剪切出的图像数据发送给图像合成单元207。在这 种情况下，要剪切的区域是与图4A所示的区域403相对应的区域。接着在步骤S313，CPU 100使图像合成单元207将所剪切出的图像粘贴在步骤 S311所获得的模糊图像(具有与1/4缩小图像相同的大小)上。更具体地，图像合成单元 207进行用于以合成比率1 0将剪切出的图像与该模糊图像合成的处理。在这种情况下， 与在实时图像中相似，对粘贴区域的边界部分进行平滑混合以防止边界部分明显。CPU 100 使内部存储单元108存储所获得的合成图像。在步骤S314，CPU 100判断所执行的循环处理的次数是否达到了循环处理的预定 次数。如果判断为所执行的循环处理的次数小于预定次数(步骤S314为“否”)，则CPU 100 重复上述步骤S311 S313中的放大、剪切和粘贴处理。在这种情况下，在第二次循环处理中所放大的图像是在步骤S313所存储的合成图像。此外，上层的缩小图像(即1/2缩小图 像)中要剪切并合成的区域是与图4A所示的区域402相对应的区域。在本典型实施例中，要进行的循环处理的次数是3次。因此，在第三次循环处理中 的放大处理之后所获得的合成图像具有与所拍摄图像相同的图像大小。此外，第三次循环 处理中要剪切并合成的所拍摄图像的区域是与图4A所示的区域401相对应的区域。用于连续缩窄每次重复循环处理时用于粘贴上层图像的中心区域的区域的上述 处理可以最终获得具有阶梯状模糊效果的合成图像。图4A和4B示出根据本典型实施例可获得的示例性透视画静止图像及其模糊效
果图4A示出模糊图像的多个合成区域之间的关系。区域401是最清晰的区域，即粘 贴原始拍摄图像的区域。区域402是在进行一次缩小处理的循环处理之后所获得的区域， 即轻微模糊区域。区域403是在进行两次缩小处理的循环处理之后所获得的区域，即较模 糊区域。区域404是在进行三次缩小处理的循环处理之后所获得的区域，即最模糊区域。如图:3B示出的处理过程所述，图像缩小单元205进行三次缩小处理以重复用于连 续缩小与区域401、区域402、区域403和区域404有关的整个图像的循环处理。此外，进行 缩小处理所使用的内部存储单元108的存储容量相当于大小不同的四个图像数据。此外，放大区域403并将其粘贴到区域404。进一步放大所获得的区域并且将其 粘贴到区域402。进一步放大所获得的区域并且将其粘贴到区域401。因此，图像放大单元 206进行三次放大处理，并且图像合成单元207进行三次合成处理。此外，进行放大处理所 使用的内部存储单元108的存储容量相当于四个图像数据。更具体地，CPU 100使图像缩小单元205缩小存储在内部存储单元108中的第一 图像以具有根据预定固定值(即，预定倍率)所确定的大小。然后，CPU 100将缩小后的图 像作为第二图像存储在内部存储单元108中。此外，CPU 100使图像缩小单元205缩小第 二图像以获得第三图像，并且将所获得的第三图像存储在内部存储单元108中。CPU 100使 图像缩小单元205和内部存储单元108重复上述处理，直到将第η (η为满足条件η > 3的 整数)图像存储在内部存储单元108中为止。随后，CPU 100使图像放大单元206放大第η图像以具有根据固定值(即预定倍 率)的倒数所确定的大小。然后，CPU 100使图像合成单元207将所获得的放大图像与第 (n-1)图像合成，以生成第一合成图像。此外，CPU 100使图像放大单元206以预定倍率放 大第一合成图像，以获得进一步放大的图像，并且使图像合成单元207将该放大的图像与 存储在内部存储单元108中的第(n-2)图像合成，以生成第二合成图像。CPU 100使图像放 大单元206和图像合成单元207重复上述处理，直到生成第(n-1)合成图像为止。通过上 述处理所获得的最终生成的图像是在静止图像拍摄模式下要存储的记录图像。此外，在进行上述模糊设置以拍摄静止图像的情况下，在拍摄静止图像之前以下 面的方式生成实时图像(即显示图像)。更具体地，图像缩小单元205缩小存储在内部存储 单元108中的第一图像以具有相当于第η图像的图像大小，来生成缩小图像。然后，放大所 生成的缩小图像以具有相当于第一图像的大小，并且将其与第一图像合成，以生成实时图 像要使用的图像。图4Β是与图4Α相对应的图，在图4Β中，纵轴表示图像的垂直方向，并且横轴表示可见模糊效果的程度。通过图4B的图可知，从清晰区域到模糊区域，以阶梯状方式应用模 糊效果，并且在区域的边界处对该区域进行平滑混合，从而可以使得模糊效果的变化变得 自然。如上所述，在本典型实施例中所选择的模糊程度是“强”。因此，重复三次循环处 理。然而，循环处理的次数可以根据要求的模糊量而改变。例如，如果用户所选择的模糊程 度是“弱”，则将循环处理的次数设置为两次。图4C和4D示出与可根据本典型实施例所获得的模糊效果有关的透视画实时图像 的例子。图4C示出模糊图像的多个合成区域之间的关系。区域405是清晰区域，即粘贴原 始所拍摄图像的区域。区域406是通过图3A所示的缩小、放大和合成处理所获得的模糊区 域。如以上参考图3A所示的处理过程所述，可以基于缩小比率确定模糊的量。图4D是与图4C相对应的图，在该图中，纵轴表示图像的垂直方向，并且横轴表示 可见模糊效果的程度。如该图所示，可见模糊效果以在区域407中平滑地混合原始数据和 模糊图像数据的方式，从清晰区域平滑地改变至模糊区域。此外，将清晰区域与模糊区域的边界混合的范围设置成类似于静止图像的阶梯状 范围的较宽范围。更具体地，图4C所示的区域406和区域407之间的范围窄于图4A所示 的区域403和区域404之间的范围。然而，图4C所示的范围具有与通过应用于图4A所示 的边界区域的平滑混合处理而可获得的模糊效果相类似的模糊效果。也就是说，模糊的变 化(即梯度)类似于图4A所示的变化。通过上述处理，应用于实时图像的模糊效果变得类 似于应用于实际拍摄的图像的模糊效果。图4C所示的图像与图4A所示的图像的不同在于模糊效果的变化不是阶梯状的。 因此，当观看图4C所示的图像时，可能不能获得充分的透视画效果。然而，图像缩小单元 205所进行的缩小处理的次数仅是一次。因此，内部存储单元108用于缩小处理的存储器 容量相当于大小不同的两个图像数据。此外，图像放大单元206所进行的放大处理的次数 仅是一次。图像合成单元207所进行的合成处理的次数也仅是一次。因此，内部存储单元 108用于放大处理和合成处理的存储器容量相当于两个图像数据。因此，在不会产生显示处理的任何延迟和不会降低帧频的情况下，即使在需要每 秒数十帧的处理速度的实时图像的显示中，透视画效果的实时确认也是可行的。因此，本典 型实施例可以产生用于解决上述不便的效果。更具体地，该摄像设备可以在实时图像的显 示期间，在不会错失拍照机会的情况下适当进行透视画静止图像拍摄。在本典型实施例中，使用所拍摄图像和单个模糊图像来生成实时图像显示中的透 视画图像。然而，使用一个或多个但不超过静止图像拍摄模式下所使用的模糊图像的数量 的模糊图像，可以获得相同效果。例如，还可以生成1/4缩小图像。在这种情况下，从图像 的中心到图像的外边缘，合成中的权重按照所拍摄图像、1/4缩小图像和1/8缩小图像的顺 序顺次改变。此外，根据本典型实施例，与用于使用缩小和放大来生成模糊图像的处理并行地， 进行用于生成实时图像和实际拍摄的图像(即记录图像)的处理。然而，用于生成各图像 的方法不局限于上述方法。其它可使用的方法可以包括根据所拍摄图像生成多个模糊程度 不同的模糊图像。在这种情况下，以生成实时图像(即显示图像)所使用的模糊图像的数量小于生成实际拍摄的图像(即记录图像)所使用的模糊图像的数量的方式，进行图像生 成处理。在透视画实时图像的生成中，第一实施例所述的摄像设备使帧频和处理负荷优先 于图像质量。运动图像拍摄或记录处理中发生的问题类似于在实时图像显示处理中发生的问 题。因此，对于运动图像拍摄处理可以直接使用图3A所示的实时图像显示模式下的处理过程。此外，提供包括用于进行图3A所示的处理过程的帧频优先模式和用于进行图;3B 所示的处理过程的图像质量优先模式的多个透视画运动图像拍摄模式，这是有用的。因此， 各用户可以从这些模式中选择想要的一种模式。在上述典型实施例中，透视画图像处理是能够产生特殊效果的处理的例子。然而， 本发明可应用于通过合成所拍摄图像与至少一个模糊图像以获得区域不同的合成图像的 特殊效果的任何其它处理。在上述典型实施例中，本发明应用于摄像设备。然而，本发明不局限于上述典型实 施例中所述的摄像设备，并且还可应用于诸如可以从外部连接的摄像设备输入所拍摄图像 的个人计算机和数字电视机等的图像处理设备。在这种情况下，可以经由记录介质(例如 紧凑型光盘只读存储器(CD-ROM))安装或者从可经由网络访问的因特网服务器获取使计 算机执行图3A和:3B所示的各步骤中的上述处理的应用程序软件。还可以利用读出并执行记录在存储器装置上的程序以进行上述实施例的功能的 系统或设备的计算机(或者CPU或MPU等装置)和通过下面的方法实现本发明的方面，其 中，利用系统或设备的计算机通过例如读出并执行记录在存储器装置上的程序以进行上述 实施例的功能来进行上述方法的步骤。为此，例如，通过网络或者通过用作存储器装置的各 种类型的记录介质(例如，计算机可读介质)将该程序提供给计算机。尽管参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典 型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功 能。
权利要求
1.一种设备，其基于由摄像部件所获得的所拍摄图像来生成要显示在显示部件上的显 示图像和要记录在记录部件中的记录图像，所述设备包括生成部件，用于根据所述所拍摄图像生成模糊程度不同的多个模糊图像； 合成部件，用于将所述所拍摄图像与所生成的模糊图像中的至少一个模糊图像进行合 成，以生成所述显示图像和所述记录图像；以及控制部件，用于控制所述生成部件和所述合成部件，以使得将生成所述显示图像所使 用的图像的数量设置得少于生成所述记录图像所使用的图像的数量。
2.根据权利要求1所述的设备，其特征在于，所述生成部件包括 缩小部件，用于对所述所拍摄图像进行缩小处理；以及放大部件，用于对缩小后的图像进行放大处理，以生成图像大小与原始图像的图像大 小相同的模糊图像。
3.根据权利要求1所述的设备，其特征在于，在生成所述显示图像时，所述合成部件通 过改变各区域的合成比率来改变各区域的模糊程度。
4.根据权利要求3所述的设备，其特征在于，所述合成比率是模糊图像数据与所拍摄 图像数据的比率。
5.根据权利要求3所述的设备，其特征在于，所述合成部件改变各区域的模糊程度，以 使得所述记录图像和所述显示图像在各区域的模糊效果上类似。
6.一种设备，其基于由摄像部件所获得的所拍摄图像来记录静止图像和运动图像，所 述设备包括生成部件，用于根据所述所拍摄图像生成模糊程度不同的多个模糊图像； 合成部件，用于将所述所拍摄图像与所述模糊图像中的至少一个模糊图像进行合成， 以生成所述静止图像和所述运动图像；以及控制部件，用于控制所述生成部件和所述合成部件，以使得将由所述生成部件所生成 的、生成所述运动图像所使用的图像的数量设置得少于生成所述静止图像所使用的图像的 数量。
7.根据权利要求6所述的设备，其特征在于，所述生成部件包括 缩小部件，用于对所述所拍摄图像进行缩小处理；以及放大部件，用于对缩小后的图像进行放大处理，以生成图像大小与原始图像的图像大 小相同的模糊图像。
8.一种设备的控制方法，所述设备能够基于由摄像部件所获得的所拍摄图像来生成要 显示在显示部件上的显示图像和要记录在记录部件中的记录图像，所述控制方法包括根据所述所拍摄图像生成模糊程度不同的多个模糊图像；以及 将所述所拍摄图像与所生成的模糊图像中的至少一个模糊图像进行合成，以生成所述 显示图像和所述记录图像，其中，所生成的、生成所述显示图像所使用的图像的数量少于所生成的、生成所述记录 图像所使用的图像的数量。
9.根据权利要求8所述的控制方法，其特征在于，还包括 对所述所拍摄图像进行缩小处理；以及对缩小后的图像进行放大处理，以生成图像大小与原始图像的图像大小相同的模糊图像。
10.一种设备的控制方法，所述设备能够基于由摄像部件所获得的所拍摄图像来记录 静止图像和运动图像，所述控制方法包括根据所述所拍摄图像生成模糊程度不同的多个模糊图像；以及将所述所拍摄图像与所生成的模糊图像中的至少一个模糊图像进行合成，以生成所述 静止图像和所述运动图像，其中，所生成的、生成所述运动图像所使用的图像的数量少于所生成的、生成所述静止 图像所使用的图像的数量。
11.一种设备的控制方法，所述设备能够基于由摄像部件所获得的所拍摄图像来生成 要显示在显示部件上的显示图像和要记录在记录部件中的记录图像，所述控制方法包括根据所述所拍摄图像生成模糊程度不同的多个模糊图像；以及将所述所拍摄图像与所生成的所述多个模糊图像进行合成以生成所述记录图像，并且 将所述所拍摄图像与所生成的所述多个模糊图像中最模糊的模糊图像进行合成以生成所 述显示图像。
12.根据权利要求11所述的控制方法，其特征在于，所生成的、生成所述显示图像所使 用的图像的数量少于所生成的、生成所述记录图像所使用的图像的数量。
13.一种设备的控制方法，所述设备能够基于由摄像部件所获得的所拍摄图像来生成 要显示在显示部件上的显示图像和要记录在记录部件中的记录图像，其中，所述设备包括缩小部件，用于缩小从所述记录部件所获得的图像；放大部件，用于对缩小后的图像进行放大；以及合成部件，用于将放大后的图像与所述记录部件中所记录的具有相同图像大小的图像 进行合成，以及所述控制方法包括进行第一缩小处理，以按照预定倍率对记录在所述记录部件中的第一图像进行缩小从 而获得第二图像，并将所述第二图像记录在所述记录部件中，并且进一步缩小所述第二图 像以获得第三图像，并将所述第三图像记录在所述记录部件中，其中，重复所述第一缩小处 理，直到将第η图像记录在所述记录部件中为止，η为满足条件η > 3的整数；以及进行第一合成处理，以使所述放大部件按照所述预定倍率放大所述第η图像以获得放 大图像，并且将所获得的放大图像与记录在所述记录部件中的第(η-1)图像进行合成以生 成第一合成图像，并且按照所述预定倍率进一步放大所述第一合成图像以获得进一步放大 的图像，并且将所述进一步放大的图像与记录在所述记录部件中的第(η-2)图像进行合成 以生成第二合成图像，其中，重复所述第一合成处理，直到生成第(η-1)合成图像为止。
14.根据权利要求13所述的控制方法，其特征在于，还包括进行第二缩小处理，以将所述第一图像缩小成具有与所述第η图像的图像大小相同的 图像大小；以及进行第二合成处理，以将如下图像与所述第一图像进行合成该图像是通过放大由所 述第二缩小处理所生成的缩小图像以具有与所述第一图像的大小相同的大小而获得的图像。
15.根据权利要求14所述的控制方法，其特征在于，对于所述记录图像使用通过所述 第一合成处理所生成的图像，并且对于所述显示图像使用通过所述第二合成处理所生成的 图像。
全文摘要
本发明提供一种摄像设备和图像处理方法，该设备可以在静止图像记录模式下生成高质量的具有透视画特殊效果的图像，并且可以在实时图像显示模式下快速生成具有所述透视画特殊效果的图像。该摄像设备根据所拍摄图像生成一个或多个模糊图像，并且通过改变区域而将所拍摄图像与所生成的模糊图像中的至少一个模糊图像进行合成。在实时图像显示中合成用的所生成的模糊图像的数量少于在静止图像记录中合成用的所生成的模糊图像的数量。
文档编号H04N1/393GK102148930SQ20111003473
公开日2011年8月10日 申请日期2011年1月31日 优先权日2010年2月5日
发明者小笠原努 申请人:佳能株式会社