摄像装置及图像再生装置的制作方法

专利名称：摄像装置及图像再生装置的制作方法
技术领域：
本发明涉及能够对动态图像进行摄影的摄像装置。而且，本发明涉及对动态图像 进行再生的图像再生装置。
背景技术：
以往，当使用摄像机对关注的被摄体(人物等)进行动态图像摄影时，为了不迷失 该被摄体，需要在摄像机的显示画面上确认被摄体的同时，根据被摄体的运动来操作摄像 机的摄影方向、变焦倍率。因此，摄影者必须将精力集中于摄影，难以一边与关注的被摄体 进行交流一边实施摄影、或难以一边将精力投入到其他事情上一边进行摄影。非专利文献1 羽下哲司及其他两人、“侵入检测/追踪相机”、(online)、 平成16年8月、三菱电机、(平成19年12月14日检索)、网址<URL :http://www. mitsubishielectric. co. jp/giho/0408/0408111. pdf>如果能够在不怎么将精力集中于摄影操作的情况下获得关注被摄体的动态图像， 则当然会提高摄像机的便利性。

发明内容
鉴于此，本发明的目的在于，提供一种即使不怎么将精力集中于摄影操作，也能够 获得符合摄影者意图的关注被摄体的动态图像的摄像装置。而且，其目的还在于，提供一种 能够对即使在摄影时不怎么将精力集中于摄影操作，也符合操作者意图的关注被摄体的动 态图像进行再生的图像再生装置。本发明涉及的摄像装置具备摄像元件，其通过摄影，输出表示摄影对象的光学像 的信号；特定被摄体检测单元，其依次取得基于所述摄像元件的输出信号的输入图像，根据 所述输入图像的图像信号，检测所述摄影对象中包含的特定被摄体在所述输入图像上的位 置；截取图像提取单元，其根据检测出的所述位置，在所述输入图像内设定比所述输入图像 的整个区域小的截取区域，提取出所述截取区域内的图像作为截取图像；和画质补偿单元， 其使所述截取图像的分辨率提高。由此，仅通过将特定被摄体限制在摄影区域内，便能够自动地取得着眼于特定被 摄体的、分辨率高的截取图像的动态图像。即，即使不怎么将精力集中于摄影操作，也能够 取得符合摄影者意图的动态图像。例如，所述摄像装置还具备装置运动检测单元，其检测所述摄像装置的运动；被 摄体运动检测单元，其根据所述摄像元件的输出信号，对相邻帧的输入图像间的所述特定 被摄体的运动进行检测；和修正单元，其根据所述装置运动检测单元的检测结果及所述被 摄体运动检测单元的检测结果，对所述截取图像中的抖动进行修正。通过除了考虑摄像装置的运动之外，还考虑特定被摄体的运动，由此能够良好地 修正截取图像的抖动。更具体而言，例如所述摄像装置还具备使所述光学像在所述摄像元件上移动的像移动单元，所述修正单元通过根据所述装置运动检测单元的检测结果及所述被摄体运动检 测单元的检测结果，对由所述像移动单元实现的移动及由所述截取图像提取单元设定的所 述截取区域的位置进行控制，来修正所述截取图像中的抖动。而且，例如所述修正单元参照基于所述装置运动检测单元的检测结果的与所述摄 像装置的运动对应的第一向量、以及基于所述被摄体运动检测单元的检测结果的与所述特 定被摄体的运动对应的第二向量，按照以规定的比率将所述第一及第二向量合成而得到的 向量，控制所述像移动单元，并且按照所述摄影对象中包括的实际空间上的静止物体在相 邻帧的截取图像间的位置变化被抑制的方式，对所述截取图像提取单元进行控制。或者，例如所述修正单元参照基于所述装置运动检测单元的检测结果的与所述摄 像装置的运动对应的第一向量、以及基于所述被摄体运动检测单元的检测结果的与所述特 定被摄体的运动对应的第二向量，按照所述摄像元件上的所述特定被摄体的像的位置变化 被抑制的方式，根据所述第二向量控制所述像移动单元，并且，按照所述摄影对象中包括的 实际空间上的静止物体在相邻帧的截取图像间的位置变化被抑制的方式，对所述截取图像 提取单元进行控制。另外，例如在所述摄像元件的摄像面的第一区域内排列有多个受光像素，在所述 摄像元件的第一区域内设定比所述第一区域小的第二区域，根据来自被配置在所述第二区 域内的受光像素组的输出信号，形成所述输入图像，所述修正单元通过根据所述装置运动 检测单元的检测结果及所述被摄体运动检测单元的检测结果，对所述第二区域的设定位 置、以及由所述截取图像提取单元设定的所述截取区域的位置进行控制，来修正所述截取 图像中的抖动。而且，例如所述修正单元参照基于所述装置运动检测单元的检测结果的与所述摄 像装置的运动对应的第一向量、以及基于所述被摄体运动检测单元的检测结果的与所述特 定被摄体的运动对应的第二向量，按照以规定的比率将所述第一及第二向量合成而得到的 向量，控制所述第二区域的设定位置，并且按照所述摄影对象中包括的实际空间上的静止 物体在相邻帧的截取图像间的位置变化被抑制的方式，对所述截取图像提取单元进行控 制。另外，例如所述修正单元参照基于所述被摄体运动检测单元的检测结果的与所述 特定被摄体的运动对应的向量，在所述向量的大小比规定的大小小的情况下，按照所述截 取区域的位置在相邻帧之间被固定的方式，对所述截取图像提取单元进行控制。如果依次全部考虑了特定被摄体的运动而对截取区域的位置进行控制，则在由截 取图像列构成的动态图像中，存在背景晃动不定的可能性，但如果如上述那样控制截取区 域的位置，则可以获得稳定的动态图像。而且，具体例如所述画质补偿单元通过使用了多帧份的截取图像的超分辨处理， 使该多帧份的截取图像中包含的关注帧的截取图像的分辨率提高。并且，例如所述摄像装置还具备将所述分辨率提高前或提高后的所述截取图像的 图像信号，记录到记录单元中的记录控制单元。另外，例如所述摄像装置将所述被提高了分辨率的所述截取图像的图像信号输出 到显示单元。本发明涉及的图像再生装置具备特定被摄体检测单元，其通过从记录单元读出依次对摄影对象进行摄影而得到的图像信号，来依次取得基于所述图像信号的输入图像， 并根据所述输入图像的图像信号，检测所述摄影对象中包含的特定被摄体在所述输入图像 上的位置；截取图像提取单元，其根据检测出的所述位置，在所述输入图像内设定比所述输 入图像的整个区域小的截取区域，并提取出所述截取区域内的图像作为截取图像；和画质 补偿单元，其使所述截取图像的分辨率提高；所述图像再生装置将所述分辨率被提高的截 取图像的图像信号输出到显示单元或外部。(发明效果)根据本发明，能够提供一种即使不怎么将精力集中于摄影操作，也能够获得符合 摄影者意图的关注被摄体的动态图像的摄像装置。而且，还可以提供一种能够对即使在摄 影时不怎么将精力集中于摄影操作，也符合操作者意图的关注被摄体的动态图像进行再生 的图像再生装置。通过以下所示的实施方式的说明，能够更加明确本发明的意义及效果。不过，以下 的实施方式只是本发明的一个实施方式，本发明及各构成要件的用语的意义，不限定于下 述实施方式中记载的情况。


图1是本发明的第一实施方式涉及的摄像装置的结构框图。图2是图1的摄像部的内部结构图。图3是表示动态图像摄影时图1的摄像装置的运动流程的流程图。图4是表示用于检测特定被摄体的帧图像的图。图5是表示以时间序列排列的帧图像列及从其中提取出的截取图像列的图。图6是表示在帧图像上叠加了截取图像后的图1的显示部的显示画面例的图。图7是表示动态图像再生时图1的摄像装置的运动流程的流程图。图8是表示3幅帧图像的摄影附近的时间关系的图。图9是本发明的第二实施方式涉及的运动检测部的内部框图。图10是用于对由图9的手抖动检测部导出手抖动向量的方法进行说明的图。图11是本发明的第二实施方式涉及的表示手抖动向量和被摄体运动向量与基于 二者的合成向量的关系的图。图12是本发明的第二实施方式涉及的表示帧图像的曝光开始时刻的摄影区域、 与曝光结束时刻的摄影区域的关系的图。图13是本发明的第二实施方式涉及的表示摄像面上的实际静止点的像，在帧图 像的曝光开始时刻与结束时刻之间移动的样子的图。图14是本发明的第二实施方式涉及的表示摄像面上的实际静止点的像，在帧图 像的曝光开始时刻与结束时刻之间移动的样子的图。图15是表示本发明的第三实施方式涉及的摄像元件的构造的图。图16是本发明的第三实施方式涉及的表示手抖动向量和被摄体运动向量与基于 二者的合成向量的关系的图。图17(a)及(b)是用于说明本发明的第三实施方式涉及的有效像素区域的设定方 法的图。
图18是本发明的第三实施方式涉及的将时刻tn_i时的能够摄影像素区域及有效 像素区域、与时刻tn时的能够摄影像素区域及有效像素区域的位置关系，和投影到摄像元 件的光学像一同表示的图。图19是本发明的第三实施方式涉及的表示实际静止点的像位置在相邻的帧图像 之间移动的样子的图。图中1_摄像装置，11-摄像部，14-特定被摄体检测部，15-截取部，16-画质补偿 部，18-运动检测部，19-运动修正控制部，21-显示部，22-记录介质，30-变焦透镜，31-聚 焦透镜，32-光圈，33-摄像元件，35-光学系统，36-修正透镜，41-手抖动检测部，42-被摄 体运动检测部。
具体实施例方式下面，参照附图对本发明的实施方式进行具体说明。在所参照的各附图中，针对同 一部分赋予相同的符号，并在原则上省略对同一部分重复的说明。(第一实施方式)首先，对本发明的第一实施方式进行说明。图1是本发明的第一实施方式涉及的 摄像装置1的构成框图。摄像装置1是能够对静止图像及动态图像进行摄影及记录的数码 摄像机。摄像装置1具备由参照符号11 24表示的各部位。图2是图1的摄像部11的 内部构成图。摄像部11 具有光学系统 35、光圈 32、由 CCD (Charge CoupledDevices)或 CMOS (Complementary Metal Oxide Semiconductor)图像传感器等构成的摄像元件 33、和 用于驱动控制光学系统35、光圈32的驱动器34。光学系统35由包括变焦透镜30、聚焦透 镜31及修正透镜36的多个透镜形成。变焦透镜30及聚焦透镜31能够沿光轴方向移动。 修正透镜36能够沿着相对光轴具有斜度的方向移动。具体而言，修正透镜36按照能够在 与光轴正交的二维平面上移动的方式，被配置在光学系统35内。根据来自图1的CPU (Central Processing Unit) 20的控制信号，驱动器34通过对 变焦透镜30及聚焦透镜31的各位置以及光圈32的开度进行驱动控制，来控制摄像部11的 焦距(视场角)及焦点位置以及向摄像元件33入射的光量。并且，根据来自内置于CPU20 的运动修正控制部19的修正透镜控制信号，驱动器34使修正透镜36在光学系统35内移 动。通过该移动，还能够实现公知的光学式手抖动修正，对于运动修正控制部19以及向其 赋予必要的信息的运动检测部18的功能，将在后面叙述。摄像元件33对经由光学系统35及光圈32而入射的、表示被摄体(摄影对象)的 光学像进行光电转换，并将通过该光电转换而得到的电信号输出给AFE12。更具体而言，摄 像元件33具备二维排列成矩阵状的多个受光像素，在各摄影中，各受光像素蓄积与曝光时 间对应的电荷量的信号电荷。来自具有与所蓄积的信号电荷的电荷量成比例的大小的各受 光像素的模拟信号，按照在摄像装置1内生成的驱动脉冲，被依次输出给AFE12。以下说明 中的“曝光”是指摄像元件33的曝光。AFE12对从摄像部11 (摄像元件33)输出的模拟信号进行放大，并将放大后的模拟 信号转换成数字信号。AFE12将该数字信号依次输出给图像取得部13。图像取得部13根 据AFE12的输出信号，生成对由摄像部11拍摄到的图像进行表示的影像信号。将通过一次摄影得到的一张整体图像称作帧图像。图像(包括帧图像)由图像信号表现，在以下的说 明中，将图像信号称作图像数据。特定被摄体检测部14根据帧图像的图像数据，检测帧图像内被描画了特定被摄 体的区域(即与特定被摄体对应的图像数据存在的区域)，并提取出包含该区域的矩形区 域作为特定被摄体区域。不过，特定被摄体区域的形状也可以是矩形以外的形状。特定被 摄体区域的大小(图像尺寸)小于帧图像的整体区域的大小。特定被摄体例如是人物。特 定被摄体检测部14将帧图像上的表示特定被摄体区域的位置及大小的特定被摄体信息向 截取部15传输。截取部15根据特定被摄体信息在帧图像内设定包括特定被摄体区域的截取区 域，从帧图像截取出该截取区域内的图像。将被截取出的截取区域内的图像称作“截取图 像”。截取区域比帧图像的整体区域小，截取图像相当于帧图像的一部分图像。因此，截取 图像的图像尺寸(水平方向及垂直方向的像素数)比帧图像的尺寸小。例如，按照截取区 域的中心与特定被摄体区域的中心或重心一致的方式设定截取区域。另外，也可以考虑作 为特定被摄体的人物的脸朝向等，来决定截取区域内的特定被摄体区域的位置。例如，还能 够使截取区域内的脸朝向的方向侧的区域的大小，比其相反侧的区域的大小大。画质补偿部16执行用于使截取图像的分辨率提高的图像处理。例如，通过超分辨 处理使截取图像的分辨率提高。显示部21是由液晶显示面板等构成的显示装置。通过对显示部21赋予应该显示 的图像的图像数据，该图像被显示在显示部21的显示画面上。例如，通过画质补偿部16将 提高了分辨率之后的截取图像的图像数据输出给显示部21，可以在显示部21上显示分辨 率提高后的截取图像。而且，例如通过截取部15将分辨率提高之前的截取图像的图像数据 输出给显示部21，可以在显示部21上显示分辨率提高之前的截取图像。或者，通过将由图 像取得部13获取的帧图像的整体图像数据发送给显示部21，可以在显示部21上显示帧图 像的整体图像。记录介质22是SD (Secure Digital)存储卡等非易失性存储器，记录自身被赋予 的数据。设置在摄像装置1内的记录控制部(未图示)对该记录进行控制。例如，将分辨 率提高后的截取图像的图像数据存储到记录介质22中。而且，例如将分辨率提高之前的截 取图像的图像数据记录到记录介质22中。另外，例如将帧图像的整体图像数据记录到记录 介质22中。还能够将分辨率提高之前或之后的截取图像的图像数据，与帧图像的整体图像 数据一同记录到记录介质22中。其中，能够通过对操作部17进行的操作，来指定向记录介 质22中记录什么样的图像数据。而且，当记录图像数据时，在通过规定的压缩方式对图像 数据进行压缩之后实施记录。不过，也可以在不进行该压缩的情况下对图像数据进行记录 (记录所谓的RAW数据)。操作部17是对来自用户的操作进行受理的部位，针对操作部17的操作内容被传 递到CPU20。CPU20对摄像装置1内部的动作统一进行控制。传声部23将摄像装置1的外围声音转换成电信号并输出。声音信号处理部24对 来自传声部23的输出信号实施必要的声音信号处理，生成对传声部23被输入的声音进行 表示的声音信号。根据需要，该声音信号在以规定的压缩方式被压缩之后，存储到记录介质 22中。
摄像装置1的动作模式中含有能够对静止图像或动态图像进行摄影及记录的摄 影模式、和将记录介质22中记录的静止图像或动态图像再生显示到显示部21上的再生模 式。根据针对操作部17的操作，可实施各模式之间的迁移。在摄影模式下，摄像部11以规 定的帧周期(例如1/30秒)依次进行摄影，在每一个帧周期获得1幅帧图像。(摄影时的动作)说明对操作部17指示了动态图像的摄影及记录时摄像装置1的基本动作。图3 是表示该基本动作的流程的流程图。首先在步骤Sll中，特定被摄体检测部14在被指示了动态图像的摄影及记录之 后，从获得的帧图像检测出特定被摄体。将步骤Sll中的检测称为初始检测。将应该进行 初始检测的帧图像特别称为初始检测用帧图像。当特定被摄体的初始检测结束后，特定被摄体检测部14设定包括在步骤Sll中检 测出的特定被摄体的描画区域的特定被摄体区域，将表示特定被摄体区域的位置及大小的 特定被摄体信息发送给截取部15。在步骤S12中，截取部15根据该特定被摄体信息，在初 始检测用帧图像内设定包括特定被摄体区域的截取区域，并从初始检测用帧图像提取出该 截取区域内的图像，作为截取图像。现在，将特定被摄体设为人物，对该情况下的步骤Sll及S12的动作进行详细说 明。特定被摄体检测部14首先对初始检测用帧图像进行检测，从中提取出包含人物的脸部 分的区域、即脸区域。图4表示了从作为初始检测用帧图像的例子的帧图像200提取出的 脸区域201。接着，检测包括该人物的躯体部分的区域、即躯体区域202。躯体区域202被 设定为在脸区域201的下方侧(从眉间朝向嘴的方向侧)与脸区域201邻接存在的矩形区 域。躯体区域202的大小依赖于脸区域201的大小而决定。然后，从帧图像200中提取出 包括脸区域201及躯体区域202的矩形区域，作为特定被摄体区域。图4中的被赋予了虚 线203的区域的内侧，相当于特定被摄体区域。考虑脸区域201的位置及大小等按照与脸 区域201对应的人物的全身包含在特定被摄体区域内的方式设定特定被摄体区域为好。而 且，被赋予了虚线204的区域的内侧，是对帧图像200设定的截取区域。其中，作为对图像中含有的脸进行检测的方法，公知有各种方法，特定被摄体检测 部14能够采用任意的方法。典型的情况下，例如将被设定在帧图像内的关注区域的图像、 与具有规定的图像尺寸的基准脸图像进行对比，来判定两个图像的相似度，根据该相似度 来检测关注区域中是否含有脸(关注区域是否是脸区域)。在帧图像内，将关注区域逐个像 素地向左右方向或上下方向错移。然后，将错移后的关注区域内的图像与基准脸图像进行 对比，再次判定两个图像的相似度，进行同样的检测。这样，关注区域例如在从帧图像的左 上朝向右下方向逐个像素地错移的同时，被更新设定。而且，以一定比例将帧图像缩小，对 缩小后的图像进行同样的脸检测处理。通过反复进行这样的处理，可以从帧图像中检测出 任意大小的脸。在步骤S12的处理之后，转移到步骤S13。在步骤S13中取得当前时刻的帧图像， 然后，转移到步骤S14。在步骤S14中，特定被摄体检测部14通过基于图像数据的追踪处 理，从通过步骤S13取得的帧图像中检测特定被摄体。将用于通过追踪处理来检测特定被 摄体的帧图像，特别称作追踪对象帧图像。作为基于图像数据的对特定被摄体追踪处理的 方法，能够采用公知的任何方法。
例如，根据对特定被摄体的颜色进行表示的色信息，来进行追踪处理。作为基于 色信息的追踪处理的方法，可以使用在日本特开平5-284411号公报、日本特开2000-48211 号公报、日本特开2001-169169号公报等中记载的方法。例如，在图4所示的帧图像200是 初始检测用帧图像的情况下，特定被摄体检测部14根据躯体区域202中的色信号(色差信 号、RGB信号)来确定躯体区域202的颜色。然后，根据追踪对象帧图像的色信号，从追踪 对象帧图像中提取出具有与躯体区域202的颜色相似性高的颜色的区域。这里被提取出的 区域是追踪对象帧图像内的特定被摄体的躯体区域，将包含该躯体区域的矩形区域设为追 踪对象帧图像内的特定被摄体区域。此时，可以考虑躯体区域的位置及大小等来设定特定 被摄体，以使作为特定被摄体的人物的全身包含在特定被摄体区域内。在步骤S14中设定的表示特定被摄体区域的位置及大小的特定被摄体信息，被发 送给截取部15。在步骤S15中，截取部15根据该特定被摄体信息，在追踪对象帧图像内设 定包括特定被摄体区域的截取区域，从追踪对象帧图像中提取出该截取区域内的图像，作 为截取图像。即，按照追踪特定被摄体的方式来设定截取区域。基本上例如按照在由截取 图像列构成的动态图像内，特定被摄体总是位于截取图像的中央的方式，来设定截取区域 的位置。截取图像列是指从以时间序列排列的多个帧图像获得的、按时间序列排列的多个 截取图像。同样，将以时间序列排列的多个帧图像也称作帧图像列。在接下来的步骤S16中，进行使截取图像的分辨率提高的高分辨率化处理。例如， 包括初始检测用帧图像及追踪对象帧图像的各帧图像的图像尺寸为1920X1080(即水平 方向的像素数为1920、且垂直方向的像素数为1080)，而通过高分辨率化处理使分辨率提 高之前的各截取图像的图像尺寸为960 X 540。然后，通过高分辨率化处理，使各截取图像的 图像尺寸为1920X1080。截取区域的大小、即分辨率提高之前的截取图像的图像尺寸总是 恒定。不过，也能够在一个动态图像内改变其图像尺寸。在本实例中，采用了超分辨处理作为高分辨率化处理。在超分辨处理中，通过参照 存在位置偏差的多个低分辨率图像，根据多个低分辨率图像间的位置偏差量和多个低分辨 率图像的图像数据，进行低分辨率图像的高分辨率化，来生成一幅高分辨率图像。画质补偿 部16能够利用公知的任意超分辨处理。例如，可以利用日本特开2005-197910号公报、日 本特开2007-205号公报、日本特开2007-193508号公报等中记载的超分辨处理方法。例如，在使用3帧份的截取图像进行超分辨处理的情况下，按下述方式进行处理。 现在，对经过1帧周期量的时间的情况，设为是按时刻kftwtpk+ptw……的顺序经过 的，如图5所示，将在时刻tn+i时取得的帧图像称为时刻tn+i的帧图像(i为整数)。而且， 将从时刻tn+i的帧图像截取出的截取图像用CIn+i表示。该情况下，使用3幅截取图像CIn+i、 CIn+i+1及CIn+i+2，生成1幅高分辨率图像。考虑i为(-2)的情况来举出具体例。在获得了截取图像CIn的时刻，参照3幅截 取图像CIn^CIlri及CIn，将截取图像CIn^CIlri及CIn分别作为第一、第二及第三观测低分 辨率图像，来进行超分辨处理。以第一观测低分辨率图像为基准，来检测第一与第二观测低 分辨率图像之间的位置偏差量、及第一与第三观测低分辨率图像之间的位置偏差量。位置 偏差量是包括水平分量及垂直分量的二维量，也被称为运动量或移动向量。位置偏差量可 以采用代表点匹配法或模块匹配法、梯度法等，按照具有子像素的分辨率的方式进行检测。 即，将比观测低分辨率图像内相邻的像素的间隔短的距离作为最小检测单位，来检测位置偏差量。另一方面，使用线性插补或双三次插补，生成使第一观测低分辨率图像的水平及 垂直方向的像素数增大的图像，作为初始的高分辨率图像。然后，利用检测出的上述各位置 偏差量，来推定对当前时刻的高分辨率图像进行构筑的3幅低分辨率图像，按照推定出的 各低分辨率图像与各观测低分辨率图像的误差被最小化的方式，不断更新高分辨率图像。 最终获得的高分辨率图像相当于分辨率提高后的截取图像CIn_2。其他的截取图像也同样被 提高分辨率。例如，对于截取图像CIlri的分辨率提高，通过使用截取图像《^、(；及CIn+1 来实现。分辨率提高后的截取图像在紧接着步骤S16的步骤S17中，被显示到显示部21 上。此时，也可以将分辨率提高后的截取图像与成为该截取图像的根源的帧图像的整体图 像同时排列显示到显示部21的显示画面上，还能够如图6所示那样，将分辨率提高后的截 取图像重叠显示到该帧图像的一部分之上。进而在紧接着步骤S17的步骤S18中，将分辨率提高后的截取图像的图像数据记 录到记录介质22中。此时，也可以将分辨率提高后的截取图像的图像数据与帧图像整体的 图像数据一同记录到记录介质22中。此外，还能够将分辨率提高前的截取图像的图像数据 记录到记录介质22中。在步骤S17及S18中的显示及记录处理之后，返回到步骤S13，反复执行上述的步 骤S13 S18的各个处理，直到对操作部17发出了动态图像的摄影及记录的结束指示。由 此，由包含特定被摄体的截取图像列构成的动态图像被不断记录到记录介质22中。其中， 通过声音信号处理部24获得的声音数据(声音信号)也与该动态图像的图像数据一同被 记录到记录介质22中。如果由任意的再生装置读出经过上述步骤Sll S18的处理而获得的记录介质22 内的图像数据，则在该再生装置上能够再生显示相对于特定被摄体具有良好的构图的截取 图像的动态图像(当然也能够再生声音数据)。尤其是如果读出分辨率提高后的截取图像 的图像数据，则能够再生显示高精度的截取图像的动态图像。当利用摄像装置对关注的被摄体进行动态图像摄影时，以往需要在摄像装置的显 示画面上确认被摄体以便不迷失该被摄体，同时根据被摄体的运动来操作摄像装置的摄影 方向、变焦倍率。因此，摄影者必须将注意力集中于摄影，难以一边与关注的被摄体进行交 流一边摄影、或一边将注意力集中到其他事情上一边进行摄影。根据本实施方式，即使不怎么将注意力集中到在显示画面上对被摄体的确认、针 对摄影方向及变焦倍率的操作，也能够取得具有与摄影者的意图相符的良好构图的被摄体 的动态图像。因此，还能够一边与关注的被摄体进行交流一边进行摄影、或一边将注意力集 中到其他事情上一边进行摄影。另外，在上述的说明中，设想了在摄像装置1的摄影区域内只包含一个人物的情 况，但在摄影区域内包含多个人物的情况下，只要将该多个人物中的一个人物选择作为特 定被摄体即可。例如，从初始检测用帧图像提取出各人物的脸区域，在将明确了脸区域的初 始检测用帧图像显示到显示部21的显示画面的基础上，由用户选择应该被选择为特定被 摄体的一个人物。该选择通过对操作部17的操作来进行。或者，也可以使显示部21作为 所谓的触摸屏发挥功能，通过对该触摸屏的操作，来进行该选择。或者，还可以将应该被选择为特定被摄体的人物的脸图像，预先登记到摄像装置1中。该情况下，摄像装置1自动探 索该登记的脸是否包含在初始检测用帧图像中，在判断为登记的脸包含在初始检测用帧图 像的情况下，具有该登记的脸的人物被作为特定被摄体而选择。另外，当在摄影区域内包含多个人物时，可将多个人物分别捕捉为特定被摄体，来 设定多个包括特定被摄体的特定被摄体区域。例如，在摄影区域内包括的人物为两个的情 况下，将各个人物捕捉为特定被摄体，分别设定包含一个人物的描画区域的特定被摄体区 域和包含另一个人物的描画区域的特定被摄体区域。然后，对各个特定被摄体区域设定截 取区域，从一个帧图像中提取出两个截取图像，将各个截取图像的图像数据分别记录到记 录介质22中。这里记录的截取图像是分辨率提高后的截取图像。不过，也能记录分辨率提 高前的截取图像。当再生时，由用户选择上述两个人物中的一个，对所选择的人物的截取图 像的动态图像进行再生显示。而且，在上述的例子中，将分辨率提高前的截取图像的图像尺寸、即截取区域的大 小设为恒定，但也能够使其可变。例如在步骤S15中，还能够按照截取区域内的特定被摄体 的大小相对于截取区域的大小之比的变化，在截取图像的动态图像中被抑制的方式，来设 定截取区域的大小。极端的情况下，还能够按照该比总是恒定的方式来设定截取区域的大 小。这样一来，即使摄像装置1与特定被摄体之间的实际空间距离发生变化，在截取图像的 动态图像内，特定被摄体的大小也恒定。另一方面，考虑到在成为追踪对象的特定被摄体的 躯体区域的颜色、与特定被摄体以外的背景的颜色类似的情况下，追踪失败的可能性较高， 所以可减少上述之比。另外，还可以强调由特定被摄体发出的声音的声音信号，将其记录到记录介质22 中。为了实现这样的作法，具体例如由在摄像装置1的框体上的相互不同的位置配置的多 个扩音器形成图1的传声部23。多个扩音器例如是两个无指向性扩音器。而且，将声音信 号处理部24形成为能够执行根据两个无指向性扩音器的输出信号，生成具有指向轴的两 个信道信号(立体声信号)的立体声化处理。由于立体声化处理的方法众所周知，所以省 略详细的说明。而且，可以通过按照从特定被摄体在实际空间上的存在位置传来的声音被 强调的方式执行立体声化处理，生成对从特定被摄体发出的声音进行了强调的声音信号， 将其与截取图像的图像数据一同记录到记录介质22中。并且，如果预先对摄像装置1赋予了对特定被摄体发出的声音的特性进行表示的 数据，则还能够利用公知的声源分离技术(例如日本特开平10 — 313497号公报、日本特 开2000-81900号公报中记载的技术)，将特定被摄体发出的声音与来自其他音源的声音分 离。然后，将分离后的由特定被摄体发出的声音的声音信号，与截取图像的图像数据一同记 录到记录介质22中。(再生时的动作)对在摄影时执行特定被摄体的检测处理、截取处理及高分辨率化处理的情况下的 动作进行了说明，但也可以在再生时执行这些处理。参照图7，对该情况下的再生时的摄像 装置1的动作进行说明。图7是表示再生时摄像装置1的动作流程的流程图。假设在该再 生动作之前，动态图像摄影时获得的以时间序列排列的帧图像列整体的图像数据已被记录 在记录介质22中。当进行再生时，使图像取得部13按照时间序列顺序依次从记录介质22 读出帧图像，并将该图像数据赋予给特定被摄体检测部14及截取部15，来进行图7的步骤S21 S27的处理。步骤S21 S27的处理分别与图3的步骤Sll S17的处理大致相同。S卩，特定被摄体检测部14从经由图像取得部13由记录介质22依次赋予的帧图像 中检测出特定被摄体。将步骤S21中的特定被摄体的最初检测称为初始检测，将应该首先 检测特定被摄体的帧图像称为初始检测用帧图像。在特定被摄体的初始检测结束后，特定被摄体检测部14设定包括在步骤S21中检 测出的特定被摄体的描画区域的特定被摄体区域，并将表示特定被摄体区域的位置及大小 的特定被摄体信息发送给截取部15。在步骤S22中，截取部15根据该特定被摄体信息，来 设定在初始检测用帧图像内包括特定被摄体区域的截取区域，并从初始检测用帧图像中提 取出该截取区域内的图像，作为截取图像。在初始检测用帧图像之后从记录介质22中读出的帧图像，被作为追踪对象帧图 像进行处理。在紧接着步骤S22的步骤S23中，读出一幅追踪对象帧图像，在接下来的步骤 S24中，特定被摄体检测部14通过与步骤S14同样的追踪处理，从通过步骤S23读出的追踪 对象帧图像中检测出特定被摄体，并设定特定被摄体区域。步骤S24中设定的表示特定被摄体区域的位置及大小的特定被摄体信息，被发送 给截取部15。在步骤S25中，截取部15根据该特定被摄体信息，设定在追踪对象帧图像内 包括特定被摄体区域的截取区域，并从追踪对象帧图像中提取出该截取区域内的图像来作 为截取图像。在接下来的步骤S26中，画质补偿部16进行与图3的步骤S16同样的高分辨率化 处理，使截取图像的分辨率提高。分辨率提高后的截取图像在步骤S27中被显示到显示部 21上。此时，如上所述，也可以将分辨率提高后的截取图像与成为该截取图像的根源的帧图 像的整体图像，同时排列显示到显示部21的显示画面上；还能够如图6所示那样，将分辨率 提高后的截取图像重叠显示到该帧图像的一部分上。也可以将再生时生成的分辨率提高后 的截取图像的图像数据记录到记录介质22中。另外，还能够省略步骤S26的高分辨率化处 理，使分辨率提高前的截取图像显示到显示部21上。在步骤S27的显示处理之后，返回到步骤S23，反复执行步骤S23 S27的各个处 理，直到不存在应该从记录介质22读出的追踪对象帧图像。在显示截取图像的同时，还再 生记录介质22中记录的声音信号，并将与该声音信号对应的声音从设置于摄像装置1的扬 声器(未图示)输出。通过能够进行这样的再生动作，即使摄影时不怎么将注意力集中到在显示画面上 对被摄体的确认、针对摄影方向及变焦倍率的操作，也能够再生具有与摄影者的意图相符 的良好构图的被摄体的动态图像。因此，还能够一边与关注的被摄体进行交流一边进行摄 影、或一边将注意力集中到其他事情上一边进行摄影。对摄像装置1的使用例及摄像装置1的有益性进行补充说明。摄影者以尽可能大 的视场角进行摄影，以便关注的被摄体(即特定被摄体)收敛在摄影区域内。于是，收敛在 该宽广的视场角(摄影区域)内的被摄体被自动识别及追踪，依次生成包含该被摄体的截 取图像。因此，只要摄影者将摄像装置1朝向所关注的被摄体的方向，便能够自动地取得自 己所希望的被摄体的影像。而且，在再生时，能够对以恰当的构图截取了所关注的被摄体的 影像进行视听。而且，在实现图7的再生动作之际，摄像装置1作为图像再生装置发挥功能。用户以尽量宽广的视场角进行摄影，以便所关注的被摄体收敛在摄影区域内，通过将基于该摄 影而得到的动态图像(由帧图像列构成的动态图像)赋予给该图像再生装置，并选择希望 进行视听的被摄体，能够欣赏该被摄体被以恰当的构图截取后的影像。因此，如果具有这样 的图像再生装置，则摄影者可以不怎么将注意力集中于摄影。另外，上述的例子中，在设置于摄像装置1的显示部21上对图像进行再生显示，但 也可以通过将想要显示的图像的图像数据提供给摄像装置1外部的显示装置(未图示)，在 该外部的显示装置上显示分辨率提高前或提高后的截取图像等。而且，可以根据需要，通过 网络等将分辨率提高前或提高后的截取图像的图像数据，提供给利用该图像数据的外部设 备(用于运营网站的服务器设备等)。而且，在上述的例子中，采用了超分辨处理作为用于使截取图像的分辨率提高的 处理，但还可以采用超分辨处理以外的处理作为该处理。例如，可以通过所谓的数字变焦将 从截取部15输出的截取图像的图像尺寸放大，来提高截取图像的分辨率。该情况下，例如 当帧图像的图像尺寸为1920X1080、且分辨率提高前的截取图像的图像尺寸为960X540 时，通过将分辨率提高前的截取图像的图像尺寸沿水平方向及垂直方向分别放大至2倍， 来生成具有1920X1080的图像尺寸的截取图像(即分辨率提高后的截取图像)。图像尺寸 的放大可以通过使用了插补处理的分辨率转换来实现。作为插补处理的方法，可以利用近 邻取样法、双线性法、双三次法等各种方法。另外，可以对经过上述插补处理而得到的分辨率提高后的截取图像(以下称为锐 化前图像)进而实施锐化处理，将锐化处理后的图像(以下称为锐化后图像)，作为应该从 画质补偿部16输出的最终的分辨率提高后的截取图像进行处理。例如，通过对锐化前图像 实施采用了边缘强调滤波器(微分滤波器)或非锐化滤镜的过滤，能够生成锐化后图像。 采用了非锐化滤镜的过滤还被称为非锐化掩模(unsharp masking)。在非锐化掩模中，在 使锐化前图像平滑化而生成了平滑化图像之后，生成该平滑化图像与锐化前图像的差量图 像。然后，按照将该差量图像的各像素值与锐化前图像的各像素值相加的方式对差量图像 与锐化前图像进行合成，由此生成锐化后图像。采用了超分辨处理的截取图像的分辨率提高处理，是根据包括该截取图像的多个 帧量的截取图像进行的(参照图3的步骤S16等)，但在将上述的锐化前图像或锐化后图 像，作为应该从画质补偿部16输出的分辨率提高后的截取图像的情况下，当提高一幅截取 图像的分辨率时，不需要参照多个帧量的截取图像。即，可以只根据关注的一幅截取图像， 使该截取图像的分辨率提高。(抖动修正动作)接着，对图1的运动检测部18及运动修正控制部19进行说明。运动检测部18具 有两个角速度传感器，对作用于摄像装置1的所谓手抖动进行检测。一个角速度传感器以 规定的取样周期计测摄像装置1的偏转(yaw)方向(水平方向)的角速度，输出对各取样 周期中的摄像装置1的偏转方向的角速度进行表示的信号，另一个角速度传感器以规定的 取样周期计测摄像装置1的俯仰(Pitch)方向(垂直方向)的角速度，输出对各取样周期 中的摄像装置1的俯仰方向的角速度进行表示的信号。偏转方向与俯仰方向相互正交、且还与光轴正交。现在，设光轴与水平面平行。如 果对摄像装置1赋予偏转方向的抖动，则摄像装置1的光轴在与水平面平行的面上旋转，如果对摄像装置1赋予俯仰方向的抖动，则摄像装置1的光轴在与铅垂面平行的面上旋转。运动检测部18根据各角速度传感器的输出信号来检测摄像装置1的运动(即摄 像装置1的偏转方向及俯仰方向的运动)，并将检测出的表示摄像装置1的运动的手抖动 信息发送给运动修正控制部19。运动修正控制部19根据手抖动信息，生成修正透镜控制 信号，并借助驱动器34对修正透镜36的位置进行驱动控制(参照图2)。假设在修正透镜 36的位置固定的情况下，摄像元件33上形成的像因偏转方向的手抖动而在摄像元件33上 沿左右方向(摄像元件33的水平方向)移动，摄像元件33上形成的像因俯仰方向的手抖 动而在摄像元件33沿上下方向(摄像元件33的垂直方向)移动。最根本的情况是，为了不产生因手抖动而引起的摄像元件33上的像的移动，根据 手抖动信息对修正透镜36的位置进行驱动控制。这样的修正一般被称为光学式手抖动修 正。通过该光学式手抖动修正，能够抑制因摄像装置1的移动而引起的帧图像的抖动。另 外，虽然为了简化说明而只着眼于偏转方向和俯仰方向，但也可以进而设置对摄像装置1 的摇摆(roll)方向的角速度进行计测的角速度传感器，来修正摇摆方向的手抖动。(第二实施方式)在摄像装置1还能够实施一般的光学式手抖动修正，将利用了手抖动信息的其他 实施方式作为第二实施方式进行说明。第二实施方式相当于将第一实施方式的一部分进行 了变形的实施方式。第二实施方式中记载的技术可以与第一实施方式组合实施，并且只要 不矛盾，还可以将第一实施方式中记载的事项应用到第二实施方式中。第二实施方式涉及 的摄像装置的构成框图与图1的摄像装置1的构成框图相同。着眼于图8所示的在时间上连续拍摄的3个帧图像、即时刻tn_2、tn_i及tn的帧图 像FIn_2、FIlri及FIn。时刻tn_2是帧图像FIn_2的曝光期间的中间时刻，时刻V1是帧图像 FIlri的曝光期间的中间时刻，时刻tn是帧图像FIn的曝光期间的中间时刻。而且，为了简化 说明，对于各帧图像的曝光期间的长度，设时刻V2-V1之间的时间长度与时刻。、之间 的时间长度相等。另外，帧周期为1/30秒，并且设置于运动检测部18的角速度传感器的上 述取样周期约为1/1000秒，该取样周期的长度是帧周期长度的33分之一。而且，在第二实施方式中，如图9所示，在运动检测部18中设置有对摄像装置1 的运动(换而言之手抖动)进行检测的手抖动检测部41、和对图像上的特定被摄体的运动 进行检测的被摄体运动检测部42。手抖动检测部(装置运动检测部)41如第一实施方式所 述那样，由2个角速度传感器形成，输出上述的手抖动信息。被摄体运动检测部42根据摄像 部11的输出信号，检测图像上的特定被摄体的运动，并输出对检测出的特定被摄体的运动 进行表示的被摄体运动信息。另外，还能够在手抖动检测部41中进而设置第一实施方式中 叙述的用于计测摇摆方向的角速度的角速度传感器，该情况下，能够根据3个角速度传感 器的计测结果生成手抖动信息(对于第三实施方式也同样)。在包括本实施方式及第三实 施方式的下述说明中，为了简化说明，只着眼于用于计测偏转方向和俯仰方向的角速度的2 个角速度传感器。手抖动信息及被摄体运动信息都被表现为对帧图像的光学像进行投影的摄像元 件33的摄像面上的向量。因此，在以下的说明中，将手抖动信息及被摄体运动信息分别称 为手抖动向量及被摄体运动向量。而且，为了简化说明，在帧图像FIn_2、FIn^1及FIn的摄影 期间中，手抖动的方向及速度设为恒定。并且，将某个被关注的帧图像中的某一点的坐标用(x，y)表示。χ及y分别表示该点的水平方向的坐标值及垂直方向的坐标值。进而，将帧图像中包括的特定被摄体设为1个，在各帧图像中将特定被摄体区域 以外的区域称为背景区域。背景区域内的被摄体(即背景)在实际空间上静止。将被描画 在背景区域内且在实际空间上静止的点称为“实际静止点”。作为运动检测部18及运动修正控制部19的详细动作例，下面对第一 第三动作 例进行说明。各动作例中记载的内容在拍摄动态图像时执行。[第一动作例]首先，对第一动作例进行说明。现在，用VEC1表示帧图像FIn在曝光期间中的手抖 动向量，用VEC2表示帧图像FIn在曝光期间中的被摄体运动向量。下面，有时将手抖动向量 VEC1简记为向量VEC1 (对于包括被摄体运动向量VEC2的其他向量也同样)。根据两个角速度传感器的输出信号，求出各取样周期中摄像元件33的摄像面的 中心的移动轨迹向量。该移动轨迹向量是从摄像装置1侧观察被摄体侧时，与摄像面平行 的面上的轨迹向量。因此，例如当与被摄体正对的摄影者向左斜上方向摆动摄像装置1时， 上述移动轨迹向量的朝向成为左斜上朝向。由于取样周期的长度是帧周期长度的33分之 一，所以，在一幅帧图像的曝光期间中，可求出33个移动轨迹向量。如图10所示，通过将帧 图像FIJ々曝光期间中的移动轨迹向量Hi1 m33的始点与终点依次相连而得到的合成向量， 是手抖动向量VECp在假设修正透镜36被固定时，手抖动向量VEC1的逆向量表示了实际 静止点的像因手抖动而在帧图像FIn的曝光期间中在摄像面上描绘的轨迹。逆向量是指具 有与关注的向量的朝向相反方向的朝向的向量。某一向量的大小与该向量的逆向量的大小 相同。被摄体运动检测部42根据帧图像FIn_2与FIlri的对比，来推定被摄体运动向量 VEC2。即，在假设与帧图像FIn_2和FIlri之间的特定被摄体的运动相同的动作，在帧图像FIn 的曝光期间中也发生的基础上，推定被摄体运动向量VEC2。如果没有推定误差，则被摄体运 动向量VEC2表示特定被摄体的像在帧图像FIn的曝光期间中在摄像面上描画的轨迹。具 体而言，例如将帧图像FIn_2与FIlri之间的特定被摄体区域的中心位置的位移向量，推定为 被摄体运动向量VEC2。该位移向量通过以帧图像FIn_2为基准而求出。更具体而言，在帧图 像FIn_2及FIlri内的特定被摄体的躯体区域的中心位置的坐标，分别由(X，y)及(x+Adx， y+Ady)表示的情况下，具有Adx的水平分量且具有Ady的垂直分量的向量作为被摄体运 动向量VEC2而被求出。运动修正控制部19求出手抖动向量VEC1与被摄体运动向量VEC2的合成向量 VEC3。图11表示了摄像面上的向量VEC1 VEC3的关系。而且，用VECia表示手抖动向量 VEC1的逆向量。另外，在图12中，用虚线方框210表示帧图像FIn的曝光开始时间点的摄 影区域，并且，用实线方框211表示帧图像FIn的曝光结束时间点的摄影区域。在图12中， 还一并表示了向量VEC1及VEC2。如果在帧图像FIn的曝光期间中为了消除手抖动向量VEC1而驱动修正透镜36，则 实际静止点的像在帧图像FIn的曝光期间中在摄像面上静止，在帧图像FInI形成理想的点 像。现在，为了便于说明，在定义向量VECiNVEC^m摄像面上，表现对消除向量VEC1那样 的修正透镜36的移动方向及移动的大小进行表示的向量，并设其与向量VEC1—致。因此， 如果以向量VEC1所表示的移动方向及移动的大小使修正透镜36在帧图像FIn的曝光期间中移动，则实际静止点的像在帧图像FIn上形成理想的点像。在第一动作例中，运动修正控制部19以由合成向量VEC3表示而不是由向量VEC1 表示的移动方向及移动的大小，使修正透镜36在帧图像FIn的曝光期间中移动。由于手抖 动向量VEC1是在帧图像FIn的曝光期间结束时间点确定的向量，所以，在帧图像FIn的曝光 期间过程中无法确定合成向量VEC3。因此，实际上每当能够获得形成手抖动向量VEC1的各 移动轨迹向量(!!^ !!^，参照图10)时，便求出各移动轨迹向量与将向量VEC2进行33等分 而得到的向量的合成向量，以由该合成向量(即将向量VEC3进行33等分而得到的向量)表 示的移动方向及移动的大小，依次使修正透镜36在帧图像FIn的曝光期间中移动。由此， 最终在帧图像FIn的曝光开始时间点与曝光结束时间点之间，使修正透镜36沿着由合成向 量VEC3表示的移动方向移动合成向量VEC3的大小量。通过该移动，如图13所示，在帧图像FInW曝光开始时间点位于摄像面的中心220 的实际静止点的像，从摄像面的中心220移动与被摄体运动向量VEC2相当的量，在帧图像 FIn的曝光结束时间点位于点221。运动修正控制部19按照追踪该移动来设定截取区域的方式，根据被摄体运动向 量VEC2对截取部15进行控制。由此，由截取部15根据特定被摄体信息在帧图像FIn内暂 时设定的截取区域的位置，向由向量VEC2表示的方向移动向量VEC2的大小。截取部15将 该移动后的截取区域内的图像作为截取图像，从帧图像FIn中提取出。通过进行这样的截 取区域的移动控制，能够在从帧图像FIlri中提取出的截取图像与从帧图像FIn中提取出的 截取图像之间，抑制实际静止点的位置的变化(理想的情况下，消除其变化)。即，例如在从 帧图像FIlri提取出的截取图像的中心出现了实际静止点的情况下，该实际静止点在从帧图 像FIn提取出的截取图像中也位于中心。动态图像中的抖动大致分为形成动态图像的各图像内的抖动、和时间上相邻的图 像间的抖动。前者的抖动表现为一幅图像内的模糊(以下称为动态模糊)，后者的抖动被表 现为时间上相邻的图像间的背景的位置变化(换言之，图像整体的位置变化)。动态模糊能 够通过修正透镜36的位置的驱动控制而降低。当只根据手抖动向量VEC1进行修正透镜36 的位置的驱动控制时，由于背景在一幅帧图像内静止，背景的抖动(动态模糊)消失，但该 驱动控制与特定被摄体的运动无关地进行，所以，所关注的特定被摄体的抖动(动态模糊) 变大。鉴于此，在第一动作例中，通过根据合成向量VEC3对修正透镜36进行驱动控制， 在抑制帧图像内的背景的一部分抖动(动态模糊)的同时，抑制帧图像内的被摄体的一部 分抖动(动态模糊)。由此，能够获得背景与特定被摄体双方的抖动(动态模糊)被适度改 善后的帧图像及截取图像。而且，通过基于被摄体运动向量VEC2对截取区域的移动控制， 会抑制相邻帧的截取图像间的背景的位置变化。由此，能够抑制将截取图像看作动态图像 时的背景的位置变化。这样，通过使用向量VEC1及VEC2来控制修正透镜36的位置及截取 区域的位置，能够恰当地修正截取图像中的抖动(包括动态模糊)。另外，在上述例子中，根据将手抖动向量VEC1与被摄体运动向量VEC2按1比1的 比率合成而得到的合成向量VEC3，对修正透镜36进行了驱动控制，但向量VEC1与向量VEC2 的合成比率也可以不是1比1。例如，可以取代合成向量VEC3,而使用将向量VEC1与向量 VEC2以规定比率合成而得到的向量Gi1 · VECJk2 · VEC2)，来驱动控制修正透镜36。这里，Ic1
17是满足“0 < Ic1彡1”的规定值，k2是满足“0 < k2彡1”的规定值。如果设、=k2 = 1，则 合成向量Gc1 · VECJk2 · VEC2)与合成向量VEC3 —致。按照背景与特定被摄体的动态模糊 的双方被适度修正的方式，来设定h及k2的值。在根据合成向量VEC3对修正透镜36进行了驱动控制的情况下，通过根据向量 VEC2进行截取区域的移动控制，在从帧图像FIlri提取出的截取图像与从帧图像FIn提取出 的截取图像之间，会消除实际静止点的位置变化。在取代合成向量VEC3而使用合成向量 Gc1 · VECJk2 · VEC2)对修正透镜36进行了驱动控制的情况下，为了在从帧图像FIlri提取 出的截取图像与从帧图像FIn提取出的截取图像之间，消除实际静止点的位置变化，只要按 照基于ki、k2、VEC1及VEC2的向量，进行截取区域的移动控制即可。另外，也可以不利用角速度传感器，而根据摄像部11的输出信号来求出手抖动向 量VEQ。该情况下，利用代表点匹配法、块匹配法或梯度法，求出帧图像FIn_2的图像整体与 帧图像FIlri的图像整体之间的光学流(optical flow)。该光学流中包括许多运动向量。只 要忽视该许多运动向量中与特定被摄体区域相关的运动向量，而求出此外的运动向量(即 背景区域的运动向量)的平均向量来作为手抖动向量VEC1即可。[第二动作例]接着，对第二动作例进行说明。上述的第一动作例是想要对背景和特定被摄体的 动态模糊双方实施修正的动作例，在第二动作例中，将动态模糊的修正对象缩减为摄影者 所关注的特定被摄体。在第二动作例中，也求出帧图像FIn的曝光期间中的手抖动向量VEC1及帧图像FIn 的曝光期间中的被摄体运动向量VEC2。向量VEC1及VEC2的导出方法与第一动作例中叙述 的方法相同。其中，运动修正控制部19通过以由向量VEC2表示的移动方向及移动的大小， 使修正透镜36在帧图像FIn的曝光期间中移动，来抑制帧图像FIn的曝光期间中摄像元件 33上的特定被摄体的像的位置变化。理想的情况下，会消除该位置变化，从而消除帧图像 FIn内的特定被摄体的运动模糊。另一方面，通过该修正透镜36的移动，如图14所示，在帧图像FIJ々曝光开始时间 点位于摄像面的中心220的实际静止点的像，从中心220移动了与向量VEC1W逆向量VECia 和被摄体运动向量VEC2的合成向量(VEC1A+VEC2)相当的量，在帧图像FInW曝光结束时间 点位于点222。运动修正控制部19按照追踪该移动来设定截取区域的方式，根据合成向量 (VEC1A+VEC2)对截取部15进行控制。由此，由截取部15根据特定被摄体信息在帧图像 FIn内暂时设定的截取区域的位置，向由合成向量(VEC1A+VEC2)表示的方向移动合成向量 (VEC1A+VEC2)的大小。截取部15将该移动后的截取区域内的图像作为截取图像，从帧图像 FIn中提取出。通过进行这样的截取区域的移动控制，能够在从帧图像FIlri中提取出的截 取图像与从帧图像FIn中提取出的截取图像之间，抑制实际静止点的位置的变化(理想的 情况下，消除其变化)。如上所述，在第二动作例中，通过根据被摄体运动向量VEC2对修正透镜36进行驱 动控制，来抑制帧图像的曝光期间中摄像元件33上的特定被摄体的像的位置变化。由此， 能够抑制帧图像及截取图像内的特定被摄体的抖动(动态模糊)的发生。而且，通过基于合 成向量(VEC1A+VEC2)对截取区域的移动控制，可抑制相邻帧的截取图像间的背景的位置变化。即，能够抑制将截取图像列看作动态图像时背景的位置变化。这样，通过使用向量VEC1 及VEC2来控制修正透镜36的位置及截取区域的位置，能够恰当地修正截取图像中的抖动 (包括动态模糊)。[第三动作例]接着，对第三动作例进行说明。在摄像装置1被完全固定、特定被摄体在实际空间 上移动的情况下，依次求出与其移动对应的被摄体运动向量，例如根据被摄体运动向量设 定截取区域的位置，以使该特定被摄体总是位于截取图像的中央。另一方面，如果摄像装置1被完全固定、且特定被摄体在实际空间上完全静止，则 在理想的情况下，特定被摄体区域的位置在由帧图像列构成的动态图像内静止。于是，设置 在各帧图像内的截取区域的位置恒定。不过，即使作为特定被摄体的人物完全静止，在追踪处理的精度上，还要考虑被检 测的特定被摄体区域的位置(中心或重心位置)在由帧图像列构成的动态图像内不完全静 止的情况。另外，即使想要静止，实际上作为特定被摄体的人物的身体一部分大多也会摇 动。基于这些理由，虽然被检测的特定被摄体的运动的大小很小，但如果追踪这样的运动对 截取区域的位置进行控制，则会导致得到不稳定的截取图像列的动态图像。鉴于此，在第三动作例中，当被摄体运动向量的大小比规定的基准大小小时，使截 取区域的位置固定。在着眼于帧图像FIlri及FInW情况下(参照图8)，具体如下所述那样 进行处理。其中，设截取区域的大小在帧图像FIlri与FIn之间相同。图9的被摄体运动检测部42根据帧图像FIlri与的FI1^i比，检测时刻tn_i-tn间的 特定被摄体的运动(在摄像面上的运动)，求出对该运动进行表示的被摄体运动向量VECa。 例如，将帧图像FIlri与间的特定被摄体区域的中心位置的位移向量，推定为被摄体运 动向量VECa。该位移向量以帧图像FIlri为基准而被求出。更具体而言，在帧图像FIlri及 FIn内的特定被摄体的躯体区域的中心位置的坐标，分别由(X，y)及(x+Adx，y+Ady)表 示的情况下，求出具有Δ(1Χ的水平分量、且具有Ady的垂直分量的向量作为被摄体运动向 量 VECa。图1的运动修正控制部19将被摄体运动向量VECa的大小与规定的基准大小进行 比较，如果前者小于后者，则按照在帧图像FIlri与FIn之间截取区域的设定位置固定的方 式，对截取部15进行控制。由此，设定在帧图像FIn内的截取区域的位置，与设定在帧图像 FIlri内的截取区域的位置相同。另一方面，如果被摄体运动向量VECaW大于基准大小，则进行通常的追踪处理。 即，与设定在帧图像FIlri内的截取区域的位置相比，设定在帧图像FIn内的截取区域的位置 向由向量VECa表示的方向移动了向量VECa的大小。通过如此进行处理，可以获得不摇晃的稳定的截取图像列的动态图像。另外，还能够将第三动作例中叙述的方法应用到上述第一及第二动作例中。在应 用到第一或第二动作例的情况下，运动修正控制部19将被摄体运动向量VECa的大小与基 准大小进行比较。然后，如果前者比后者大，则如第一或第二动作例中叙述那样，按照在帧 图像FIlri与FIn之间截取区域的位置移动的方式，对截取部15进行控制，而如果前者小于 后者，则按照在帧图像FIlri与FIn之间截取区域的设定位置被固定的方式，对截取部15进 行控制。
(第三实施方式)接着，对本发明的第三实施方式进行说明。在上述的第一及第二实施方式中，进行 利用了修正透镜36的抖动修正，但在第三实施方式中，设想没有修正透镜36的情况。第三 实施方式相当于将第一实施方式的一部分进行了变形而得到的实施方式。第三实施方式所 记载的技术能够与第一实施方式组合而实施。第一及第二实施方式中记载的事项只要不矛 盾，也能够在第三实施方式中应用。第三实施方式涉及的摄像装置的构成框图与图1的摄 像装置1的构成框图相同。下面，着眼于和第一实施方式的不同点，对第三实施方式进行说 明。虽然在摄像部11内设置有摄像元件，但将第三实施方式中的摄像元件特别称作 摄像元件33a。摄像元件33a是取代图2的摄像元件33而设置的器件，摄像元件33a的基 本功能与摄像元件33的基本功能相同。参照图15，其表示了摄像元件33a的构造。二维排列了多个受光像素的可摄影像 素区域，被设置于摄像元件33a的摄像面，可摄影像素区域的一部分区域被设为有效像素 区域。在图15中，实线四边框301内的区域是可摄影像素区域，虚线四边框302内的区域 是有效像素区域。帧图像由排列在有效摄影区域内的各受光像素的输出信号表示，排列在有效摄影 区域外的各受光像素的蓄积电荷不干预帧图像。图1的运动修正控制部19根据由运动检 测部18赋予的手抖动信息，对可摄影像素区域中的有效摄影区域的位置进行控制。由此， 也能够实现公知的电子方式手抖动修正，但在本实施方式中，还考虑特定被摄体的运动，来 恰当地修正截取图像的抖动。当然，本实施方式中应该修正的抖动，不包括第二实施方式中 叙述的动态模糊。与第二实施方式中叙述的情况同样，运动检测部18中设置有对摄像装置1的运 动(换言之手抖动)进行检测的手抖动检测部41、和对图像上的特定被摄体的运动进行检 测的被摄体运动检测部42 (参照图9)。手抖动检测部41如第一实施方式中叙述那样，由2 个角速度传感器形成，输出上述的手抖动信息。被摄体运动检测部42根据摄像部11的输 出信号(在本实施方式中为摄像元件33a的输出信号)，检测图像上的特定被摄体的运动， 输出对检测出的特定被摄体的运动进行表示的被摄体运动信息。手抖动信息及被摄体运动信息都被表现为对帧图像的光学像进行投影的摄像元 件33a的摄像面上的向量。鉴于此，与第二实施方式同样，将手抖动信息及被摄体运动信息 分别称为手抖动向量及被摄体运动向量。而且，为了简化说明，在帧图像FIn_2、FIlri及FIn 的摄影期间中，设手抖动的方向及速度恒定。着眼于图8所示的时刻tn_2、tn_i及tn的帧图像FIn_2、FIn_i及FIn，对第三实施方式 涉及的运动检测部18及运动修正控制部19的动作进行说明。现在，用VEC11表示时刻tn_「tn间的手抖动向量，用VEC12表示时刻tn_「tn间的被 摄体运动向量。根据两个角速度传感器的输出信号，求出各取样周期中摄像元件33a的摄像面的 中心的移动轨迹向量。如在第二实施方式中叙述那样，该移动轨迹向量是从摄像装置1侧 观察被摄体侧时，与摄像面平行的面上的轨迹向量。如在第二实施方式中说明那样(参照 图10)，通过将在时刻tn_「tn间能够获得的所有移动轨迹向量依次连接而得到的合成向量，是手抖动向量VECn。手抖动向量VEC11的逆向量VEC1ia表示了在时刻tn_「tn间，实际静止 点的像因手抖动而在摄像面上描画的轨迹。运动修正控制部19根据向量VEC11及VEC12，控制有效摄影区域相对于帧图像FIn 的位置。因此，不能够利用帧图像FIn，导出向量VEC12。鉴于此，根据在帧图像前得到 的2幅帧图像来推定向量VEC12。具体而言，例如将帧图像FIn_2与FIlri之间的特定被摄体 区域的中心位置的位移向量，推定为被摄体运动向量VEC12。该位移向量以帧图像FIn_2为基 准而求出。更具体而言，在帧图像FIn_2及FIlri内的特定被摄体的躯体区域的中心位置的 坐标，分别由(x，y)及(X+AdX，y+Ady)表示的情况下，具有Δ dx的水平分量且具有Ady 的垂直分量的向量作为被摄体运动向量VEC12而被求出。运动修正控制部19求出手抖动向量VEC11的逆向量VEC1ia与被摄体运动向量VEC12 的合成向量VEC13。图16表示摄像面上的向量VECn、VEC11A、VEC12及VEC13的关系。若假设如图17(a)所示那样，以取得帧图像FIlri时的有效摄影区域的位置为基 准，使取得帧图像FIn时的有效摄影区域的位置向逆向量VEC1ia的朝向以逆向量VEC1ia的大 小移动，则可实现一般的电子式手抖动修正。即可以在帧图像FIlri与间抑制实际静 止点的位置的变化(理想情况下消除该变化)。不过，这里设成如图17(b)所示那样，以取 得帧图像FIlri时的有效摄影区域的位置为基准，使取得帧图像FIn时的有效摄影区域的位 置向合成向量VEC13的朝向以合成向量VEC13的大小移动。图18中同时表示了时刻I1时的可摄影像素区域及有效像素区域与时刻tn时的 可摄影像素区域及有效像素区域的位置关系、和被投影到摄像元件33a的光学像。而且，图 18中还一并表示了向量VEC11 &VEC12。在图18中，虚线四方框310内的区域及实线四方框 311内的区域分别表示了时刻时的可摄影像素区域，虚线四方框320内的区域及 实线四方框321内的区域分别表示了时刻tn_i及tn时的有效像素区域。如果特定被摄体的光学像从有效像素区域露出，则无法进行特定被摄体的追踪。 鉴于此，如上所述那样，按照考虑了被摄体运动向量VEC12的合成向量VEC13,将有效像素区 域的位置设定为偏靠右边。由此，不仅能够抑制特定被摄体离开屏幕(frame out)的可能 性，还可以抑制着眼于特定被摄体的构图崩溃。其中，通过针对该有效像素区域的位置控制，如图19所示那样，位于帧图像FIlri 的中心330的实际静止点的像在帧图像FIn中，位于从中心330移动了与被摄体运动向量 VEC12的逆向量VEC12a相当的量的点331处。运动修正控制部19根据逆向量VEC12a来控制截取部15，以便能够追踪该移动来设 定截取区域。由此，由截取部15根据特定被摄体信息在帧图像FIn内暂时设定的截取区域 的位置，向由逆向量VEC12a表示的方向移动逆向量VEC12a的大小。截取部15将该移动后的 截取区域内的图像作为截取图像，从帧图像FIn中提取出。通过进行这样的截取区域的移 动控制，能够在从帧图像FIlri中提取出的截取图像与从帧图像FIn中提取出的截取图像之 间，抑制实际静止点的位置的变化(理想的情况下，消除其变化)。如上所述，通过利用向量VEC1及VEC2来控制有效像素区域的位置和截取区域的位 置，不仅能够抑制特定被摄体离开屏幕的可能性，而且还能够抑制将截取图像列作为动态 图像进行观看时背景的位置变化。即，在抑制了特定被摄体离开屏幕的可能性的同时，能够 恰当地修正截取图像中的抖动(除了动态模糊之外)。
另外，在上述例子中，根据将手抖动向量VEC11的逆向量VEC1ia与被摄体运动向量 VEC12按1比1的比率合成而得到的合成向量VEC13，设定了有效像素区域的位置，但向量 VEC1ia与向量VEC12W合成比率也可以不是1比1。例如，可以取代合成向量VEC13，而使用将 向量VEC1ia与向量VEC12以规定比率合成而得到的向量(kn · VEC11A+k12 · VEC12)，来设定有 效像素区域的位置。这里，kn是满足“0 < kn彡1”的规定值，k12是满足“0 < k2彡1”的 规定值。如果设kn = k12 = 1，则合成向量(kn · VECn+k12 · VEC12)与合成向量VEC13 一致。 为了除去相邻的帧图像之间的抖动，优选使值kn尽量接近1，为了避免特定被摄体离开屏 幕，优选使值k12尽量接近1。在根据合成向量VEC13设定了有效像素区域的位置的情况下，通过根据逆向量 VEC12a进行截取区域的移动控制，在从帧图像FIlri提取出的截取图像与从帧图像FIn提取 出的截取图像之间，会消除实际静止点的位置变化。在取代合成向量VEC13而使用合成向量 Gc11 · VECn+k12 · VEC12)设定了有效像素区域的位置的情况下，为了在从帧图像FIlri提取出 的截取图像与从帧图像FIn提取出的截取图像之间，消除实际静止点的位置变化，只要按照 基于kn、k12、VEClA1及VEC12a的向量，进行截取区域的移动控制即可。另外，也可以不利用角速度传感器，而根据摄像部11的输出信号来求出手抖动向 量VECn。该情况下，利用代表点匹配法、块匹配法或梯度法，求出帧图像FIn_2的图像整体与 帧图像FIlri的图像整体之间的光学流(optical flow)。该光学流中包括许多运动向量。只 要忽视该许多运动向量中与特定被摄体区域相关的运动向量，而求出此外的运动向量(即 背景区域的运动向量)的平均向量来作为手抖动向量VEC11即可。此外，还能够将第二实施方式的第三动作例中叙述的方法应用到本实施方式中。 该情况下，例如运动修正控制部19将被摄体运动向量VEC12的大小与规定的基准大小进行 比较。然后，如果前者比后者大，则如上所述那样，按照在帧图像FIlri与FIn之间截取区域 的位置移动的方式，对截取部15进行控制，而如果前者小于后者，则按照在帧图像FIlri与 FIn之间截取区域的设定位置被固定的方式，对截取部15进行控制。(变形等)上述说明书中表示的具体数值只是简单的例示，当然能够将这些数值变更成各种 各样的数值。作为上述实施方式的变形例或注释事项，下面记述了注释1 注释6。各注释 中记载的内容只要不矛盾，能够任意进行组合。[注释1]在第二实施方式中，对通过光学透镜36的驱动控制及截取区域的位置控制实现 修正的方法进行了说明，但也可以预先按照能够选择该抖动修正的执行及不执行的方式形 成摄像装置1。例如在第二实施方式中，当对图1的操作部17进行了规定操作时，固定光学 透镜36的位置，并且禁止运动修正控制部19对截取区域的位置控制(上述的移动控制)。同样，还可以选择第三实施方式中的抖动修正的执行及不执行。例如在第三实施 方式中，当对图1的操作部17进行了规定操作时，固定光学透镜36的位置，并且禁止运动 修正控制部19对截取区域的位置控制(上述的移动控制)。[注释2]应该从帧图像中检测出的特定被摄体也可以是人物以外的对象。例如，可以将汽 车或机器人等作为特定被摄体。特定被摄体检测部14根据特定被摄体所具有的固有图像特征(边缘的特征或颜色的特征)，从帧图像中首先检测出特定被摄体，并且在帧图像列内 进行特定被摄体的追踪处理。[注释3]在第一及第二实施方式中，使用了修正透镜36作为用于使被摄体(摄影对象) 的光学像在摄像元件上移动的光学部件，但也可以取代修正透镜36而使用多角度棱镜 (Vari-Angle Prism)(未图示)。多角度棱镜具备在2片板玻璃之间封入了具有高折射率 的液体的构造，通过使一方或双方的板玻璃倾斜，能够改变入射到自身中的光的折射方向。 来自被摄体的光经由包括多角度棱镜的光学系统入射到摄像元件33中。能够替代对修正 透镜36的位置进行驱动控制，而通过对多角度棱镜中的板玻璃的倾斜进行驱动控制，来实 现与第一及第二实施方式中叙述的处理相同的处理。另外，可以通过摄像元件33的二维方向(与光轴正交的二维方向)的移动，来实 现使被摄体(摄影对象)的光学像在摄像元件上移动这一功能。摄像元件33的二维方向 的移动例如可以由未图示的执行元件来实现，运动修正控制部19根据来自运动检测部18 的信息，对上述执行元件进行控制。能够取代对修正透镜36的位置进行驱动控制，而通过 对摄像元件33的位置进行驱动控制，来实现与第一及第二实施方式中叙述的处理相同的 处理。[注释4]上面对由检测角速度的角速度传感器构成图9的手抖动检测部41的例子进行了 说明，但也可以由对表示摄像装置1的运动的其他物理量进行检测的传感器，构成手抖动 检测部41。例如，可以由检测摄像装置1的加速度的加速度传感器或检测摄像装置1的角 加速度的角加速度传感器，形成手抖动检测部41。能够根据对摄像装置1的加速度或角加 速度进行表示的加速度传感器或角加速度传感器的输出信号，求出上述手抖动向量。[注释5]图1的摄像装置1能够通过硬件或硬件与软件的组合而实现。尤其是在摄像装置 1内执行的基于图像数据的图像处理，能够通过硬件、软件或硬件与软件的组合而实现。在 利用软件构成摄像装置1的情况下，由软件实现的部位的框图，表示该部位的功能框图。另外，可以通过将为了从帧图像获得分辨率提高后的截取图像而必要的运算处理 的全部或一部分，记述为程序，并在程序执行装置(例如计算机)上执行该程序，来实现该 运算处理的全部或一部分。[注释6]例如，可以按照下述方式进行考虑。修正透镜36或上述的多角度棱镜(未图示) 作为用于使被投影到摄像元件33中的光学像在摄像元件33上移动的像移动单元发挥功 能。还可以认为在该像移动单元中，含有驱动修正透镜36的驱动器34或驱动多角度棱镜 的驱动器(未图示)。而且，在如上所述那样通过移动摄像元件33来使被投影到摄像元件 33中的光学像在摄像元件33上移动的情况下，驱动摄像元件33的执行元件(未图示)作 为像移动单元发挥功能。另外，当再生动态图像时，包括图1的特定被摄体检测部14、截取部15及画质补偿 部16的部位，作为图像再生装置发挥功能。还可以认为在该图像再生装置中，包括形成摄 像装置1的其他部位(图像取得部13、显示部21)。可以由能够读入记录介质22的记录数据的摄像装置1的外部设备(未图示)，来实现该图像再生装置。
权利要求
一种摄像装置，其特征在于，具备摄像元件，其通过摄影，输出表示摄影对象的光学像的信号；特定被摄体检测单元，其依次取得基于所述摄像元件的输出信号的输入图像，根据所述输入图像的图像信号，检测所述摄影对象中包含的特定被摄体在所述输入图像上的位置；截取图像提取单元，其根据检测出的所述位置，在所述输入图像内设定比所述输入图像的整个区域小的截取区域，并提取出所述截取区域内的图像作为截取图像；和画质补偿单元，其使所述截取图像的分辨率提高。
2.根据权利要求1所述的摄像装置，其特征在于，还具备装置运动检测单元，其检测所述摄像装置的运动；被摄体运动检测单元，其根据所述摄像元件的输出信号，对相邻帧的输入图像间的所 述特定被摄体的运动进行检测；和修正单元，其根据所述装置运动检测单元的检测结果及所述被摄体运动检测单元的检 测结果，对所述截取图像中的抖动进行修正。
3.根据权利要求2所述的摄像装置，其特征在于，还具备使所述光学像在所述摄像元件上移动的像移动单元，所述修正单元通过根据所述装置运动检测单元的检测结果及所述被摄体运动检测单 元的检测结果，对由所述像移动单元实现的移动及由所述截取图像提取单元设定的所述截 取区域的位置进行控制，来修正所述截取图像中的抖动。
4.根据权利要求3所述的摄像装置，其特征在于，所述修正单元参照基于所述装置运动检测单元的检测结果的与所述摄像装置的运动 对应的第一向量、以及基于所述被摄体运动检测单元的检测结果的与所述特定被摄体的运 动对应的第二向量，按照以规定的比率将所述第一及第二向量合成而得到的向量，控制所 述像移动单元，并且按照所述摄影对象中包括的实际空间上的静止物体在相邻帧的截取图 像间的位置变化被抑制的方式，对所述截取图像提取单元进行控制。
5.根据权利要求3所述的摄像装置，其特征在于，所述修正单元参照基于所述装置运动检测单元的检测结果的与所述摄像装置的运动 对应的第一向量、以及基于所述被摄体运动检测单元的检测结果的与所述特定被摄体的运 动对应的第二向量，按照所述摄像元件上的所述特定被摄体的像的位置变化被抑制的方 式，根据所述第二向量控制所述像移动单元，并且，按照所述摄影对象中包括的实际空间上 的静止物体在相邻帧的截取图像间的位置变化被抑制的方式，对所述截取图像提取单元进 行控制。
6.根据权利要求2所述的摄像装置，其特征在于，在所述摄像元件的摄像面的第一区域内排列有多个受光像素，在所述摄像元件的第一区域内设定比所述第一区域小的第二区域，根据来自被配置在 所述第二区域内的受光像素组的输出信号，形成所述输入图像，所述修正单元通过根据所述装置运动检测单元的检测结果及所述被摄体运动检测单 元的检测结果，对所述第二区域的设定位置、以及由所述截取图像提取单元设定的所述截 取区域的位置进行控制，来修正所述截取图像中的抖动。
7.根据权利要求6所述的摄像装置，其特征在于，所述修正单元参照基于所述装置运动检测单元的检测结果的与所述摄像装置的运动 对应的第一向量、以及基于所述被摄体运动检测单元的检测结果的与所述特定被摄体的运 动对应的第二向量，按照以规定的比率将所述第一及第二向量合成而得到的向量，控制所 述第二区域的设定位置，并且按照所述摄影对象中包括的实际空间上的静止物体在相邻帧 的截取图像间的位置变化被抑制的方式，对所述截取图像提取单元进行控制。
8.根据权利要求2 7中任意一项所述的摄像装置，其特征在于，所述修正单元参照基于所述被摄体运动检测单元的检测结果的与所述特定被摄体的 运动对应的向量，在所述向量的大小比规定的大小小的情况下，按照所述截取区域的位置 在相邻帧之间被固定的方式，对所述截取图像提取单元进行控制。
9.根据权利要求1 7中任意一项所述的摄像装置，其特征在于，所述画质补偿单元通过使用了多帧份的截取图像的超分辨处理，使该多帧份的截取图 像中包含的关注帧的截取图像的分辨率提高。
10.根据权利要求1 7中任意一项所述的摄像装置，其特征在于，还具备记录控制单元，该记录控制单元将所述分辨率提高前或提高后的所述截取图像 的图像信号记录到记录单元中。
11.根据权利要求1 7中任意一项所述的摄像装置，其特征在于，将所述分辨率被提高的所述截取图像的图像信号输出到显示单元。
12.—种图像再生装置，其特征在于，具备特定被摄体检测单元，其通过从记录单元读出依次对摄影对象进行摄影而得到的图像 信号，来依次取得基于所述图像信号的输入图像，并根据所述输入图像的图像信号，检测所 述摄影对象中包含的特定被摄体在所述输入图像上的位置；截取图像提取单元，其根据检测出的所述位置，在所述输入图像内设定比所述输入图 像的整个区域小的截取区域，并提取出所述截取区域内的图像作为截取图像；和画质补偿单元，其使所述截取图像的分辨率提高；所述图像再生装置将所述分辨率被提高的截取图像的图像信号输出到显示单元或外
全文摘要
本发明提供一种摄像装置及图像再生装置。摄像装置(1)具备摄像元件，其通过摄影，输出表示摄影对象的光学像的信号；特定被摄体检测部(14)，其依次取得基于所述摄像元件的输出信号的帧图像，根据所述帧图像的图像信号，检测所述摄影对象中包含的特定被摄体在所述帧图像上的位置；截取部(15)，其根据检测出的所述位置，在所述帧图像内设定比所述帧图像的整个区域小的截取区域，并提取出所述截取区域内的图像作为截取图像；和画质补偿部(16)，其使所述截取图像的分辨率提高。
文档编号H04N5/232GK101897174SQ200880120638
公开日2010年11月24日 申请日期2008年12月11日 优先权日2007年12月14日
发明者冈田茂之, 前中章弘, 山中诚, 村田治彦, 森幸夫, 畑中晴雄, 藤田日出人 申请人:三洋电机株式会社