专利名称：信号处理电路及摄像装置的制作方法
技术领域：
本发明涉及一种处理静止图像及动态图像这两种图像的信号处理电路。
背景技术：
近年来，即便是数码图片相机也逐渐能够进行与数码摄像机同样高品 质的动态图像拍摄。还有，也提出了一种在动态图像摄影中能够拍摄静止 图像的图像处理装置。例如，提出了一种改变静止图像和动态图像的压缩 方法后分别保存在记录介质的不同区域并且能够提高在动态图像摄影中所 拍摄的静止图像的分辨率的图像处理装置(参照例如专利文献1)。
还有，提出了一种为了记录被拍摄体的静止图像摄影前后的周围情况 而自动对静止图像摄影前后的动态图像进行拍摄的电子相机(参照例如专
利文献2)。在这种电子相机中，使用了两级按压结构的快门释放按钮 (release button),从而对应半按搡作而开始动态图像拍摄。并且，对应全按 搡作而进行静止图像拍摄，然后经过了规定时间后停止动态图像拍摄。还 有，在专利文献2中还记载了不同于两级按压结构按钮的构成示例，即 单独设置了静止图像拍摄用按钮和动态图像拍摄用按钮。日本专利公开平10-200859号公报日本专利公开2001-78137号公报
(发明所要解决的课题)
然而，当对静止图像摄影前后的动态图像进行记录时出现了下述问题， 即当将风景等变化少的被拍摄对象作为动态图像进行保存时，尽管作为 动态图像进行保存的价值较低，却仍然过多地消耗了记录介质。
还有，用户有必要事先决定是作为动态图像进行保存，还是作为静止
图像进行保存，并且要用模式旋钮等来对模式进行指定。
发明内容
本发明是鉴于所述问题的发明，其目的在于当对静止图像摄影前后 的动态图像进行记录时，能够根据规定的条件来判断保存的形式，从而抑 制记录介质的消耗，同时还能够自动地对用户所期望的拍摄模式进行判断。
(解决课题的方法)
为了解决所述课题，本发明的一个形态为涉及一种具有暂时保存所拍 摄的图像的緩冲存储器的信号处理电路，其特征在于该信号处理电路还 具有检测所述所拍摄的图像是否为动态图像的动态图像检测装置；根据所 述动态图像检测装置的检测结果，判断是将所述所拍摄的图像作为动态图 像保存在所述緩冲存储器中，还是作为静止图像保存在所述緩冲存储器中， 还是作为动态图像和静止图像这两种图像保存在所述缓冲存储器中。
还有，本发明的另一个形态为涉及一种信号处理电路，其特征在于 该信号处理电路具有检测所拍摄的图像是否为动态图像的动态图像检测装 置；根据所述动态图像检测装置的检测结果，来判断是将所述所拍摄的图 像作为动态图像进行显示，还是作为静止图像进行显示。
(发明的效果)
根据本发明，因为可以自动对是否保存被拍摄对象的静止图像摄影前 后的动态图像进行判断，所以能够抑制记录介质的消耗。
图1是表示本发明实施方式所涉及的摄^f象装置(image shooting apparatus) 100的基本构成的附图。
图2是对摄像装置100的外观进行举例说明的附图。 图3是用筒单的流程图来表示拍摄动作的附图。
图4是表示从按下快门钮后直到保存好图像为止的动作概要的附图。 图5是表示播放清单(playlist)的一个示例的附图。 图6是关于保存形式判断处理的流程图。
图7是表示动态图像的编码(code)量和拍摄时间之间关系的附图。 图8是对从移动(motion)量来判断保存形式的方法进行表示的附图。 图9是对拍摄开始的规定期间和拍摄结束的规定期间的动态图像删除
处理进行说明的流程图。
图IO是对从脸的图形和大小来决定记录形式的方法进行表示的附图。 图11是表示对再生形式进行判断处理的流程图。
(符号说明)
100摄像装置
110摄像部
120驱动器
130记录开始/停止开关
140模式转换开关
150信号处理电路
151动态图像检测装置
152DSP
153CPU
154緩冲存储器
160显示装置
170外部记录介质
180菜单搡作用按键开关
具体实施例方式
下面， 一边参照附图一边对本发明的实施方式进行说明。
图l是表示本发明实施方式所涉及的摄像装置IOO的基本构成的附图。 如图1所示，摄像装置100包括摄像部110、驱动器120、记录开始/停止 开关130、模式转换开关140、信号处理电路150、显示装置160以及外部 ^己录介质170。
还有，图2是对摄像装置100的外观进行举例说明的附图。在摄像装 置100中，如图2所示配置有记录开始/停止开关130(快门钮)、模式转换 开关140(模式旋钮)以及显示装置160，用户能够对记录开始/停止开关130、 模式转换开关140进行操作并能够对显示装置160的显示内容进行确认。 还有，在摄像装置100中设置有菜单搡作用按键开关180。
<摄像装置100的各部分构成>
摄像部110将被摄体像转换为电信号后输出。具体来说，摄像部110
由投影透镜(projection lens)、光圈、CCD摄像元件、相关性双精度采样 (correlated double sampling)电路等构成。 驱动器120对摄像部110进行控制。
记录开始/停止开关130构成为能够进行半按(lst按压)和全按(2nd按压) 搡作的两级结构。在本实施方式中，记录开始/停止开关130被进行半按搡 作时向信号处理电路150(后文所详细叙述的CPU153)发出开始拍取动态图 像的指示，当被进行全按搡作时则向该信号处理电路150发出开始拍摄静 止图像的指示。
模式转换开关140是用来对静止图像拍摄模式、动态图像拍摄模式、 静止图像/动态图像自动拍摄模式进行转换的开关。用户能够搡作模式转换 开关140来自由选择拍摄模式，还能使用静止图像/动态图像自动拍摄模式 来让摄像装置对动态图像和静止图像的保存进行判定。
此外，在本实施方式中，虽然具有静止图像拍摄模式、动态图像拍摄 模式、动态图像/静止图像自动拍摄模式这三种拍摄模式，不过并没有必要 一定是这三种模式。例如，可以仅具有动态图像/静止图像自动判别模式， 还可以增加其它模式(例如风景摄影模式)。在本实施方式中，特别详细地 说明了静止图像/动态图像自动拍摄模式。
信号处理电路150使用摄像部110所输出的电信号来进行Y(亮度)、 Cb、 Cr(色差)信号的生成等。在本示例中，信号处理电路150包括动态图 像检测装置151、DSP152(DSP: Digital Signal Processor,数字信号处理器)、 CPU153(CPU: Central Processing Unit,中央处理器)及緩冲存储器154。
动态图像检测装置151检测所拍摄的图像是否为动态图像。在本实施 方式中，动态图像检测装置151是对编码量和移动量、模糊图像、脸进行 检测的检测装置。
DSP152是进行A/D转换、以及各种图像处理的数字信号处理电路。
CPU153对信号处理的结果进行判断，并对整个装置加以控制。例如， CPU153根据动态图像检测装置151的检测结果，来判断是将所拍摄的图 像作为动态图像进行保存，还是作为静止图像进行保存，还是作为动态图 像和静止图像这两种图像来进行保存。
緩冲存储器154保存所拍摄的图像。
显示装置160显示緩冲存储器的内容。
外部记录介质170是保存所拍摄的图像的外部记录介质。作为外部记 录介质170的示例，能够列举出SD卡、多媒体卡和硬盘等。 (摄像装置100的动作)
摄像装置100的基本动作如下所示。首先，在摄像部110中，从投影 透镜输入的被摄体像被输入摄像元件后转换成电信号。来自摄像元件的输 出信号通过相关性双精度采样电路向DSP152输出。
然后，在DSP152的A/D转换电路和信号处理电路中，所述信号被转 换为最恰当的数字信号。转换为数字信号的信号在信号处理电路150中被 进行处理，从而生成了Y(亮度)、Cb、 Cr(色差)信号。
这些信号被暂时存放在緩冲存储器154中，在对图像数据进行压缩后， 将其保存在外部记录介质170中。暂时存放在緩冲存储器154中的图像数 据能够通过显示装置160来对其内容进行显示。
下面，关于动态图像的拍摄和静止图像的拍摄动作进行说明。
图3是用筒单的流程图来表示拍摄动作的附图。在拍摄动作开始前， 用户将模式转换开关140设定在动态图像/静止图像自动拍摄模式。并且， 通过按下记录开始/停止开关130来开始进行拍摄。
在步骤S301中，判断记录开始/停止开关130是否处于半按状态。如 果处于半按状态，则移向步骤S302(动态图像拍摄开始)，反之则继续对半 按状态的判断结果进行监视。
在步骤S302中开始拍摄动态图像并移向步骤S303。
在步骤S303中，判断是否处于全按搡作状态。如果处于全按搡作状 态，则进入到步骤S304(静止图像的拍摄/记录处理)，反之则继续执行开始 拍摄动态图像的处理，同时还继续对全按搡作的判断结果进行监视。
在步骤S304中，执行静止图像的拍摄/记录处理，然后在步骤S305中 判断是否从静止图像拍摄开始已经过了规定的时间。
如果判断的結果为已经过了规定的时间的话，则进入到步骤S306，使 动态图像拍摄结束，反之则继续动态图像记录直到经过了规定时间为止。 也就是，在经过了规定时间后，动态图像记录结束。然后，进入到步骤S307的保存形式判断处理，对保存形式进行判断(关 于判断的具体情况将在后文中加以叙述)，同时根据判断结果对图像进行保 存。在步骤S307中对图像进行保存以后，在步骤S308中制作播放清单。 另外，当已制作好播放清单时，则对该播放清单进行追加写入。当播放清 单的制作(或追记)结束时，在步骤S309中执行动态图像记录结束处理，从 而停止动态图像记录。
然后，关于判断保存形式的时机(timing)等进行说明。图4是表示从按 下快门钮后直到保存好图像为止的动作概要的附图。
通过lst按压(半按)来开始进行动态图像记录。并且，通过2nd按压(全 按)来对静止图像进行拍摄，在经过了规定时间后动态图像拍摄结束。此时， 在緩冲存储器154中保存了静止图像数据和动态图像数据。此外，当緩冲 存储器154的容量不足时，也可以将数据暂时保存在外部记录介质170中。
如图4所示，判断保存形式的时机是在动态图像拍摄结束以后。判断 是作为动态图像进行保存，还是作为静止图像进行保存，还是作为动态图 像和静止图像这两种图像进行保存。
当作为这两种图像进行保存时，分别各自保存有动态图像文件(file)和 静止图像文件。还有，所保存的动态图像文件和静止图像文件由播放清单 来进行管理。由此，能够对动态图像文件和静止图像文件进行识别。在图 5中表示了播放清单的一个示例。播放清单被保存在外部记录介质170中， 对存放在图像保存目录(directory)和动态图像保存目录中的文件进行管理。
在图6中表示了步骤S307的保存形式判断处理的流程图。
首先，在步骤S601中对编码量进行检测。当检测的结果为编码量比 规定的阈值小时，则进入到步骤S606的处理(静止图像保存处理)。另一方 面，如果编码量比规定的阈值大时，则进入到步骤S602的处理(移动量检 测处理)。
在步骤S602中对被拍摄体的移动量进行检测。当在步骤S602中检测 出的移动量比规定的阈值小时，则进入到步骤S606的处理(静止图像保存 处理)。另一方面，当移动量比规定的阈值大时，则进入到步骤S603的处 理(模糊图像检测处理)。
在步骤S603中进行模糊图像(bluired image)的检测。当检测的结果为
检测出模糊图像时，则进入到步骤S607的处理(动态图像保存处理)。另一 方面，当没能检测出模糊图像时，则进入到步骤S604的处理(脸检测处理)。
在步骤S604中进行脸的检测。当检测的结果为检测出脸时，则进入 到步骤S605的处理(朝向变化检测处理)。反之则进入到步骤S608的处理 (静止图像及动态图像保存处理)。
在步骤S605中，进行朝向变化检测。当该结果为检测出朝向变化时， 则进入到步骤S607的处理(动态图像保存处理)。另一方面，当没能检测出 朝向变化时，则进入到步骤S606的处理(静止图像保存处理)。保存的形式 有三种，即动态图像保存形式、静止图像保存形式、动态图像和静止图像 保存形式。还有，动态图像和静止图像的文件各自独立。当对动态图像和 静止图像这两种图像进行保存时，也仍然是动态图像作为动态图像文件进 行保存，静止图像作为静止图像文件进行保存。
如上所述，根据编码量来判断保存形式是基于下述观点进行的。也就 是， 一般来说当对风景等进行拍摄时，拍摄对象的运动变化较少。因此， 在处于动态图像拍摄时进行静止图像拍摄的摄像装置中，可以认为保存动 态图像的价值低，从而由于仅对静止图像进行保存所以能够使用容量较低 的"i己录介质。
如图7所示，动态图像的编码量随着拍摄时间而不断增加，不过当拍 摄对象的变化较少时编码量的增加减慢。根据这一观点，事先设定用来判 断是作为动态图像进行保存还是作为静止图像进行保存的编码量的阈值。 也能够事先将编码量的阈值设定为规定值，还能够通过用公式定义时间和 编码量的关系从而来决定阈值。如果所拍摄的动态图像的编码量超过阔值 时，则作为动态图像进行保存，如果在阈值以下时，则作为静止图像进行 保存。
关于根据移动量来判断保存形式的观点与编码量相同。在图8中表示 了由移动量来判断保存形式的方法。在摄像装置100中，当在拍摄时每经 过规定的时间间隔(例如一秒)就对移动量进行检测。具体来说，对每秒的 移动量和每单位时间的移动量(拍摄时间的平均移动量)这两种移动量进行 测量。如果每秒的移动量、每单位时间的移动量超过规定的移动量(阈值) 时，则作为动态图像进行保存，如果在阈值以下时则作为静止图像进行保
存。
还有，在拍摄开始的规定期间和拍摄结束的规定期间，如果移动量较
少时，也可以删除此部分的动态图像。由此，当在制作录像信件(video letter) 等而拍摄动态图像时，能够对拍摄开始和拍摄结束的用户所不需要的场景 进行删除。还有，当在拍摄中移动量突然增加时，也可以作为动态图像记 录进行保存。总之，拍摄对象的移动突然增加时可以认为是作为动态图像 保留下来的价值提高，所以可作为动态图像进行保存。在图9的流程图中 表示了这一处理的具体情况。
在步骤S901中，对动态图像记录时的移动量进行分析。这是对每单 位时间的移动量进行计算的步骤。
在步骤S902中，判断移动量是否在规定的阈值以下。如果移动量在 规定的阈值以下(移动量少的动态图像)，则进入到步骤S903，事先保存移 动量少的动态图像部分的时间信息。此外，不仪限于时间信息，只要是能 够确定动态图像部分的信息即可。
在步骤S903之后进入到步骤S904，在步骤S卯4中使动态图像记录结 束。并且，在步骤S905中，删除移动量少的动态图像部分。
然后，对根据模糊图像判断保存形式的方法进行说明。在动态图像摄 影中拍摄静止图像时，当图像作为模糊图像被记录的时候，保存该静止图 像的价值较低。不过，当该摄影前后的状态作为动态图像被记录时，则具 有作为动态图像保留下来的价值。如果删除静止图像且仅保留动态图像时， 则能够利用容量较低的记录介质。利用图像处理来判断该图像是否为模糊 图像。模糊图像一般为图像模糊不清且高频率成份少。
还有，也开发出利用统计方法补正模糊图像的技术。在应用了该补正 技术的摄像装置中，当检测出模糊图像并根据编码量和移动量判断出该图 像是作为静止图像被保存时，则将该图像作为静止图像和动态图像保留下 来。
此外，除了模糊图像以外，还可以考虑利用声音和光来作为检测方法。 也能够实现下述控制，即如果检测出声音和光时则将该图像作为动态图 像保存。例如，当出现激昂的声音时进行下述控制，即因为此时的场景 是具有震撼力的，所以作为动态图像进行保存。
然后，对根据脸检测来判断保存形式的方法进行说明。在检测出脸时 通过对朝向的变化进行检测，来判断是作为动态图像进行保存还是作为静 止图像进行保存。这是因为当脸的朝向产生变化时说明动作活跃，从而可 以认为具有作为动态图像保存的价值。当没有检测出朝向的变化时，则可 以认为拍摄对象正看着摄像装置保持静止不动，因而作为静止图像保存的 价值较高。
还有，在进行脸的检测中，还能够进行如下控制，即当检测出脸时则 作为动态图像进行记录，此外还可以通过测定所检测出的区域的移动量来 进行向动态图像记录进行转换的控制。具体来说，如图IO所示根据脸的图
形(pattern)和尺寸来决定记录形式。还有，也能够事先设定好每个图形的优 先度，将优先度高的图形作为动态图像记录下来。
下面，关于判断再生(playback)形式的动作进行说明。当在进行再生时 基本上参照了在记录时所制成的播放清单。不过，当无法参照播放清单时， 则应用编码量和移动量的检测方法进行再生控制。
图11是表示对再生形式进行判断处理的流程图。
在步骤S1101中，对编码量进行判断。如果编码量比规定的阈值小， 则进入到步骤S1106，作为静止图像进行再生。另一方面，如果编码量比 规定的阈值大，则进入到步骤S1102，对移动量进行判断。
如果步骤S1102中的判断结果为移动量小于规定阈值的话，则进入到 步骤S1106，作为静止图像进行再生。如果移动量比规定的阈值大的话， 则进入到步骤S1103，进行模糊图像的检测。
当步骤S1103中的检测结果为检测出模糊图像时，如果存在与之相对 应的动态图像，则进入到步骤S1107，作为动态图像进行再生。另一方面， 当没有检测出模糊图像时，则进入到步骤S1104，进行脸的检测。
一旦在步骤S1104中检测出脸时，则进入到步骤S1105，对朝向变化 进行检测。如果在步骤S1105中检测出朝向的变化时，则作为动态图像进 行再生。否则，则作为静止图像进行再生。还有，当在步骤S1104中没有 满足检测条件时，则进入到步骤S1108进行标准再生(normal playback),该 标准再生为如果是动态图像文件的话则使动态图像再生，而如果是静止图 像文件的话则使静止图像再生。
此外，虽然可以设想在摄像装置100中动态图像文件和静止图像文件 是并存的，不过当没有动态图像可用于动态图像再生时、或没有静止图像 可用于静止图像再生时，则进行标准再生。
还有，在进行静止图像再生时，当图像是模糊图像、或者利用光判断 出该图像作为图像的价值低时，也能够不对该图像进行再生。
如上所述，根据本实施方式，因为可以自动地对是否保存静止图像摄 影前后的动态图像进行判断，所以能够抑制记录介质的消耗。
此外，本发明没有被所述实施方式限定。例如，虽然在所述实施方式 中是以削减存储(memory)为目的，不过也能够从通过增加记录来对信息进 行追加的角度进行考虑。
还有，也能够通过考虑保存形式与模式旋钮之间的关联来决定保存形 式。例如，当处于风景拍摄模式时，则也可以进行下述控制，即优先保留 静止图像，并删除动态图像。
还有，当用户通过取景器进行拍摄时，有必要利用接触传感器(contact sensor)事先设定成为将所拍摄的图像作为静止图像进行保存。
(产业上的利用可能性)
本发明所涉及的信号处理电路因为可以自动地对是否保存被拍摄对象 的静止图像摄影前后的动态图像进行判断，所以具有能够抑制记录介质消 耗的效果，对于处理静止图像及动态图像这两种图像的信号处理电路、摄 像装置等来说是有用的。
权利要求
1.一种信号处理电路，具有暂时保存所拍摄的图像的缓冲存储器，其特征在于该信号处理电路还具有动态图像检测装置，该动态图像检测装置检测所述所拍摄的图像是否为动态图像；根据所述动态图像检测装置的检测结果，判断是将所述所拍摄的图像作为动态图像保存在所述缓冲存储器中，还是作为静止图像保存在所述缓冲存储器中，还是作为动态图像和静止图像这两种图像保存在所述缓冲存储器中。
2. 根据权利要求1所述的信号处理电路，其特征在于所述动态图像检测装置对图像的编码量进行检测，同时根据所检测出 的编码量来检测所述所拍摄的图像是否为动态图像。
3. 根据权利要求1所述的信号处理电路，其特征在于所述动态图像检测装置对图像的移动量进行检测，同时根据所检测出 的移动量来检测所述所拍摄的图像是否为动态图像。
4. 根据权利要求3所述的信号处理电路，其特征在于 当所述动态图像检测装置检测出的图像的移动量比规定的阈值小时，刪除动态图像的起始端及末尾端的至少之一。
5. 根据权利要求1所述的信号处理电路，其特征在于所述动态图像检测装置对图像的模糊量进行检测，同时根据所检测出 的模糊量来检测所述所拍摄的图像是否为动态图像。
6. 根据权利要求1所述的信号处理电路，其特征在于所述动态图像检测装置对图像的脸部和所检测出的脸的朝向的变化 进行检测，同时根据所检测出的脸的朝向的变化来检测所述所拍摄的图像 是否为动态图像。
7. 根据权利要求1所述的信号处理电路，其特征在于 所述动态图像检测装置对规定的图形进行检测，同时根据对每个图形事先设定好的优先度来检测所述所拍摄的图像是否为动态图像。
8. 根据权利要求1所述的信号处理电路，其特征在于所述动态图像检测装置制作用来对动态图像和静止图像混在 一起的 图像进行显示的播放清单。
9. 一种信号处理电路，其特征在于该信号处理电路具有动态图像检测装置，该动态图像检测装置检测所 拍摄的图像是否为动态图像，根据所述动态图像检测装置的检测结果，来判断是将所述所拍摄的图 像作为动态图像进行显示，还是作为静止图像进行显示。
10. 根据权利要求9所述的信号处理电路，其特征在于所述动态图像检测装置对图像的模糊量信息进行检测，同时根据所检 测出的模糊量信息来检测所述所拍摄的图像是否为动态图像。
11. 根据权利要求9所述的信号处理电路，其特征在于所述动态图像检测装置对图像的编码量信息进行检测，同时根据所检 测出的编码量信息来检测所述所拍摄的图像是否为动态图像。
12. 根据权利要求9所述的信号处理电路，其特征在于所述动态图像检测装置对图像的移动量信息进行检测，同时根据所检 测出的移动量信息来检测所述所拍摄的图像是否为动态图像。
13. —种摄像装置，其特征在于 该摄像装置，包括权利要求1所述的信号处理电路， 摄像部，将被摄体像转换为电信号后输出，模式转换开关，对静止图像拍摄模式、动态图像拍摄模式、静止图像 /动态图像自动拍摄模式进行转换， 拍摄开关，指示开始拍摄， 显示装置，显示所拍摄的图像，和 外部记录介质，保存所拍摄的图像。
全文摘要
本发明公开了一种信号处理电路及摄像装置，其目的在于当记录静止图像摄影前后的动态图像时，根据规定的条件来判断保存形式，从而可以抑制记录介质的消耗，同时能够自动判断用户所期望的拍摄模式。在信号处理电路中设置有暂时保存所拍摄的图像的缓冲存储器(154)、和检测所述所拍摄的图像是否为动态图像的动态图像检测装置(151)。并且，根据动态图像检测装置(151)的检测结果，判断是将所述所拍摄的图像作为动态图像保存在缓冲存储器(154)中，还是作为静止图像保存在缓冲存储器(154)中，还是作为动态图像和静止图像这两种图像保存在缓冲存储器(154)中。
文档编号H04N5/14GK101360210SQ20081013586
公开日2009年2月4日 申请日期2008年7月17日 优先权日2007年8月2日
发明者吉川裕规 申请人:松下电器产业株式会社