专利名称：图像处理方法、图像处理系统、摄像装置、图像处理装置及计算机程序的制作方法
技术领域：
本发明涉及对拍摄对象进行连续拍摄，对基于拍摄的图像内的拍摄 对象的范围进行检测的图像处理方法、应用该图像处理方法的图像处理 系统、在该图像处理系统中使用的摄像装置和图像处理装置、及用于实 现该图像处理装置的计算机程序，特别涉及易于进行范围的检测等处理 的图像处理方法、图像处理系统、摄像装置、图像处理装置及计算机程 序。
背景技术：
作为汽车等车辆的驾驶辅助装置，提出了如下的图像处理装置，其 使用配置在可拍摄到驾驶者脸部的位置上的车载摄像机来拍摄驾驶者脸 部，进行根据所得到的图像来检测驾驶者的脸部轮廓、眼睛和鼻子的位 置、以及基于这些的脸部状况的图像处理(例如，参照专利文献1)。并 且，使用这样的装置构成检测驾驶者状况来进行驾驶者注意力分散时的 警告等驾驶辅助的系统。
专利文献1:日本特开2004—234367号公报
但是，例如当驾驶者脸部远离了车载摄像机时，拍摄的图像中的脸 部变小而导致无法充分进行轮廓、眼睛和鼻子的位置的检测等图像处理。
发明内容
本发明是鉴于上述问题而产生的，其目的在于提供图像处理方法、 应用该图像处理方法的图像处理系统、在该图像处理系统中使用的摄像 装置和图像处理装置、及用于实现该图像处理装置的计算机程序，从而 在对驾驶者脸部等拍摄对象进行连续拍摄时，基于对第一图像检测出的
脸部轮廓等的范围，对在第一图像之后拍摄的第二图像进行放大等加工， 对加工后的第二图像内的拍摄对象的范围进行检测，从而易于进行图像 对象的范围的检测等图像处理。
在第一发明的图像处理方法中，对拍摄对象进行连续拍摄，对基于 拍摄的图像内的拍摄对象的范围进行检测，其特征在于，基于从第一图 像检测出的拍摄对象的范围来加工第一图像之后的第二图像，对加工后 的第二图像内的拍摄对象的范围进行检测。
第二发明的图像处理系统具有摄像单元，其对拍摄对象进行连续 拍摄；以及图像处理单元，其对基于该摄像单元的拍摄的图像内的拍摄 对象的范围进行检测，该图像处理系统的特征在于，该图像处理系统具 有加工单元，其基于从第一图像检测出的拍摄对象的范围来加工第一 图像之后的第二图像；以及对加工后的第二图像内的拍摄对象的范围进 行检测的单元。
第三发明的图像处理系统，根据第二发明，其特征在于，所述加工 单元构成为对第二图像进行放大。
第四发明的图像处理系统，根据第三发明，其特征在于，所述加工 单元构成为基于范围的大小来确定放大率。
第五发明的图像处理系统，根据第三发明或第四发明，其特征在于， 该图像处理系统还具有确定拍摄对象内的加工的基准点的单元，所述加 工单元构成为以基准点为中心进行放大。
第六发明的图像处理系统，根据第五发明，其特征在于，所述拍摄 对象是脸部，所述拍摄对象的范围是脸部的规定方向的范围，所述拍摄 对象内的基准点是基于眼睛和/或鼻子的位置而求出的点。
第七发明的摄像装置具有对拍摄对象进行连续拍摄的单元，且该摄 像装置与对基于拍摄的图像内的拍摄对象的范围进行检测的图像处理装 置连接，其特征在于，该摄像装置具有从所述图像处理装置接收表示 从第一图像检测出的拍摄对象的范围的范围数据的输入的单元；基于所 接收的范围数据所示的范围来加工第一图像之后的第二图像的单元；以 及将表示加工后的第二图像的图像数据输出到所述图像处理装置的单
元。
第八发明的图像处理装置连续接收表示图像的图像数据的输入，对 基于所接收的图像数据的图像内的拍摄对象的范围进行检测，其特征在 于，该图像处理装置具有根据从基于第一图像数据的图像检测出的拍 摄对象的范围来加工第一图像数据之后的第二图像数据的单元；以及对 基于加工后的第二图像数据的图像内的拍摄对象的范围进行检测的单 元。
第九发明的计算机程序使具有连续接收表示图像的图像数据的输入 的单元的计算机，对基于所接收的图像数据的图像内的拍摄对象的范围 进行检测，其特征在于，该计算机程序使计算机执行以下步骤根据从 基于第一图像数据的图像检测出的拍摄对象的范围来加工第一图像数据 之后的第二图像数据的步骤；以及对基于加工后的第二图像数据的图像 内的拍摄对象的范围进行检测的步骤。
第一发明、第二发明、第七发明、第八发明和第九发明应用于使用 例如搭载于车辆上且以驾驶者脸部作为拍摄对象的车载摄像机的系统 中，基于对第一图像进行处理的结果来适当加工第二图像，从而可易于 对第二图像进行图像对象的范围检测等图像处理。特别，当在第七发明
所示的摄像装置中应用时，作为预处理预先进行加工以使拍摄对象以标 准状态示于图像内，然后输出到图像处理装置，从而可减轻图像处理装 置的处理负荷，而且可通用于多种图像处理软件，所以可削减记录图像 数据的存储器。并且在第八发明和第九发明中，可使用现有的摄像装置 来实现本发明的图像处理。
在第三发明中，例如在拍摄对象即驾驶者的脸部较小时，也可通过 进行放大，从而易于进行图像对象的范围检测等图像处理。
在第四发明中，通过适当确定放大率而可将拍摄对象的大小调节为 适于图像处理的大小。
在第五发明中，即使在所拍摄的图像中拍摄对象移动的情况下，也 可调节到易于进行图像处理的位置。
在第六发明中，可适用于驾驶车辆的驾驶者的脸部轮廓、眼睛和鼻
子的位置、以及基于这些的脸部状况的检测。
本发明的图像处理方法、图像处理系统、摄像装置、图像处理装置 及计算机程序，应用于使用例如搭载于车辆上且以驾驶者脸部为拍摄对 象的车载摄像机的系统中，对拍摄对象进行连续拍摄，根据从第一图像 检测出的拍摄对象的范围、例如基于驾驶者的脸部轮廓的幅度、以及驾 驶者的眼睛和鼻子的位置而确定的脸部中心等的基准点，来对基于第一 图像之后的拍摄的第二图像，进行包含以基准点为中心的拍摄对象的区 域的放大等加工，对加工后的第二图像进行拍摄对象的范围检测、基准 点确定等图像处理。
根据该结构，得到如下的良好效果即使在图像中的拍摄对象较小 的情况下，也能够将拍摄对象放大以及位置调节，所以易于进行拍摄对 象的范围检测、基准点的确定等图像处理。
特别，在应用于车载摄像机等摄像装置时，作为预处理预先进行加 工以使拍摄对象以标准状态示于图像内，然后输出到图像处理装置，从 而可减轻与摄像装置连接的图像处理装置的处理负荷，而且可通用于多 种图像处理软件，因此得到可削减记录图像数据的存储器的优良效果。
图1是表示本发明第一实施方式的图像处理系统的结构的框图。
图2是表示在本发明第一实施方式的图像处理系统中使用的图像处
理装置的图像识别处理的流程图。
图3是概念地表示在本发明第一实施方式的图像处理系统中使用的
图像处理装置的处理的说明图。
图4是概念地表示在本发明第一实施方式的图像处理系统中使用的
图像处理装置的处理的说明图。
图5是表示在本发明第一实施方式的图像处理系统中使用的摄像装
置的图像加工用数据记录处理的流程图。
图6是表示在本发明第一实施方式的图像处理系统中使用的摄像装 置的图像数据加工处理的流程图。
图7是概念地表示在本发明第一实施方式的图像处理系统中使用的 摄像装置的处理的说明图。
图8是表示本发明第二实施方式的图像处理系统的结构的框图。 图9是表示在本发明第二实施方式的图像处理系统中使用的摄像装
置和图像处理装置的图像数据取得处理的流程图。
图10是表示在本发明第二实施方式的图像处理系统中使用的图像
处理装置的图像处理的流程图。
标号说明
1:摄像装置；2:图像处理装置；3:计算机程序；4:记录介质。
具体实施例方式
以下基于表示该实施方式的附图对本发明进行详细说明。 第一实施方式
图1是表示本发明第一实施方式的图像处理系统的结构的框图。在 图1中，1表示搭载于车辆上的车载摄像机等摄像装置，摄像装置1经由
专用电缆等通信线、或者以有线或无线方式构成的车内LAN (Local Area Network,局域网)等通信网与进行图像处理的图像处理装置2连接。摄 像装置1配置于车辆内部驾驶者前方的方向盘、仪表板等上，调节为能 够将驾驶者脸部作为拍摄对象进行拍摄的状态。
摄像装置1具有:对装置整体进行控制的MPU(Micro Processor Unit, 微处理器单元)11;存储基于MPUll的控制来执行的各种计算机程序和 数据的ROM (Read Only Memory,只读存储器)12;对在执行记录于 ROM 12中的计算机程序时临时产生的各种数据进行存储的RAM (Random Access Memory,随机访问存储器)13;使用CCD (Charge Coupled Device,电荷耦合器件)等摄像元件构成的摄像部14;将由摄像 部14拍摄所得的模拟图像数据转换为数字数据的A/D转换器15;对由 A/D转换器15转换为数字数据的图像数据进行后述的图像处理的处理电 路16;对由处理电路16处理过的图像数据进行临时存储的帧存储器17;
以及在与图像处理装置2之间的通信中使用的通信接口 18。
在摄像装置1中，使用摄像部14进行连续或者间歇的摄像处理，基 于摄像处理例如以每秒30幅生成图像数据(图像帧)后输出到A/D转换 器15，在A/D转换器15中，将构成图像数据的各像素转换为以256灰 度O位)等灰度表示的数字图像数据。然后，将由处理电路16处理过 的图像数据存储于帧存储器17中，以规定的定时将所存储的图像数据输 出到图像处理装置2。另外，在摄像装置l中，以规定的定时从图像处理 装置2接收在处理电路16的处理中所需的各种数据，将所接收的数据存 储于处理电路16具有的闪存等存储器中。另外，在存储器中预先存储有 在由处理电路16进行的图像处理中所需的基准值等各种数据。
图像处理装置2具有对装置整体进行控制的CPU (Central Processing Unit,中央处理单元)21;存储基于CPU 21的控制而执行的 各种计算机程序和数据的硬盘(以下称为HD) 22;对在执行记录于HD 22中的计算机程序时临时产生的各种数据进行存储的RAM 23;例如由 非易失性存储器构成的帧存储器24;在与摄像装置1之间的通信中使用 的通信接口 25;以及对CD—ROM、存储卡等记录介质进行访问的辅助 存储部26。
在图像处理装置2中，由通信接口 25接收从摄像装置1输出的图像 数据，执行记录于HD 22中的计算机程序，从而对所接收的图像数据进 行各种图像处理，并且将基于图像处理结果的各种数据从通信接口 25输 出到摄像装置1。所谓基于记录于HD 22中的计算机程序的执行的图像 处理是指，根据图像数据来检测拍摄对象即驾驶者的脸部轮廓、确定眼 睛和鼻子的位置、以及基于这些结果来检测脸部方向等各种处理。作为 具体的处理例子，可以举出通过模式匹配(patternmatch)来检测眼睛位 置的处理。作为其它处理的例子，可以举出以下处理，即通过对在图像 的垂直方向上排列的亮度进行累积后将所累积的值与规定的阈值进行比 较，从而检测出由比背景亮度高的像素构成的脸部轮廓的水平方向的范 围。并且，进一步可举出以下处理，即在该处理中对累积值的水平方向 的变化进行微分来确定变化大的位置，检测出亮度显著变化的背景与脸
部轮廓之间的边界。例如在由本申请的申请人提出的日本特开2000 — 163564号公报、日本特开2004—234494号公报、日本特开2004—234367
号公报等文献中，记载有详细的处理内容。另外，这些图像处理也不一 定限于在日本特开2000—163564号公报、日本特开2004—234494号公 报以及日本特开2004—234367号公报中记载的处理，而可以根据其用途、 硬件结构以及与其它应用程序之间的配合等条件来适当选取。
下面，对在本发明第一实施方式的图像处理系统中执行的各种处理 进行说明。图2是表示在本发明第一实施方式的图像处理系统中使用的 图像处理装置2的图像识别处理的流程图。图像处理装置2根据CPU21 的控制来进行包含从图像数据检测出作为拍摄对象的驾驶者的脸部轮 廓、以及确定眼睛和鼻子位置的图像处理即拍摄对象的识别处理(SIOI)， 基于拍摄对象识别处理的结果来辅助驾驶。另外，图像处理装置2根据 CPU 21的控制，基于识别处理的结果来检测拍摄对象的范围(S102)， 并且确定拍摄对象内的基准点(S103)，将表示所检测的范围的范围数据 和表示所确定的基准点的基准点数据从通信接口 25输出到摄像装置1 (S104)。例如使用在上述日本特开2000 — 163564号公报、日本特开2004 一234494号公报、日本特开2004—234367号公报等文献中记载的各种处 理，进行步骤SIOI中的拍摄对象的识别处理。另外，在步骤SIOI中进 行的拍摄对象的识别处理中使用的图像数据是指，通过后述的摄像装置1 的处理对拍摄到的并进行A/D转换的图像数据实施了伴随坐标系变换的 加工处理后的图像数据，因此在基于识别处理的结果来进行驾驶辅助处 理时，可进行恢复到原有坐标系的变换处理。其中，在步骤S104中输出 的范围数据和基准点数据是否需要进行恢复到原有坐标系的变换是可以 任意设定的。在图像处理装置2中不进行范围数据和基准点数据的变换 时，在摄像装置1中进行坐标系的变换。
图3是概念地表示在本发明第一实施方式的图像处理系统中使用的 图像处理装置2的处理的说明图。图3概念地表示了使用图2说明的图 像处理装置2的图像识别处理中的步骤S102的拍摄对象范围检测。在图 3中由实线所示的长方形的框是基于图像数据的整个图像，其表示在图像
内作为拍摄对象的驾驶者脸部，两箭头所示范围是拍摄对象的范围。所
谓步骤S102中的检测拍摄对象范围的处理是指，基于在步骤S101中检 测出的拍摄对象即驾驶者的脸部轮廓来检测驾驶者脸部的左右方向(水 平方向)的宽度的处理。
图4是概念地表示在本发明第一实施方式的图像处理系统中使用的 图像处理装置2的处理的说明图。图4概念地表示了使用图2说明的图 像处理装置2的图像识别处理中的步骤S103的拍摄对象的基准点确定。 如图4所示，所谓步骤S103中的拍摄对象内的基准点确定是指，基于在 步骤S101中检测出的拍摄对象即驾驶者脸部内确定的眼睛和鼻子的位 置，来将脸部中心确定为成为加工基准的基准点的处理，具体而言是以 下处理，即根据图4中虛线X标记所示的双眼和鼻子的两孔这四点坐标， 来计算实线X标记所示的重心的坐标，之后将计算出的重心确定为脸部 中心即基准点的处理。
图5是表示在本发明第一实施方式的图像处理系统中使用的摄像装 置1的图像加工用数据记录处理的流程图。在摄像装置1中，根据MPU 11的控制，由通信接口 18接收从图像处理装置2输出的范围数据和基准 点数据的输入(S201)，将接收的范围数据与在处理电路16的存储器中 预先作为基准值记录的范围数据的最大值进行比较(S202)。
在步骤S202中，当判定为所接收的范围数据比范围数据的最大值大 时(S202:是)，在摄像装置l中，根据MPU11的控制，进行使在处理 电路16的存储器中记录的表示放大率的数值降低的放大率变更处理 (S203)。所谓表示放大率的数值是指，表示作为图像数据的加工而放大 图像数据时的倍率的数值，在处理电路16的存储器中记录的数值是在前 次对图像数据进行放大时使用的数值。S卩，通过步骤S203中的放大率变 更处理，判定是否以前次的放大率进行放大。另外，在变更放大率时， 计算所接收的范围数据和预先记录的基准值之比，基于计算出的比来计 算变更后的放大率。另外，也可以预先记录分级为几个等级的多个放大 率，在变更放大率时，通过使放大率的级改变规定等级来变更放大率。
在步骤S202中，当判定为所接收的范围数据为范围数据的最大值以
下时(S202:否)，在摄像装置l中，根据MPU11的控制，对所接收的 范围数据和在处理电路16的存储器中预先作为基准值记录的范围数据的 最小值进行比较(S204)。
在步骤S204中，当判定为所接收的范围数据比范围数据的最小值小 吋(S204:是)，在摄像装置l中，根据MPU11的控制，进行使在处理 电路16的存储器中记录的表示放大率的数值提高的放大率变更处理 (S205)。艮卩，在步骤S202 S205的处理中，基于范围数据所表示的范 围大小来确定放大率。另外，也可以不将范围数据与最大值和最小值进 行比较，而在每次接收范围数据时，基于所接收的范围数据来变更放大 率。另外，在所接收的范围数据没有通过图像处理装置2迸行坐标系^变 换的情况下，在步骤S202的比较前进行变换处理。
在步骤S203或者步骤S205中实施放大率变更处理后，或者在步I聚 S204中，当判定为所接收的范围数据为范围数据的最小值以上时(S204: 否)，在摄像装置1中，根据MPU 11的控制，基于在步骤S201中接收 的基准点数据来确定成为放大中心的坐标(S206)，将所确定的成为放大 中心的坐标记录到处理电路16的存储器中(S207)。在步骤S206中，将 基准点数据确定为成为放大中心的坐标。但是，在所接收的基准点数据 没有通过图像处理装置2进行坐标系变换的情况下，将基准点数据的坐 标系变换后的坐标确定为成为放大中心的坐标。并且，在确定成为放大 中心的坐标时，基于在存储器中记录的放大率，来判定该坐标是否处于 放大后的图像的有效范围内。
图6是表示在本发明第一实施方式的图像处理系统中使用的摄像装 置1的图像数据加工处理的流程图。在摄像装置1中，基于MPUll的控 制，由处理电路16接收摄像部14拍摄后通过A/D转换器15转换为数字 数据的图像数据，在处理电路16中，读取在存储器中记录的表示放大率 的数值以及成为放大中心的坐标(S301)，按照所读取的数值表示的放大 率，以读取的坐标为中心，进行放大所接收的图像数据的加工处理
(S302)。放大的图像数据的范围根据放大率和放大中心来确定。另外， 在放大图像数据时，进行构成图像数据的像素的插值处理。并且，伴随图像数据的放大来进行坐标系的变换。然后，在摄像装置1中，根据MPU ll的控制，将放大的图像数据存储于帧存储器17，以规定的定时将在帧 存储器17中存储的放大的图像数据从通信接口 18输出到图像处理装置2 (S303)。另外，在图像处理装置2中，在进行与图像数据的坐标系变换 相关的处理时，坐标系变换所需的数据也从摄像装置1输出到图像处理 装置2。
图7是概念地表示在本发明第一实施方式的图像处理系统中使用的 摄像装置1的处理的说明图。图7概念地表示了使用图6说明的摄像装 置1的图像数据加工处理中的步骤S302的加工处理。图7 (a)的由实线 所示的框表示基于通过拍摄得到的加工处理前的图像数据的图像，对图7 (a)内的由单点划线所示框内的图像进行加工处理。另外，图7 (b)的 由实线所示的框表示基于加工处理后的图像数据的图像。图7所示的加 工处理为图像的放大处理，以在图7 (a)所示的图像中示出的成为放大 中心的坐标(x， y)为中心，基于从存储器读取的放大率，来放大图7 (a)的图像的局部。另外，所谓放大的局部图像是指，根据放大率和放 大中心来确定的范围内的图像。
另外，在图像处理装置2中，通过通信接口 25接收放大后的加工处 理后的图像数据的输入，对所接收的图像数据进行拍摄对象的识别、拍 摄对象的范围检测、基准点的确定等使用图2表示的图像识别处理。这 样在本发明的图像处理系统中，基于从第一图像检测出的拍摄对象范围 以及确定的基准点，来对基于第一图像之后的拍摄的第二图像，进行包 含以基准点为中心的拍摄对象的区域的放大等加工，对加工后的第二图 像进行拍摄对象的范围检测、基准点确定等图像处理。
第二实施方式
第二实施方式是在第一实施方式中，由图像处理装置2来进行图像 数据的加工处理的方式。图8是表示本发明第二实施方式的图像处理系 统的结构的框图。另外，对于和第一实施方式相同的结构要素附加与第 一实施方式相同的标号而省略说明。在第二实施方式中，由于由图像处 理装置2进行图像数据的加工处理，因此摄像装置1不具有处理电路16。
图像处理装置2通过辅助存储部26从记录有本发明的计算机程序3和数 据等各种信息的记录介质4中读取各种信息，将所读取的各种信息记录 于HD 22，将记录于HD 22中的各种信息存储于RAM 23后根据CPU 21 的控制来执行。另外，在执行本发明的计算机程序3时，在HD22中i己 录图像处理所需的基准值等数据。
图9是表示在本发明第二实施方式的图像处理系统中使用的摄像装 置1和图像处理装置2的图像数据取得处理的流程图。摄像装置1根据 MPU 11的控制，将摄像装置14拍摄后通过A/D转换器15转换为数字数 据的图像数据存储于帧存储器17，以规定的定时将存储于帧存储器17中 的图像数据从通信接口 2输出到图像处理装置2 (S401)。
图像处理装置2根据CPU 21的控制，通过通信接口 25接收从摄像 装置1输出的图像数据(S402)，将所接收的图像数据存储于帧存储器24 (S403)。
图10是表示在本发明第二实施方式的图像处理系统中使用的图像 处理装置2的图像处理的流程图。图像处理装置2根据CPU21的控制， 来读取在HD 22或者RAM 23中记录的表示放大率的数值和成为放大中 心的坐标(S501)，按照所读取的数值表示的放大率，以读取的坐标为中 心，进行放大存储于帧存储器24中的图像数据的加工处理(S502)。
然后，图像处理装置2根据CPU21的控制，根据放大后的图像数据 来进行包括检测拍摄对象即驾驶者的脸部轮廓、以及确定眼睛和鼻子的 位置的图像处理即拍摄对象的识别处理(S503)，基于拍摄对象识别处理 的结果来辅助驾驶。另外，图像处理装置2根据CPU21的控制，基于识 别处理的结果，来检测拍摄对象的范围(S504)，并且确定拍摄对象内的 基准点(S505)。
然后，图像处理装置2根据CPU21的控制，将在步骤S504中检测 出的拍摄对象的范围和预先在HD 22中作为基准值记录的拍摄对象范围 的最大值进行比较(S506)。
在步骤S506中，当判定为所检测出的拍摄对象范围比所记录的范围 的最大值大时(S506:是)，在图像处理装置2中根据CPU21的控制，
进行使在HD 22或RAM 23中记录的表示放大率的数值降低的放大率变 更处理(S507)。
在步骤S506中，当判定为所检测出的拍摄对象范围在所记录的范围 的最大值以下时(S506:否)，在图像处理装置2中根据CPU21的控制， 将在步骤S504中检测出的拍摄对象范围和预先在HD 22中作为基准值记 录的拍摄对象范围的最小值进行比较(S508)。
在步骤S508中，当判定为所检测出的拍摄对象范围比所记录的范围 的最小值小时(S508:是)，在图像处理装置2中根据CPU21的控制， 进行使在HD 22或RAM 23中记录的表示放大率的数值提高的放大率变 更处理(S509)。
在步骤S507或步骤S509中实施放大率变更处理后，或者在步骤 S508中，当判定为所检测出的拍摄对象范围是所记录的范围的最小值以 上时(S508:否)，在图像处理装置2中根据CPU21的控制，基于在步 骤S505中确定的基准点来确定成为放大中心的坐标(S510)，将所确定 的成为放大中心的坐标记录于HD22或RAM23 (S511)。在执行了到步 骤S511为止的处理的时间点存储于HD22或RAM23中的放大率和成为 放大中心的坐标，在对下一图像数据进行放大的加工处理中使用。
如在第一和第二实施方式中具体说明的那样，在本发明中，连续对 拍摄对象进行拍摄，根据基于第一图像确定的放大率和成为放大中心的 坐标，对通过第一图像之后的拍摄得到的第二图像进行加工，进行基于 加工后的第二图像的各种图像处理，并进一步重复对下一图像的放大率 和成为放大中心的坐标进行确定的处理。
在前述第一和第二实施方式中，作为加工图像的处理示出了进行放 大的处理，但本发明不限于此，也可以使用縮小、灰度变换、微分处理 等各种处理。并且，作为放大处理，虽然示出了放大图像数据的方式， 但是也可以是对拍摄的范围进行光学放大的方式。
在前述第一和第二实施方式中，虽然示出了以车辆驾驶者为拍摄对 象的方式，但本发明不限于此，也可以是以各种人物以及人物以外的生 物或非生物为拍摄对象的方式。
权利要求
1、一种图像处理方法，该图像处理方法对拍摄对象进行连续拍摄，对基于拍摄的图像内的拍摄对象的范围进行检测，其特征在于，在该图像处理方法中，基于从第一图像检测出的拍摄对象的范围来加工第一图像之后的第二图像，对加工后的第二图像内的拍摄对象的范围进行检测。
2、 一种图像处理系统，该图像处理系统具有摄像单元，其对拍摄 对象进行连续拍摄；以及图像处理单元，其对基于该摄像单元的拍摄的 图像内的拍摄对象的范围进行检测，该图像处理系统的特征在于，该图 像处理系统具有-加工单元，其基于从第一图像检测出的拍摄对象的范围来加工第一 图像之后的第二图像；以及对加工后的第二图像内的拍摄对象的范围进行检测的单元。
3、 根据权利要求2所述的图像处理系统，其特征在于，所述加工单 元构成为对第二图像进行放大。
4、 根据权利要求3所述的图像处理系统，其特征在于，所述加工单 元构成为基于范围的大小来确定放大率。
5、 根据权利要求3或4所述的图像处理系统，其特征在于，该图像 处理系统还具有确定拍摄对象内的加工的基准点的单元，所述加工单元构成为以基准点为中心进行放大。
6、 根据权利要求5所述的图像处理系统，其特征在于，所述拍摄对 象是脸部，所述拍摄对象的范围是脸部的规定方向的范围， 所述拍摄对象内的基准点是基于眼睛和/或鼻子的位置而求出的点。
7、 一种摄像装置，该摄像装置具有对拍摄对象进行连续拍摄的单元， 且该摄像装置与对基于拍摄的图像内的拍摄对象的范围进行检测的图像 处理装置连接，其特征在于，该摄像装置具有从所述图像处理装置接收表示从第一图像检测出的拍摄对象的范围 的范围数据的输入的单元；基于所接收的范围数据所示的范围来加工第一图像之后的第二图像 的单元；以及将表示加工后的第二图像的图像数据输出到所述图像处理装置的单元。
8、 一种图像处理装置，其连续接收表示图像的图像数据的输入，对 基于所接收的图像数据的图像内的拍摄对象的范围进行检测，其特征在 于，该图像处理装置具有根据从基于第一图像数据的图像所检测出的拍摄对象的范围来加工 第一图像数据之后的第二图像数据的单元；以及对基于加工后的第二图像数据的图像内的拍摄对象的范围进行检测 的单元。
9、 一种计算机程序，该计算机程序使具有连续接收表示图像的图像 数据的输入的单元的计算机，对基于所接收的图像数据的图像内的拍摄 对象的范围进行检测，其特征在于，该计算机程序使计算机执行以下步 骤根据从基于第一图像数据的图像所检测出的拍摄对象的范围来加工 第一图像数据之后的第二图像数据的步骤；以及对基于加工后的第二图像数据的图像内的拍摄对象的范围进行检测 的步骤。
全文摘要
本发明提供图像处理方法、图像处理系统、摄像装置、图像处理装置及计算机程序，从而在使用例如搭载于车辆上的以驾驶者脸部为拍摄对象的车载摄像机的系统中，对拍摄对象进行连续拍摄，基于根据从第一图像检测出的拍摄对象的范围、例如驾驶者的脸部轮廓的宽度、以及驾驶者的眼睛和鼻子的位置来确定的脸部中心等基准点，对基于第一图像之后的拍摄的第二图像，进行包含以基准点为中心的拍摄对象的区域的放大等加工，对加工后的第二图像，进行拍摄对象的范围检测、基准点的确定等图像处理。
文档编号G06T1/00GK101107625SQ20058004718
公开日2008年1月16日 申请日期2005年2月17日 优先权日2005年2月17日
发明者东野全寿, 伊藤寿雄, 片桐卓, 田福明义, 马场幸三, 高岛知信 申请人:富士通株式会社