摄像装置、摄像方法以及摄像程序的制作方法

专利名称：摄像装置、摄像方法以及摄像程序的制作方法
技术领域：
本发明涉及检测物体并进行摄影的摄像装置、摄像方法以及摄像程序。
背景技术：
在现有的图像监视中，检测作为监视对象的物体，进行检测到的物体是什么的识 别、以及书写在物体上的文字的读取等(例如参照专利文献1、专利文献2等)。在该图像 监视中，为了得到高识别率(成功识别物体的比例)，需要以使要识别的物体本身成为适合 于识别的亮度的方式来进行摄影。特别地，在室外的图像监视等中，由于天气的日照状况等，照度环境时刻变化，为 了在这种照度环境下也得到高识别率，需要对入射到摄影装置的光量(曝光量)进行调整， 以便始终在适合于识别的亮度下对物体进行摄影。在此前的图像监视中的亮度调整中，即使存在基于时间的照度变动，也存在某个 时刻的监视范围内的照度分布均勻这样的隐含的大前提。例如，在专利文献1中，为了准 确地读取书写于在道路上通行的车辆的号牌上的文字，对镜头的光圈等照相机参数进行控 制，以使检测到的对象(号牌)的亮度为规定值。这里，由于监视范围内的照度分布均勻这样的前提，不论对象位于画面内的哪个 位置、例如车辆通过道路的哪里，在某个环境下摄影的对象的亮度都是恒定的。图15是示 出现有的图像监视的例子的图。在图15中，由设置在路上的照相机检测通过监视范围的车 辆，但是，在照度均勻的情况下，所拍摄的对象的亮度与检测位置无关，是恒定的。图16是示出通过现有的图像监视而检测到的对象的例子的图。如果某个时刻的 监视范围内的照度分布均勻，则如图16所示，图15的在A点处的图像和图16的在B点处 的图像的亮度恒定。而且，在检测到对象后，控制对象的亮度。图17是示出现有的亮度控制的例子的 图。如图17的左侧那样，在对象的亮度偏离规定值(该图的网格部分)的情况下，如图17 的右侧那样，调整镜头的光圈等以便以规定的亮度进行摄影。在图17中，以低于规定亮度 (比规定的明亮度暗)的亮度对对象进行摄影，所以，例如进行打开光圈的控制。专利文献1 日本专利2706314号公报专利文献2 日本特开2006-311031号公报但是，在上述现有技术中，在某个时刻的监视范围内的照度分布不均勻的情况下， 存在无法恰当地调整检测对象的亮度的问题。例如，在夜间等照射照明光来进行对象识别的情况下，有时监视范围的照度不可 能均勻。图18是示出使用搭载于车辆上的照相机对在对向车道上通行的车辆进行识别的 例子的图，图19是示出摄影范围和夜间的前灯的照射范围的图。如图18所示，在不使用图像监视的专用照明、而使用搭载了照相机的本车辆的前 灯作为照明的情况下，监视范围的照度不可能均勻。即，如图19所示，考虑以照相机为原 点、取本车辆的行进方向为Z轴、与Z轴垂直的水平方向为X轴的全局坐标系时，由于前灯
4照明的不均，对象的照度根据实际空间位置(对象实际存在的空间的位置)而不同，在各位 置拍摄的对象的亮度也不同。图20是示出图19中的位置A、B的照度的差异的图，图21是示出现有的曝光控制 的问题点的图。例如，如图19的位置A那样，考虑对象通过距车辆远(X坐标大)且照度光 量少的位置的情况。如图20的左侧那样，在位置A检测到的对象的亮度小于规定亮度的情 况下，在现有方式中，进行打开照相机的光圈等的照相机参数的调整(进行与位置B处的亮 度有关的照相机参数的调整)，以使位置A处的对象的亮度为规定值。而且，在以位置A处的亮度为基准进行照相机参数的调整时，如图20的右侧那样， 在距照明装置近(X坐标小)的位置B等处，调整前的亮度大于位置A，所以，亮度超出了合 适范围(参照图21)。即，在位置B检测到下一监视对象的情况下，图像泛白，无法准确地读 取文字。相反，在对象通过位置B并调整为与位置B匹配的照相机参数后，在位置A检测到 对象的情况下，亮度没有达到合适范围，无法识别。图22是示出识别对象的亮度和识别率的关系的图。如图22所示，在亮度小、较暗 地进行摄影的情况下，无法区分对象和噪声，识别率低下。相反，当亮度过大时，由于亮度饱 和，对象泛白，所以无法识别，识别率还是低下。因此，在图像监视中，需要进行调整以使对象本身(或监视范围)的亮度为适合于 识别的规定值。例如，调整亮度以使对象的识别率始终为最大值1 _(将亮度调整为LJ。或 者，需要设定允许的识别率的最低值&，调整亮度以满足最低值&(将亮度调整为k Lh)。S卩，在监视范围的照度不均勻的情况下，控制曝光量以使对象亮度为适合于识别 的值，这是极其重要的课题。

发明内容
本发明是鉴于上述情况而完成的，其目的在于，提供如下的摄像装置、摄像方法以 及摄像程序即使在监视范围的照度不均勻的情况下，也能够控制照相机参数以使对象的 亮度为适合于识别的值。为了解决上述课题，达成目的，本发明的摄像装置检测物体并进行摄影，其特征在 于，该摄像装置具有检测单元，其检测所述物体；摄影单元，其拍摄检测到的所述物体的 图像；计算单元，其根据由所拍摄的所述物体的图像得到的位置和亮度，计算所述物体实际 存在的空间中的位置和照度；以及曝光量决定单元，其根据计算出的所述物体实际存在的 空间中的所述位置和所述照度，来决定摄影的曝光量。并且，本发明的特征在于，在上述发明中，该摄像装置具有存储单元，其预先存储 所述物体实际存在的空间的位置和照度；以及照度分布计算单元，其根据存储在所述存储 单元中的所述物体实际存在的空间中的规定位置的照度、以及由所述计算单元根据由所述 摄影单元拍摄的所述物体的图像的所述位置和所述亮度而计算出的所述物体实际存在的 空间中的规定位置的照度，计算监视范围整个区域中的照度分布，所述曝光量决定单元根 据计算出的所述照度分布来决定曝光量。 并且，本发明的特征在于，在上述发明中，所述存储单元存储的所述照度存储仅利 用照明光所测定的照度，所述照度分布计算单元根据存储在所述存储单元中的所述物体实 际存在的空间中的规定位置的仅利用照明光所测定的照度、以及由所述计算单元根据由所述摄影单元拍摄的所述物体的图像的所述位置和所述亮度而计算出的所述物体实际存在 的空间中的所述规定位置的照度，计算环境光照度，计算将所述环境光照度和仅利用所述 照明光所测定的照度都包含进去的监视范围整个区域中的照度分布。并且，本发明的特征在于，在上述发明中，在不能在监视范围整个区域中以合适的 明亮度进行摄影的情况下，所述曝光量决定单元根据所述物体实际存在的空间中的监视范 围内的各位置处的物体的出现概率、和所述图像中的每个亮度下的物体的识别率的期望 值，来决定曝光量，以使所述监视范围内的物体的整体的识别率的期望值最大。并且，本发明的特征在于，在上述发明中，所述曝光量决定单元决定曝光量，以使 在所述物体实际存在的空间的监视范围内的照度最高的位置检测到的画面中的物体的亮 度为规定的上限值。并且，本发明的特征在于，在上述发明中，所述曝光量决定单元决定曝光量，以使 在所述物体实际存在的空间的监视范围内的照度最低的位置检测到的物体的亮度为规定 的下限值。并且，本发明的摄像方法检测物体并进行摄影，其特征在于，该摄像方法具有以下 步骤检测所述物体的步骤；拍摄检测到的所述物体的图像的步骤；根据由所拍摄的所述 物体的图像得到的位置和亮度，计算所述物体实际存在的空间中的位置和照度的步骤；以 及根据计算出的所述物体实际存在的空间中的所述位置和所述照度，来决定摄影的曝光量 的步骤。并且，本发明的摄像程序的特征在于，该摄像程序使计算机执行以下步骤检测所 述物体的步骤；拍摄检测到的所述物体的图像的步骤；根据由所拍摄的所述物体的图像得 到的位置和亮度，计算所述物体实际存在的空间中的位置和照度的步骤；以及根据计算出 的所述物体实际存在的空间中的所述位置和所述照度，来决定摄影的曝光量的步骤。根据本发明，检测作为监视对象的物体并拍摄图像，针对所拍摄的物体执行识别 处理，根据亮度和位置来计算物体实际存在的空间中的位置和照度，根据计算出的位置和 照度来决定曝光量，所以，即使在监视范围的照度不均勻的情况下，也能够调整曝光量以使 对象的亮度成为适合于识别的值。并且，根据本发明，预先在存储装置中存储物体实际存在的空间的位置和照度，根 据存储在存储装置中的物体实际存在的空间中的规定位置的照度、以及由所拍摄的物体的 图像的位置和亮度而计算出的物体实际存在的空间中的规定位置的照度，计算监视范围整 个区域中的照度分布，根据照度分布来决定曝光量，所以，能够提高使用照度分布不均勻的 照明装置时的图像识别处理的精度。并且，根据本发明，在存储装置中存储仅利用照明光所测定的照度，根据存储在存 储装置中的物体实际存在的空间中的规定位置的仅利用照明光所测定的照度、以及根据所 拍摄的物体的图像的位置和亮度而计算出的物体实际存在的空间中的规定位置的照度，计 算环境光照度，计算将环境光照度和照明光照度都包含进去的监视范围整个区域中的照度 分布，所以，能够调整曝光量以使监视范围全体的亮度为适合于识别的值。并且，根据本发明，在不能在监视范围整个区域中以合适的明亮度进行摄影的情 况下，根据物体实际存在的空间中的监视范围内的各位置处的物体的出现概率、和所述图 像中的每个亮度下的物体的识别率的期望值，来决定曝光量，以使监视范围内的物体的全体的识别率的期望值最大，所以，能够将监视范围的物体的识别率的低下抑制为最小限度。并且，根据本发明，决定曝光量，以使在物体实际存在的空间的监视范围内的照度 最高的位置检测到的画面中的物体的亮度为规定的上限值，所以，即使在监视范围的照度 不均勻的情况下，也能够调整曝光量以使对象的亮度为适合于识别的值。并且，根据本发明，决定曝光量，以使在物体实际存在的空间的监视范围内的照度 最低的位置检测到的物体的亮度为规定的下限值，所以，即使在监视范围的照度不均勻的 情况下，也能够调整曝光量以使对象的亮度为适合于识别的值。


图1是示出监视范围的照度分布的一例的图。图2是示出基于监视范围全体的照度分布的目标值的一例的图。图3是示出基于图2的目标值的曝光量控制的图。图4是示出本实施例1的摄像装置的结构的功能框图。图5是用于说明本实施例1的亮度控制的图。图6是示出控制装置的结构的功能框图。图7是示出实际空间上的对象坐标、照相机图像的对象坐标、全局坐标上的对象 坐标的关系的图。图8是用于说明当前时刻的照度分布的图。图9是示出本实施例1的图像识别装置的处理步骤的流程图。图10是示出本实施例1的控制装置的处理步骤的流程图。图11是示出识别率的期望值和各照相机参数的位置P处的对象亮度的图。图12是用于说明摄像装置的其他应用例的图。图13是用于说明摄像装置的其他应用例的图。图14是示出构成实施例1的摄像装置的计算机的硬件结构的图。图15是示出现有的图像监视的例子的图。图16是示出通过现有的图像监视而检测到的对象的例子的图。图17是示出现有的亮度控制的例子的图。图18是示出使用搭载于车辆上的照相机来识别在对向车道上通行的车辆的例子 的图。图19是示出摄影范围和夜间的前灯的照射范围的图。图20是示出图19中的位置A、B的照度的差异的图。图21是示出现有的曝光控制的问题点的图。图22是示出识别对象的亮度和识别率的关系的图。标号说明10 计算机11、110 照明装置；12、120 视频摄影装置；13 输入装置；14 监视器； 15 :RAM ； 15a、20a 各种数据；16 :R0M ;17 介质读取装置；18 接口； 19 :CPU ；19a 图像识别 处理；19b 照相机参数计算处理；20 :HDD ；21 总线；20b 图像识别程序；20c 照相机参数 计算程序；100 摄像装置；130 图像识别装置；140 控制装置；141 坐标转换部；142 亮 度/照度转换部；143 照度分布存储部；144 照度检测部；145 照相机参数计算部；146
7控制信号输出部。
具体实施例方式下面，根据附图详细说明本发明的摄像装置、摄像方法以及摄像程序的实施例。另 外，本发明不受该实施例限定。实施例1首先，说明本实施例1的摄像装置的概要和特征。本实施例1的摄像装置根据监 视范围全体的照度分布来进行曝光量的调整(照相机参数的调整)。即，考虑实际空间(作 为监视对象的物体所存在的空间)上的每个位置的照度的差异，针对检测到物体的每个位 置，调整曝光量以使监视范围全体成为能够识别的亮度。图1是示出监视范围的照度分布的一例的图。如该图所示，监视范围的照度分布 由从天空等远方的光源向监视范围照射的环境光的光量和用于照射监视范围的照明光的 光量之和来决定，但是，环境光和照明光分别具有下述特征。S卩，环境光具有如下特征由于云的移动等大气状态，存在基于时间的变动，但是， 基于监视范围内的位置的照度差异小，监视范围内的照度分布均勻；照明光具有如下特征 根据监视范围内的各位置，所到达的光量不同，监视范围内的照度分布不均勻，但是，能够 忽略基于时间的变动。根据这些特征，如果知道照明光的照度分布和某个时刻的监视范围内的一点的照 度，则能够知道该时间点的监视范围全体的照度分布。而且，摄像装置能够根据监视范围全 体的照度分布，调整曝光量(照相机参数)，以便在监视范围全体内以适合于物体识别的亮 度来进行摄影(能够设定各位置的曝光量的目标值)。图2是示出基于监视范围全体的照度分布的目标值的一例的图。图3是示出基于 图2的目标值的曝光量控制的图。如图2所示，根据监视范围的照度分布，将距照明装置远 且较暗地进行摄影的A点处(参照图19)的亮度的目标值设定得较低，将距照明装置近且 较亮地进行摄影的B点(参照图19)的亮度的目标值设定得较高，由此，能够确保能够识别 监视范围全体的亮度。例如如图3那样，即使调整曝光量以便将与照明光量少的位置A对应的亮度设定 为目标值，由于与位置A对应的亮度的目标值被设定得较低，因此，与照明光量多的位置B 对应的亮度不会超出合适范围。接着，说明本实施例1的摄像装置的结构。图4是示出本实施例1的摄像装置的 结构的功能框图。如该图所示，该摄像装置100构成为具有照明装置110、视频摄影装置 120、图像识别装置130、控制装置140。其中，照明装置110是向监视范围照射照明光的装置。视频摄影装置120是根据 由控制装置140决定的照相机参数(照相机的光圈等)对监视范围的视频进行摄影的装 置，将所拍摄的视频作为视频信号输出到图像识别装置130。并且，在监视范围内检测到作 为监视对象的物体的情况下，视频摄影装置120在监视范围内，依据检测到的物体来控制 照相机方向，对对象的视频进行摄影。图像识别装置130是如下的装置从视频摄影装置120取得视频信号，根据所取得 的视频信号检测作为监视对象的物体(对象)，对检测到的物体进行详细的识别，计算物体
8在图像上的亮度(以下表记为对象亮度)，并且，检测物体在图像上的坐标(以下表记为对 象坐标)。图像识别装置130向控制装置140输出对象亮度和对象坐标的信息。控制装置140是如下的装置根据从图像识别装置130输出的对象亮度和对象坐 标的信息，计算物体在实际存在的空间中的位置和照度，根据计算出的位置和照度以及当 前的照相机参数来决定照相机参数。控制装置140将决定的照相机参数的信息作为控制信 号输出到视频摄影装置120。取得该控制信号的视频摄影装置120依据控制信号中包含的 照相机参数的信息，调整视频摄影装置120的照相机参数。另外，本实施例1的摄像装置100在实际空间的监视范围内的中央等处设置基准 点(设为0点)，根据对象的亮度、检测位置，并基于监视范围的照度分布，来估计0点处的 对象的亮度，调整曝光量(照相机参数)以使估计出的亮度为规定值。图5是用于说明本实施例1的亮度控制的图。如图5的左侧所示，在A点检测到对 象的情况下，根据A点的亮度来估计0点的亮度，如图5的右侧所示，调整为使0点的亮度 为规定值的曝光量。而且，通过该调整，在监视区域全体中都能够控制为能够识别的亮度， 不论接着检测通过监视范围的对象的位置为哪里(例如为B点)，都能够识别。下面，叙述具体的亮度控制方法。这里，为了简便，设利用照相机的光圈来进行亮 度控制。当假设摄影图像的亮度I与照度L和光圈量F的倒数成比例时，能够假设存在以 下关系。[数式1] LI = k— …⑴
F这里，设位置A的照明光的照度分布为已知。设时刻T的光圈量为F(T)，在位置A 检测到对象，其亮度为I (T，A)。该情况下，当设环境光的照度为Lk(T)时，根据式⑴，
^^ …⑵ F(T)
成立。另外，式(1)的k是比例常数。 并且，基准点o的亮度为 [数式3]
稱二 My^M …⑶
而且，0点的亮度为规定值k的光圈量F’ (T)满足 [数式4]
o Pff)
若整理式(2) (4)，则 [数式5] 根据在时刻T检测到的对象的亮度和位置以及照明光的照度分布，决定作为新的 照相机参数的光圈量(曝光量)。接着，说明决定上述照相机参数的控制装置140的结构。图6是示出控制装置140 的结构的功能框图。如该图所示，构成为具有坐标转换部141、亮度/照度转换部142、照 度分布存储部143、照度检测部144、照相机参数计算部145、控制信号输出部146。坐标转换部141是如下的处理部从图像识别装置130取得对象坐标(照相机坐 标上的对象坐标)，针对所取得的对象坐标执行坐标转换，将图像上的对象坐标(x，y)转换 为全局坐标(X，Y，Z)。下面，将转换为全局坐标系的对象坐标表记为转换对象坐标。图7是 示出实际空间上的对象坐标、照相机图像的对象坐标、全局坐标上的对象坐标的关系的图。 坐标转换部141向亮度/照度转换部142、照度检测部144输出转换对象坐标的信息。另外，坐标转换部141将对象坐标转换为全局坐标系的手法使用下述公知技术即 可。例如，在物体的实际大小已知的情况下，根据物体在画面中的大小、视场角和实际的物 体大小来计算物体的距离，根据检测坐标来确定物体的方向，由此，能够将对象坐标转换为 转换对象坐标。并且，坐标转换部141能够利用立体处理将对象坐标转换为转换对象坐标。即，能 够使用2台以上的视频摄影装置对物体进行摄影，根据图像空间中的物体的坐标的差异， 利用公知的立体技术，计算转换对象坐标。或者，坐标转换部141也可以利用激光器、雷达 等距离传感器来确定物体的实际位置，由此，可直接确定全局坐标上的对象坐标。亮度/照度转换部142是如下的处理部从图像识别装置130取得对象亮度，将所 取得的对象亮度转换为照度(以下表记为对象照度)。并且，亮度/照度转换部142从坐标 转换部141取得转换对象坐标，从对象照度中检索与所取得的转换对象坐标对应的坐标的 亮度，将检索到的对象照度的信息输出到照相机参数计算部145。这里，亮度/照度转换部142将亮度转换为照度的手法可以使用任意的手法，但 是，例如，亮度/照度转换部142预先在自身的存储部中保持当前的照相机参数(光圈量F) 的信息，利用式(1)的关系，将对象亮度转换为对象照度。照度分布存储部143是存储在下述的单一条件下预先观测到的照明装置110的照 度分布(各坐标处的照度)的信息的存储部。例如，在把摄像装置100设定于暗室中的状 态下，对照明装置110的照度分布进行计测，由此，能够计测各坐标(X，Y，Z)的照度，而不受 环境光的影响。另外，在无法把摄像装置100设置在暗室中的情况下，在环境光稳定的状态下，在 照明装置110接通时和断开时，对摄影范围的实际空间中的各坐标处的照度进行计测，取 得其差分，由此，能够计测各坐标(X，Y，Z)的照度。照度检测部144是如下的处理部从坐标转换部141取得转换对象坐标，从照度分 布存储部143中检索与所取得的转换对象坐标(全局坐标上的对象坐标)对应的坐标的照 度信息，将检索到的信息作为照明照度输出到照相机参数计算部145。照相机参数计算部145是如下的处理部根据当前的照相机参数、对象照度、照明 照度和存储在照度分布存储部143中的信息，来计算应该调整的照相机参数。具体而言，照相机参数计算部145依次执行差分计算处理、当前时刻的照度分布计算处理、照相机参数
计算处理。在差分计算处理中，照相机参数计算部145取得对象照度和照明照度的差分，计 算当前时刻的环境光的照度(以下称为环境光照度，照度的偏差)。接着，在当前时刻的照度分布计算处理中，照相机参数计算部145分别从照度分 布存储部143中检索与监视范围内所包含的各坐标对应的照度，提取检索到的与各坐标对 应的各照度作为照度分布(该照度分布不包含环境光)。然后，在该照度分布所包含的各坐 标的照度上加上照度的偏差，由此，能够计算当前时刻的照度分布(环境光的照度分布+照 明光的照度分布)。另外，监视范围内所包含的各坐标的信息只要预先存储在照相机参数计 算部145中即可。图8是用于说明当前时刻的照度分布的图。如该图所示，在当前时刻，如果能够确 定位置P处的对象照度L(P)，则从该L(P)中减去U(P)，由此，能够求出照度的偏差。这里， LJP)是照明装置的照度分布中的位置P的照度。然后，分别在照度分布k (X)的各坐标的 照度上加上该照度偏差，由此，能够计算当前时刻的照度分布。接着，在照相机参数计算处理中，照相机参数计算部145利用上述式(5)来求出照 相机参数(光圈量F’(T))。另外，式(5)的规定值k的值可以通过任意的方法来确定。例如，照相机参数计算部145根据当前时刻的照度分布(参照图8)，确定最大照 度和与最大照度对应的坐标，计算光圈量(照相机参数)以使该最大照度为规定的上限值。 例如，如果设上限值为、最大照度的坐标(基准点)为C，则通过[数式6]
_4]^U(C)^A)}+l(TtA)f(J)…㈤
Ic求出光圈量。并且，照相机参数计算部145根据当前时刻的照度分布(参照图8)，确定最小照 度和与最大照度对应的坐标，计算光圈量(照相机参数)以使该最小照度为规定的下限值。 例如，如果设下限值为ID、最小照度的坐标(基准点)为D，则通过[数式7]
Id求出光圈量。照相机参数计算部145向控制信号输出部146输出所计算出的照相 机参数的信息。控制信号输出部146是如下的处理部从照相机参数计算部145取得照相机参数 的信息，将所取得的照相机参数的信息作为控制信号输出到视频摄影装置120，更新视频摄 影装置120的照相机参数。接着，说明本实施例1的图像识别装置130的处理步骤。图9是示出本实施例1 的图像识别装置130的处理步骤的流程图。如该图所示，图像识别装置130从视频摄影装 置120取得视频信号(步骤S101)，决定要进行验证处理的图像(步骤S102)。然后，图像识别装置130从图像中识别对象(步骤S103)，计算对象亮度和对象坐
11标(步骤S 104)，将对象亮度和对象坐标输出到控制装置140 (步骤S105)。接着，说明本实施例1的控制装置140的处理步骤。图10是示出本实施例1的控 制装置140的处理步骤的流程图。如该图所示，控制装置140将对象位置的照相机坐标转 换为全局坐标(步骤S201)，检测与转换后的全局坐标对应的照明的照度(步骤S202)。接着，控制装置140取得各照度的差分，由此计算环境光照度(照度的偏差)(步 骤S203)，计算当前时刻的照度分布(步骤S204)，计算照相机参数(步骤S205)，输出所计 算出的照相机参数的信息(步骤S206)。这样，控制装置140根据物体实际存在的空间中的坐标和照度分布，计算影响摄 影的曝光量的照相机参数，所以，即使某个时刻的实际空间上的照度分布不均勻，也能够恰 当地调整视频摄影装置120的曝光量。如上所述，在本实施例1的摄像装置100中，图像识别装置130检测作为监视对 象的物体，对检测到的物体执行识别处理，计算对象亮度和对象坐标，控制装置140根据对 象亮度和对象坐标，计算物体实际存在的空间中的位置和照度，根据计算出的位置和照度 以及当前的照相机参数，来计算照相机参数，根据计算出的照相机参数，控制视频摄影装置 120的照相机参数来调整曝光量，所以，即使在监视范围的照度不均勻的情况下，也能够调 整曝光量以使对象亮度成为适合于识别的值。实施例2此前说明了本发明的实施例，但是，除了上述实施例1以外，本发明也可以以各种 不同的形式来实施。因此，下面，作为实施例2，说明本发明所包含的其他实施例。(1)在监视范围全体中难以以适合于识别的亮度进行摄影的情况在上述实施例1中，确定照相机参数，以使物体在某个基准位置的亮度为最适合 于识别的值，但是，有时监视范围广，难以在监视范围全体中以适合于识别的明亮度进行摄 影。该情况下，对于无法以适合于识别的亮度进行摄影的区域，可预想识别率低下，但 是，一般地，识别率低下的程度在亮度饱和侧和暗(亮度为规定值以下)侧不同。因此，为 了将识别率低下抑制为最小限度，如下所述设定亮度的目标值。图11是示出识别率的期望值和各照相机参数的位置P处的对象亮度的图。图11 的深浅表示在位置P为亮度L时的识别率的期望值R(P，L)。并且，图11的实线表示将照 相机参数(光圈量等)设定为CA Ce时的位置P处的对象亮度L(P :C)。由此，位置P处的识别率的期望值能够表示为R(P，L(P:C))。使用在位置P检测 到对象的概率T (P)，则全体中的识别率Re为[数式8]RE = / RC(P，L) T (P) dP…(8)这里，预先观测在位置P处亮度为L时的识别率R(P，L)和概率T(P)，存储在摄像 装置100的存储装置(省略图示)中。然后，根据由识别结果估计出的照度条件，求出针对 照相机参数c的位置P和亮度L之间的关系L(P :C)，能够决定结果Rc(P，L)。通过决SRC(P，L)，由此，全体的识别率为照相机参数C的函数RE(C)，所以，控制装 置140计算识别率Re最大的照相机参数C。控制装置140向视频摄影装置120输出控制信 号，以使照相机的参数成为计算出的照相机参数。另外，在能够忽略基于位置的对象的看清
12程度的差异的情况下，在监视范围全体中，即使不观测位置P和亮度L的关系，只要利用某 一点Po来观测针对亮度L的识别率即可。(2)其他应用例在上述实施例1中，例如如图18那样，以在行驶的车辆中设置摄像装置来进行对 向车辆的识别的情况为例进行了说明，但是不限于此。图12、图13是用于说明摄像装置的 其他应用例的图。如图12所示，在道路监视等中，将路灯作为照明，使用本实施例的摄像装置来识 别在道路上行驶的车辆，并且，使用上述手法来调整照相机参数，能够提高识别率。该情况 下，摄像装置预先观测路灯的照度分布并将其存储在存储装置中，使用存储在存储装置中 的照度分布的信息来计算照相机参数。并且，如图13所示，能够使用本实施例的摄像装置来识别在道路上移动的人物。 即使在从照明装置到各人物的距离大大不同、某个时刻的照度分布根据位置而不同的情况 下，通过利用本实施例的摄像装置，能够恰当地调整监视范围内的亮度，能够提高针对各人 物的验证率。(3)用于调整摄像装置的曝光量的其他例子在上述实施例1中，为了调整摄像装置(视频摄影装置120)的曝光量，叙述了控 制镜头的光圈的方法，但是不限于此，通过变更照相机的快门速度，或者变更在镜头上安装 的光量调整滤镜(ND滤镜等)的透射率，也能够调整摄像装置的曝光量。(4)关于式(1)的比例常数k在上述实施例中，作为一例，以各坐标中的亮度和照度为比例关系为前提进行了 说明，但是不限于此。即，预先针对各个坐标求出对对象物体进行摄影时的亮度和与该亮度 对应的照度，存储计算出各坐标处的亮度和照度之间的比例常数k的表，由此，即使在亮度 和照度不存在比例关系的情况下，也能够应用上述本方式。(5)系统的结构等但是，也可以手动进行在本实施例中说明的各处理中作为自动进行的处理而说明 的处理的全部或一部分，或者，也可以利用公知的方法自动进行作为手动进行的处理而说 明的处理的全部或一部分。除此之外，除了特别说明的情况以外，能够任意变更在上述记载 中和附图中示出的处理步骤、控制步骤、具体名称、包含各种数据和参数的信息。并且，图4所示的摄像装置100的各结构要素是功能概念上的要素，在物理上不一 定如图所示那样构成。即，各装置的分散/集中的具体形式不限于图示的形式，能够根据各 种负荷和使用状况等，以任意单位在功能上或物理上以分散/集中的方式来构成其全部或 一部分。进而，利用各装置进行的各处理功能的全部或任意一部分可以由CPU和由该CPU 解析执行的程序来实现，或者，能够作为基于布线逻辑的硬件来实现。图14是示出构成实施例1的摄像装置的计算机的硬件结构的图。如图14所 示，该计算机(摄像装置)10构成为，利用总线21来连接照明装置11、视频摄影装置12、 输入装置 13、监视器 14、RAM (Random AccessMemory) 15、ROM (Read Only Memory) 16、 从存储介质中读取数据的介质读取装置17、与其他装置之间进行数据收发的接口 18、 CPU (CentralProcessing Unit) 19、HDD (Hard Disk Drive) 20o 这里，照明装置 11、视频摄 影装置12对应于图14所示的照明装置110、视频摄影装置120。
而且，在HDD 20中存储有发挥与上述摄像装置100的功能相同的功能的图像识别 程序20b、照相机参数计算程序20c。CPU 19读出图像识别程序20b、照相机参数计算程序 20c并执行，由此起动图像识别处理19a、照相机参数计算处理19b。该图像识别处理19a对 应于上述图像识别装置130执行的处理，照相机参数计算程序19b对应于控制装置140执 行的处理。并且，HDD 20存储包含由输入装置13等取得的照明装置11的照度分布、环境光 的照度分布、对象亮度、对象坐标的信息等在内的各种数据20a。CPU 19读出存储在HDD 20 中的各种数据20a并将其存储在RAM15中，使用存储在RAM 15中的各种数据15a来计算照 相机参数，在视频摄影装置12中设定所计算出的照相机参数。但是，图14所示的图像识别程序20b、照相机参数计算程序20c不一定最初就存 储在HDD 20中。例如，也可以在插入计算机中的软盘(FD)、⑶-ROM、DVD盘、光磁盘、IC卡 等“移动用的物理介质”、或者在计算机内外所具有的硬盘驱动器(HDD)等“固定用的物理 介质”、以及经由公共线路、因特网、LAN、WAN等与计算机连接的“其他计算机(或服务器)” 等中存储图像识别程序20b、照相机参数计算程序20c，计算机从中读出图像识别程序20b、 照相机参数计算程序20c并执行。产业上的可利用性如上所述，本发明的摄像装置、摄像方法以及摄像程序在调整照相机参数来进行 监视范围的对象物的识别的系统等中是有用的，特别适用于如下情况在某个时刻的照度 不均勻的情况下，与监视范围内所包含的对象物的位置无关，需要提高识别率。
1权利要求
一种摄像装置，该摄像装置检测物体并进行摄影，其特征在于，该摄像装置具有检测单元，其检测所述物体；摄影单元，其拍摄检测到的所述物体的图像；计算单元，其根据由所拍摄的所述物体的图像得到的位置和亮度，计算所述物体实际存在的空间中的位置和照度；以及曝光量决定单元，其根据计算出的所述物体实际存在的空间中的所述位置和所述照度，来决定摄像的曝光量。
2.根据权利要求1所述的摄像装置，其特征在于， 该摄像装置具有存储单元，其预先存储所述物体实际存在的空间的位置和照度；以及 照度分布计算单元，其根据存储在所述存储单元中的所述物体实际存在的空间中的规 定位置的照度、以及由所述计算单元根据由所述摄影单元拍摄的所述物体的图像的所述位 置和所述亮度而计算出的所述物体实际存在的空间中的规定位置的照度，计算监视范围整 个区域中的照度分布，所述曝光量决定单元根据计算出的所述照度分布来决定曝光量。
3.根据权利要求2所述的摄像装置，其特征在于，所述存储单元存储的所述照度存储仅利用照明光所测定的照度， 所述照度分布计算单元根据存储在所述存储单元中的所述物体实际存在的空间中的 规定位置的仅利用照明光所测定的照度、以及由所述计算单元根据由所述摄影单元拍摄的 所述物体的图像的所述位置和所述亮度而计算出的所述物体实际存在的空间中的所述规 定位置的照度，计算环境光照度，计算将所述环境光照度和仅利用所述照明光所测定的照 度都包含进去的监视范围整个区域中的照度分布。
4.根据权利要求3所述的摄像装置，其特征在于，在不能在监视范围整个区域中以合适的明亮度进行摄影的情况下，所述曝光量决定单 元根据所述物体实际存在的空间中的监视范围内的各位置处的物体的出现概率、和所述图 像中的每个亮度下的物体的识别率的期望值，来决定曝光量，以使所述监视范围内的物体 的整体的识别率的期望值最大。
5.根据权利要求3所述的摄像装置，其特征在于，所述曝光量决定单元决定曝光量，以使在所述物体实际存在的空间的监视范围内的照 度最高的位置检测到的画面中的物体的亮度为规定的上限值。
6.根据权利要求3所述的摄像装置，其特征在于，所述曝光量决定单元决定曝光量，以使在所述物体实际存在的空间的监视范围内的照 度最低的位置检测到的物体的亮度为规定的下限值。
7.根据权利要求3 6中的任一项所述的摄像装置，其特征在于， 所述曝光量决定单元利用镜头的光圈来决定曝光量。
8.根据权利要求3 6中的任一项所述的摄像装置，其特征在于， 所述曝光量决定单元通过快门速度来决定曝光量。
9.根据权利要求3 6中的任一项所述的摄像装置，其特征在于， 所述曝光量决定单元通过调光滤镜来决定曝光量。
10.一种摄像方法，该摄像方法检测物体并进行摄影，其特征在于，该摄像方法具有以 下步骤检测所述物体的步骤； 拍摄检测到的所述物体的图像的步骤；根据由所拍摄的所述物体的图像得到的位置和亮度，计算所述物体实际存在的空间中 的位置和照度的步骤；以及根据计算出的所述物体实际存在的空间中的所述位置和所述照度，来决定摄像的曝光 量的步骤。
11.一种摄像程序，其特征在于，该摄像程序使计算机执行以下步骤 检测所述物体的步骤；拍摄检测到的所述物体的图像的步骤；根据由所拍摄的所述物体的图像得到的位置和亮度，计算所述物体实际存在的空间中 的位置和照度的步骤；以及根据计算出的所述物体实际存在的空间中的所述位置和所述照度，来决定摄像的曝光 量的步骤。
全文摘要
在摄像装置(100)中，图像识别装置(130)检测作为监视对象的物体，对检测到的物体执行识别处理，计算对象亮度和对象坐标，控制装置(140)根据对象亮度和对象坐标，计算物体实际存在的空间中的位置和照度，根据计算出的位置和照度以及当前的照相机参数，来计算照相机参数，根据计算出的照相机参数，控制视频摄影装置(120)的照相机参数来调整曝光量。
文档编号H04N5/225GK101868967SQ20078010159
公开日2010年10月20日 申请日期2007年11月19日 优先权日2007年11月19日
发明者末延望, 瀬川英吾 申请人:富士通株式会社