一种可辨监控对象的汽车四周监控装置制造方法
【专利摘要】本发明提供一种可辨监控对象的汽车四周监控装置，采用汽车四周监控装置(1)时，例如，可根据显示在HUD(7)上的汽车四周的图像中的表示存在被监控对象的显示方式的不同，使汽车(10)上的乘员通过目视方法既能觉察到存在被监控对象又能知晓其种类。可根据显示在HUD(7)上的第一标记(M1)和第二标记(M2)的设计方式的不同，或者根据第一框(F1)和第二框(F2)的设计方式的不同，使车辆(10)上的乘员知晓被监控对象是人或四肢动物的其中之一。
【专利说明】—种可辨监控对象的汽车四周监控装置
【技术领域】
[0001]本发明涉及一种可辨监控对象的汽车四周监控装置，所述汽车四周监控装置利用搭载在该汽车上的摄像装置拍到的图像，当车辆触碰被监控对象的可能性较大时，由告知装置向该汽车上的乘员告知存在该被监控对象。
【背景技术】
[0002]在现有技术中，有人提出如下一种车辆周围监测装置，S卩，由其根据存在于车辆周围的动物等被监测对象的在不同时刻的位置数据，求出该被监测对象在实际空间中的移动向量，然后再根据该移动向量判定车辆触碰被监测对象的可能性的大小，若判定为产生触碰的可能性较大时，则将该判定结果告知驾驶员(参照日本发明专利公开公报特开2001-006096 号)。
[0003]但是，如果被监控对象是行人或骑自行车的人、或者是鹿或狗等四肢动物时，对汽车驾驶员而言，尽管有用的信息是知晓该被监控对象的种类，但只是被告知判定结果时，驾驶员无法知晓被监控对象的种类。
【发明内容】
[0004]对此，本发明的目的在于提供如下一种可辨监控对象的汽车四周监控装置，S卩，在由该汽车四周监控装置告知汽车上的乘员存在被监控对象时，可使该乘员知晓该被监控对象的种类。
[0005]为了实现上述目的，本发明所述的汽车四周监控装置为，所述汽车四周监控装置利用搭载在该汽车上的摄像装置拍到的图像，当汽车触碰被监控对象的可能性较大时，由告知装置向该汽车上的乘员告知存在该被监控对象。该汽车四周监控装置具有:被监控对象抽取机构，其用来从上述拍到的图像中，将相当于上述被监控对象的图像区域作为被监控对象区域而抽出；被监控对象种类判定机构，其根据由上述被监控对象抽取机构抽出的上述被监控对象区域的形状和大小来判定上述被监控对象是人还是四肢动物；告知控制机构，其根据由上述被监控对象种类判定机构判定的上述被监控对象的种类的不同，以不同方式由上述告知装置告知存在上述被监控对象。
[0006]本发明所述的汽车四周监控装置还具有距离测定机构，由其测定上述汽车和上述被监控对象之间的距离。由上述被监控对象种类判定机构以上述距离测定机构测得的上述距离在基准距离以下为条件来进行上述被监控对象的种类的判定，当判定为上述被监控对象是人时，通过上述告知控制机构进行第一告知处理，并由上述告知装置告知存在上述被监控对象。当判定为上述被监控对象是四肢动物时，通过上述告知控制机构进行不同于第一告知处理的第二告知处理，并由上述告知装置告知存在上述被监控对象。若是上述距离比基准距离长时，上述被监控对象种类判定机构不对上述被监控对象的种类进行判定，而通过上述告知控制机构进行不同于上述第一告知处理和上述第二告知处理的第三告知处理，并由上述告知装置告知存在上述被监控对象。
[0007]在采用本发明所述的汽车四周监控装置时，可根据表示存在被监控对象的告知方式的不同，使汽车上的乘员既能觉察到存在被监控对象又能知晓其种类。另外，所谓的“拍到的图像”，除了所拍到的原始图像外，还包括对该原始图像进行图像处理而得到的加工图像。另外，鉴于被监控对象离汽车越远该被监控对象种类的判定精度越低的情况，所以只在该判定精度处于一定高度的状态时，根据被监控对象的种类的不同而以不同方式告知汽车驾驶员存在该被监控对象。因此可避免出现以下情况，即，因汽车四周监控装置对被监控对象的种类的错误判定，以错误的方式告知汽车驾驶员存在该被监控对象。还有，可根据表示存在被监控对象的告知方式的不同，使得汽车上的乘员不仅能觉察到存在被监控对象又能知晓其种类，而且还能够了解到汽车和该被监控对象之间的距离的长短。
[0008]本发明所述的汽车四周监控装置还具有车速测定机构，由其测定上述汽车的速度。也可以由上述告知控制机构根据由上述被监控对象种类判定机构判定的上述被监控对象的种类的不同，再据由上述车速测定机构测得的上述汽车的速度的快慢，以不同方式由上述告知装置告知存在上述被监控对象。
[0009]采用本发明所述的汽车四周监控装置时，可根据表示存在被监控对象的告知方式的不同，使得汽车上的乘员不仅能觉察到存在被监控对象又能知晓其种类，而且还能够知晓汽车的速度的快慢。
[0010]本发明所述的汽车四周监控装置还具有图像显示装置，作为上述告知装置，由其显示上述汽车周围的图像。可以根据由上述被监控对象种类判定机构判定的上述被监控对象的种类的不同，在上述图像显示装置上以不同方式表示存在上述被监控对象。
[0011]采用本发明所述的汽车四周监控装置时，可根据汽车四周的图像中的表示存在被监控对象的显示方式的不同，使得汽车上的乘员通过目视的方法既能觉察到存在被监控对象又能知晓其种类。
[0012]上述汽车四周监控装置还具有发声装置，作为上述告知装置，其可发出表示存在上述被监控对象的声音。可以根据由上述被监控对象种类判定机构判定的上述被监控对象的种类的不同，通过上述发声装置发出不同方式的声音以表示存在上述被监控对象。
[0013]在用本发明所述的汽车四周监控装置时，可根据表示存在被监控对象的发声方式的不同，使得汽车上的乘员通过听觉既能觉察到存在被监控对象又能知晓其种类。
【专利附图】
【附图说明】
[0014]图1是说明本发明中汽车四周监控装置的结构图。
[0015]图2是说明搭载有汽车四周监控装置的车辆的示意图。
[0016]图3是表示汽车四周监控装置的功能的流程图。
[0017]图4是说明不同告知处理的示意图。
【具体实施方式】
[0018]下面说明本发明所述的一种可辨监控对象的汽车四周监控装置的实施方式。
[0019]首先说明本实施方式中汽车四周监控装置的结构。如图1和图2所示，汽车四周监控装置具有图像处理单元I。图像处理单元I既与用来拍摄汽车前方情况的左右一对红外线摄像头(相当于本发明的“摄像装置”)2R、2L连接，又与以下各传感器连接，即，偏航角速度传感器3，作为测出汽车10的行驶状态的传感器其用来测出汽车10的横向角速度；车速传感器4，其用来测出汽车10的行驶速度(车速)；制动传感器5，其用来测出汽车10的驾驶员是否操作了制动器。
[0020]另外，图像处理单元I还与以下各装置连接，即，扬声器6(相当于本发明的“发声装置”)，其用来发出靠声音等传递的、可通过听觉感知到的告知信息；HUD(平视显示装置，相当于本发明的“图像显示装置”)7，其设置在前挡风玻璃附近、用来显示由红外线摄像头2R、2L拍到的图像以及可通过目视来确认的告知信息。
[0021]另外，当用雷达测定车辆与被监控对象之间的距离时，还可以在车辆10上只搭载一个红外线摄像头。也可以用显示汽车10的车速等行驶状态的显示屏或具有车载导航装置的显示屏作为图像显示装置，以代替HUD或着与该HUD并行设置。
[0022]图像处理单元I由E⑶(电子控制单元)构成，所述E⑶由A/D变换回路、CPU、RAM、ROM等存储器和I/O回路以及用来连接它们的总线构成。由图像处理单元I (详细地讲，是存储器或根据存储在存储装置中的程序进行计算处理的CPU)构成本发明的“被监控对象抽取机构”、“被监控对象种类判定机构”和“告知控制机构”。
[0023]由红外线摄像头2R和2L、偏航角速度传感器3、车速传感器4以及制动传感器5输出的模拟信号经A/D变换回路得以数字化处理，根据被CPU数字化处理的数据测出是人(行人、骑自行车的人或乘坐在摩托车上的乘员)或者是四肢动物(鹿、马或狗等)等被监控对象，当被测出的被监控对象满足规定的告知条件时，通过扬声器6或HUD7告知驾驶员存在被监控对象或告知汽车10触碰被监控对象的可能性的大小。
[0024]如图2所示，用来拍摄汽车10的前方情况的红外线摄像头2R、2L安装在汽车10的前部(图中为前格栅部分)。右侧的红外线摄像头2R设置在比汽车10的车宽方向的中心靠右的位置，左侧的红外线摄像头2L设置在比汽车10的车宽方向的中心靠左的位置，所述两个设置位置相对于车宽方向的中心呈左右对称状态。红外线摄像头2R、2L的光轴互相平行且沿汽车10的前后方向延伸，而且所述光轴距离路面的高度相等，它们以此方式固定在汽车10上。红外线摄像头2R、2L对远红外线波长区域的光线具有感光性，因此它们具有如下特性，即，被拍摄的物体的温度越高，其输出的图像信号的强度越高(即，图像信号的灰度越大)。
[0025]接着说明具有上述结构的汽车四周监控装置的功能。另外，由于图像处理的详细情况已经被日本发明专利公开公报特开2001-006096和特开2007-310705公开，所以在此只对其进行简述。
[0026]首先，由红外线摄像头2R、2L拍到的红外线图像信号输入图像处理单元1，所述红外线图像信号被A/D变换处理，根据经A/D变换处理的红外线图像信号生成灰度图像。被当作基准图像的灰度图像(右侧图像)被二值图像处理。之后将二值图像中与被监控对象对应的区域作为被监控对象区域S而抽出(图3中的STEP002)。
[0027]具体地讲，将二值图像中构成灰度较高区域的像素行数据变换为游程编码数据，并且在基准图像中在纵向方向上具有重叠部分的线上标注标签(标记)，各线作为被监控对象区域S而被抽出。由此，像图4中(a)?(C)中所示的、由灰度较高的像素(像素值=I的像素)集中而构成的灰度较高的区域被作为被监控对象区域S而抽出。
[0028]接下来，求出对应于各被监控对象的重心位置(在基准图像中的位置)、面积和外接四边形的长宽比比值。另外，在不同的时刻对被监控对象进行追踪处理，再对每个运算处理周期监控到的被监控对象是否是同一被监控对象进行判定处理。还有，读取车速传感器4以及偏航角速度传感器5的输出值(车速测出值和横向角速度测出值)。
[0029]另外，在计算外接四边形的长宽比比值和在不同的时刻对被监控对象进行追踪处理的同时，从基准图像中，将对应于各被监控对象的区域(例如，与被监控对象对应的外接四边形区域)作为搜索图像而抽出。再通过相关度运算就能从左侧图像中搜索到与搜索图像对应的图像(对应图像)并将其抽出。
[0030]另外，求出车辆10到被监控对象的在实际空间中的距离(车辆10在前后方向上的距离)z (图3中的STEP004)。另外，求出各被监控对象在实际空间位置(与汽车10的相对位置)。还有，根据横向角速度的时序数据修正被监控对象的实际空间位置(X、Y、Ζ)(参照图2)中的X坐标。另外，求出被监控对象与汽车10的相对移动向量(图3中的STEP006)。
[0031]还有，判定汽车10与被监控对象之间产生触碰的可能性的大小(图3中的STEP008)。另外，由于其判定方法已经被日本发明专利公开公报特开2001-006096和特开2007-310705详细地公开过，所以在此只对其进行简述。
[0032]首先，判定实际空间中的距离ζ是否在相对速度Vs和预留时间T乘积数值以下。另外，当判定为实际空间中的距离ζ在该数值以下时判定被监控对象是否在接近判定区域内(第一触碰判定处理)。
[0033]接近判定区域在汽车10的前方的左右方向对称延伸，其宽度为车辆10的宽度加上偏离值之后的数值。当第一触碰判定处理的判定结果为是时，判定为被监控对象触碰汽车10的可能性较大。
[0034]当第一触碰判定处理的判定结果为否时，进一步判定被监控对象是否在接近判定区域外侧的进入判定区域，且被监控对象的相对移动向量是否朝向接近判定区域(第二触碰判定处理)。当第二触碰判定处理的判定结果为是时判定为被监控对象触碰汽车10的可能性较大。
[0035]当判定为汽车10触碰被监控对象的可能性较大(第一或者第二触碰判定处理的判定结果为是时)(图3中的STEP008..是时)时，进一步判定被监控对象是否是人工建筑物等其存在对发出告知信息的必要性较低的物体(图3中的STEP010)，如果测得的被监控对象为具有不属于行人或四肢动物的外形特征的被监控对象时，判定为该被监控对象为人工建筑物。
[0036]当判定为汽车10触碰被监控对象的可能性较小时(第一或第二触碰判定处理的判定结果为否时)(图3中的STEP008 --否时)时，或判定为被监控对象不是告知对象(图3中的STEP010.?否时)时，不进行后叙的告知处理而反复进行抽出被监控对象区域S之后的处理(参照图3中的STEP002等)。
[0037]当判定为被监控对象不是人工建筑物等物体时(图3中的STEP010.?是时)再判定被监控对象在实际空间中的距离ζ是否在阈值zth以下(图3中的STEP012)。阈值zth是考虑被监控对象的种类的判定精度而设定的。当判定为被监控对象在实际空间中的距离ζ在阈值zth以下(图3中的STEP012.?是时)时，再判定该被监控对象是否是行人或乘坐在自行车上的乘员(图3中的STEPO14)。
[0038]另外，当判定为被监控对象不是人(图3中的STEP014.?否时)时再判定该被监控对象是否是鹿、马或狗等四肢动物(图3中的STEP016)。具体地讲，根据灰度图像中的监控对象区域S的形状或大小、或灰度分布等特征量判定被监控对象是人还是四肢动物。
[0039]接下来，当判定为被监控对象是人(图3中的STEP014.?是时)时进行“第一告知处理”(图3中的STEP022)。从而可由扬声器6连续发出三个“噼、噼、噼”的较短的声音。另外，如图4中(a)所不,在HUD7上显不包围被监控对象的矩形第一框Fl和表不被监控对象是人的第一标记Ml。
[0040]另外，当判定为被监控对象是四肢动物(图3中的STEP016.?是时)时进行“第二告知处理”(图3中的STEP024)。从而可由扬声器6连续发出两个“噼、噼”的较短的声音。另外，如图4中(b)所示，在HUD7上显示包围被监控对象的八角形第二框F2和表示被监控对象是四肢动物的第二标记M2。
[0041]还有，当判定为被监控对象在实际空间中的距离ζ超过阈值zth (图3中的STEPO12.?否时)时进行“第三告知处理”(图3中的STEP026)。从而可由扬声器6发出一个“噼”的较短的声音。另外，如图4中(c)所示，在HUD7上显示包围被监控对象的圆形第三框F3以及表示被监控对象是触碰汽车10的可能性较大的人或四肢动物等物体的第三标记M3。
[0042]第一框Fl?第三框F3的设计方式(包括其形状、色彩或样式，或是它们的组合)均不同。第一标记Ml?第三标记M3的设计方式也都不同。各告知处理中发出的声音也不同。另外，也可在各告知处理中只显示标记或框的其中之一，或者是不同时显示画面和发出声音，而是要么只显示画面、要么只发出声音。
[0043]采用具有上述功能的汽车四周监控装置时，可以根据表示存在被监控对象的告知方式的不同，使汽车10上的乘员不仅能觉察到存在被监控对象又能知晓其种类(参照图3中的STEP022、STEP024)。即，可根据表示存在被监控对象的通过扬声器6的发声方式的不同，使得汽车上的乘员通过听觉既能觉察到存在被监控对象又能知晓其种类。
[0044]例如，可根据通过扬声器6的发声方式的不同，使得汽车10上的乘员知晓被监控对象是人或四肢动物的其中之一。可根据显示在HUD7上的汽车四周的图像中表示存在被监控对象的显示方式的不同，使得汽车10上的乘员通过目视的方法既能觉察到存在被监控对象又能知晓其种类。例如，可根据显示在HUD7上的第一标记Ml和第二标记M2的设计方式的不同，或根据第一框Fl和第二框F2的设计方式的不同，使汽车10上的乘员知晓被监控对象是人或四肢动物的其中之一(参照图4中(a)、(b))。
[0045]还有，鉴于被监控对象离汽车10越远该被监控对象种类的判定精度越低的情况，所以只在该判定精度处于一定高度的状态，即、被监控对象在实际空间中的距离ζ在阈值zth以下时，根据被监控对象的种类的不同，以不同方式告知车辆10的驾驶员存在该被监控对象(参照图4中的STEP012、图4中(a)?(C))。
[0046]由此可避免出现以下情况，S卩，根据汽车四周监控装置I对被监控对象的种类的错误判定，以错误方式告知车辆驾驶员存在该被监控对象。但是，即使被监控对象在实际空间中的距离ζ超过阈值zth时，也会告知存在该被监控对象(参照图4中的STEro26、图4中(c))，所以此时也能提醒驾驶员存在该被监控对象。
[0047]另外，根据被监控对象的种类的不同，再根据实际空间中的距离ζ的长短，以不同方式告知驾驶员存在被监控对象。即使被监控对象在实际空间中的距离ζ超过阈值zth，也可判定该被监控对象的种类。
[0048]也可以用比阈值zth小的第二阈值代替该阈值zth，再根据实际空间中的距离ζ是否在该第二阈值以下的对比结果来判定从汽车10到被监控对象的距离的长短。例如，当判定为被监控对象是人(参照图3中的STEP014)，该被监控对象在实际空间中的距离Z较短时，或是该被监控对象在实际空间中的距离ζ较长时，也可以将设计方式不同的标记分别显示在HUD7上。采用具有上述结构的汽车四周监控装置时，可以根据表示存在被监控对象的告知方式的不同，使驾驶员不仅能觉察到存在被监控对象又能知晓其种类，而且还能了解到车辆10和该被监控对象之间的距离的长短。
[0049]另外，也可以用拍到的图像中的与被监控对象对应的部分的大小代替到被监控对象的距离，并且以该部分大小超过规定阈值为条件，根据被检测对象种类的不同，以不同方式向驾驶员告知存在该被监控对象。
[0050]还有，也可根据被监控对象的种类的不同，再根据由车速传感器的输出信号测得的汽车10的速度的快慢，以不同方式向驾驶员告知存在上述被监控对象。采用具有上述结构的汽车四周监控装置时，可根据表示存在被监控对象的告知方式的不同，使驾驶员不仅能觉察到存在该被监控对象又能知晓其种类，而且还能知晓汽车10的速度的快慢。
【权利要求】
1.一种可辨监控对象的汽车四周监控装置，所述汽车四周监控装置利用搭载在该汽车上的摄像装置拍到的图像，当车辆触碰被监控对象的可能性较大时，经告知装置向该车辆上的乘员告知存在所述被监控对象，其特征在于，所述汽车四周监控装置具有:被监控对象抽取机构，由其从所述拍到的图像中将相当于所述被监控对象的图像区域作为被监控对象区域而抽出；被监控对象种类判定机构，其根据经由所述被监控对象抽取机构抽出的所述被监控对象区域的形状和大小判定所述被监控对象是人还是四肢动物；告知控制机构，其根据经由所述被监控对象种类判定机构判定的所述被监控对象的种类的不同，以不同方式由所述告知装置告知存在所述被监控对象；距离测定机构，由其测定所述汽车和所述被监控对象之间的距离，由所述被监控对象种类判定机构以所述距离测定机构测得的所述距离在基准距离以下为条件来进行所述被监控对象的种类的判定，当判定为所述被监控对象是人时，通过所述告知控制机构进行第一告知处理，并由所述告知装置告知存在所述被监控对象；当判定为所述被监控对象是四肢动物时，通过所述告知控制机构进行不同于第一告知处理的第二告知处理，并由所述告知装置告知存在所述被监控对象，当所述距离比基准距离长时，所述被监控对象种类判定机构不对所述被监控对象的种类进行判定，而通过所述告知控制机构进行不同于所述第一告知处理和所述第二告知处理的第三告知处理，并由所述告知装置告知存在所述被监控对象。
2.根据权利要求1所述的一种可辨监控对象的汽车四周监控装置，其特征在于，还具有车速测定机构，由其测定所述汽车的速度，由所述告知控制机构根据由所述被监控对象种类判定机构判定的所述被监控对象的种类的不同，再根据由所述车速测定机构测得的所述汽车的速度的快慢，以不同方式由所述告知装置告知存在所述被监控对象。
3.根据权利要求1所述的一种可辨监控对象的汽车四周监控装置，其特征在于，还具有图像显示装置，作为所述告知装置，由其显示所述汽车四周的图像，并根据由所述被监控对象种类判定机构判定的所述被监控对象的种类的不同，在所述图像显示装置上以不同方式表示存在所述被监控对象。
4.根据权利要求1所述的一种可辨监控对象的汽车四周监控装置，其特征在于，还具有发声装置，作为所述告知装置，由其发出表示存在所述被监控对象的声音，根据由所述被监控对象种类判定机构判定的所述被监控对象的种类的不同，由所述发声装置发出不同方式的声音以表不存在所述被监控对象。
【文档编号】B60R1/00GK104192065SQ201410409755
【公开日】2014年12月10日 申请日期:2014年8月20日 优先权日:2014年8月20日
【发明者】刘健萍 申请人:刘健萍