本发明涉及车辆的显示系统及车辆的显示系统的控制方法。
背景技术:
以往,例如在下述专利文献1中记载有在死角检测到人体时,向驾驶员发出警告音的驾驶车辆周边监视装置。
现有技术文献
专利文献
专利文献1:日本特开2001-18717号公报
技术实现要素:
技术问题
有时在车外通行的人等认为车辆的驾驶员掌握了自己的位置。在这样的情况下,有时车外的人以车辆会停止为前提而靠近车辆想要通行。
然而,在车外的人进入了驾驶员的死角的情况下,驾驶员无法掌握那个人的位置,因此存在人与车辆的距离变近,人与车辆发生接触的可能性。
另一方面,专利文献1所记载的技术仅假定向驾驶员进行警告的情况,车外的人难以认识到自己进入了驾驶员的死角这一情况。
因此,本发明是鉴于上述问题而完成的,本发明的目的在于提供一种能够向进入了驾驶员的死角的人进行警告显示的新的且经过改进的车辆的显示系统及车辆的显示系统的控制方法。
技术方案
为了解决上述课题,根据本发明的一个观点,提供一种车辆的显示系统,具备:显示装置,设置于车辆;判定部,判定是否有存在于车外的人物进入了所述车辆的驾驶员的死角;以及显示控制部,在有所述人物进入了所述死角的情况下,控制所述显示装置以向所述人物显示警告。
可选地,在有所述人物进入了所述死角的情况下,所述显示控制部控制所述显示装置以向所述人物通知进入了所述死角这一情况。
此外,可选地,在有所述人物进入了所述死角的情况下,所述显示控制部控制所述显示装置以向所述驾驶员显示警告。
此外,可选地,所述车辆的显示系统具备倒车判定部,该倒车判定部判定所述车辆倒车这一情况,在所述车辆倒车的情况下,所述显示控制部控制所述显示装置以在所述车辆的后窗部进行显示。
此外,可选地,所述显示控制部控制所述显示装置以在所述后窗部显示倒车引导或所述人物正在接近这一情况。
此外,为了解决上述课题,根据本发明的另一观点,提供一种车辆的显示系统的控制方法,所述车辆的显示系统具有设置于车辆的显示装置,所述控制方法包括:判定是否有存在于车外的人物进入了所述车辆的驾驶员的死角的步骤;以及在有所述人物进入了所述死角的情况下,控制所述显示装置以向所述人物显示警告的步骤。
技术效果
根据本发明,能够向进入了驾驶员的死角的人进行警告显示。
附图说明
图1是示出本发明的一个实施方式的车辆的显示系统的构成的示意图。
图2是示出使用了自发光中间膜的hud装置的示意图。
图3是示出驾驶员传感器正在拍摄驾驶员的状态的示意图。
图4是示出成为驾驶员的死角的区域的示意图。
图5是示出hud装置的显示例的示意图。
图6是示出hud装置的显示例的示意图。
图7是示出hud装置的显示例的示意图。
图8是示出在车辆的显示系统中进行的处理的流程图。
符号说明
407:环境状态判定部
410:挡位判定部
414:hud控制部
500:hud装置
具体实施方式
以下,参照附图对本发明的优选实施方式进行详细说明。应予说明,在本说明书和附图中,对于实质上具有相同的功能结构的构成要素,标记相同的符号,由此省略重复说明。
图1是示出本发明的一个实施方式的车辆的显示系统1000的构成的示意图。车辆的显示系统1000基本上是构成于汽车等车辆的系统。如图1所示,车辆的显示系统1000构成为具有车外传感器100、驾驶员传感器200、就座传感器300、控制装置400、hud装置500、扬声器600、座位振动部610、挡位传感器620、和转向角传感器630。
车外传感器100由立体相机、单目相机、毫米波雷达、红外传感器等构成,测定本车周边的人和/或车辆等的位置、速度。在车外传感器100由立体相机构成的情况下,立体相机由具有ccd传感器、cmos传感器等摄像元件的左右一对相机构成,拍摄车外的外部环境,并将拍摄得到的图像信息发送给控制装置400。作为一例,立体相机由能够获取颜色信息的彩色相机构成,并设置于车辆的前窗部的上部。
hud(head-updisplay:平视显示器)装置500是直接将信息映到人的视野的显示装置,将实像显示在汽车的前窗部和/或后窗部等窗部。通常已知hud为显示虚像的装置,但在本实施方式中,使用映出实像的显示装置。由于hud装置500显示实像,所以视角大致为360°,能够从车内外对显示进行视觉确认。在另一实施方式中,hud装置500也可以显示虚像。
作为hud装置500,更具体地,可以采用使用图2所示的自发光中间膜510的装置。在此情况下,在车辆的前窗部、后窗部等,以用表面背面的两块玻璃520夹住的方式配置自发光中间膜510。自发光中间膜510中含有发光材料,如果从设置于车内的投影仪530照射激光,则被照射的部分发光而显示文字和/或图像。显示对象具有从所有角度的可见性,也能够从驾驶座以外的座位和/或车辆外部视觉确认。应予说明,hud装置500也可以通过将自发光式的装置配置于车辆的窗部而构成。在此情况下,例如还可以采用使用了有机el元件的透明屏幕或透射型液晶装置等。此外,作为显示装置,可以使用hud装置500以外的装置,也可以使用设置在例如仪表板的大型液晶装置和/或led显示装置等。应予说明,以下,以在车辆的窗部(玻璃)进行显示的hud装置500作为显示装置为例进行说明,但本发明的显示装置并不限于此,包括设置在车辆的内部或外部的显示装置的全部方式。例如,本实施方式的显示装置可以设置在车辆外部的窗部以外(车体等),也可以设置在车辆内部的窗部以外(仪表板、座位等)。此外,设置在车辆内部的显示装置与设置在车辆外部的显示装置可以是一体的,也可以是分体的。
驾驶员传感器200由相机、视线传感器、运动传感器等构成,测定驾驶员(驾驶者)的头部和/或手臂的运动、视线方向等。在驾驶员传感器200由相机构成的情况下,通过对相机拍摄得到的图像进行图像处理,来获取头部和/或手臂的运动、视线方向等。在驾驶员传感器200由视线传感器构成的情况下,通过角膜反射法等方法进行视线检测。就座传感器300设置于车辆内的各座位,判定是否有人坐在座位上。扬声器600在通过hud装置500向车辆的内外进行警告显示时,向车辆的内外发出警告音。座位振动部610设置于车辆的座位,在通过hud装置500向车辆内进行警告显示时,通过使座位振动来向驾驶员、同乘人员进行警告。
控制装置400基于车外传感器100、驾驶员传感器200等检测到的信息,来控制由hud装置500进行的显示。因此,控制装置400具有环境信息获取部402、驾驶员信息获取部404、驾驶员状态判定部406、环境状态判定部407、死角区域推定部408、挡位判定部410、和hud控制部(显示控制部)414。应予说明,控制装置400的各构成要素可以由电路(硬件)、或cpu等中央处理单元和用于使其发挥功能的程序(软件)构成。
环境信息获取部402可以针对由构成车外传感器100的立体相机的左右一组相机进行拍摄得到的左右一组立体图像对,根据对应位置的偏移量,利用三角测量原理生成并获取直到对象物为止的距离信息。同时,环境信息获取部402能够根据图像信息获取被拍摄体的位置信息。此外,环境信息获取部402对利用三角测量原理生成的距离信息进行公知的分组处理,并将分组处理后的距离信息与预先设定的三维立体物数据等进行比较,由此检测出立体物数据和/或白线数据等。由此,控制装置400也能够识别人物、其他车辆、临时停车标识、停车线、etc口等。
此外,环境信息获取部402能够利用根据三角测量原理生成的与人物、其他车辆的距离信息来计算出与人物、其他车辆的距离的变化量、相对速度。距离的变化量可以通过累计每单位时间检测的帧图像间的距离来求出。此外,相对速度可以通过将每单位时间检测的距离除以该单位时间来求出。
这样,环境信息获取部402获取从车外传感器100得到的车外的图像信息并进行图像分析处理,对图像信息进行分析而获取车外的环境信息。
图3是示出在驾驶员传感器200由相机构成的情况下,驾驶员传感器200正在拍摄驾驶员的状态的示意图。如图3所示,作为一例,驾驶员传感器200设置在转向柱的上部。
在驾驶员传感器200由相机构成的情况下,通过驾驶员传感器200拍摄得到的图像被输入到控制装置400。驾驶员信息获取部404利用边缘检测、面部检测等图像处理技术从输入图像中获取驾驶员的面部区域,并基于面部区域获取面部朝向。驾驶员状态判定部406基于面部朝向来判定驾驶员是否在看向别处。此外,也可以是,驾驶员信息获取部404检测眼、鼻、口等面部各部位的特征点的位置信息,驾驶员状态判定部406基于位置信息来判定有睡意、打瞌睡等有可能未注意前方等驾驶员的状态。
具体地,基于从图像信息得到的驾驶员的面部区域,获取驾驶员的面部朝向。驾驶员的面部区域可以根据眼、鼻、口等面部各部位的特征点的位置信息来设定。此外,作为一例,面部朝向可以以从正面观察时的眼间距为基准,通过将该基准与从图像信息得到的眼间距进行比较来推定。从图像信息得到的眼间距越小于基准值,则越能判断面部朝向从正面向侧面偏移。
控制装置400的环境状态判定部407基于环境信息获取部402所获取的环境信息来判定车外的环境信息。特别地,环境状态判定部407能够以人物作为车外的对象而判定其状态,并能够判定该人物是否进入了驾驶员的死角。如后所述,死角区域推定部408基于驾驶员的眼点ep和表示构造物870的位置的车辆数据来推定死角的区域r。
hud控制部(显示控制部)414控制由hud装置500进行的显示。hud控制部(显示控制部)414能够基于驾驶员状态判定部406、环境状态判定部407的判定结果来控制由hud装置500进行的显示。
在本实施方式中,由车外传感器100检测在车辆周边存在人物的情况,并在该人物存在于进入了驾驶员的死角的位置的情况下,利用hud装置500对进入了死角的人物进行车外显示,由此向该人物通知进入了驾驶员的死角的情况。由此,成为对象的人物能够认识到进入了驾驶员的死角这一情况,并能够对车辆的运动更加注意。
此外,对驾驶员也进行进入了死角的人物的位置、方向的车内显示,促使驾驶员注意。由此,驾驶员能够识别进入了死角的人物的位置、方向,并能够注意进入了死角的人物而进行驾驶。
此外,在倒车时,将倒车引导(轨迹显示)和表示人和/或其他车辆等障碍物正在接近的情况的警告(声呐显示)显示在后窗部。由此,能够减轻驾驶员的监视负担。
图4是示出成为驾驶员的死角的区域r的示意图。首先,基于从驾驶员传感器200获取的图像信息,驾驶员信息获取部404获取驾驶员的眼睛位置(眼点(ep))。应予说明,通过使驾驶员传感器200由立体相机构成,能够更加正确地获取眼点ep。应予说明,作为眼点ep的位置,可以将假定的平均值设定为固定值。如果驾驶员的眼点ep确定,则如图4所示,能够根据预先获取的车辆数据来推定死角的区域r。
更详细地,作为车辆数据,如图4所示预先获取车辆800的支柱、窗框等构造物870的位置。如图4所示,通过求出将眼点ep的位置与构造物870的轮廓连结的直线l,从而求出死角的区域r。死角的区域r的推定由死角区域推定部408进行。
另一方面,基于从车外传感器100获取的图像信息,环境信息获取部402获取车辆周边的人物的位置。并且,环境状态判定部407判定死角的区域r与人物的位置是否重叠,在两者重叠的情况下,判定为人物进入了驾驶员的死角。
图5~图7是示出hud装置500的显示例的示意图。这里,作为一例,对车辆800正在倒车的情况进行说明。应予说明,车辆800是否正在倒车的判定由挡位判定部410基于挡位传感器620的检测值进行。
图5是示出从车内的驾驶座、副驾驶座观察后窗部810的状态的示意图。如图5所示,从车内通过后窗部810而视觉确认到在车外行走的人物900。人物900正在朝向车辆后方的死角的区域r行走。此外,在后窗部810上显示倒车引导820(轨迹)。应予说明,倒车引导820是通过hud控制部414基于转向角传感器630检测到的方向盘的转向角来控制hud装置500的显示,从而进行显示的。
图6示出了人物900从图5的状态进入到死角的区域r的状态。如图6所述,如果人物900进入死角,则在后窗部810上面向车内显示提醒注意的显示830。显示830以箭头符号来表示存在进入了死角的行人、和行人的位置。此时,也可以通过显示“有进入了死角的行人!”等,来明确表示存在进入了死角的行人。
图7是示出从车外观察图6所示的状态的状态的示意图。如图7所示,在车辆800的后窗部810上,显示促使进入了死角的人物900注意的显示840(“注意倒车”)。此外,在后窗部810上,与显示840一起,还显示倒车引导820、促使车内注意的显示830。
因此,车辆800的内部的驾驶员或同乘人员通过视觉确认面向车内的显示830,能够认识到存在进入了死角的人物900的情况。应予说明,驾驶员也可以利用后视镜来视觉确认显示830。特别地,由于利用显示830以箭头来表示人物900的位置,所以驾驶员能够特别注意向箭头方向的转弯,能够进行考虑到进入了死角的人物900的倒车。
此外,存在于车外并进入了车辆800的死角的人物900通过视觉确认面向车外的显示840,能够对倒车的车辆800多加注意。此外,在进行面向车外的显示840时,通过像“已进入驾驶员的死角!”那样进行显示,人物900能够认识到进入了驾驶员的死角的情况。由此,进入了死角的人物900变得对倒车的车辆800的运动更加注意,因此,能够可靠地避免与车辆800的接触等。
进一步地,由于在后窗部810上显示倒车引导820,所以驾驶员能够按照倒车引导820使车辆800进入到所期望的位置。
接下来,基于图8的流程图,对在本实施方式的车辆的显示系统1000中进行的处理进行说明。图8所示的处理由控制装置400的各构成要素进行,且每隔预定的控制周期重复进行。首先,在步骤s10中,挡位判定部410判定换挡杆(齿轮)是否进入了倒车挡(倒退),在换挡杆进入了倒车挡的情况下,前进至步骤s12。在步骤s12中,在后窗部810上显示倒车引导820和/或声呐显示。
在接下来的步骤s14中,判定是否有人物900在驾驶员的死角,在有人物900进入了驾驶员的死角的情况下,前进至步骤s16。在步骤s16中,在后窗部810上面向车内显示表示人物900进入到死角的位置、方向的显示830。在接下来的步骤s18中,进行促使车外的人物900注意的显示840。
在接下来的步骤s20中,判定换挡杆是否从倒车挡变化了,在从倒车挡变化了的情况下,前进至步骤s22。在步骤s22中,结束在后窗部810上的显示。步骤s22之后结束处理(结束)。另一方面,在步骤s20中换挡杆未从倒车挡变化的情况下,不结束在后窗部810上的显示而结束当前控制周期中的处理(结束)。
此外,在步骤s10中换挡杆未进入倒车挡的情况下,前进至步骤s24。在换挡杆未进入倒车挡时,也有人物900进入了驾驶员的死角的情况下,进行与换挡杆进入了倒车挡的情况相同的处理。在步骤s24中,判定是否有人物900进入了驾驶员的死角,在有人物900进入了驾驶员的死角的情况下,前进至步骤s26。在步骤s26中,在车辆800的窗部面向车内显示表示人物900进入到死角的位置、方向的显示830。此时,由于换挡杆未进入倒车挡,车辆未进行倒车,所以也可以在前窗部和/或侧窗部进行显示。在接下来的步骤s28中,在车辆800的窗部显示促使车外的人物900注意的显示840。在换挡杆未进入倒车挡的情况下,根据人物900的位置、车辆800的行进方向等,在前窗部、侧窗部、后窗部810等窗部的适当位置进行显示。
另一方面,在步骤s24中没有人物900进入驾驶员的死角的情况下,前进至步骤s30。在步骤s30中,不进行向车外的显示840。步骤s28、s30之后结束本控制周期中的处理(结束)。
如以上所说明,根据本实施方式,在车辆800之外的人物900进入了驾驶员的死角的区域的情况下,将针对人物900的警告显示在车辆800的窗部,因此,能够促使车外的人物900注意。此外,在车辆800之外的人物900进入了驾驶员的死角的区域的情况下,将针对驾驶员的警告显示在车辆800的窗部,因此,能够促使驾驶员注意。
以上,参照附图对本发明的优选实施方式进行了详细说明,但本发明并不限于这样的例子。显然,如果是具有本发明所属技术领域中的通常的知识的人员,则能够在权利要求书所记载的技术思想范畴内想到各种变形例或修改例,应了解,这些变形例或修改例当然也属于本发明的技术范围。