本发明涉及车辆的显示系统及车辆的显示系统的控制方法。
背景技术：
以往，例如在下述专利文献1中，关于由hud(head-updisplay：平视显示器)进行的显示，记载有在acc处于开启状态的情况下使通常模式的显示以重叠于驾驶员的前方视野的状态进行显示的技术。
此外，在专利文献1中记载有在acc处于关闭状态的情况下，使防盗模式的显示以车辆外部的行人可读的状态显示在前窗部11的技术。
现有技术文献
专利文献
专利文献1：日本特开2016-136199号公报
技术实现要素：
技术问题
然而，在上述专利文献所记载的技术中，没有对在驾驶员想要驾驶车辆而靠近车辆时，向驾驶员显示有用的信息的情况作任何设想。此外，上述专利文献所记载的技术没有对根据驾驶员相对于车辆的位置来改变车辆的显示的情况作任何设想。因此，产生了在车辆外的驾驶员从显示位置移动了的情况下，无法确认显示内容这样的问题。
因此，本发明是鉴于上述问题而完成的，本发明的目的在于提供一种能够在驾驶员想要驾驶车辆而靠近车辆时，向驾驶员提供有用的信息的新的且经过改进的车辆的显示系统及车辆的显示系统的控制方法。
技术方案
为了解决上述课题，根据本发明的一个观点，提供一种车辆的显示系统，具备：显示装置，在车辆的窗部进行显示；判定部，判定驾驶员是否靠近了所述车辆；以及显示控制部，在判定为所述驾驶员靠近了所述车辆的情况下，控制所述显示装置，以面向车外进行显示。
可选地，所述判定部判定所述驾驶员在车外的位置，所述显示控制部控制所述显示装置，以在多个所述窗部中的距所述驾驶员近的所述窗部进行显示。
此外，可选地，所述显示控制部根据所述驾驶员在车外的移动来控制所述显示装置，以在多个所述窗部中的距所述驾驶员近的所述窗部进行显示。
此外，可选地，所述车辆的显示系统具备：异常判定部，判定所述车辆是否发生异常，在所述车辆发生异常的情况下，所述显示控制部控制所述显示装置，以进行警告发生异常的显示。
此外，可选地，在所述车辆未发生异常的情况下，所述显示控制部控制所述显示装置，以面向车外进行通常显示。
此外，可选地，所述通常显示包括针对所述驾驶员的消息、天气预报、新闻和路线信息中的至少一种的显示。
此外，可选地，所述车辆的显示系统具备：通信装置，与外部的服务器进行通信，所述通常显示所涉及的信息通过所述通信装置从所述服务器获取。
此外，可选地，所述车辆的显示系统具备：乘车判定部，判定所述驾驶员是否乘坐于所述车辆，在判定为所述驾驶员乘坐于所述车辆的情况下，所述显示控制部控制所述显示装置，以进行面向车内的显示。
此外，可选地，所述显示控制部控制所述显示装置，以使所述面向车外的显示的正面背面翻转而进行所述面向车内的显示。
此外，可选地，所述车辆的显示系统具备：驾驶员状态判定部，判定所述驾驶员是否发生异常，在所述驾驶员发生异常的情况下，所述显示控制部控制所述显示装置，以进行警告发生异常的显示。
此外，为了解决上述课题，根据本发明的另一观点，提供一种车辆的显示系统，具备：显示装置，在车辆的窗部进行显示；乘车判定部，判定驾驶员是否乘坐于所述车辆；以及显示控制部，在所述驾驶员乘坐于所述车辆的情况下，控制所述显示装置以进行面向车内的显示，在所述驾驶员从所述车辆下车了的情况下，控制所述显示装置以进行面向车外的显示。
可选地，所述车辆的显示系统具备：判定部，判定所述驾驶员在车外的位置，所述显示控制部控制所述显示装置，以在多个所述窗部中的距所述驾驶员近的所述窗部进行显示。
此外，可选地，所述显示控制部根据所述驾驶员在车外的移动来控制所述显示装置，以在多个所述窗部中的距所述驾驶员近的所述窗部进行显示。
此外，为了解决上述课题，根据本发明的另一观点，提供一种车辆的显示系统的控制方法，所述车辆的显示系统具有在车辆的窗部进行显示的显示装置，所述控制方法包括：对驾驶员靠近了所述车辆的情况进行判定的步骤；以及在判定为所述驾驶员靠近了所述车辆的情况下，控制所述显示装置，以面向车外进行显示的步骤。
此外，为了解决上述课题，根据本发明的另一观点，提供一种车辆的显示系统的控制方法，所述车辆的显示系统具有在车辆的窗部进行显示的显示装置，所述控制方法包括：判定驾驶员是否乘坐于所述车辆的步骤；以及在所述驾驶员乘坐于所述车辆的情况下，控制所述显示装置以进行面向车内的显示，在所述驾驶员从所述车辆下车了的情况下，控制所述显示装置以进行面向车外的显示的步骤。
技术效果
根据本发明，能够在驾驶员想要驾驶车辆而靠近车辆时，向驾驶员提供有用的信息。
附图说明
图1是示出本发明的一个实施方式的车辆系统的构成的示意图。
图2是示出使用了自发光中间膜的hud装置的示意图。
图3是示出驾驶员传感器正在拍摄驾驶员的状态的示意图。
图4是示出hud装置在车辆的前窗部进行的显示的例子的示意图。
图5是示出hud装置在车辆的前窗部进行的显示的例子的示意图。
图6是示出hud装置在车辆的前窗部进行的显示的例子的示意图。
图7是示出在驾驶员乘车时，车辆未发生异常等的情况下的显示例的示意图。
图8是示出在进行图7的显示时，在检测到驾驶员坐进了车辆的情况下进行面向车内的显示的例子的示意图。
图9是示出在驾驶员关闭了点火开关(ig_sw)时，面向车内的驾驶员在前窗部进行显示的例子的示意图。
图10是示出在进行图9的显示时，在检测到驾驶员下车了的情况下从面向车内的显示切换为面向车外的显示的情况的示意图。
图11是示出在驾驶员在车辆周围移动的情况下，根据驾驶员的位置来切换进行显示的窗部的例子的示意图。
图12是示出处于车外的驾驶员的检测方法的示意图。
图13是示出处于车外的驾驶员的检测方法的示意图。
图14是示出通过驾驶员状态判定部来判定驾驶员的状态的情况的示意图。
图15是示出通过驾驶员状态判定部来判定驾驶员的面部表情的方法的示意图。
图16是示出在驾驶员发生异常的情况下的警告显示的示意图。
图17是示出本实施方式的处理的流程图。
符号说明
400：控制装置
407：环境状态判定部
412：驾驶员状态判定部
414：hud控制部
500：hud装置
具体实施方式
以下，参照附图对本发明的优选实施方式进行详细说明。应予说明，在本说明书和附图中，对于实质上具有相同的功能结构的构成要素，标记相同的符号，由此省略重复说明。
图1是示出本发明的一个实施方式的车辆的显示系统1000的构成的示意图。车辆的显示系统1000基本上是构成于汽车等车辆的系统。如图1所示，车辆的显示系统1000构成为具有车外传感器100、驾驶员传感器200、就座传感器300、门开闭传感器350、控制装置400、hud装置500、扬声器600、通信装置700、天线800。
此外，在构成于车辆的显示系统1000的周边具备：与车辆的显示系统1000进行通信的无线钥匙1100、云服务器1200。
车外传感器100由立体相机、单目相机、毫米波雷达、红外传感器等构成，测定本车周边的人和/或车辆等的位置、速度。在车外传感器100由立体相机构成的情况下，立体相机由具有ccd传感器、cmos传感器等摄像元件的左右一对相机构成，拍摄车辆外的外部环境，并将拍摄得到的图像信息发送给控制装置400。作为一例，立体相机由能够获取颜色信息的彩色相机构成，并设置于车辆的前窗部的上部。
hud(head-updisplay：平视显示器)装置500是直接将信息映到人的视野的显示装置，将实像显示在汽车的前窗部和/或后窗部等窗部。通常已知hud为显示虚像的装置，但在本实施方式中，使用映出实像的显示装置。hud装置500由于显示实像，所以视角大致为360°，能够从车内外观看显示。在另一实施方式中，hud装置500也可以显示虚像。
作为hud装置500，更具体地，可以采用使用图2所示的自发光中间膜510的装置。在此情况下，在车辆的前窗部、后窗部等，以用表面背面的两块玻璃520夹住的方式配置自发光中间膜510。自发光中间膜510中含有发光材料，如果从设置于车内的投影仪530照射激光，则被照射的部分发光而显示文字和/或图像。显示对象具有从所有角度的可见性，也能够从驾驶座以外的座位和/或车辆外部观看。应予说明，hud装置500也可以通过将自发光式的装置配置于车辆的窗部而构成。在此情况下，例如还可以采用使用了有机el元件的透明屏幕或透射型液晶装置等。此外，作为显示装置，可以使用hud装置500以外的装置，也可以使用设置在例如仪表板的大型液晶装置和/或led显示装置等。应予说明，以下，以在车辆的窗部(玻璃)进行显示的hud装置500作为显示装置为例进行说明，但本发明的显示装置并不限于此，而是包括设置在车辆的内部或外部的显示装置的全部方式。例如，本实施方式的显示装置可以设置在车辆外部的窗部以外(车体等)，也可以设置在车辆内部的窗部以外(仪表板、座位等)。此外，设置在车辆内部的显示装置与设置在车辆外部的显示装置可以是一体的，也可以是分体的。
驾驶员传感器200由相机、视线传感器、运动传感器等构成，测定驾驶员(驾驶者)的头部和/或手臂的运动、视线方向等。在驾驶员传感器200由相机构成的情况下，通过对相机拍摄得到的图像进行图像处理，来获取头部和/或手臂的运动、视线方向等。在驾驶员传感器200由视线传感器构成的情况下，通过角膜反射法等方法进行视线检测。就座传感器300设置于车辆内的各座位，判定是否有人坐在座位上。门开闭传感器350是检测门的开闭的传感器。在通过hud装置500向车辆的内外显示警告时，扬声器600向车辆的内外发出警告音。
控制装置400基于车外传感器100、驾驶员传感器200等检测到的信息，来控制由hud装置500进行的显示。因此，控制装置400具有环境信息获取部402、驾驶员信息获取部404、环境状态判定部407、驾驶员状态判定部412、hud控制部(显示控制部)414和异常判定部416。应予说明，控制装置400的各构成要素可以由电路(硬件)、或cpu等中央处理单元与用于使其发挥功能的程序(软件)构成。
环境信息获取部(位置获取部)402可以针对由构成车外传感器100的立体相机的左右一组相机进行拍摄得到的左右一组立体图像对，根据对应位置的偏移量通过三角测量原理生成并获取直到对象物为止的距离信息。同时，环境信息获取部402能够根据图像信息获取被拍摄体的位置信息。此外，环境信息获取部402对通过三角测量原理生成的距离信息进行公知的分组处理，并将分组处理后的距离信息与预先设定的三维立体物数据等进行比较，由此检测出立体物数据和/或白线数据等。由此，控制装置400也能够识别人物、其他车辆、临时停车标识、停车线、etc口等。
此外，环境信息获取部402能够利用通过三角测量原理生成的与人物、其他车辆的距离信息来计算出与人物、其他车辆的距离的变化量、相对速度。距离的变化量可以通过累计每单位时间检测的帧图像间的距离来求出。此外，相对速度可以通过将每单位时间检测的距离除以该单位时间来求出。
这样，环境信息获取部402获取从车外传感器100得到的车辆外的图像信息并进行图像分析处理，对图像信息进行分析而获取车辆外的环境信息。
天线800与无线钥匙1100进行通信。无线钥匙1100向天线800发送电波，如果天线800接收到来自无线钥匙1100的电波，则车辆的门被锁定或门的锁定被解除。此外，虽然将在后面进行描述，但如果天线800接收到来自无线钥匙1100的电波，则基于电波的接收强度来检测处于车外的驾驶员的位置、距车辆的距离。
通信装置700与车辆的外部进行通信。云服务器1200经由互联网等网络1300与通信装置700连接。云服务器1200能够向通信装置700发送天气预报、拥堵信息、新闻、路线信息等通常信息。发送到通信装置700的这些信息在hud控制部414在hud装置500上进行后述的通常显示的情况下被使用。
图3是示出在驾驶员传感器200由相机构成的情况下，驾驶员传感器200正在拍摄驾驶员的状态的示意图。如图3所示，作为一例，驾驶员传感器200设置在转向柱的上部。
在驾驶员传感器200由相机构成的情况下，通过驾驶员传感器200拍摄得到的图像被输入到控制装置400。驾驶员信息获取部404利用边缘检测、面部检测等图像处理技术从输入图像中获取驾驶员的面部和/或身体的区域等驾驶员面部或身体的信息。
控制装置400的环境状态判定部407基于环境信息获取部402所获取的环境信息来判定车辆外的环境状态。特别地，环境状态判定部407能够判定作为车辆外的对象的人物的状态、位置、车辆外的对象与车辆之间的距离、对象彼此的距离的大小。此外，环境状态判定部407能够基于天线800从无线钥匙1100接收到的电波的接收强度来判定车辆外的对象的位置、车辆外的对象的位置与车辆的距离的大小。
驾驶员状态判定部412基于环境信息获取部402所获取的环境信息来判定驾驶员的状态。应予说明，驾驶员状态判定部412的判定方法在后面进行描述。
乘车判定部418基于驾驶员信息获取部404获取的驾驶员的信息、从门开闭传感器350得到的信息来判定驾驶员是否乘坐于车辆。如果根据从门开闭传感器350得到的信息而检测到门进行了开闭，且根据从驾驶员信息获取部404得到的信息而检测到驾驶员处于驾驶座上，则乘车判定部418判定为驾驶员乘坐于车辆。
hud控制部(显示控制部)414控制由hud装置500进行的显示。hud控制部414能够基于环境状态判定部407、驾驶员状态判定部412的判定结果来控制由hud装置500进行的显示。
异常判定部416判定车辆是否发生异常。异常判定部416例如基于从车辆所具备的can(controllerareanetwork：控制器局域网)得到的各种传感器信息来判定异常。异常判定部416能够判定气压降低、油温降低、油量不足、电池电量降低等车辆的各种异常。
在本实施方式中，如果驾驶员为了驾驶车辆而靠近车辆，则hud装置500在车辆的窗部进行显示。图4～图6是示出hud装置500在车辆10的前窗部50进行的显示的例子的示意图，示出了在驾驶员乘车时车辆10存在异常等的情况下的显示例。图4示出了向车辆外的驾驶员进行面向车外的显示的情况，并示出了进行用于向驾驶员警告轮胎的气压降低的显示的例子。作为警告，可以显示油温降低、油量不足、电池电量降低等各种信息。应予说明，如图4所示的显示的控制通过环境状态判定部407判定为车辆外的驾驶员靠近了，异常判定部416判定为车辆发生异常，且hud控制部414基于环境状态判定部407和异常判定部416的判定结果控制由hud装置500进行的显示来进行。环境状态判定部407在驾驶员与车辆10之间的距离为预定的阈值以内的情况下判定为驾驶员靠近了车辆10。
图5和图6示出了在进行图4的显示时，在检测到驾驶员坐进了车辆10的情况下进行面向车内的显示的例子。这里，图5示出了从车外观看显示的状态，图6示出了从车内观看显示的状态。在图5和图6所示的例子中，将与图4所示的显示相同的内容翻转而显示在前窗部50。这样，优选地，在驾驶员乘坐于车辆10之后，使与图4相同的显示翻转或闪烁等以使得驾驶员能够继续识别出警告。另一方面，在驾驶员乘坐于车辆10之后，也可以切换为与面向车外的显示不同的显示。在通过乘车判定部418判定为驾驶员乘坐于车辆10的情况下，hud控制部414控制hud装置500以从面向车外的显示切换为面向车内的显示。
如上所述，在车辆10发生异常的情况下，通过在驾驶员坐进车辆10之前面向车外显示警告，能够使驾驶员快速地得知异常。在图4的例子的情况下，看到警告的驾驶员能够在坐进车辆10之前确认气压。这样，驾驶员能够在驾驶前的早期阶段可靠地识别出异常，能够得到对驾驶有用的信息。
图7是示出在驾驶员乘车时，车辆10未发生异常等的情况下的显示例的示意图。如图7所示，在车辆10未发生异常等的情况下，hud控制部414控制由hud装置500进行的显示以进行通常显示。在通常显示中，进行用于传达没有异常和/或其他通常信息(例如，生日提醒、照片、画、天气预报、拥堵信息、路线信息、新闻)的显示。
图8示出了在进行图7的显示时，在检测到驾驶员坐进了车辆10的情况下进行面向车内的显示的例子。在图8所示的例子中，示出了将路线信息60显示于前窗部50的例子。在驾驶员乘坐于车辆10之后，既可以继续进行图7所示的显示，也可以进行其他显示。在继续进行图7所示的显示的情况下，将显示的正面背面翻转。
图9是示出在驾驶员关闭了点火开关(ig_sw)时，面向车内的驾驶员在前窗部50进行显示的例子的示意图。图10是示出在进行图9的显示时，在检测到驾驶员70下车了的情况下从面向车内的显示切换为面向车外的显示的情况的示意图。在图10所示的例子中，在驾驶座侧的窗部52进行面向车外的显示。在通过乘车判定部418判定为驾驶员从车辆10下车了的情况下，hud控制部414控制hud装置500以从面向车内的显示切换为面向车外的显示。这样，在驾驶员70下车了的情况下，通过切换为面向车外的显示，能够继续向驾驶员70传达消息。面向车外的显示在经过一定时间后被取消。
图11是示出在驾驶员70在车辆10周围移动的情况下，根据驾驶员70的位置来切换进行显示的窗部的例子的示意图。如图11的左侧图所示，在驾驶员70处于驾驶座附近的情况下，在驾驶座侧的窗部52进行显示。另一方面，如图11的右侧图所示，如果驾驶员70向车辆10的后方走去，则在车辆后部的窗部54进行显示。同样地，如果驾驶员70向车辆10的前方走去，则在车辆10的前窗部50进行显示。由此，例如在驾驶员70从车辆10的前方靠近车辆，并从驾驶座侧乘车的情况下，最初在前窗部50进行显示，在驾驶员70靠近驾驶座时在驾驶座侧的窗部52进行显示。因此，驾驶员70能够可靠地确认面向车外的显示。图11所示的显示的控制通过环境状态判定部407判定车辆外的人物的位置，hud控制部414基于环境状态判定部407的判定结果控制由hud装置500进行的显示来进行。
图12和图13是示出处于车外的驾驶员的检测方法的示意图。图12是示出利用车外传感器100检测驾驶员70的方法的示意图。在此情况下，如图12所示，在车辆的多个位置设置车外传感器100，并利用由环境信息获取部402进行的上述图像识别来识别车外的驾驶员70，测量到驾驶员70的距离。并且，通过环境状态判定部407判定到驾驶员70的距离是否为预定的阈值以下，在到驾驶员70的距离为预定的阈值以下的情况下，进行面向车外的显示。
此外，环境状态判定部407基于环境信息获取部402利用图像识别而识别出的驾驶员70的位置信息来判定驾驶员70的位置，并根据判定结果在距驾驶员70最近的窗部进行面向车外的显示。
图13示出了利用无线钥匙1100检测驾驶员的方法。在此情况下，如图13所示，利用设置在车辆的前后左右的天线800接收来自无线钥匙1100的电波。并且，判定天线800从无线钥匙1100接收的电波的接收强度是否为预定值以上，在接收强度为预定值以上的情况下判定为驾驶员正在靠近，进行面向车外的显示。
图14是示出通过驾驶员状态判定部412来判定驾驶员70的状态的情况的示意图。如上所述，驾驶员状态判定部412基于环境信息获取部402所获取的环境信息来判定驾驶员70的状态。如图14所示，驾驶员70边沿着轨迹t徘徊边靠近车辆10。此时，利用由环境信息获取部402进行的图像识别获取驾驶员70的位置和到车辆10的距离，并获取轨迹t。驾驶员状态判定部412基于轨迹t来判定驾驶员70的状态(行为)。
并且，驾驶员状态判定部412针对驾驶员70的左右徘徊(一定时间内的左右移动量)和/或驾驶员70向车辆10靠近的速度，在超过预定的阈值的情况下判定为异常。预定的阈值为预先确定的平均值。驾驶员状态判定部412在驾驶员70的一定时间内的左右移动量、速度超过预定的阈值的情况下，判断为驾驶员70疲劳，并判定为异常。
此外，在驾驶车辆10的驾驶员70限于特定的人物的情况下，将根据该驾驶员70的通常值确定的值作为预定的阈值。例如，将在特定的驾驶员70的通常值上乘以预定的系数而得到的值作为预定的阈值。特定的驾驶员70的通常值可以通过学习来获取。驾驶员状态判定部412在驾驶员70的一定时间内的左右移动量、速度超过根据该驾驶员70的通常值确定的阈值的情况下，判断为驾驶员70疲劳，并判定为异常。
此外，图15是示出通过驾驶员状态判定部412来判定驾驶员70的面部表情的方法的示意图。如图15所示，将面部表情的图像信息和与各图像信息对应的感情(喜悦、惊恐、愤怒、悲伤)对应起来而预先保存。驾驶员状态判定部412将环境信息获取部402获取的驾驶员70的面部的图像信息与预先保存的图15所示的图像信息进行对比，并从图15所示的图像信息中提取出与驾驶员70的图像信息类似度高的图像信息，基于与提取出的图像信息对应的感情来判定驾驶员70的状态(感情)。例如，驾驶员状态判定部412在驾驶员70的感情为极度愤怒时、极度悲伤时、极度瞌睡时等，判定为驾驶员70异常。在此情况下，将图16所示的那样的显示(“请注意安全驾驶”)面向车外进行显示，以警告驾驶员。图16所示的显示通过驾驶员状态判定部412判定驾驶员70的状态是否异常，hud控制部414基于驾驶员状态判定部412的判定结果控制由hud装置500进行的显示来进行。
图17是示出本实施方式的处理的流程图。首先，在步骤s10中，基于从车外传感器100得到的信息、或从无线钥匙1100得到的接收强度来判定驾驶员70是否靠近了车辆10。在接下来的步骤s12中，基于从车外传感器100得到的信息、或从无线钥匙1100得到的接收强度来判定驾驶员70距车辆10的前后左右的哪个位置近。
在接下来的步骤s14中，判定车辆10或驾驶员70是否存在异常，在车辆10存在异常的情况下前进至步骤s16。在步骤s16中，在车辆10的窗部上将表示异常的信息面向车外进行显示。此时，在距驾驶员70最近的窗部上进行面向车外的显示。在接下来的步骤s18中，判定驾驶员70是否坐进了车辆10，在判定为驾驶员70坐进了车辆10的情况下，前进至步骤s20。在步骤s20中，切换为面向车内的显示而进行显示。
在接下来的步骤s22中，判定驾驶员是否关闭点火开关(ig_sw)而下车了，在驾驶员关闭点火开关而下车了的情况下前进至步骤s24。在步骤s24中，从车内显示切换为车外显示，并在经过了一定时间之后取消显示。步骤s24之后结束处理(结束)。
此外，在步骤s14中车辆和驾驶员不存在异常的情况下，前进至步骤s26。在步骤s26中，在车辆10的窗部上显示通常显示。步骤s26之后前进至步骤s18。
此外，在步骤s18中驾驶员70未坐进车辆10的情况下，前进至步骤s28。在步骤s28中，判定异常是否解决，在异常解决了的情况下前进至步骤s26，在异常未解决的情况下前进至步骤s30。在步骤s30中，在一定时间的显示后，取消显示。步骤s30之后结束处理(结束)。应予说明，在步骤s10中环境状态判定部407判定为驾驶员70未靠近车辆10的情况下(s10：否)，同样地结束处理。
如以上所说明，根据本实施方式，由于在驾驶员70靠近了车辆10时在车辆10的窗部上进行显示，所以驾驶员70能够在驾驶前识别出各种信息。此外，由于根据车辆外的驾驶员70的移动来切换进行显示的窗部，所以驾驶员70即使在移动的情况下也能够可靠地识别出信息。
以上，参照附图对本发明的优选实施方式进行了详细说明，但本发明并不限于这样的例子。显然，如果是具有本发明所属技术领域中的通常的知识的人员，则能够在权利要求书所记载的技术思想范畴内想到各种变形例或修改例，应了解，这些变形例或修改例当然也属于本发明的技术范围。