车辆用显示装置的制作方法

本申请主张于2017年2月22日申请的日本专利申请编号2017－31370号的优先权，并在此引用其全部内容。

本公开涉及通过对透过外界风景的投影部件投影显示图像，从而以能够在车厢内的视觉确认区域视觉确认的方式对显示图像进行虚像显示的车辆用显示装置。

背景技术：

以往，众所周知有通过平视显示器(hud：headupdisplay)对投影至投影部件的显示图像进行发光形成的车辆用显示装置。

作为这样的车辆用显示装置的一种在专利文献1公开的装置中，通过外界照相机拍摄成为显示图像的背景的外界风景，从而以能够确定表示外界风景的外界亮度的背景亮度的方式获取照相机图像。通过在通过hud对显示图像进行虚像显示的虚像显示亮度的控制中利用像这样根据照相机图像确定出的背景亮度，能够抑制显示图像的可视性降低。

专利文献1：日本特开2014－136520号公报

另外，为了适当地获取照相机图像而一般在外界照相机中，例如需要根据外界亮度进行曝光控制、增益控制等滤光处理。因此，不管是外界亮度不同的白天和夜晚，构成照相机图像的拍摄像素值都通过滤光处理成为相同值或者接近值，从而在专利文献1的公开装置中，确定出的背景亮度不能反映实际的外界亮度。其结果，有可能产生显示图像相对于外界风景的对比度不足或者过多的对比度不良而难以抑制可视性降低。

技术实现要素：

本公开的目的在于提供确保显示图像的可视性的车辆用显示装置。

根据本公开的一个方式的车辆用显示装置是在安装了通过拍摄外界风景获取照相机图像的外界照相机、和检测外界风景的外界亮度的亮度传感器的车辆中，通过对透过外界风景的投影部件投影显示图像，从而以能够在车厢内的视觉确认区域视觉确认的方式对显示图像进行虚像显示的车辆用显示装置，具备：平视显示器，对显示图像进行发光形成；存储器，存储修正像素值相对于拍摄像素值的相关作为修正数据，上述修正像素值是从构成照相机图像的拍摄像素值通过与外界亮度对应的修正转换得到的；转换模块，基于存储于存储器的修正数据，根据由亮度传感器检测出的外界亮度将由外界照相机获取的照相机图像中的拍摄到与消失点以及地平线的至少一方相比靠近前侧的特定像素部分的拍摄像素值转换为修正像素值；以及显示控制模块，以与通过转换模块从拍摄像素值转换的修正像素值对应的方式，控制由平视显示器形成的显示图像的虚像显示亮度。

在本公开中，从由外界照相机获取的照相机图像的拍摄像素值转换的修正像素值成为基于作为相对于该拍摄像素值的相关存储于存储器的修正数据修正后的值。此时，修正像素值从由亮度传感器检测出的外界风景的外界亮度被从拍摄像素值转换得到，所以容易正确地反映实际的外界亮度。并且，修正像素值被从照相机图像中的拍摄到与消失点以及地平线的至少一方相比靠近前侧的特定像素部分的拍摄像素值转换得到，所以能够降低来自与该至少一方相比靠上侧的太阳光的影响。由此，在虚像显示亮度被与修正像素值对应地控制的显示图像中，不容易产生相对于外界风景的对比度不良，所以能够确保可视性。

附图说明

通过参照附图下述的详细描述，本公开的上述目的以及其它的目的、特征、优点变得更加明确。该附图为：

图1是表示安装了根据第一实施方式的车辆用显示装置的本车辆的车厢内的内部视图。

图2是表示根据第一实施方式的车辆用显示装置的框图。

图3是表示根据第一实施方式的照相机图像的示意图。

图4是表示根据第一实施方式的hud的构成的框图。

图5是表示根据第一实施方式的显示图像的虚像显示状态的主视图。

图6是表示根据第一实施方式的照相机图像的拍摄像素值的示意图。

图7是表示根据第一实施方式的显示控制流程的流程图。

图8是表示根据第一实施方式的修正数据的示意图。

图9是表示根据第一实施方式的显示像素值的与初始设定值的相关的图。

图10是表示根据第一实施方式的像素值控制数据的示意图。

图11是表示根据第二实施方式的显示控制流程的流程图。

图12是表示根据第二实施方式的照相机图像的拍摄像素值的示意图。

图13是表示根据第三实施方式的显示控制流程的流程图。

图14是表示根据第三实施方式的照相机图像的拍摄像素值的示意图。

图15是表示根据第四实施方式的显示控制流程的流程图。

图16是表示根据第四实施方式的照相机图像的拍摄像素值的示意图。

图17是表示根据第五实施方式的显示控制流程的流程图。

图18是表示根据第五实施方式的照相机图像的示意图。

图19是表示根据第五实施方式的显示图像的虚像显示状态的主视图。

图20是表示根据第六实施方式的显示控制流程的流程图。

图21是表示根据第六实施方式的显示像素值的与初始设定值的相关的图。

图22是表示根据第六实施方式的亮度值控制数据的示意图。

图23是表示根据第七实施方式的显示控制流程的流程图。

图24(a)是表示根据第七实施方式的显示像素值的与初始设定值的相关的图，图24(b)是表示根据第七实施方式的光源亮度值的与初始设定值的相关的图。

图25(a)是表示根据第七实施方式的像素值控制数据的示意图，图25(b)是表示根据第七实施方式的亮度值控制数据的示意图。

图26是表示根据图2的变形例的车辆用显示装置的框图。

图27是表示根据图6的变形例的照相机图像的拍摄像素值的示意图。

图28是表示根据图8的变形例的修正数据的示意图。

具体实施方式

以下，基于附图对本公开的多个实施方式进行说明。另外，存在通过对各实施方式中对应的构成要素标注相同的附图标记，而省略重复的说明的情况。在各实施方式中仅对构成的一部分进行说明的情况下，该构成的其它的部分能够应用先行说明的其它的实施方式的构成。另外，不仅是在各实施方式的说明中明示的构成的组合，只要组合未特别产生妨碍，则即使未明示也能够部分地组合多个实施方式的构成彼此。

(第一实施方式)

如图1、2所示，根据本公开的第一实施方式的驾驶辅助系统1安装于车辆2。驾驶辅助系统1构成为包含周边监视系统3、车辆控制系统4以及车辆用显示装置5。这些各要素3、4、5例如经由lan(localareanetwork：局域网)等车内网络6相互连接。

如图2所示，周边监视系统3具备周边传感器30以及周边监视ecu(electroniccontrolunit：电子控制单元)31。周边传感器30例如检测在车辆2的外界有碰撞的可能性的其它车辆、人工结构物、人以及动物这样的障碍物、及存在于车辆2的外界(即车厢2a外)的速度标志以及各种警告标志这样的交通标志等。周边传感器30例如是外界照相机30a、声呐、雷达以及lidar(lightdetectionandranging/laserimagingdetectionandranging：激光雷达)等中至少包含外界照相机30a的一种或者多种。

这里，通常安装于车辆2的外界照相机30a通过拍摄图3所示的在车辆2的外界中存在于车厢2a的前方的外界风景8的规定范围，来获取照相机图像33。外界照相机30a例如为单眼式或者复眼式等，并安装于图1、4所示的车辆2的保险杠23或者室内镜24等。由此，图5所示的外界照相机30a的拍摄区域ac被设定在外界风景8中在车厢2a内驾驶席20上的乘员能够通过车辆2的前挡风玻璃21视觉确认的范围。

如图6所示，由这样的外界照相机30a获取的照相机图像33由多种颜色的拍摄像素值tc构成。因此，本实施方式的拍摄像素值tc按红色(r)、绿色(g)以及蓝色(b)以0～255共256个级别表示外界照相机30a的各像素感知到的灰度值。即，本实施方式的外界照相机30a利用rgb数据格式生成各像素的拍摄像素值tc。

图2所示的周边监视ecu31以具有处理器以及存储器的微型计算机为主体构成，与周边传感器30和车内网络6连接。周边监视ecu31基于周边传感器30的输出信号获取例如障碍物信息以及交通标志信息等。

车辆控制系统4具备车辆相关传感器40、乘员相关传感器41以及车辆控制ecu42。车辆相关传感器40与车内网络6连接。车辆相关传感器40例如获取车辆2的驾驶状态信息、导航信息、交通标志信息以及行驶环境信息等。车辆相关传感器40例如是亮度传感器40a、车速传感器、转速传感器、转向角传感器、燃料传感器、水温传感器以及通信设备等中至少包含亮度传感器40a的一种或者多种。

这里，通常安装于车辆2的亮度传感器40a检测图1、5所示的在车辆2的外界中存在于车厢2a的前方的外界风景8的规定范围的照度或者亮度作为外界亮度lo。亮度传感器40a例如是光电晶体管或者光电二极管等，并安装于图1、4所示的车辆2的仪表板22或者室内镜24等。由此，图5所示的亮度传感器40a的检测区域al被设定在外界风景8中乘员能够通过前挡风玻璃21视觉确认的范围，且包含于外界照相机30a的拍摄区域ac的范围。

如图2所示，乘员相关传感器41与车内网络6连接。乘员相关传感器41检测搭乘在车辆2的车厢2a内的乘员的状态或者操作。乘员相关传感器41例如是电源开关41a、显示设定开关、乘员状态监视器以及扭转开关等中至少包含电源开关41a的一种或者多种。

这里，电源开关41a通过由乘员在车厢2a内外进行操作以使车辆2的内燃机或者电动发电机启动，来检测该操作。电源开关41a例如是由乘员进行的旋转操作式以及按压操作式、及基于电子钥匙的远程操作式等中的一种或者多种。

车辆控制ecu42以具有处理器以及存储器的微型计算机为主体构成，并与车内网络6连接。车辆控制ecu42是发动机控制ecu、马达控制ecu、制动器控制ecu、转向控制ecu以及综合控制ecu等中的一种类或者多种。

如图1、2、4所示，车辆用显示装置5为了在车厢2a内对显示图像56进行虚像显示，而具备hud50以及hcu(hmi(humanmachineinterface：人机接口)controlunit：控制单元)54。

hud50在车厢2a内设置于仪表板22。hud50通过投影仪51对彩色的显示图像56进行发光形成。因此，如图2、4所示，本实施方式的投影仪51组合显示单元51a和光源单元51b而构成。这里，显示单元51a例如以点矩阵型tft液晶面板等为主体构成。显示单元51a通过根据hcu54控制的显示像素值td驱动各像素，来形成显示图像56。另一方面，光源单元51b例如以led(lightemittingdiode：发光二极管)为主体构成。根据hcu54控制的光源亮度值sd对光源单元51b进行通电，从而对显示单元51a进行照明使显示图像56发光。根据以上的构成，根据形成于显示单元51a的显示图像56的各像素的显示像素值td与使显示图像56发光的光源单元51b的光源亮度值sd的组合，决定图5所示的显示图像56整体的虚像显示亮度ld。

通过这样的投影仪51被形成为发光状态的显示图像56示出向车厢2a内的乘员报告的各种信息。具体而言，显示图像56除了例如图1、5所示的车速信息以及发动机转速信息等驾驶状态信息之外，也可以示出路径引导信息以及交通拥堵信息这样的导航信息、速度标志信息这样的交通标志信息、及天气信息以及路面信息这样的行驶环境信息等。另外，除了这些信息以外显示图像56例如也可以示出在车厢2a内提供的音乐信息、影像信息以及移动通信信息等。

像这样为了示出规定信息而通过投影仪51形成的显示图像56的光束如图1、4那样例如被凹面镜等光学系统52导光，从而投影到作为投影部件的前挡风玻璃21。此时，由透光性玻璃形成的前挡风玻璃21使来自外界风景8的光束透过。它们的结果，被前挡风玻璃21反射的显示图像56的光束、和透过了前挡风玻璃21的来自外界风景8的光束在车厢2a内被驾驶席20上的乘员察觉。

根据以上所述，显示图像56作为在比前挡风玻璃21靠前方成像的虚像与外界风景8重叠显示，从而能够在车厢2a内的视觉确认区域7被乘员视觉确认。因此，如图5所示，对显示图像56进行虚像显示的显示区域ad被设定在乘员能够通过前挡风玻璃21视觉确认的范围，且既包含于外界照相机30a的拍摄区域ac又包含于亮度传感器40a的检测区域al的范围。

如图2所示，hcu54以具有处理器54a以及存储器54b的微型计算机为主体构成，并与hud50和车内网络6连接。hcu54控制由hud50形成的显示图像56的虚像显示。此时，hcu54例如基于通过ecu31、42以及传感器40、41获取或者检测的信息、及存储器54b的存储信息等执行显示控制。另外，hcu54的存储器54b以及其它的各种ecu的存储器例如分别利用一个或者多个半导体存储器、磁介质或者光学介质等存储介质构成。

这里，hcu54读出预先存储于存储器54b的显示图像56，来控制由hud50形成的显示图像56的虚像显示状态。为此，hcu54通过由处理器54a执行预先存储于存储器54b的显示控制程序，而在功能上实现图7所示的显示控制流程的各步骤。另外，该显示控制流程根据电源开关41a的接通操作而开始，并根据开关41a的断开操作而结束。另外，显示控制流程中的s是指各步骤。

如图7所示，在显示控制流程的s101中，使外界照相机30a拍摄外界风景8的拍摄区域ac。由此，在s101中，获取如图6所示由各像素中的每种颜色的拍摄像素值tc构成的照相机图像33。

在s102中，使亮度传感器40a检测外界风景8的外界亮度lo。由此，在s102中，获取外界风景8中与拍摄区域ac重叠的检测区域al中的照度或者亮度，作为图5所示的当前的外界亮度lo。

在s103中，按每种颜色从通过s101获取的照相机图像33中的各像素的拍摄像素值tc中决定作为修正的转换源的拍摄像素值tc。具体而言，在s103中，首先在s103a中，选定照相机图像33中拍摄到限定于与图3、5所示的消失点hp以及地平线hl的至少一方相比靠近前侧(即车辆2侧)的外界风景8并与显示区域ad重叠的位置的多个像素部分，作为特定像素部分pc。此时，在本实施方式中，将如图3那样预先设定在纵向和横向连续的多个像素部分的固定的像素区域，且拍摄到外界风景8中包含于亮度传感器40a的检测区域al并且包含显示区域ad的范围的像素区域选定为特定像素部分pc。接下来，在s103中，在图7的s103b中，通过按颜色对构成通过s103a选定出的特定像素部分pc的多个像素部分的拍摄像素值tc进行平均，来按颜色计算作为成为修正的转换源的拍摄像素值tc的平均像素值tcave。另外，对于成为在这样的s103中对拍摄像素值tc进行平均的特定像素部分pc的选定位置的基准的消失点hp以及地平线hl来说，其至少一方通过照相机图像33的图像处理，或者在与外界照相机30a的安装位置对应的固定位置提取。

在s104中，根据通过s102检测出的外界亮度lo，将作为每种颜色的拍摄像素值tc通过s103计算出的平均像素值tcave如图8所示那样分别转换为每种颜色的修正像素值tr。具体而言，修正像素值tr以0～255共256个级别表示通过与外界亮度lo对应的修正从拍摄像素值tc转换的灰度值，以便不管外界照相机30a或者ecu31中的滤光处理如何都能够反映实际的外界亮度lo。因此，对于本实施方式的修正像素值tr，按颜色规定了与拍摄像素值tc的相关，并作为修正数据dr预先存储于存储器54b。另外，图8示出通过相互相同地规定了拍摄像素值tc与修正像素值tr的每种颜色的相关从而特别是在本实施方式中对所有颜色共用化的修正数据dr。

按规定的外界亮度lo(在图8的例子中是规定的照度)以表格的形式准备像这样规定了修正像素值tr相对于拍摄像素值tc的相关的修正数据dr。但是，为了减少存储器54b的存储容量，所准备的外界亮度lo间的修正数据dr被从所准备的外界亮度lo的修正数据dr内插或者外插。另外，为了容易理解说明，而在图8中示出表示三个按外界亮度lo的相关的修正数据dr和它们之间的插值，但是实际上能够实现表示更细分的按外界亮度lo的相关的修正数据dr和它们之间的插值。另外，也可以利用不需要插值的运算式的形式准备修正数据dr。

根据以上所述，在s104中，通过基于与通过s102检测出的外界亮度lo对应的修正数据dr，从而按颜色决定与通过s103计算出的平均像素值tcave对应的修正像素值tr。

另外，如图7所示，在接着s104的s105中，以与通过s104转换得到的每种颜色的修正像素值tr独立地对应的方式，按颜色调整显示图像56中的各像素的显示像素值td。具体而言，无论哪个颜色的显示像素值td都使用在显示单元51a中对显示图像56的各像素预先设定的显示像素值td的初始设定值td0、每种颜色的修正像素值tr及其最大值trmax(这里是255)通过下述式1表示。图9以修正像素值tr与最大值trmax之比tr/trmax为0.4的情况为例，以实线图示出根据式1在初始设定值td0与显示像素值td之间出现的每种颜色的相关。因此，为了基于这样的相关决定显示像素值td，而在本实施方式中，以图10所示那样的表格的形式准备根据式1的像素值控制数据dct，并预先存储于存储器54b。另外，也可以利用表示式1的运算式的形式准备像素值控制数据dct。

td＝td0×tr/trmax…(式1)

通过基于像这样存储于存储器54b的像素值控制数据dct，从而在s105中按颜色决定与通过s104转换得到的修正像素值tr对应的显示像素值td。其结果，通过根据所决定的每种颜色的显示像素值td对显示单元51a进行像素驱动，能够控制显示图像56的虚像显示亮度ld。此时，在本实施方式中，将根据光源单元51b的光源亮度值sd维持设定为固定值。因此，图5所示的显示图像56的虚像显示亮度ld追随所决定的每种颜色的显示像素值td，从而能够被与通过s104转换得到的修正像素值tr对应地控制。另外，这样的s105持续进行修正的有效时间，若经过有效时间，则返回到s101。

根据到此为止的说明，在第一实施方式中，hcu54的执行s103b的功能部分相当于平均模块。并且，在第一实施方式中，hcu54的执行s104的功能部分相当于转换模块，hcu54的执行s105的功能部分相当于显示控制模块。

以下对以上说明的第一实施方式的作用效果进行说明。

在第一实施方式中，从由外界照相机30a获取到的照相机图像33的拍摄像素值tc转换得到的修正像素值tr成为基于作为相对于该拍摄像素值tc的相关存储于存储器54b的修正数据dr修正后的值。此时，修正像素值tr根据由亮度传感器40a检测出的外界风景8的外界亮度lo从拍摄像素值tc转换得到，所以容易正确地反映实际的外界亮度lo。并且，修正像素值tr从照相机图像33中的拍摄到与消失点hp以及地平线hl的至少一方相比靠近前侧的特定像素部分pc的拍摄像素值tc转换得到，所以能够降低来自与该至少一方相比靠上侧的太阳光的影响。由此，在虚像显示亮度ld被与修正像素值tr对应地控制的显示图像56中，不容易产生相对于外界风景8的对比度不良，所以能够确保可视性。

进一步地，如第一实施方式那样，在包含显示区域ad的外界照相机30a的拍摄区域ac中，通过hud50在显示区域ad进行虚像显示的显示图像56的实际的背景被成像为外界风景8。因此，修正像素值tr以及被与其对应地控制的虚像显示亮度ld能够反映这样的实际的背景的拍摄像素值tc。并且，如第一实施方式那样，在包含显示区域ad的亮度传感器40a的检测区域al中，会在通过hud50在显示区域ad进行虚像显示的显示图像56的实际的背景检测外界亮度lo。因此，修正像素值tr以及被与其对应地控制的虚像显示亮度ld能够反映实际的背景的外界亮度lo。因此，根据以上那样的反映作用，可靠地使对比度不良不容易产生，能够提高可视性确保效果的可靠性。

另外，进一步地，在第一实施方式中，修正像素值tr根据对照相机图像33中作为多个像素部分的特定像素部分pc的拍摄像素值tc进行平均而计算出的平均像素值tcave转换得到。根据这样的多个像素部分的平均像素值tcave，能够降低拍摄像素值tc的局部并且偶发的变动所引起的误差。其结果，被与修正像素值tr对应地控制的虚像显示亮度ld不容易导致起因于这样的拍摄像素值tc的变动误差的对比度不良，所以能够提高可视性确保效果的可靠性。

除此之外，根据第一实施方式，以与从特定像素部分pc的拍摄像素值tc转换且正确地反映实际的外界亮度lo的修正像素值tr对应的方式，调整显示像素值td。因此，在显示图像56中，根据基于与这样的修正像素值tr对应的显示像素值td决定的虚像显示亮度ld，能够抑制导致可视性降低那样的对比度不良。

(第二实施方式)

本公开的第二实施方式是第一实施方式的变形例。如图11所示，在根据第二实施方式的显示控制流程的s103中，在接着s103a的s2103b中，按颜色对构成特定像素部分pc的多个像素部分的各像素的拍摄像素值tc进行比较。由此，在s2103b中，如图12所示按颜色从给予相同值或者相同范围内的拍摄像素值tc的像素数最多的最多像素部分pcm提取相同值或者相同范围内的拍摄像素值tc。这里，图12示出给予相同值的拍摄像素值tc的像素数最多的最多像素部分pcm。另外，另一方面虽然未图示，但相同范围内的拍摄像素值tc是指在每次拍摄像素值tc增加设定量时预先划分的多个范围中，特定像素部分pc的各拍摄像素值tc分别所属的范围相同的像素值彼此。

如图11所示，在第二实施方式中，从这样的s103移至s2104。在该s2104中，根据通过s102检测出的外界亮度lo，将通过s2103b提取出的最多像素部分pcm的每种颜色的拍摄像素值tc分别转换为每种颜色的修正像素值tr。依照第一实施方式执行此时的转换。即，通过基于与通过s102检测出的外界亮度lo对应的修正数据dr，而按颜色决定与通过s2103b提取出的最多像素部分pcm的拍摄像素值tc对应的修正像素值tr。

根据到此为止的说明，在第二实施方式中，hcu54的执行s2103b的功能部分相当于提取模块。并且，在第二实施方式中，hcu54的执行s2104的功能部分相当于转换模块。

根据以上所述，在第二实施方式中，通过比较作为照相机图像33中的多个像素部分的特定像素部分pc的拍摄像素值tc，而从给予相同值或者相同范围内的拍摄像素值tc的像素数最多的最多像素部分pcm的拍摄像素值tc转换得到修正像素值tr。根据这样的最多像素部分pcm的拍摄像素值tc，能够降低拍摄像素值tc的局部并且偶发的变动所引起的误差。其结果，被与修正像素值tr对应地控制的虚像显示亮度ld不容易导致起因于这样的拍摄像素值tc的变动误差的对比度不良，所以能够提高可视性确保效果的可靠性。

(第三实施方式)

本公开的第三实施方式是第一实施方式的变形例。如图13所示，在根据第三实施方式的显示控制流程的s103中，执行s3103a、s3103b。

首先在s3103a中，选定图14所示的照相机图像33中的拍摄到限定于与消失点hp以及地平线hl的至少一方相比靠近前侧的外界风景8并与显示区域ad重叠的位置的单个像素部分作为特定像素部分pc。此时，在第三实施方式中，将如图14那样预先设定的固定的单个像素部分选定为特定像素部分pc。另外，此时，在第三实施方式中，按颜色提取构成选定出的特定像素部分pc的单个像素部分的拍摄像素值tc，并存储于存储器54b。另外，作为特定像素部分pc的单个像素部分例如固定于照相机图像33中与显示区域ad的中心对应的像素等。

接下来，如图13所示，在s3103b中，按颜色对过去多次的通过s3103a提取并存储于存储器54b的拍摄像素值tc进行平均，从而按颜色计算成为修正的转换源的平均像素值tcave。此时，平均像素值tcave的计算时的拍摄像素值tc的使用数被设定为能够降低拍摄像素值tc的局部且偶发的变动所引起的误差的值。因此，虽然省略图示，但从与电源开关41a的接通操作对应的显示控制流程的开始，在通过s3103a提取拍摄像素值tc的次数比s3103b的拍摄像素值tc的使用数少的期间，不执行s3103b以后而返回到s101。

在第三实施方式中，从这样的s103移至s3104。在该s3104中，根据通过s102检测出的外界亮度lo，将通过s3103b计算出的每种颜色的平均像素值tcave分别转换为每种颜色的修正像素值tr。依照第一实施方式执行此时的转换。即，通过基于与通过s102检测出的外界亮度lo对应的修正数据dr，而按颜色决定与通过s3103b计算出的平均像素值tcave对应的修正像素值tr。

根据到此为止的说明，在第三实施方式中，hcu54的执行s3103a的功能部分相当于提取模块，hcu54的执行s3103b的功能部分相当于平均模块。并且，在第三实施方式中，hcu54的执行s3104的功能部分相当于转换模块。

根据以上所述，在第三实施方式中，修正像素值tr从通过多次提取照相机图像33中作为单个像素部分的特定像素部分pc的拍摄像素值tc并进行平均而计算出的平均像素值tcave转换得到。根据这样的多次提取的平均像素值tcave，能够降低拍摄像素值tc的局部且偶发的变动所引起的误差。其结果，被与修正像素值tr对应地控制的虚像显示亮度ld不容易导致起因于这样的拍摄像素值tc的变动误差的对比度不良，所以能够提高可视性确保效果的可靠性。

(第四实施方式)

本公开的第四实施方式是第一实施方式的变形例。如图15所示，在根据第四实施方式的显示控制流程的s103中，在接着s103a的s4103b中，按每种颜色对构成特定像素部分pc的多个像素部分的各像素的拍摄像素值tc进行比较。由此，在s4103b中，如图16所示，按颜色提取给予最大的拍摄像素值tc的最大值像素部分pcl的该最大的拍摄像素值tc。此时，在第四实施方式中，将提取出的每种颜色的拍摄像素值tc存储于存储器54b。

另外，在根据第四实施方式的显示控制流程的s103中，如图15所示，从s4103b移至s4103c。在该s4103c中，通过按颜色对过去多次的通过s4103b提取并存储于存储器54b的最大值像素部分pcl的拍摄像素值tc进行平均，从而按颜色计算作为修正的转换源的平均像素值tcave。此时，计算平均像素值tcave时的拍摄像素值tc的使用数被设定为能够降低拍摄像素值tc的局部并且偶发的变动所引起的误差的值。因此，虽然省略图示，但从与电源开关41a的接通操作对应的显示控制流程的开始，在通过s4103b提取拍摄像素值tc的次数比s4103c的拍摄像素值tc的使用数少的期间，不执行s4103c以后而返回到s101。

在第四实施方式中，从这样的s103移至s4104。在该s4104中，根据通过s102检测出的外界亮度lo，将通过s4103c计算出的每种颜色的平均像素值tcave分别转换为每种颜色的修正像素值tr。依照第一实施方式执行此时的转换。即，通过基于与通过s102检测出的外界亮度lo对应的修正数据dr，而按颜色决定与通过s4103c计算出的平均像素值tcave对应的修正像素值tr。

根据到此为止的说明，在第四实施方式中，hcu54的执行s4103b的功能部分相当于提取模块hcu54的，执行s4103c的功能部分相当于平均模块。并且，在第四实施方式中，hcu54的执行s4104的功能部分相当于转换模块。

根据以上所述，在第四实施方式中，通过比较照相机图像33中作为多个像素部分的特定像素部分pc的拍摄像素值tc，来提取给予最大的拍摄像素值tc的最大值像素部分pcl的该拍摄像素值tc。因此，修正像素值tr从通过多次提取最大值像素部分pcl的拍摄像素值tc并进行平均而计算出的平均像素值tcave转换得到。根据这样的多次提取的平均像素值tcave，能够降低拍摄像素值tc的局部并且偶发的变动所引起的误差。其结果，被与修正像素值tr对应地控制的虚像显示亮度ld不容易导致起因于这样的拍摄像素值tc的变动误差的对比度不良，所以能够提高可视性确保效果的可靠性。

(第五实施方式)

本公开的第五实施方式是第一实施方式的变形例。如图17所示，在根据第五实施方式的显示控制流程的s103中，在接着s103a的s5103b中，将图18所示的照相机图像33的特定像素部分pc和图19所示的显示区域ad分割为相互对应的多个像素区域pd。此时，在图18、19的例子中，以将纵向和横向连续的多个像素部分作为一个像素区域pd，且像素区域pd在纵向和横向各排列两个的方式，对特定像素部分pc以及显示区域ad进行分割。

另外，在根据第五实施方式的显示控制流程的s103中，如图17所示，从s5103b移至s5103c。在该s5103c中，通过按各像素区域pd的每种颜色对通过s5103c分割出的照相机图像33中的各像素的拍摄像素值tc进行平均，来按各像素区域pd的每种颜色计算作为修正的转换源的平均像素值tcave。

在第五实施方式中，从这样的s103移至s5104。在该s5104中，根据通过s102检测出的外界亮度lo，将通过s5103c计算出的各像素区域pd的每种颜色的平均像素值tcave分别转换为各像素区域pd的每种颜色的修正像素值tr。依照第一实施方式执行此时的转换。即，通过基于与通过s102检测出的外界亮度lo对应的修正数据dr，从而按各像素区域pd的每种颜色决定与通过s5103c计算出的平均像素值tcave对应的修正像素值tr。

并且，在第五实施方式中从s5104移至s5105，所以以与通过s5104转换得到的各像素区域pd的每种颜色的修正像素值tr独立地对应的方式，按颜色调整显示图像56中的各像素区域pd的各像素的显示像素值td。依照第一实施方式执行此时的调整。即，通过基于存储于存储器54b的像素值控制数据dct，而按颜色决定与通过s5104转换得到的各像素区域pd的修正像素值tr对应的显示像素值td。并且此时，依照第一实施方式将光源单元51b的光源亮度值sd维持设定为固定值。由此，各像素区域pd中的显示图像56的虚像显示亮度ld追随所决定的显示像素值td，从而被与通过s5104转换得到的各像素区域pd中的修正像素值tr独立地对应地控制。另外，这样的s5105持续进行修正的有效时间，若经过有效时间，则返回到s101。

根据到此为止的说明，在第五实施方式中，hcu54的执行s5103b的功能部分相当于分割模块，hcu54的执行s5103c的功能部分相当于平均模块。并且，在第五实施方式中，hcu54的执行s5104的功能部分相当于转换模块，hcu54的执行s5105的功能部分相当于显示控制模块。

根据以上所述，在第五实施方式中，从作为将照相机图像33的特定像素部分pc分割为多个的各像素区域pd的拍摄像素值tc的平均像素值tcave分别转换得到这些各像素区域pd的修正像素值tr。据此，在与照相机图像33对应地分割的显示区域ad的各像素区域pd，能够独立地将与正确地反映实际的外界亮度lo的修正像素值tr对应的虚像显示亮度ld控制为抑制对比度不良的值。因此，能够使可视性确保的效果本身提高。

(第六实施方式)

本公开的第六实施方式是第一实施方式的变形例。如图20所示，在根据第六实施方式的显示控制流程的s6105中，与通过s104转换得到的每种颜色的修正像素值tr中特定颜色的修正像素值tr对应地调整光源单元51b的光源亮度值sd。另外，在第六实施方式的s104中仅对特定颜色执行向修正像素值tr的转换，所以在s6105中也可以与该转换得到的特定颜色的修正像素值tr对应地调整光源亮度值sd。这里，特定颜色在第六实施方式中被预先设定为颜色g，但也可以预先设定为其它的颜色r或者b。

具体而言，光源亮度值sd使用在光源单元51b预先设定的光源亮度值sd的初始设定值sd0、特定颜色的修正像素值tr及其最大值trmax，通过下述式2表示。图21以修正像素值tr与最大值trmax之比tr/trmax为0.4的情况为例以实线图示出根据式2在初始设定值sd0与光源亮度值sd之间出现的相关。因此，为了基于这样的相关决定光源亮度值sd，而在第六实施方式中，以图22所示那样的表格的形式准备根据式2的亮度值控制数据dcs，并预先存储于存储器54b。另外，也可以利用表示式2的运算式的形式准备亮度值控制数据dcs。

sd＝sd0×tr/trmax…(式2)

通过基于像这样存储于存储器54b的亮度值控制数据dcs而在s6105中，决定与通过s104转换得到的特定颜色的修正像素值tr对应的光源亮度值sd。此时，在第六实施方式中，将根据显示单元51a的显示像素值td维持设定为固定值。因此，显示图像56的虚像显示亮度ld追随所决定的光源亮度值sd，所以被与通过s104转换得到的修正像素值tr对应地控制。另外，这样的s6105持续进行修正的有效时间，若经过有效时间，则返回到s101。

根据到此为止的说明，在第六实施方式中，hcu54的执行s6105的功能部分相当于显示控制模块。

根据以上所述，在第六实施方式中，以与从特定像素部分pc的拍摄像素值tc转换并正确地反映实际的外界亮度lo的修正像素值tr对应的方式，调整光源亮度值sd。因此，在显示图像56中，根据基于与这样的修正像素值tr对应的光源亮度值sd决定的虚像显示亮度ld，能够抑制导致可视性降低那样的对比度不良。

(第七实施方式)

本公开的第七实施方式是第一实施方式的变形例。如图23所示，在根据第七实施方式的显示控制流程的s7105中，以与通过s104转换得到的每种颜色的修正像素值tr独立地对应，并且也与对象加权数据dwo对应的方式，控制显示图像56中的各像素的每种颜色的显示像素值td。并且，在s7105中，以与通过s104转换得到的每种颜色的修正像素值tr中特定颜色的修正像素值tr对应，并且也与对象加权数据dwo对应的方式，控制光源单元51b的光源亮度值sd。这里，特定颜色在第七实施方式中被预先设定为颜色g，但也可以预先设定为其它的颜色r或者b。

具体而言，对象加权数据dwo是用于与光源亮度值sd相比对显示像素值td附加修正的权重的数值。因此，对象加权数据dwo将对光源亮度值sd进行加权的值、和对显示像素值td进行加权的值分别设定为与前者相比后者较大并且前者与后者的和为1，并预先存储于存储器54b。例如，对象加权数据dwo在光源亮度值sd的情况下设定为比0.5小的0.25等，另外在显示像素值td的情况下设定为比0.5大的0.75等。

每种颜色的显示像素值td使用这样的对象加权数据dwo、显示像素值td的初始设定值td0、每种颜色的修正像素值tr及其最大值trmax，通过下述式3表示。图24(a)是以修正像素值tr与最大值trmax之比tr/trmax为0.4的情况为例，以实线图示出根据式3在初始设定值td0与显示像素值td之间出现的每种颜色的相关。因此，为了基于这样的相关决定显示像素值td，而在第七实施方式中，以图25(a)所示那样的表格的形式准备根据式3的像素值控制数据dct，并预先存储于存储器54b。另外，也可以利用表示式3的运算式的形式准备像素值控制数据dct。

td＝dwo×td0×tr/trmax…(式3)

另一方面，光源亮度值sd使用对象加权数据dwo、在光源单元51b预先设定的光源亮度值sd的初始设定值sd0、特定颜色的修正像素值tr及其最大值trmax，通过下述式4表示。图24(b)以修正像素值tr与最大值trmax之比tr/trmax为0.4的情况为例，以实线图示出根据式4在初始设定值sd0与光源亮度值sd之间出现的相关。因此，为了基于这样的相关决定光源亮度值sd，而在第七实施方式中，以图25(b)所示那样的表格的形式准备根据式4的亮度值控制数据dcs，并预先存储于存储器54b。另外，也可以利用表示式4的运算式的形式准备亮度值控制数据dcs。

sd＝dwo×sd0×tr/trmax…(式4)

在这样的第七实施方式中，通过基于存储于存储器54b的像素值控制数据dct，而在s7105中，决定不仅与通过s104转换得到的每种颜色的修正像素值tr对应，还与像素值控制数据dct中的对象加权数据dwo对应的每种颜色的显示像素值td。并且，通过基于存储于存储器54b的亮度值控制数据dcs，在s7105中，决定不仅与通过s104转换得到的特定颜色的修正像素值tr对应，还与亮度值控制数据dcs中的对象加权数据dwo对应的光源亮度值sd。由此，显示图像56的虚像显示亮度ld追随所决定的每种颜色的显示像素值td以及光源亮度值sd，从而被与通过s104转换得到的修正像素值tr对应地控制。另外，这样的s7105持续进行修正的有效时间，若经过有效时间，则返回到s101。

根据到此为止的说明，在第七实施方式中，hcu54的执行s7105的功能部分相当于显示控制模块。

根据以上所述，在第七实施方式中，以与从特定像素部分pc的拍摄像素值tc转换且正确地反映实际的外界亮度lo的修正像素值tr对应的方式，调整显示像素值td和光源亮度值sd。此时，根据与这些调整对象对应的对象加权数据dwo，与作为显示像素值td和光源亮度值sd的一方的后者相比，对作为另一方的前者附加修正的权重。据此，通过将成为辅助的调整对象的一方与成为优先的调整对象的另一方组合，能够细致地设定虚像显示亮度ld的分辨率并抑制对比度不良，所以能够提高可视性确保效果的可靠性。

(其它的实施方式)

以上，对本公开的多个实施方式进行了说明，但本公开并不被解释为限定于这些实施方式，在不脱离本公开的主旨的范围内能够应用于各种实施方式以及组合。

在第一～第七实施方式所涉及的变形例1中，也可以除了hcu54之外或者代替hcu54，通过控制车辆2的其它的显示要素的ecu、和ecu31、42中一种或者多种的协作，在功能上(即，在软件上)实现显示控制流程的至少一部分。在第一～第七实施方式所涉及的变形例2中，也可以代替通过hcu54等在功能上实现显示控制流程的至少一部分，而通过一个或者多个ic等在硬件上实现显示控制流程的至少一部分。

在第一～第七实施方式所涉及的变形例3中，也可以通过内置于hud50或者车辆2的其它的显示要素的存储器，或者通过该内置存储器与存储器54b的协作，来实现显示图像56的存储。在第一～第七实施方式所涉及的变形例4中，也可以通过内置于hud50或者车辆2的其它的显示要素的存储器，或者通过该内置存储器与存储器54b的协作，来实现数据dr、dct、dwc、dwo、dcs中至少一种的存储。

在第一～第七实施方式所涉及的变形例5中，例如也可以选定根据时间或者车速等变化的像素部分作为特定像素部分pc。在第一、第二、第四～第七实施方式所涉及的变形例6中，也可以选定纵向和横向连续的多个像素部分中不连续的规定量像素部分，作为特定像素部分pc或者像素区域pd。

在第一～第七实施方式所涉及的变形例7中，也可以将照相机图像33中拍摄了外界风景8中包含消失点hp(即，横跨上下)的位置的像素部分选定为特定像素部分pc。在第一～第七实施方式所涉及的变形例8中，也可以将照相机图像33中拍摄了外界风景8中包含地平线hl(即，横跨上下)的位置的像素部分选定为特定像素部分pc。

在第一～第七实施方式所涉及的变形例9中，也可以使显示区域ad的一部分或者整体在外界照相机30a的拍摄区域ac之外。在该变形例9的情况下，也可以在车厢2a的前方以外设定拍摄区域ac。在第一～第七实施方式所涉及的变形例10中，也可以使显示区域ad的一部分或者整体在亮度传感器40a的检测区域al之外。在该变形例10的情况下，也可以在车厢2a的前方以外设定检测区域al。

在第一～第七实施方式所涉及的变形例11中，如图26所示，也可以设置外界照相机30a以及亮度传感器40a的至少一方专用于hud50。另外，图25示出设置外界照相机30a以及亮度传感器40a双方专用于hud50的变形例11。

在第一～第七实施方式所涉及的变形例12中，如图27所示，拍摄像素值tc也可以表示亮度(y)、y与b的色差(u)、以及y与r的色差(v)的灰度值。即，在变形例12中，通过外界照相机30a以yuv数据格式生成各像素的拍摄像素值tc，如图28所示，按y、u、v准备修正数据dr。因此，在该变形例12的情况下，能够通过将每种颜色以及特定颜色分别替换成按y、u、v以及y、u、v中特定一个(在图28的例子中是y)，来实现第一～第七实施方式。

在第一～第七实施方式所涉及的变形例13中，也可以通过使拍摄像素值tc和修正像素值tr的每种颜色的相关相互不同，使存储器54b按颜色存储独立的修正数据dr。在第三实施方式所涉及的变形例14中，也可以根据多次提取依照第一实施方式对多个像素部分的拍摄像素值tc进行平均而得到的值，并进一步对多次的提取值进行平均而得到的平均像素值tcave，执行修正像素值tr的转换。在第三实施方式所涉及的变形例15中，也可以根据依照第二实施方式多次提取最多像素部分pcm的拍摄像素值tc，并对多次的提取值进行平均而得到的平均像素值tcave，执行修正像素值tr的转换。

在第五～第七实施方式所涉及的变形例16中，也可以依照第二实施方式，根据各像素区域pd或者特定像素部分pc的最多像素部分pcm的拍摄像素值tc，执行修正像素值tr的转换。在第五～第七实施方式所涉及的变形例17中，也可以依照第三实施方式，根据对在各像素区域pd或者特定像素部分pc多次提取出的单个像素部分的拍摄像素值tc进行平均而得到的平均像素值tcave，执行向修正像素值tr的转换。在第五～第七实施方式所涉及的变形例18中，也可以依照第四实施方式，根据对在各像素区域pd或者特定像素部分pc多次提取出的最大值像素部分pcl的拍摄像素值tc进行平均而得到的平均像素值tcave，执行向修正像素值tr的转换。

在第七实施方式所涉及的变形例19中，也可以代替使对象加权数据dwo反映于像素值控制数据dct以及亮度值控制数据dcs分别遵循的式3、4，而使其反映于修正数据dr中的每种颜色的修正像素值tr。在该变形例19的情况下，作为使显示像素值td对应的修正像素值tr，将对在第一实施方式中说明的每种颜色的修正像素值tr分别乘以对象加权数据dwo后的值导入dwo＝1的式3(即式1)。另外，在该变形例19的情况下，作为使光源亮度值sd对应的修正像素值tr，将对在第七实施方式说明的特定颜色的修正像素值tr乘以对象加权数据dwo后的值导入dwo＝1的式4(即式2)。

在变形例20中也可以将第七实施方式与第五实施方式组合来实施。在第七实施方式所涉及的变形例21中，也可以采用用于与显示像素值td相比对光源亮度值sd附加修正的权重的对象加权数据dwo。在第一～第五实施方式所涉及的变形例22中，也可以采用激光扫描式的投影仪51。在该变形例22的情况下，投影仪51通过根据hcu54控制的显示像素值td调整多种颜色的激光强度，来形成显示图像56。