一种短波红外驾驶员视觉增强系统的制作方法
【专利摘要】本实用新型提供一种短波红外驾驶员视觉增强系统，包括短波红外透过镜头、短波红外成像装置、综合数据处理装置、控制模块、电源模块、显示装置，短波红外透过镜头和短波红外成像装置连接，综合数据处理装置通过数据传输线与短波红外成像装置连接，通过视频信号线与显示装置连接，控制模块通过控制线连接短波红外成像装置和综合数据处理装置，电源模块提供该系统所需的电源，上述所有装置均安装在驾驶室内。本实用新型的优点在于：利用短波红外穿透玻璃的特性，将短波红外驾驶员视觉增强系统安装于驾驶室内，弥补了长波红外视觉增强系统因无法穿透玻璃需安装车外的不足，同时降低了结构上防风防雨防盗等要求。
【专利说明】一种短波红外驾驶员视觉增强系统
【技术领域】
[0001]本实用新型涉及成像系统，具体是一种车载短波红外成像装置。
【背景技术】
[0002]目前，车辆在夜间、雾、霾、雨、雪等低能见度天气行驶时，驾驶员视野受限，对远方道路环境观察能力下降，容易发生交通事故。现有的近红外主动成像技术，主动照射距离不远，穿透雾、霾、雨、雪等的能力有限，成像不清晰，且易受外界强光干扰。采用长波红外探测器的视觉增强系统，探测距离远，穿透能力强，但是长波红外成的是热量分布图像与可见光图像差别很大，不符合人眼的观察习惯，且目标细节分辨能力不够。
[0003]2006年12月出版的《红外与激光工程》第35卷第6期第643至第647页的文章“短波红外成像技术及其军事应用”讲述了短波红外的基本概念，所有利用红外辐射成像的技术都是红外成像技术，包括被动红外成像技术和主动红外成像技术。而短波红外成像属于被动成像，因为其不依靠人工红外光源照明，而是靠接收景物自身反射的短波红外成像。短波红外光谱范围为0.9?2.5um，所有物体都反射环境中普遍存在的短波红外辐射。由于短波红外技术的发展，使红外成像的波段覆盖了位于长波、中波和短波红外的三个大气红外窗口。短波红外工作在刚出可见光范围之外，因为与可见光类似短波红外采用反射成像(高温物体，温度高于300°C物体也可以发出短波红外光)，因而所成的像非常类似于可见光图像，细节丰富。同时短波红外又具有中、长波红外的穿透能力，可以在阴霾、雾、雨、雪环境下依然保持良好的图像对比度，并且可以穿透普通玻璃和有机玻璃。此外短波红外可以在最低到有星光的夜晚成像，使用自然物体比如大气层夜晚的辉光成像。大气层夜晚的辉光是由羟基离子发射的光谱中的短波红外部分，因而短波红外成像可以作为夜视手段之一。
实用新型内容
[0004]本实用新型的所要解决的技术问题在于提供一种适于驾驶员使用的短波红外驾驶员视觉增强系统，可工作在主动模式与被动模式下，系统不仅结构简单，成像清晰，不闪烁，并且能够在夜间、阴霾等恶劣条件下正常工作，弥补现有可见光、长波红外在驾驶辅助系统方面的不足。
[0005]本实用新型采用以下技术方案解决上述技术问题的:一种短波红外驾驶员视觉增强系统，包括短波红外透过镜头(I)、短波红外成像装置(2)、综合数据处理装置(3)、控制模块(4 )、电源模块(5 )、显示装置(6 )，所述短波红外透过镜头(I)和短波红外成像装置(2 )连接，所述综合数据处理装置(3 )通过数据传输线与短波红外成像装置(2 )连接，通过视频信号线与显示装置(6 )连接，控制模块(4 )通过控制线连接短波红外成像装置(2 )和综合数据处理装置(3)，电源模块(5)提供该系统所需的电源，短波红外透过镜头(I)、短波红外成像装置(2)、综合数据处理装置(3)、控制模块(4)、电源模块(5)、显示装置(6)均安装在驾驶室内。
[0006]优化的，所述短波红外透过镜头(I)和短波红外成像装置(2)安装在驾驶室内的后视镜背后正中央，朝向前挡风玻璃。
[0007]更优化的，所述短波红外成像装置(2)、综合数据处理装置(3)、控制模块(4)、电源模块(5)都集成在一个外壳结构内。
[0008]具体的，所述短波红外透过镜头(I)透过波长在0.4um?2.5um范围内的可见光和红外光，所述短波红外成像装置(2)工作在0.9?2.5um的短波红外光谱段。
[0009]优化的，所述短波红外透过镜头(I)为C 口或CS 口镜头。
[0010]优化的，所述短波红外成像装置(2)至少拥有一个短波红外探测器，所述短波红外探测器是面阵探测器或者点元探测器或线阵探测器。
[0011]优化的，所述短波红外成像装置(2 )采用制冷或非制冷短波红外探测器。
[0012]优化的，所述综合数据处理装置(3)采用嵌入式FPGA处理器。
[0013]优化的，所述显示装置(6)是车载多媒体终端上的显示设备，或是外接的显示设备，或通过投影投射到前挡风玻璃上。
[0014]作为更优化的方案，所述短波红外驾驶员视觉增强系统还需要包括额外的辅助照明设备(7)，辅助照明设备(7)包括溴钨灯、900nm?2500nm波长的激光和LED中的任一种，辅助照明设备(7 )与短波红外成像装置(I) 一同安装于驾驶室内，或者独立安装于车顶。
[0015]本实用新型通过上述技术解决方案达到以下效果:
[0016]1、本实用新型利用短波红外穿透玻璃的特性，将短波红外驾驶员视觉增强系统安装于驾驶室内，弥补了长波红外视觉增强系统因无法穿透玻璃需安装车外的不足，同时降低了结构上防风防雨防盗等要求。
[0017]2、本实用新型短波红外驾驶员视觉增强系统既有长波红外的穿透能力强、探测距离远的优点，同时具备可见光提供较高的目标细节分辨率。
[0018]3、充分利用短波红外在恶劣条件下的穿透等特性，另外增加智能恶劣环境图像增强单元，使系统能够自适应判断环境情况，针对夜晚、阴霾等低可见恶劣场景进行选择性图像增强，辅助驾驶员在特殊环境下驾驶，提高了驾驶员对危险路况的感知能力，提高了行车安全性。
[0019]4、本系统体积小、安装简易，具备模块化，可控性。
[0020]5、可选主动模式和被动模式。主动模式下可以做到隐蔽照明，在不干扰他人的情况下扩大了视野范围，提高装置的成像清晰度。
【专利附图】
【附图说明】
[0021]图1为本实用新型短波红外驾驶员视觉增强系统的结构原理框图。
[0022]图2为本实用新型中综合数据处理装置的组成模块原理框图。
【具体实施方式】
[0023]以下结合附图对本实用新型进行详细的描述。
[0024]请参阅图1，本实用新型一种短波红外驾驶员视觉增强系统，包括短波红外透过镜头1、短波红外成像装置2、综合数据处理装置3、控制模块4、电源模块5、显示装置6。
[0025]所述短波红外透过镜头I和短波红外成像装置2连接；所述综合数据处理装置3通过数据传输线与短波红外成像装置2连接，通过视频信号线与显示装置6连接；控制模块4通过控制线连接短波红外成像装置2和综合数据处理装置3。控制模块4控制短波红外成像装置2和综合数据处理装置3的状态，完成人机交互功能。电源模块5提供该系统所需的电源。上述所有装置均安装在驾驶室内。
[0026]该短波红外驾驶员视觉增强系统的工作流程如下:通过短波红外透过镜头I会聚目标物体的短波红外光，再通过短波红外成像装置2将短波红外光转换成图像信息，再经过综合数据处理装置3的数据处理，传递到显示装置6上显示出目标物体。
[0027]优化的，利用短波红外穿透普通玻璃和有机玻璃的特性，所述短波红外透过镜头I和短波红外成像装置2安装在驾驶室内的后视镜背后正中央，朝向前挡风玻璃。
[0028]优化的，为节省车内空间，所述短波红外成像装置2、综合数据处理装置3、控制模块4、电源模块5都集成在一个外壳结构内，或者所述综合数据处理装置3可以安装在外壳夕卜，做为一个模块外置独立安装在车内。
[0029]优化的，所述短波红外透过镜头I为C 口或CS 口镜头；
[0030]优化的，所述短波红外透过镜头I可透过波长在0.4um?2.5um范围内的可见光和红外光，所述短波红外成像装置2工作在0.9?2.5um的短波红外光谱段。
[0031]优化的，所述短波红外成像装置2至少拥有一个短波红外探测器，所述短波红外探测器是面阵探测器或者点元探测器或线阵探测器。
[0032]进一步优化的，所述短波红外成像装置2采用制冷或非制冷短波红外探测器，包括但不限于:铟镓砷(InGaAs)、碲镉汞(HgCdTe)、锑化铟(InSb)、近红外敏感的(XD、CMOS等探测器。
[0033]作为一个优选的实施例，所述综合数据处理装置3采用嵌入式FPGA处理器。如图2所示，所述综合数据处理装置3包括图像采集及校正模块32、智能恶劣环境图像增强单元34、图像显示模块36。
[0034]所述图像采集及校正模块32首先将短波红外成像装置2中的图像信息转换为数字图像数据，再校正消除因镜头以及电路等引起的数字信号畸变；之后智能恶劣环境图像增强单元34对经过图像采集及校正模块32的数字图像数据进行分析，解析环境参数，与智能恶劣环境图像增强单元34中预先存储的环境参数比对，然后选择对应的环境图像增强单元进行环境图像增强；最后通过图像显示模块36送至显示装置6进行图像显示。控制模块4主要通过串口或者USB2.0来调整图像采集及校正模块32、智能恶劣环境图像增强单元34、图像显示模块36的参数。
[0035]本系统的智能恶劣环境图像增强单元34是完全自适应的，也可以额外通过控制模块4手动选择环境参数以达到更好的视觉显示效果。
[0036]进一步具体的，所述智能恶劣环境图像增强单元34包括图像质量评估单元341、区域分离单元342、环境分级单元343、增强权值单元344、图像增强单元345。
[0037]图像质量评估单元341用于评估图像采集及校正模块32送来的数字图像数据的细节程度，当超过预定阈值时认为光线充足、图像足够清晰，数据不经区域分离单元342、环境分级单元343、增强权值单元344、图像增强单元345直接输出到图像显示模块36然后在显示装置6上显示，否则需要将数字图像数据送至区域分离单元342作进一步处理。本实用新型中选择基于梯度的图像质量评定算法，设定图像质量阈值判读是否需要做进一步图像增强。针对人眼系统对亮度的灵敏度以及图像方差提出图像质量评估公式，[0038]Q= a log L+3 o + x
[0039]Q是图像质量，a，(6, x是常量，L是图像亮度，o是基于对梯度的图像方差估计。a , ^的取值范围分别为:10〈a〈1000，0〈P〈10，x为正值用来保证Q>0。
[0040]区域分离单元342将数字图像数据划分为三个区域:路面区域，天空区域，其它区域，然后送至环境分级单元343，区域分离单元342通过路沿检测分离出路面区域，再通过灰度直方图信息分离出天空区域所在位置，不处在路面区域，天空区域的划分为其他区域。 [0041]环境分级单元343预存各个区域的光照情况以及气候情况的模型特征参数，数字图像数据通过匹配模型特征参数进行环境分级，得到当前环境等级。环境等级包括光照等级和气候等级G。。环境分级单元343将光照情况分为极暗至极亮等多个等级，通过统计各个区域的光辐照信息、局部光辐照信息、灰度直方图分布特性，分析得到光照等级，同样，对气候情况划分等级，根据路面区域与天空区域的划分差异分析得出气候等级。环境分级单元343除了计算环境等级，环境分级单元343预存的光照图像增强参数匕、气候图像增强参数Pc提供给图像增强单元345，根据环境等级可以查询得到。预存的图像增强参数和模型特征参数通过控制模块4写入。图像增强参数需要对行车各种光照和气象条件建模，完成训练学习的方式得到，其目标函数为[Pl Pj =maxQ(Gu Gc, L, Lo, H)。Q是图像质量，Plj为光照图像增强参数，包括光照图像增强算法里用到的领域窗口大小和算子等参数，Pc为气候图像增强参数，与类同。&和Gc分别为光照等级、气候等级。L为全局光辐照度，Lo是局部光辐射度。H为同一光照等级Gp气候等级G。下的图片数据库，图片数据库是通过大量实验获得的图像数据。目标函数的意义在于在同一光照等级、气候等级对应的图像数据库H中找出一组图像增强参数使得图像质量Q最大化。图像增强参数获取部分是离线完成，即独立于相机完成的。而图像增强参数以及与光照等级、气候等级的对映关系将存储于环境分级单元343中，通过光照等级Gp气候等级Gc就能查询得到光照图像增强参数匕、气候图像增强参数P。。
[0042]增强权值单元344通过当前环境等级获得针对当前环境等级的图像增强算法的光照复原权值参数I和天气复原权值参数W。。权值参数计算公式有:[WUWciJ=F(GLi, Ru, Gci, Rci)，其中光照等级Gu、气候等级Gei是指某一特定光照等级和气候等级。Ru=A (Pu)，RCi=f2 (Pci)，Ru评估的是当前光照图像增强参数Pu在光照图像增强参数集合中的增强程度，类似的，Rci评估的是天气处理方法的增强程度。另外存在约束条件Wu=1-Wa,如果不考虑增强程度，也可以简单取Wu=l/2，Wei=l/2。
[0043]图像增强单元345针对光照等级与气候等级采用不同的图像处理方法，通过光照复原算法和天气复原算法得到2幅复原图像，通过加权平均等方法得到最终的复原图像，输出到图像显示模块36。其中加权平均的权值参数\和W。通过增强权值单元344得到。
光照复原算法采用的是log域动态增强算法，其具体计算公式为:Ld = ~，其中Ld
a
是最终显示光辐照度，L为原始光辐照度，La是局部光辐照度，领域大小与算子由匕给定，M(*)为映射函数，可以选择线性映射或者非线性映射，如^校正映射。天气复原算法可以考虑部分重叠直方图均衡化方法，涉及的参数P。包括窗口大小、重叠间距、滤波模板算子等，直方图均衡化方法是目前比较通用的天气复原算法。
[0044]所述显示装置6可以是现有车载多媒体终端上的显示设备，也可以是外接的显示设备，或通过投影投射到前挡风玻璃上。
[0045]上述的所述短波红外驾驶员视觉增强系统是工作在被动模式，也就是说，所述短波红外成像装置I被动接收车外环境的短波红外反射、大气辉光、城市夜光、车前灯等光线成像。
[0046]作为进一步的优化，该所述短波红外驾驶员视觉增强系统也可以工作在主动模式，这时，所述短波红外驾驶员视觉增强系统还需要包括额外的辅助照明设备7，辅助照明设备7包括但不限于:溴钨灯、900nm?2500nm波长的激光和LED等。主动模式下，辅助照明设备7不仅使得成像更清晰，同时可以做到隐蔽照明。这是由于900nm?2500nm波段的辅助照明设备7对人眼是不可见的，因此不会干扰到对面来的司机。辅助照明设备7可以与短波红外成像装置I 一同安装于驾驶室内，或者独立安装于车顶等位置。
[0047]以上所述仅为本实用新型创造的较佳实施例而已，并不用以限制本实用新型创造，凡在本实用新型创造的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本实用新型创造的保护范围之内。
【权利要求】
1.一种短波红外驾驶员视觉增强系统，其特征在于:包括短波红外透过镜头(I)、短波红外成像装置(2)、综合数据处理装置(3)、控制模块(4)、电源模块(5)、显示装置(6)，所述短波红外透过镜头(I)和短波红外成像装置(2 )连接，所述综合数据处理装置(3 )通过数据传输线与短波红外成像装置(2)连接，通过视频信号线与显示装置(6)连接，控制模块(4)通过控制线连接短波红外成像装置(2 )和综合数据处理装置(3 )，电源模块(5 )提供该系统所需的电源，短波红外透过镜头(I)、短波红外成像装置(2)、综合数据处理装置(3)、控制模块(4 )、电源模块(5 )、显示装置(6 )均安装在驾驶室内。
2.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外透过镜头(I)和短波红外成像装置(2)安装在驾驶室内的后视镜背后正中央，朝向前挡风玻3?。
3.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外成像装置(2)、综合数据处理装置(3)、控制模块(4)、电源模块(5)都集成在一个外壳结构内。
4.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外透过镜头(I)透过波长在0.4um~2.5um范围内的可见光和红外光，所述短波红外成像装置(2)工作在0.9~2.5um的短波红外光谱段。
5.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外透过镜头(I)为C 口或CS 口镜头。
6.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外成像装置(2)至少拥有一个短波红外探测器，所述短波红外探测器是面阵探测器或者点元探测器或线阵探测器。
7.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外成像装置(2)采用制冷或非制冷短波红外探测器。
8.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述综合数据处理装置(3)采用嵌入式FPGA处理器。
9.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述显示装置(6)是车载多媒体终端上的显示设备，或是外接的显示设备，或通过投影投射到前挡风玻璃上。
10.如权利要求1所述的短波红外驾驶员视觉增强系统，其特征在于:所述短波红外驾驶员视觉增强系统还需要包括额外的辅助照明设备(7)，辅助照明设备(7)包括溴钨灯、900nm~2500nm波长的激光和LED中的任一种，辅助照明设备(7)与短波红外成像装置(I)一同安装于驾驶室内，或者独立安装于车顶。
【文档编号】B60R1/00GK203528379SQ201320574951
【公开日】2014年4月9日 申请日期:2013年9月17日 优先权日:2013年9月17日
【发明者】王斯建, 杨锋, 董磊 申请人:安徽鸿谱光电科技有限公司