专利名称：一种基于单目视觉的车道偏离距离测量及预警方法
技术领域：
本发明属于计算机图像处理技术领域，特别涉及智能辅助驾驶技术中的车道偏离预警技术。
背景技术：
随着社会经济的发展，汽车的保有量迅速增加，由于驾驶员等原因引起的交通事故更加频繁，已经成为制约社会发展的一个障碍。智能辅助驾驶技术是减少交通事故、提高运输效率、减轻驾驶员劳动负荷的途径之一，已经引起了越来越多的国内外研究机构和汽车研发、生产厂商的广泛兴趣。车道偏离预警系统是智能辅助驾驶系统研究的一个重要方面，车道偏离预警系统的基本原理系统通过图像传感器获取车道线的几何信息，通过车辆运动参数传感器获取决策算法所必需的车辆运动参数如车速、车辆转向状态等，系统根据这些结果结合系统设定的相关参数判断是否发生车道偏离。目前国内外车道偏离预警系统的研制已经取得的一些成果，详见文献贾鑫，智能车辆视觉感知中的车道标线识别方法的研究，吉林大学博士论文，p6-13，2008. 10 ；和文献董因平，高速汽车车道偏离预警系统的算法研究，吉林大学博士学位论文，P3-11,2004所述。在车道偏离预警系统中，车道偏离距离的决策的关键的确定一个合适的预警时刻向驾驶员报警，在保证适时与准确报警的的同时减少不必要的误警。目前的的车道偏离决策主要有几种基于估计偏离时间的TLC(Time to Lane Crossing)决策方法、基于预测轨迹偏离的决策方法、基于车辆在车道中的当前位置(Cars Current Position, CCP) 0以上几种方法需要运动参数传感器采集车速、方向盘转向及车辆转向灯等信息，传感设备昂贵、 模型复杂、算法参数多、计算复杂。相对雷达、激光、超声波、红外线等传感器进行感知道路环境，视觉传感系统可获得更高、更精确、更丰富的道路结构环境信息。在实际生活中，驾驶员通过视觉可以获得80%以上的环境信息，例如交通标志、交通信号、车道线、道路形状、车辆、障碍物等。另一方面，视觉传感器费用低廉，体积小，图像处理算法有柔韧性和适应能力强等特点。因此视觉辅助驾驶技术在智能车辆中有广阔的应用前景。
发明内容
本发明提供一种基于单目视觉的车道偏离距离测量及预警方法，该方法利用图像处理技术处理采集到的视频图像，完成车道线的检测、提取出车道线的几何信息，利用小孔成像模型及立体几何变换关系获得汽车到左、右车道线的距离，并根据车道偏离距离建立一种偏离预警决策方法。本发明技术方案如下一种基于单目视觉的车道偏离距离测量及预警方法，包含下述步骤步骤1 将视频采集装置安装在车辆后视镜下方，安装视频采集装置时，应保证视频采集装置能够获取车辆前方清晰的车道线图像。步骤2 视频采集装置内、外参数的标定。
步骤2-1 标定视频采集装置的内部参数，所述内部参数包括视频采集装置的水平方向的焦距fx、垂直方向焦距fy和所采集视频图像中心坐标(Utl, V0)与车辆坐标系的位置关系。步骤2-2 标定视频采集装置的外部参数，所述外部参数包括视频采集装置的俯仰角Φ和方向角炉。将摄像机安装在车辆上，然后停放在两条平行的车道上，利用检测出的直线计算出摄像机的俯仰角Φ，方向角识(详见文献Ender Kivanc Bas, Jill D. Crisman. An Easy to Install Camera Calibration for Traffic Monitoring. IEEE Intelligent Transportation System,1997. ITSC' 97.)步骤3 对采集到的视频图像进行车道线检测。步骤3-1 图像二值化与边缘检测。首先将采集到的彩色图像转成灰度图像，然后使用最大类间方差法(Ostu)得到自适应阈值，再根据该自适应阈值对灰度图像进行二值
-1 0 1
化处理，最后利用差分边缘算子作边缘检测以提取出车道线两侧的边缘。
L 1 0 -1」步骤3-2 利用改进的Hough变换检测车道线。Hough是一种广泛采用的直线检测方法，本发明为了减少由于分布效应产生的虚假类峰导致错误的直线提取，对Hough变换进行改进，加入了局部峰值限制与参数之间最小距离约束条件对Hough域进行筛选。具体来说针对步骤3-1所得经边缘检测的二值化图像中所有像素值为1的点U，y)，进行经过Hough变换得到的峰值点以H(p，θ)表示 (其中P表示极轴，θ表示极角)，在Η(ρ，θ)参数空间中每个单元的局部峰值与相邻的峰值比较，当比较结果满足Η(ρ，θ)彡Η(Ρ 士 1，θ 士 1)时，将该峰值保存在H' (P，Θ) = Η(Ρ, Θ)，将不满足Η(Ρ，θ)彡Η(Ρ 士 1，θ 士 1)的单元置为零；然后利用参数间最小距离对H' (P，θ )中的峰值进行第二次筛选，在最小距离窗口 [(ρ 士 w，θ 士 w)](w为设定的窗口值)内的搜索最大值并保留，其他的非最大值置为零；最后在H' (P，Θ)中按极轴P的大小将(P，θ )按组进行降序排列。步骤4 车辆左、右两侧的车道线参数提取。根据车辆在当前车道中的行驶情况， 按照极轴P、极角θ间的关系，在参数矩阵H' (P，θ )中确定当前左、右两侧的车道线参数。具体来说取参数矩阵H' (P，Θ)中第一组(Pl，Q1)作为第一条车道线参数，当Q1X) 时为左侧车道线参数，当θ工< O时为右侧车道线参数。当车辆正常行驶时，在参数矩阵H' (P，θ )中从第二组(ρ，θ )开始选择满足 Q^e1 <0的一组参数作为第二条车道线的参数；当车辆跨越车道时，在H' (P，Θ)中从第二组(P，θ)开始选择满足θ * Θ i > 0的一组参数作为第二条车道线参数。步骤5、利用车道线的斜率计算车辆在车道中的偏离距离。对车辆行驶过程中采集到的图像按帧进行实时的检测，依据步骤4中获得的车道线参数，计算出当前车辆所在车道的左、右两条车道线的斜率kp 1 ，斜率ki、k2的值等于步骤4中获得的左、右车道线参数(P，Θ)中极角的正切值tan(e)。如图4所示，利用小孔成像模型推导出的垂直距离测量公式，将斜率k” 1 及步骤2中获得的俯仰角Φ，方向角识及车道的宽度W代入公式(1)、O)中，得到车辆到左、右车道线的垂直距离dl、dr。
权利要求
1. 一种基于单目视觉的车道偏离距离测量及预警方法，包含下述步骤步骤1 将视频采集装置安装在车辆后视镜下方，安装视频采集装置时，应保证视频采集装置能够获取车辆前方清晰的车道线图像；步骤2 视频采集装置内、外参数的标定；步骤2-1 标定视频采集装置的内部参数，所述内部参数包括视频采集装置的水平方向的焦距fx、垂直方向焦距fy和所采集视频图像中心坐标(uQ，V0)与车辆坐标系的位置关系；步骤2-2 标定视频采集装置的外部参数，所述外部参数包括视频采集装置的俯仰角 Φ和方向角炉；步骤3 对采集到的视频图像进行车道线检测；步骤3-1 图像二值化与边缘检测；首先将采集到的彩色图像转成灰度图像，然后使用最大类间方差法得到自适应阈值，再根据该自适应阈值对灰度图像进行二值化处理，最后 利用差分边缘算子作边缘检测以提取出车道线两侧的边缘；步骤3-2 利用改进的Hough变换检测车道线；针对步骤3-1所得经边缘检测的二值化图像中所有像素值为1的点(X，y)，进行经过 Hough变换得到的峰值点以H( P，θ )表示，其中ρ表示极轴、θ表示极角，在Η(Ρ，θ)参数空间中每个单元的局部峰值与相邻的峰值比较，当比较结果满足H( P，Θ)彡Η(Ρ 士 1， θ 士 1)时，将该峰值保存在H' (P，θ) = Η(Ρ，0)，将不满足!1(0，Θ)彡Η(Ρ 士 1， θ 士 1)的单元置为零；然后利用参数间最小距离对H' (P，θ )中的峰值进行第二次筛选， 在最小距离窗口 [(P 士w，θ 士w)]内的搜索最大值并保留，w为设定的窗口值，其他的非最大值置为零；最后在H' (P，θ )中按极轴ρ的大小将(P，θ )按组进行降序排列；步骤4 车辆左、右两侧的车道线参数提取；根据车辆在当前车道中的行驶情况，按照极轴P、极角θ间的关系，在参数矩阵H' (P，Θ)中确定当前左、右两侧的车道线参数； 具体来说取参数矩阵H' (P，Θ)中第一组(P1, θ J作为第一条车道线参数，当Q1 > O时为左侧车道线参数，当θ工< O时为右侧车道线参数；当车辆正常行驶时，在参数矩阵H' (P，θ )中从第二组(ρ，θ )开始选择满足θ * θ i < O的一组参数作为第二条车道线的参数；当车辆跨越车道时，在H' (P，θ )中从第二组 (P，θ)开始选择满足θ * θ i > O的一组参数作为第二条车道线参数；步骤5、利用车道线的斜率计算车辆在车道中的偏离距离；对车辆行驶过程中采集到的图像按帧进行实时的检测，依据步骤4中获得的车道线参数，计算出当前车辆所在车道的左、右两条车道线的斜率h、1 ，斜率kp k2的值等于步骤4 中获得的左、右车道线参数(P，θ )中极角的正切值tan( θ )；利用小孔成像模型推导出的垂直距离测量公式，将斜率k” 1 及步骤2中获得的俯仰角Φ，方向角识及车道的宽度W代入公式(1)、中，得到车辆到左、右车道线的垂直距离dl、dr
2.根据权利要求1所述的基于单目视觉的车道偏离距离测量及预警方法，其特征在于，步骤1中所述视频采集装置为CCD或CMOS摄像机；安装视频采集装置时，将视频采集装置安装在车辆后视镜处并与车体的纵向坐标轴平行，相对车体横向坐标的位移为零，这样能够减少由于摄像机位置偏移对车辆偏移距离测量结果影响。
3.根据权利要求1所述的基于单目视觉的车道偏离距离测量及预警方法，其特征在于，步骤3对采集到的视频图像进行车道线检测时，选择采集视频图像的下三分之二部分作为感兴趣区域并进行步骤3-1和步骤3-2的处理。
4.根据权利要求1所述的基于单目视觉的车道偏离距离测量及预警方法，其特征在于，步骤3-1中设定窗口值w的取值范围为[3，6]。
全文摘要
一种基于单目视觉的车道偏离距离测量及预警方法，属于计算机图像处理技术领域。首先通过安装于车辆前方的单目摄像机采集视频图像，经图像处理技术处理，完成车道线的检测，提取出车道线的几何信息；利用小孔成像原理立体几何变换关系、得汽车到左、右两侧车道线垂直的距离；根据实时测量的垂直距离建立偏离预警决策方法，为智能辅助驾驶技术提供有效信息。本发明利用Hough变换检测车道线时，加入了约束条件，排除了部分虚假车道线，提高了运算速度和车道线检测的准确性；同时，本发明仅利用图像信息即可实现车道偏离预警；车辆偏航角度对车道偏离距离的测量影响小且使用立体几何变化法求解运算速度快，能够满足智能辅助驾驶技术的要求。
文档编号G01B11/14GK102288121SQ20111012156
公开日2011年12月21日 申请日期2011年5月12日 优先权日2011年5月12日
发明者张青森, 解梅, 马争 申请人:电子科技大学