面向校车安全的司机身份认证方法
【专利摘要】本发明涉及一种面向校车安全的司机身份认证方法。在摄像机镜头前设置滤镜滤除可见光，并采用红外光源，有效去除环境光带来的影响；然后对红外图像进行人脸关键点检测，基于关键点位置进行面部图像处理，获得正面规整化人脸，从而去除姿态、尺度、位置等因素影响；最后在规整化图像基础上，构造灰度向量计算Jaccard相似度，快速进行人脸比对，实现驾驶员身份认证。采用灰度可快速有效地描述面部特征。基于灰度列向量的Jaccard系数相似度计算简单，速度快，不需要大量样本用于训练，适合于校车管理的运行模式。
【专利说明】
面向校车安全的司机身份认证方法
技术领域
[0001] 本发明涉及一种面向校车安全的司机身份认证方法。
【背景技术】
[0002] 近年来，校车安全日益受到全社会的关注，政府出台相关法规加强校车管理，其中 对驾驶员的资格审查与身份认证是重要环节之一。2012年4月5日，国务院公布施行了《校车 安全管理条例》，该条例对校车驾驶人资格等做出了具体的规定。但在校车实际运行过程 中，目前还缺乏对驾驶员身份的有效认证，存在非授权校车驾驶员代驾的情况，存在较大安 全隐患。
[0003] 现有的驾驶员身份认证方法主要有两类，第一类如专利CN201220362617等专利所 述方法，以RFID读卡器、身份证读卡器等读卡设备获取驾驶员身份信息进行验证，由于外置 卡与人员的可分离性，此类方法并不能真正实现驾驶员身份认证;第二类是基于现场视频 或图像对驾驶员进行可见光人脸比对的方法，如专利CN201220390464、CN201310096618等， 此类方法可对驾驶员身份进行现场认证，但由于现场环境的多样性，以及驾驶员非自然工 作状态下姿态存在偏转等因素，导致现有基于人脸比对的身份认证方法易受光照和姿态等 因素影响，正确率较低，未能得到大规模应用。
【发明内容】
[0004] 本发明设计了一种新的基于面部图像比对的驾驶员身份认证方法。该方法在摄像 机镜头前设置滤镜滤除可见光，并采用红外光源，有效去除环境光带来的影响;然后对红外 图像进行人脸关键点检测，基于关键点位置进行面部图像处理，获得正面规整化人脸，从而 去除姿态、尺度、位置等因素影响;最后在规整化图像基础上，构造灰度向量计算Jaccard相 似度，快速进行人脸比对，实现驾驶员身份认证。
[0005] 本发明的完整处理流程为： Stepl:获取驾驶员面部红外光照图像;具体为基于红外光源的人脸面部图像采集，采 集分为两种模式:注册模式和认证模式。
[0006] Step2:从图像中检测人脸及五官关键点； Step3:基于人脸五官关键点，对面部区域图像进行旋转校正和裁剪，并归一化尺寸，实 现面部图像规整，具体为基于两次Flandmark五官关键点定位的人脸图像规整； Step4:针对规整化后的图像，提取其灰度向量，并分别计算其与注册时采集的司机面 部规整化图像灰度向量的Jaccard系数，获得两幅人脸的相似度，根据阈值进行判别，实现 身份验证，具体为基于灰度向量计算Jaccard系数的人脸比对； 本发明的关键创新技术： 1、基于红外光源的人脸面部图像采集方法 本发明使用通用的具有红外光源的监控摄像机，模拟摄像机或数字摄像机均可，镜头 前放置截止频率为800nm的红外滤镜，该滤镜仅使波长大于800nm的红外光通过，红外光源 的波长为850nm或940nm。采集分为两种模式:注册模式和认证模式。两种模式均设计为依照 驾驶员开车时的位置，摄像机放置于驾驶室中控台，镜头对准驾驶员面部，俯仰及左右倾角 均不超过30度。注册模式为驾驶员在校车管理部门经过人工审核后进行，采集多张面部图 像，存储在该驾驶员对应校车的校车安全智能终端之中。认证模式为驾驶员每次在车内点 火启动后进行，校车安全智能终端驱动摄像机采集该驾驶员面部图像，经过本发明所述方 法处理后与已存储的注册图像进行比对，如果未通过认证，校车安全智能终端报警;如果通 过认证，则正常驾驶。
[0007] 本发明基于红外光源采集驾驶员面部图像，创新点在于： 结合恰当截止频率的滤镜，可滤除可见光，使用外置红外光作为光源，可有效去除环境 光和车内灯光变化对人脸比对造成的影响，保证光照一致性，确保后续人脸比对的效果。
[0008] 2、基于两次Flandmark五官关键点定位的人脸图像规整方法 针对采用上述方法采集到的人脸图像?，其面部区域灰度图像为反，图像坐标原点为左 上角，进行下列处理： Stepl:利用Flandmark方法，从P中定位精fg]的五官关键点,.?.分别为 关键点的横纵坐标，#= U，3,6为关键点序号。面朝人脸方向，上述关键点按顺序分别为 左侧外眼角、左侧内眼角、右侧内眼角、右侧外眼角、上嘴唇外沿中点、下嘴唇外沿中点，如 图2所示； Step2:计算人脸旋转角度： 汐=are(tan〇))，其中arc为反正切函数，tan为正切函数， 将^^旋转-沒度，得到角度规整化的面部区域灰度图像Fi; Step3:再次利用Flandmark方法，从f中定位并刷新精简的五官关键点&(U)，计算 下述变量： 瞳距:乃奴=(3.尤+6 Z2 _ z2; 脸宽：见/.= 3'χ ￡)泣； 脸尚：丑，=坪，； 脸部中心点 WkW，其横坐标口_ (6:4?+?疯/:2_，纵坐标〇 .产+ 其中min为取最小值函数； 脸部起始点(U)，其横坐标Sc 纵坐标S .·Χ_= 以S (Xj)为起点，为宽、高，从5'"中裁剪位置规整化的核心面部区域图像尤； Step4:针对尤，采用双线性插值法，将其宽高从缩放为巧、@,，在本发明中 %: = 12S，:沒；=12S，得到尺度规整化的面部区域图像i?。
[0009] 本发明基于五官关键点进行人脸图像规整，其创新点在于： 可有效纠正原始人脸图像存在的旋转、大小、位置等差异，有利于提高后续处理的准确 性;针对旋转前后的人脸图像进行两次五官关键点定位，可有效避免因旋转插值运算造成 的关键点坐标偏移，有利于提尚后续处理的准确性。
[00?0] 3、基于灰度向量计算Jaccard系数的人脸比对方法 假设驾驶员在注册模式下采集到图像4:，其规整化后的面部图像为A，将其二维矩阵 按行向量从第1行至第沒y行相连，构造一维灰度向量，…，)，舨=K x 类似地，假设驾驶员在认证模式下采集到图像力，其规整化后的面部图像为巧，将其二 维矩阵按行向量从第1行至第乾行相连，构造灰度向量F = Ov A…,h)，M = % xA; 计算两幅人脸图像的Jaccard系数：
T(ZT)的范围为[0，1]，两个向量完全一致时为1，完全不同时为0,越接近1说明越相 似。因此设定适当阈值，如本发明设置4 =〇.9,当·ΠΧ.Τ)27；时，判断为同一人，否则不为 同一人。
[0011] 本发明采用灰度向量计算Jaccard系数判断两幅人脸的相似性，其创新点在于： 经过前述规整化的人脸图像去除了光照、位置、角度、尺度差异，采用灰度可快速有效 地描述面部特征。基于灰度列向量的Jaccard系数相似度计算简单，速度快，不需要大量样 本用于训练，适合于校车管理的运行模式。
【附图说明】
[0012] 图1处理流程图， 图2五官关键点排列顺序图。
【具体实施方式】
[0013] -种新的基于面部图像比对的驾驶员身份认证方法。该方法在摄像机镜头前设置 滤镜滤除可见光，并采用红外光源，有效去除环境光带来的影响;然后对红外图像进行人脸 关键点检测，基于关键点位置进行面部图像处理，获得正面规整化人脸，从而去除姿态、尺 度、位置等因素影响;最后在规整化图像基础上，构造灰度向量计算Jaccard相似度，快速进 行人脸比对，实现驾驶员身份认证。
[0014] 本发明的完整处理流程为： Stepl:获取驾驶员面部红外光照图像； Step2:从图像中检测人脸及五官关键点； Step3:基于人脸五官关键点，对面部区域图像进行旋转校正和裁剪，并归一化尺寸，实 现面部图像规整； Step4:针对规整化后的图像，提取其灰度向量，并分别计算其与注册时采集的司机面 部规整化图像灰度向量的Jaccard系数，获得两幅人脸的相似度，根据阈值进行判别，实现 身份验证。
【主权项】
1. 面向校车安全的司机身份认证方法，在摄像机镜头前设置滤镜滤除可见光，采用红 外光源，去除环境光带来的影响；其特征在于，对红外图像进行人脸关键点检测，基于关键 点位置进行面部图像处理，获得正面规整化人脸，从而去除姿态、尺度、位置因素影响;最后 在规整化图像基础上，构造灰度向量计算化ccard相似度，快速进行人脸比对，实现驾驶员 身份认证， 处理流程为： Stepl:获取驾驶员面部红外光照图像，具体为基于红外光源的人脸面部图像采集，采 集分为两种模式:注册模式和认证模式； Step2:从图像中检测人脸及五官关键点； Step3:基于人脸五官关键点，对面部区域图像进行旋转校正和裁剪，并归一化尺寸，实 现面部图像规整，具体为基于两次Flan血ark五官关键点定位的人脸图像规整； Step4:针对规整化后的图像，提取其灰度向量，并分别计算其与注册时采集的司机面 部规整化图像灰度向量的化ccard系数，获得两幅人脸的相似度，根据阔值进行判别，实现 身份验证，具体为基于灰度向量计算化ccard系数的人脸比对。2. 根据权利要求1所述的面向校车安全的司机身份认证方法，其特征在于，所述基于红 外光源的人脸面部图像采集注册模式为驾驶员在校车管理部口经过人工审核后进行，采集 多张面部图像，存储在该驾驶员对应校车的校车安全智能终端之中， 认证模式为驾驶员每次在车内点火启动后进行，校车安全智能终端驱动摄像机采集该 驾驶员面部图像，与已存储的注册图像进行比对，如果未通过认证，校车安全智能终端报 警;如果通过认证，则正常驾驶。3. 根据权利要求1所述的面向校车安全的司机身份认证方法，其特征在于，所述基于两 次Flandmark五官关键点定位的人脸图像规整具体为： 采集到的人脸图像Λ其面部区域灰度图像为异，图像坐标原点为左上角，进行下列处 理： Stepl:利用F1 andmark方法，从巧中定位精简的五官关键点瑞杜，>0，'得押，碼啤分别为 关键点的横纵坐标，耻=1，2，:3,…:，6为关键点序号，面朝人脸方向，关键点按顺序分别为左侧 夕川艮角、左侧内眼角、右侧内眼角、右侧外眼角、上嘴唇外沿中点、下嘴唇外沿中点， Step2:计算人脸旋转角度： 身=are(tan(巧），其中arc为反正切函数，tan为正切函数， 击二（巧J -巧.火)":6.工-巧.对； 将巧旋转-旨度，得到角度规整化的面部区域灰度图像沪； Step3:再次利用Flandmark方法，从取中定位并刷新精简的五官关键点冷(>j)，计算 下述变量： 瞳足巨：。班二闲...去+'巧，'材''2.-(毎+巧,对/ 2 ; 脸宽：邱'/ =扣凸 脸高:; 脸部中屯、点:化，此其横坐标C . '? =(扣+卑如2，纵坐标技J =巧j + miiii 5 ,ν，/';.、'./'; .v，f；,训。， 其中min为取最小值函数； 脸部起始点：公（W)，其横坐标思J =投.江-证'>/2，纵坐标￡^..)，=〔/.>^-化^搭； 如'（W)为起点，町、听为宽、高，从部；中裁剪位置规整化的核屯、面部区域图像藍； Step4:针对芯，采用双线性插值法，将其宽高从碑奋、巧*缩放为唯、巧，在本发明中 喂= m:，馬=巧日，得到尺度规整化的面部区域图像其。4.根据权利要求1所述的面向校车安全的司机身份认证方法，其特征在于，所述为基于 灰度向量计算化ccard系数的人脸比对具体为： 假设驾驶员在注册模式下采集到图像马，其规整化后的面部图像为巧，将其二维矩阵按 行向量从第1行至第进;巧相连，构造一维灰度向量尤（Χι，^，...，Χμ)，^ = ^·;χΚ:; 类似地，假设驾驶员在认证模式下采集到图像每，其规整化后的面部图像为马，将其二 维矩阵按行向量从第1行至第武行相连，构造灰度向量^' = ?Χι，>':：，…，yw )，Α? = X ; 计算两幅人脸图像的化ccard系数：巧^，巧的范围为[〇，1]，两个向量完全一致时为1，完全不同时为0,越接近1越相似，设 定阔值马，本发明^=0.9,当巧去.：〇>瑞时，判断为同一人，否则不为同一人。
【文档编号】G06K9/00GK105844227SQ201610159703
【公开日】2016年8月10日
【申请日】2016年3月21日
【发明人】谢剑斌, 李沛秦, 闫玮, 刘通, 吴训波
【申请人】湖南君士德赛科技发展有限公司