像采集装置在收到帧同步信号后，又收到行同步信号，就会开始将图像中的一行数据进行传输(一行数据不是一次传输完毕的，也是按照时序一个个的传输)，传输完毕后，若再收到行同步信号，则进行下一行的传输，直到再次收到帧同步信号。
[0056]根据控制单元再次发出的帧同步信号结束对图像数据的发送；图像采集装置再次收到帧同步信号后，表示该张图像已经传输完毕，停止传输。
[0057]图3给出了帧同步信号和行同步信号的时序图，VSYNC—行中，两个高电平为帧同步信号，两个高电平之间表示一张图像；HREF—行中，各个低电平为行同步信号，两个低电平之间表示一行图像；HSYNC—行中，各个低电平为行同步信号，两个低电平之间表示一行图像；最后一行为数据。
[0058]本发明通过帧同步信号和行同步信号进行图像数据的传输，避免了图像传输的错误，而且能够通过帧同步信号判断图像是否传输完毕。
[0059]本发明中的缓存空间的大小可以与图像数据的大小相同；此时:
[0060]将当前接通的图像采集装置采集到的图像数据发送到缓存空间进一步为:通过DMA技术将当前接通的图像采集装置采集到的图像数据发送到缓存空间。
[0061]本发明实用DMA(直接内存存取)技术将图像数据直接发送到缓存空间中，速度快，进一步节省控制单元的资源。
[0062]当一张图像传输完毕后，从缓存空间中取走，用于后续的过程，然后清空缓存空间，为再次接收下一张图像做准备。
[0063]以上述提到的使用人脸特征和虹膜特征的多模态生物识别装置，其图像采集装置包括人脸图像采集装置、左眼虹膜图像采集装置、右眼虹膜图像采集装置和场景图像采集装置。在应用中可以设置不同的认证模式，例如单一人脸认证、单一虹膜认证、虹膜+人脸认证。下面使用虹膜+人脸认证方式进行详细说明。总流程见图5，虹膜识别详细过程如图6，人脸识别和场景图片保存详细过程如图7。
[0064]第一步:控制单元通过选择器轮训对每个图像采集装置通过I2C初始化参数，使每个图像采集装置都处于正常运行状态。此时图像采集装置将会把图像数据通过数据线传出。
[0065]第二步:虹膜的识别，依次切换左右眼图像采集，并以此在显示屏上显示(人机交互)。将采集的图像从缓存空间读出。采集完成后先识别左眼，再识别右眼。结果存在三种情况:1、两只眼睛同时识别通过，进入下一步骤。2、两只眼睛都没有通过将会重复虹膜识别过程。3、如果只有一只眼睛识别通过，另一只眼睛没有通过，会重复虹膜识别过程，但下一个流程将会跳过识别过的眼睛。详细流程图见虹膜识别详细过程，如图6。
[0066]第三步:当虹膜识别成功后，将进入人脸的识别过程。先是将图像采集装置切换到人脸图像采集装置，切换之后采集人脸图片，并显示在屏幕上。下一步识别人脸，识别通过会结束人脸识别流程。如果失败，不用切换只需重新采集人脸图片进行显示和识别即可。
[0067]详细过程见人脸识别和场景图片保存详细过程，如图7。
[0068]第四步:人脸识别成功后将会采集场景图片，先切换场景图像采集装置，然后采集场景图像(包括人脸及背景图)，保存场景图像。然后一个完整的过程就结束了。
[0069]以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
【主权项】
1.一种多模态生物识别装置，包括控制单元、内存和多个图像采集装置，其特征在于，还包括数据选择器，所述控制单元的数据端经所述数据选择器连接所述多个图像采集装置的数据端，所述控制单元的选通控制端连接所述数据选择器的选通控制端，所述内存中开辟有用于存储所述多个图像采集装置采集到的图像数据的缓存空间。2.根据权利要求1所述的多模态生物识别装置，其特征在于，所述控制单元的帧同步信号端经所述数据选择器连接所述多个图像采集装置的帧同步信号端，所述控制单元的行同步信号端经所述数据选择器连接所述多个图像采集装置的行同步信号端。3.根据权利要求2所述的多模态生物识别装置，其特征在于，所述控制单元的串行控制端经所述数据选择器连接所述多个图像采集装置的串行控制端，所述控制单元的复位端经所述数据选择器连接所述多个图像采集装置的复位端。4.根据权利要求3所述的多模态生物识别装置，其特征在于，所述控制单元的时钟信号端经所述数据选择器连接所述多个图像采集装置的时钟信号端。5.根据权利要求1-4任一所述的多模态生物识别装置，其特征在于，所述图像采集装置包括人脸图像采集装置、虹膜图像采集装置和场景图像采集装置中的一个或多个。6.一种权利要求1-5任一所述的多模态生物识别装置进行图像采集的方法，其特征在于，包括: 控制单元通过串行控制端发送串行控制信号，对所述多个图像采集装置进行初始化； 初始化控制单元的摄像头单元； 当需要采集图像数据时，控制单元判断当前接通的图像采集装置是否为希望使用的图像采集装置，若否，控制单元控制数据选择器接通希望使用的图像采集装置。7.根据权利要求6所述的方法，其特征在于，所述控制单元控制数据选择器接通希望使用的图像采集装置之后还包括: 清空缓存空间； 初始化控制单元的摄像头单元； 将当前接通的图像采集装置采集到的图像数据发送到所述缓存空间。8.根据权利要求7所述的方法，其特征在于，所述将当前接通的图像采集装置采集到的图像数据发送到所述缓存空间包括: 根据控制单元发出的帧同步信号开始准备发送图像数据； 根据控制单元发出的行同步信号发送图像数据的各行； 根据控制单元再次发出的帧同步信号结束对图像数据的发送。9.根据权利要求6至8任一所述的方法，其特征在于，所述缓存空间的大小与图像数据的大小相同； 所述将当前接通的图像采集装置采集到的图像数据发送到所述缓存空间进一步为:通过DMA技术将当前接通的图像采集装置采集到的图像数据发送到所述缓存空间。10.根据权利要求6至8任一所述的方法，其特征在于，图像数据发送完毕后，还包括: 从缓存空间中取走图像数据，并清空所述缓存空间。
【专利摘要】本发明公开了一种多模态生物识别装置及其进行图像采集的方法，属于生物识别领域，所述多模态生物识别装置，包括控制单元、内存和多个图像采集装置，还包括数据选择器，所述控制单元的数据端经所述数据选择器连接所述多个图像采集装置的数据端，所述控制单元的选通控制端连接所述数据选择器的选通控制端，所述内存中开辟有用于存储所述多个图像采集装置采集到的图像数据的缓存空间。与现有技术相比，本发明的多模态生物识别装置能够在控制单元的一个摄像头接口上连接多个图像采集装置，采集多路图像，节省控制单元的资源，并且降低功耗。
【IPC分类】G06K9/00
【公开号】CN105426849
【申请号】CN201510813182
【发明人】席亚飞
【申请人】北京天诚盛业科技有限公司
【公开日】2016年3月23日
【申请日】2015年11月20日