危险品检测装置和检测方法
【专利摘要】本发明公开了一种危险品检测装置和检测方法，所述危险品检测装置包括可见光图像传感器、红外图像传感器、处理器、图像存储器和显示器；本危险品检测装置在可见光图像传感器和红外图像传感器采集原始RGB格式的可见光图像和原始RGB格式的红外图像后，所述处理器对图像进行处理并显示，而人员正常通行，无需驻足即可以实现检测，从而提高了检测效率，能满足较大的人流量检测、较大范围的检测和同时对多目标进行检测。
【专利说明】危险品检测装置和检测方法
【技术领域】
[0001]本发明涉及一种物体检测装置和检测方法，尤其涉及一种危险品检测装置和检测方法。
【背景技术】
[0002]目前各类暴力袭击事件层出不穷，例如校园持刀伤害案件和公共场所暴力恐怖袭击案件等，这些案件严重地威胁着社会的稳定和人民群众的生命财产安全。为了避免这类案件的再发生，国家在安保方面投入了大量的人力、物力和财力，但收效甚微。
[0003]目前所使用的危险品检测系统为驻足式检测系统(stand-by)，例如金属探测器和X光检测仪等，此类系统通常需要安保人员对可疑人员逐一进行检测，当人流量过大，或需要检测较大范围，或同时对多目标进行检测时，该类系统由于检测危险品的效率低下，就无法满足上述要求。
[0004]可见光图像具有高分辨率的特点，但是无法体现物体的温度信息，因此也就无法单独用于危险品的检测。虽然红外图像的分辨率较低，但是红外图像的成像原理是基于物体的温度差，能够充分体现物体的温度信息，且由于枪支、管制刀具等具有威胁性的金属制品，即危险品通常与人体等背景物体有较大的温度差，所有可以通过红外图像传感器探测到隐藏于人体或者其他物体内的这类危险品。另外，还可以利用可见光图像高分辨率的优点，将危险品的形状、大小和位置等信息融合在可见光图像中，并且不改变原有可见光图像的色彩信息，从而从根本上改变了只能将危险品信息显示在低分辨率的X光图像、红外图像或者微波毫米波图像中的单传感器的传统做法。
[0005]YIQ (luminance, chrominance)色彩空间格式,其代表图像亮度(luminance)与代表图像色彩(chrominance)信息的部分是独立的；也就是说，当将图像的亮度信息单独提取出来并对其处理时并不会该变原有图像的色彩信息；反之亦然。正是由于YIQ色彩空间格式的这个特点，为解决有效地检测危险品的技术问题成为可能。
【发明内容】
[0006]本发明的第一个目的是提供一种能有效检测危险物品的危险品检测装置。本发明的第二个目的是提供一种能有效检测危险物品的危险品检测方法。
[0007]本发明解决第一个技术问题采用如下技术方案:一种危险品检测装置，包括可见光图像传感器、红外图像传感器、处理器、图像存储器和显示器；
[0008]所述可见光图像传感器信号连接于所述处理器，以采集包含所述危险品的被检测对象的可见光图像，并将所述可见光图像传输至所述处理器；
[0009]所述红外图像传感器信号连接于所述处理器，以采集包含所述危险品的被检测对象的红外图像，并将所述红外图像传输至所述处理器；
[0010]所述处理器对所述可见光图像和红外图像进行处理，得到处理后的可见光图像和处理后的红外图像；[0011]所述图像存储器信号连接于所述处理器，以存储所述处理后的可见光图像和处理后的红外图像；
[0012]所述显示器信号连接于所述处理器，以显示所述处理后的图像。
[0013]可选的，所述图像存储器和/或显示器通过WIFI无线数据传输模块、蓝牙无线数据传输模块或Zigbee无线数据传输模块连接至所述处理器。
[0014]本发明解决第二个技术问题采用如下技术方案:一种利用所述危险品检测装置检测危险品的方法，包括以下步骤:
[0015]S10、利用所述可见光图像传感器和红外图像传感器对包含所述危险品的被检测对象进行图像采集，分别得到原始RGB格式的可见光图像和原始RGB格式的红外图像；
[0016]S20、将原始RGB格式的可见光图像转换为YIQ格式的可见光图像；
[0017]S30、根据所述HQ格式的可见光图像生成可见光灰度图像；
[0018]S40、将原始RGB格式的红外图像转化为红外灰度图像；
[0019]S50、将所述红外灰度图像进行像素值反转，得到反转后的红外灰度图像；
[0020]S60、将所述可见光灰度图像、红外灰度图像和反转后的红外灰度图像进行图像融合，得到融合后的图像；
[0021]S70、将所述融合后的图像生成YIQ格式的融合图像；
[0022]S80、将所述HQ格式的融合图像转换为RGB格式的融合图像；
[0023]S90、将所述RGB格式的融合图像显示在所述显示器上。
[0024]可选的，在所述步骤SlO之后，步骤S20之前，还包括步骤S15:
[0025]S15、对原始RGB格式的可见光图像和原始RGB格式的红外图像进行校准处理和桢同步处理，使得所述原始RGB格式的可见光图像与所述原始RGB格式的红外图像的像素与内容匹配。
[0026]可选的，将所述步骤S80和S90替换为:
[0027]S100、将原始RGB格式的红外图像转化为YIQ格式的红外图像；
[0028]S110、将? Q格式的融合图像和? Q格式的红外图像进行图像融合，得到最终的融合图像；
[0029]S120、将所述最终的融合图像转化为最终的灰度图像；
[0030]S130、对所最终的灰度图像进行二维化处理，得到二维化灰度图像；
[0031]S140、将所述二维化灰度图像中的白色部分与所述原始RGB格式的可见光图像融合，并得到待输出的图像；
[0032]S150、对所述二维化灰度图像中是否存在危险品信息进行判断；
[0033]S160、当步骤S150中，未发现危险品，将原始RGB格式的可见光图像在所述显示器上显示;
[0034]S170、当步骤S150中，发现危险品，将所述待输出的图像在所述显示器上显示。
[0035]可选的，所述步骤S130具体包括以下步骤:
[0036]S1301、设定阈值；
[0037]S1302、将大于等于所述阈值的像素点的值设置为I ;
[0038]S1303、将小于所述阈值的像素点的值设置为O得到二维化灰度图像。
[0039]可选的，所述步骤S140具体包括以下步骤:[0040]S1401、将二维化后的图像进行三维拓展；
[0041]S1402、将所述像素点的值为I的像素点替换相同位置的原始RGB格式的可见光图像的像素点，并将所述相同位置的原始RGB格式的可见光图像的像素点的值设置为(I, I, I)。
[0042]可选的，所述步骤S60中的图像融合的算法为:图像线性融合算法或基于离散小波变换的图像融合算法。
[0043]本发明具有如下有益效果:
[0044]本发明的危险品检测装置包括可见光图像传感器、红外图像传感器和处理器，所述可见光图像传感器将其采集的原始RGB格式的可见光图像传输给处理器，所述红外图像传感器将其采集的原始RGB格式的红外图像传输给处理器，所述处理器对所述原始RGB格式的可见光图像和原始RGB格式的红外图像进行处理和融合，并通过所述显示器输出所述处理和融合后的图像，以充分利用所述原始RGB格式的可见光图像的清晰度和原始RGB格式的红外图像对所述危险品的温度的敏感性，实现对所述危险品的检测(例如枪支，管制刀具)，本危险品检测装置在采集原始RGB格式的可见光图像和原始RGB格式的红外图像后，人员正常通行，无需驻足即可以实现检测，从而提高了检测效率，能满足较大的人流量检测、较大范围的检测和同时对多目标进行检测。
[0045]本发明的危险品检测方法由于采用了上述危险品检测装置，且通过将所述可见光图像传感器所采集的原始RGB格式的可见光图像转化为YIQ格式的可见光图像，将所述红外图像传感器所采集的原始RGB格式的红外图像转化为红外灰度图像和反转后的红外灰度图像，对所述YIQ格式的可见光图像、所述红外灰度图像和所述反转后的红外灰度图像进行融合，将融合后的图像转化为RGB格式的融合图像，并在所述显示器上输出(显示器包括本能显示和移动显示)，以方便工作人员根据对所述显示器显示的图像判断是否存在危险品以及携带危险品的人，可见本检测方法也无需驻足即可以实现检测，从而提高了检测效率，能满足较大的人流量检测、较大范围的检测和同时对多目标进行检测。
【专利附图】
【附图说明】
[0046]图1为本发明的危险品检测装置的结构示意图；
[0047]图2为本发明的危险品检测方法的流程图；
[0048]图3为本发明的二维化灰度图像的危险品检测的流程图。
[0049]图中标记示意为:1_可见光图像传感器；2_红外图像传感器；3_处理器；4_图像存储器；5_显不器。
【具体实施方式】
[0050]下面结合实施例及附图对本发明的技术方案作进一步阐述。
[0051]实施例1
[0052]参考图1-3，本实施例提供了一种危险品检测装置，包括可见光图像传感器1、红外图像传感器2、处理器3、图像存储器4和显示器5 ；
[0053]所述可见光图像传感器I信号连接于所述处理器3，以采集包含所述危险品的被检测对象的可见光图像，并将所述可见光图像传输至所述处理器；[0054]所述红外图像传感器2信号连接于所述处理器3，以采集包含所述危险品的被检测对象的红外图像，并将所述红外图像传输至所述处理器；
[0055]所述处理器3对所述可见光图像和红外图像进行处理，得到处理后的可见光图像和处理后的红外图像；
[0056]所述图像存储器4信号连接于所述处理器3，以存储所述处理后的可见光图像和处理后的红外图像；其中所述处理器3对所述可见光图像和红外图像进行处理的方法包括对所述可见光图像和红外图像进行压缩。
[0057]所述显示器5信号连接于所述处理器3，以显示所述处理后的图像。
[0058]本发明的危险品检测装置包括可见光图像传感器1、红外图像传感器2和处理器3，所述可见光图像传感器I将其采集的原始RGB格式的可见光图像传输给处理器3，所述红外图像传感器2将其采集的原始RGB格式的红外图像传输给处理器3，所述处理器3对所述原始RGB格式的可见光图像和原始RGB格式的红外图像进行处理和融合，并通过所述显示器5输出所述处理和融合后的图像，以充分利用所述原始RGB格式的可见光图像的清晰度和原始RGB格式的红外图像对所述危险品的温度的敏感性，实现对所述危险品的检测，本危险品检测装置在采集原始RGB格式的可见光图像和原始RGB格式的红外图像后，人员正常通行，无需驻足即可以实现检测，从而提高了检测效率，能满足较大的人流量检测、较大范围的检测和同时对多目标进行检测。
[0059]本实施例中，可选的，所述显示器为移动终端的显示器，例如手机或车载显示装置等，以在将所述危险品检测装置设置于公共场所时，工作人员可以在非现场工作。
[0060]本实施例中，可选的，所述图像存储器4和/或显示器5通过WIFI无线数据传输模块、蓝牙无线数据传输模块或Zigbee无线数据传输模块连接至所述处理器，以将所述图像存储器4和/或显示器5放置在不同的位置，从而方便工作人员对所述显示器进行监控。
[0061]本实施例中，可选的，所述图像存储器4包括本地存储器和/或云存储终端，以实现对所述可见光图像和红外图像的存储。
[0062]本实施例中，可选的，所述处理器3为FPGA、FMC或ARM处理器，且所述危险品检测装置还包括报警装置，所述报警装置信号连接至所述处理器3，以当所述红外图像传感器2检测到危险品时，进行报警。
[0063]本实施例中，可选的，所述危险品包括枪支、管制刀具等与人体温度不同的物体，以充分发挥所述红外图像传感器对温度的敏感性，以在所述红外图像中能区分人体和所述危险品。
[0064]实施例2
[0065]参考图1-3，本实施例提供了一种利用所述危险品检测装置检测危险品的方法，包括以下步骤:
[0066]S10、利用所述可见光图像传感器I和红外图像传感器2对包含所述危险品的被检测对象进行图像采集，分别得到原始RGB格式的可见光图像和原始RGB格式的红外图像；以通过所述可见光图像传感器I捕获实时的彩色图像，即得到原始RGB格式的可见光图像；所述红外图像传感器2捕获实时的彩色图像，即得到原始RGB格式的红外图像；且所述可见光图像传感器I的分辨率为所述红外图像传感器2的分辨率的2-4倍，即所述原始RGB格式的可见光图像的分辨率为所述原始RGB格式的的红外图像分辨率的2-4倍，以方便后续的图像校准与图像融合处理；
[0067]S20、将原始RGB格式的可见光图像转换为YIQ格式的可见光图像；通过从RGB到YIQ色彩空间变换，将原始RGB格式的可见光图像的色彩信息与亮度信息分离，为后续图像融合做准备，且本发明中的YIQ格式的可见光图像中，代表图像亮度(luminance)与代表图像色彩(chrominance)的部分是独立的，即当将图像的亮度信息单独提取出来并对其处理时，并不会该变原有图像的色彩信息；反之亦然。正是由于YIQ格式的图像这个特点，当将被检测的危险品温度信息(由所述原始RGB格式的红外图像所携带的信息)加载到原始RGB格式的可见光图像中，并不改变原有可见光图像的其他任何信息，例如色彩；以提高所述危险品检测方法的效果；
[0068]S30、根据所述HQ格式的可见光图像生成可见光灰度图像；此步骤将YIQ格式的可见光图像中的亮度信息(luminance)单独提取出来，生成一维的可见光灰度图像；即将YIQ格式的可见光图像中的亮度信息单独提取出来，并生成对应的灰度图像；以方便后续的图像融合处理；
[0069]S40、将原始RGB格式的红外图像转化为红外灰度图像；以方便后续的图像融合处理；
[0070]S50、将所述红外灰度图像进行像素值反转，得到反转后的红外灰度图像；以通过将所述反转后的灰度图像融合入所述融合后的图像，调节融合后的图像的亮度，防止融合后的图像过亮或者过暗，尽量使融合后的图像与可见光灰度图像保持一致；
[0071]S60、将所述可见光灰度图像、红外灰度图像和反转后的红外灰度图像进行图像融合，得到融合后的图像；所述融合后的图像为一维灰度图像，并且只包括新的亮度信息；更优选地，所述图像融合过程采用图像线性融合算法或基于离散小波变换的图像融合算法
坐寸ο
[0072]S70、将所述融合后的图像生成YIQ格式的融合图像；所述YIQ格式的融合图像中的亮度信息为新的亮度信息，即包含了被检测危险品的温度信息，但是并不改变原有RGB格式的可见光图像的色彩信息。
[0073]S80、将所述HQ格式的融合图像转换为RGB格式的融合图像；
[0074]S90、将所述RGB格式的融合图像显示在所述显示器上；
[0075]以通过上述步骤实现对所述危险品的检测，通过上述步骤可以看出，本发明的危险品检测方法通过RGB到YIQ色彩空间变换，对所述图像的亮度信息进行提取，而亮度信息即对应为危险品的位置和大小等信息，即可以通过该操作准确识别危险品以及携带危险品的人，可见本检测方法也无需驻足即可以实现检测，从而提高了检测效率，能满足较大的人流量检测、较大范围的检测和同时对多目标进行检测。
[0076]本实施例中，可选的，在所述步骤SlO之后，步骤S20之前，还包括步骤S15:
[0077]S15、对原始RGB格式的可见光图像和原始红外图像进行校准处理和桢同步处理，使得所述原始RGB格式的可见光图像与所述原始RGB格式的红外图像的像素与内容匹配；所述步骤S15的目的是使所述原始RGB格式的可见光图像和原始RGB格式的红外图像内容匹配，并同步输入到处理器3进行后续处理，以提高所述处理器3对所述原始RGB格式的可见光图像与所述原始RGB格式的红外图像的处理效果，和对危险品的位置进行识别的准确度。更优选地，图像校准处理的过程可采用成熟的图像校准算法，例如基于相位相关的图像校准算法，基于特征变换(scale invariant features transform)的图像校准算法,基于边缘匹配和多尺度小波变换的图像校准算法等。桢同步处理通过图像处理硬件自带桢同步模块实现，也可通过对硬件进行编程实现，例如基于VHDL的FPGA硬件编程。
[0078]本实施例中，可选的，将所述步骤S80和S90替换为:
[0079]S100、将原始RGB格式的红外图像转化为HQ格式的红外图像，为提取所述危险品做准备；
[0080]S110、将? Q格式的融合图像和? Q格式的红外图像进行图像融合，得到最终的融合图像，更优选地，所述图像融合算法为图像线性融合算法或基于离散小波变换的图像融合算法等；以将带有温度信息的YIQ格式的红外图像与YIQ格式的融合图像融合；
[0081]S120、将所述最终的融合图像转化为最终的灰度图像，以方便判别和提取所述危险品的位置和大小；
[0082]S130、对所最终的灰度图像进行二维化处理，得到二维化灰度图像；
[0083]S140、将所述二维化灰度图像中的白色部分与所述原始RGB格式的可见光图像融合，得到待输出的图像；即将所述二维化灰度图像中的有用信息，即白色部分融合到原始RGB格式的可见光图像中，并保证该白色部分在原始RGB格式的可见光图像中的大小位置均未发生改变；
[0084]S150、对所述二维化灰度图像中是否存在危险品信息进行判断；
[0085]S160、当步骤S150中，未发现危险品，将原始RGB格式的可见光图像在所述显示器5上显示；
[0086]S170、当步骤S150中，发现危险品，将所述待输出的图像在所述显示器5上显示。
[0087]以通过智能化目标选取，将危险品的信息显示在可见光图像中，对所述原始RGB格式的红外图像的色彩空间变换，提取出所述危险品的位置和大小等信息，方便工作人员决定是否对所述危险品携带者进行处理。
[0088]本实施例中，可选的，所述步骤S130具体包括以下步骤:
[0089]S1301、设定阈值，用于危险品的选择；
[0090]S1302、将大于等于所述阈值的像素点的值设置为I ;
[0091]S1303、将小于所述阈值的像素点的值设置为0，得到二维化灰度图像；
[0092]以对所述最终的灰度图像进行二值化处理，增加了危险品位置和大小所对应的像素的对比度，方便工作人员判别。
[0093]本实施例中，可选的，所述步骤S150的具体包括以下步骤:
[0094]S1501、当所述二值化后的灰度图像中不存在值为I的像素点，则判定为未发现危险品;
[0095]S1502、当所述二值化后的灰度图像中存在值为I的像素点，则判定为发现危险品；以实现对所述二值化灰度图像中是否存在危险品进行自动判断。
[0096]本实施例中，可选的，所述检测方法还包括步骤S180 ；
[0097]S180、当步骤S150中，发现危险品，进行报警。
[0098]本实施例中，可选的，所述步骤S1301中的设定阈值，可以设置为128;或者根据具体的应用场合人工调试设定，设定的原则就是选取出可疑目标，同时去除掉没有价值信息；当然任何系统都没有绝对意义上的智能，在存在漏选和误选的情况下，阀值设定的原则是宁可误选不可漏选；或者阀值设定也可以采用图像二元化的自适应的算法，例如BackPropagation 算法。
[0099]本实施例中，可选的，所述步骤S140具体包括以下步骤:
[0100]S1401、将二值化后的灰度图像进行三维拓展；即将二维的图像信息进行复制变为3维。
[0101]S1402、将所述像素点的值为I的像素点替换相同位置的原始RGB格式的可见光图像的像素点，并将所述相同位置的原始RGB格式的可见光图像的像素点的值设置为(I, 1，1)，以在所述待输出的图像中显示所述危险品的大小和位置，方便工作人员判别。
[0102]以上实施例的先后顺序仅为便于描述，不代表实施例的优劣。
[0103]最后应说明的是:以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
【权利要求】
1.一种危险品检测装置，其特征在于，包括可见光图像传感器、红外图像传感器、处理器、图像存储器和显示器； 所述可见光图像传感器信号连接于所述处理器，以采集包含所述危险品的被检测对象的可见光图像，并将所述可见光图像传输至所述处理器； 所述红外图像传感器信号连接于所述处理器，以采集包含所述危险品的被检测对象的红外图像，并将所述红外图像传输至所述处理器； 所述处理器对所述可见光 图像和红外图像进行处理，得到处理后的可见光图像和处理后的红外图像； 所述图像存储器信号连接于所述处理器，以存储所述处理后的可见光图像和处理后的红外图像； 所述显示器信号连接于所述处理器，以显示所述处理后的图像。
2.根据权利要求1所述的危险品检测装置，其特征在于，所述图像存储器和/或显示器通过WIFI无线数据传输模块、蓝牙无线数据传输模块或Zigbee无线数据传输模块连接至所述处理器。
3.一种利用权利要求2中所述危险品检测装置检测危险品的方法，其特征在于，包括以下步骤: S10、利用所述可见光图像传感器和红外图像传感器对包含所述危险品的被检测对象进行图像采集，分别得到原始RGB格式的可见光图像和原始RGB格式的红外图像； S20、将原始RGB格式的可见光图像转换为YIQ格式的可见光图像； S30、根据所述HQ格式的可见光图像生成可见光灰度图像； S40、将原始RGB格式的红外图像转化为红外灰度图像； S50、将所述红外灰度图像进行像素值反转，得到反转后的红外灰度图像； S60、将所述可见光灰度图像、红外灰度图像和反转后的红外灰度图像进行图像融合，得到融合后的图像； S70、将所述融合后的图像生成YIQ格式的融合图像； S80、将所述HQ格式的融合图像转换为RGB格式的融合图像； S90、将所述RGB格式的融合图像显示在所述显示器上。
4.根据权利要求3所述的检测危险品的方法，其特征在于，在所述步骤SlO之后，步骤S20之前，还包括步骤S15: S15、对原始RGB格式的可见光图像和原始RGB格式的红外图像进行校准处理和桢同步处理，使得所述原始RGB格式的可见光图像与所述原始RGB格式的红外图像的像素与内容匹配。
5.根据权利要求4所述的检测危险品的方法，其特征在于，将所述步骤S80和S90替换为: S100、将原始RGB格式的红外图像转化为YIQ格式的红外图像； S110、将HQ格式的融合图像和HQ格式的红外图像进行图像融合，得到最终的融合图像； S120、将所述最终的融合图像转化为最终的灰度图像； S130、对所最终的灰度图像进行二维化处理，得到二维化灰度图像；S140、将所述二维化灰度图像中的白色部分与所述原始RGB格式的可见光图像融合，并得到待输出的图像； S150、对所述二维化灰度图像中是否存在危险品信息进行判断； S160、当步骤S150中，未发现危险品，将原始RGB格式的可见光图像在所述显示器上显示； S170、当步骤S150中，发现危险品，将所述待输出的图像在所述显示器上显示。
6.根据权利要求5所述的检测危险品的方法，其特征在于，所述步骤S130具体包括以下步骤: 51301、设定阈值； 51302、将大于等于所述阈值的像素点的值设置为I; 51303、将小于所述阈值的像素点的值设置为O得到二维化灰度图像。
7.根据权利要求6所述的检测危险品的方法，其特征在于，所述步骤S140具体包括以下步骤: 51401、将二维化后的图像进行三维拓展； 51402、将所述像素点的值为I的像素点替换相同位置的原始RGB格式的可见光图像的像素点，并将所述相同位置的原始RGB格式的可见光图像的像素点的值设置为(1，1，I)。`
8.根据权利要求3所述的检测危险品的方法，其特征在于，所述步骤S60中的图像融合的算法为:图像线性融合算法或基于离散小波变换的图像融合算法。
【文档编号】G01V8/10GK103777252SQ201410062083
【公开日】2014年5月7日 申请日期:2014年2月24日 优先权日:2014年2月24日
【发明者】黄晓鹏 申请人:黄晓鹏