一种车辆信息融合方法、装置、电子设备及存储介质与流程

本技术涉及图像处理，尤其涉及一种车辆信息融合方法、装置、电子设备及存储介质。

背景技术：

1、当前，道路中通常架设有采集车辆不同方向图像的一个或多个采集设备。通过对采集到的图像进行识别，可以得到图像中车辆的车牌号码、车辆颜色、车辆型号等车辆信息，将这些车辆信息输入到电子设备中，电子设备将同一车辆在不同方向采集到的车辆信息关联起来，可以得到该车辆的行驶道路、不同方向的车辆图像、准确的收费车型等信息，从而应用在确定车辆行驶道路、训练模型识别车辆的不同方向、车辆收费等场景中。上述电子设备执行的车辆信息融合过程的工作量较大。

2、目前，有通过按照不同采集方向的车辆图像之间的采集时间差异，将同一车辆在不同方向采集到的车辆抓拍信息进行关联的方法，也即同一车辆被不同采集方向的采集设备采集到的时间差是固定的，根据车辆行驶方向上第一个采集设备采集车辆图像的时间以及上述固定的时间差，确定同一车辆在其他采集方向的车辆图像，再将该车辆在不同采集方向的车辆抓拍信息关联起来。但是，若电子设备接收不同采集方向的车辆抓拍信息的顺序与不同采集方向的车辆抓拍信息被采集时间顺序不同，则电子设备可能会将不同车辆的车辆抓拍信息关联在一起，造成车辆抓拍信息融合过程出现差错。

3、因此，如何准确融合同一车辆在不同采集方向的车辆抓拍信息，且不依赖于车辆抓拍信息的采集时间顺序，是一个需要解决的问题。

技术实现思路

1、本技术提供一种车辆信息融合方法、装置、电子设备及存储介质，用于在不依赖于车辆抓拍信息的采集时间顺序的情况下，准确融合将同一车辆在不同采集方向的车辆抓拍信息。为实现上述技术目的，本技术采用如下技术方案：

2、第一方面，本技术实施例提供了一种车辆信息融合方法，应用于电子设备，该方法包括：在首次获取到包含第一车牌号码的第一车辆抓拍信息的情况下，以第一车牌号码为标识信息建立第一待融合队列，并将第一车辆抓拍信息存储在第一待融合队列中；在获取到第一车辆抓拍信息之后的目标时长内，若获取到第二车辆抓拍信息，则判断第二车辆抓拍信息对应的待比对车牌号码与第一车牌号码是否相同，得到第一判断结果；根据第一判断结果，确定是否对第二车辆抓拍信息和第一待融合队列进行融合。本技术提供的技术方案至少带来以下有益效果：在首次获取到包含第一车牌号码的第一车辆抓拍信息时，以第一车牌号码为标识信息建立第一待融合队列，通过判断第二车辆抓拍信息对应的待比对车牌号码与第一车牌号码是否相同，根据判断结果可以确定是否可以对第二车辆抓拍信息和第一待融合队列进行融合，即使车辆抓拍信息的采集顺序与电子设备接收车辆抓拍信息的顺序不同，也可以准确融合同一车辆在不同采集方向的车辆抓拍信息，避免出现不同车辆的车辆抓拍信息被融合在一起的失误，车辆抓拍信息融合结果也更加准确。同时，通过在获取到第一车辆抓拍信息之后的目标时长内对第二车辆抓拍信息和第一待融合队列进行融合，目标时长结束后，表明第一车牌号码表征的车辆的车辆抓拍信息可能被拍摄完毕，目标时长的设置可以避免电子设备长时间等待车辆抓拍信息，减少电子设备对车辆抓拍信息进入融合所需的时长。

3、在一种可能的实现方式中，第二车辆抓拍信息包括第二车辆图像和第二车牌号码，第二车牌号码为从第二车辆图像中识别出的车牌号码；第二车辆抓拍信息对应的待比对车牌号码为第二车牌号码和第三车牌号码，第三车牌号码为在不存在标识信息与第二车牌号码相同的待融合队列的情况下，对第二车辆图像进行二次识别得到的车牌号码。

4、在一种可能的实现方式中，根据第一判断结果，确定是否对第二车辆抓拍信息和第一待融合队列进行融合，包括：在第一判断结果表征第一车牌号码与第二车牌号码相同的情况下，或者，在第一判断结果表征第一车牌号码与第二车牌号码不同，第一车牌号码与第三车牌号码相同的情况下，对第二车辆抓拍信息和第一待融合队列进行融合。

5、在一种可能的实现方式中，第二车辆抓拍信息还包括第二采集方向，第二采集方向为第二车辆抓拍信息中的第二车辆图像的采集方向；对第二车辆抓拍信息和第一待融合队列进行融合，包括：根据第一待融合队列中各个车辆抓拍信息中的采集方向，以及第二采集方向，对第二车辆抓拍信息和第一待融合队列进行融合。

6、在一种可能的实现方式中，根据第一待融合队列中各个车辆抓拍信息中的采集方向与第二采集方向，对第二车辆抓拍信息和第一待融合队列进行融合，包括：若第一待融合队列中不存在采集方向与第二采集方向相同的车辆抓拍信息，将第二车辆抓拍信息存储在第一待融合队列中。

7、在一种可能的实现方式中，根据第一待融合队列中各个车辆抓拍信息中的采集方向与第二采集方向，对第二车辆抓拍信息和第一待融合队列进行融合，还包括：若第一待融合队列中存在采集方向与第二采集方向相同的第三车辆抓拍信息，则比对第三车辆抓拍信息中的第四车牌号码与第一车牌号码，得到比对结果；根据比对结果，对第二车辆抓拍信息和第一待融合队列进行融合。

8、在一种可能的实现方式中，根据比对结果，对第二车辆抓拍信息和第一待融合队列进行融合，包括：若比对结果表征第四车牌号码与第一车牌号码不同，则用第二车辆抓拍信息替换第三车辆抓拍信息。

9、在一种可能的实现方式中，根据比对结果，对第二车辆抓拍信息和第一待融合队列进行融合，还包括：若比对结果表征第四车牌号码与第一车牌号码相同，且第二车辆抓拍信息对应的待比对车牌号码的可信度大于第四车牌号码的可信度，则用第二车辆抓拍信息替换第三车辆抓拍信息。

10、在一种可能的实现方式中，根据第一判断结果，确定是否对第二车辆抓拍信息和第一待融合队列进行融合，包括：若不存在标识信息与待比对车牌号码相同的待融合队列，则在接收到第二车辆抓拍信息的目标时长内，查找是否存在标识信息与待比对车牌号码相差n位的待融合队列，n为正整数；若查找到第二待融合队列的标识信息与待比对车牌号码相差n位，则根据待比对车牌号码的可信度、以及每个目标车牌号码的可信度，确定每个目标车牌号码对应的综合可信度，目标车牌号码为第二待融合队列的标识信息，目标车牌号码的可信度为第二待融合队列中采集时间最早的车辆抓拍信息中的车牌号码的可信度；判断每个目标车牌号码对应的综合可信度是否符合预设可信度条件，得到第二判断结果；根据第二判断结果，确定是否对第二车辆抓拍信息和第二待融合队列进行融合。

11、在一种可能的实现方式中，查找是否存在标识信息与待比对车牌号码相差n位的待融合队列，包括：查找是否存在标识信息与待比对车牌号码相差i位的待融合队列，i为正整数；在不存在标识信息与待比对车牌号码相差i位的待融合队列的情况下，查找是否存在标识信息与待比对车牌号码相差i+1位的待融合队列；其中，在首次查找时，i为1。

12、在一种可能的实现方式中，根据待比对车牌号码的可信度、以及每个目标车牌号码的可信度，确定每个目标车牌号码对应的综合可信度，包括：获取与目标车牌号码相差n位的第二车牌号码或第三车牌号码的可信度；根据每个目标车牌号码的可信度，以及与目标车牌号码相差n位的第二车牌号码或第三车牌号码的可信度，确定每个目标车牌号码对应的综合可信度。

13、在一种可能的实现方式中，根据第二判断结果，确定是否对第二车辆抓拍信息和第二待融合队列进行融合，包括：若第二判断结果表征符合预设可信度条件的综合可信度为一个，则判断第三待融合队列中是否存在第二采集方向的车辆抓拍信息，得到第三判断结果，第二采集方向为第二车辆抓拍信息中的第二车辆图像的采集方向，第三待融合队列为，符合预设可信度条件的综合可信度对应的目标车牌号码，所对应的第二待融合队列；若第三判断结果为第三待融合队列中不存在第二采集方向的车辆抓拍信息，则将第二车辆抓拍信息存入第三待融合队列中；若第三判断结果为第三待融合队列中存在第二采集方向的车辆抓拍信息，则判断第三待融合队列中第二采集方向的车辆抓拍信息中的第五车牌号码是否与目标车牌号码相同，得到第四判断结果；根据第四判断结果，对第二车辆抓拍信息和第三待融合队列进行融合。

14、在一种可能的实现方式中，根据第四判断结果，对第二车辆抓拍信息和第三待融合队列进行融合，包括：若第四判断结果表征第三待融合队列中第二采集方向的车辆抓拍信息中的第五车牌号码与目标车牌号码不同，确定第五车牌号码与目标车牌号码之间的相同字符数量为第一数值，以及与目标车牌号码相差n位的待比对车牌号码与目标车牌号码之间的相同字符数量为第二数值；在第二数值大于第一数值，或者第二数值等于第一数值，且与目标车牌号码相差n位的待比对车牌号码的可信度大于第五车牌号码的可信度的情况下，用第二车辆抓拍信息替换第三待融合队列中第二采集方向的车辆抓拍信息。

15、在一种可能的实现方式中，根据第二判断结果，确定是否对第二车辆抓拍信息和第二待融合队列进行融合，还包括：若第二判断结果表征存在多个综合可信度均符合预设可信度条件，从符合预设可信度条件的多个综合可信度对应的目标车牌号码所对应的第二待融合队列中，确定与第二车辆抓拍信息相似度最高的车辆抓拍信息所在的第四待融合队列；根据第二采集方向，对第二车辆抓拍信息和第四待融合队列进行融合。

16、在一种可能的实现方式中，该方法还包括：若第一车牌号码无字符，且第二车牌号码无字符，在第一车辆抓拍信息与第二车辆抓拍信息的相似度在预设相似度范围内的情况下，对第二车辆抓拍信息和第一待融合队列进行融合。

17、第二方面，本技术提供一种车辆信息融合装置，包括：

18、获取模块，用于获取包含第一车牌号码的第一车辆抓拍信息；

19、处理模块，用于在首次获取到包含第一车牌号码的第一车辆抓拍信息的情况下，以第一车牌号码为标识信息建立第一待融合队列，并将第一车辆抓拍信息存储在第一待融合队列中；处理模块还用于，在获取到第一车辆抓拍信息之后的目标时长内，若获取到第二车辆抓拍信息，判断第二车辆抓拍信息对应的待比对车牌号码与第一车牌号码是否相同，得到第一判断结果；

20、处理模块还用于，根据第一判断结果，确定是否对第二车辆抓拍信息和第一待融合队列进行融合。

21、在一种可能的实现方式中，第二车辆抓拍信息包括第二车辆图像和第二车牌号码，第二车牌号码为从第二车辆图像中识别出的车牌号码；第二车辆抓拍信息对应的待比对车牌号码为第二车牌号码和第三车牌号码，第三车牌号码为在不存在标识信息与第二车牌号码相同的待融合队列的情况下，对第二车辆图像进行二次识别得到的车牌号码。

22、在一种可能的实现方式中，处理模块具体用于，在第一判断结果表征第一车牌号码与第二车牌号码相同的情况下，或者，在第一判断结果表征第一车牌号码与第二车牌号码不同，第一车牌号码与第三车牌号码相同的情况下，对第二车辆抓拍信息和第一待融合队列进行融合。

23、在一种可能的实现方式中，第二车辆抓拍信息还包括第二采集方向，第二采集方向为第二车辆抓拍信息中的第二车辆图像的采集方向；处理模块具体用于，根据第一待融合队列中各个车辆抓拍信息中的采集方向，以及第二采集方向，对第二车辆抓拍信息和第一待融合队列进行融合。

24、在一种可能的实现方式中，处理模块具体用于，若第一待融合队列中不存在采集方向与第二采集方向相同的车辆抓拍信息，将第二车辆抓拍信息存储在第一待融合队列中。在一种可能的实现方式中，处理模块具体用于，若第一待融合队列中存在采集方向与第二采集方向相同的第三车辆抓拍信息，则比对第三车辆抓拍信息中的第四车牌号码与第一车牌号码，得到比对结果；根据比对结果，对第二车辆抓拍信息和第一待融合队列进行融合。在一种可能的实现方式中，处理模块具体用于，若比对结果表征第四车牌号码与第一车牌号码不同，则用第二车辆抓拍信息替换第三车辆抓拍信息。

25、在一种可能的实现方式中，处理模块具体用于，若比对结果表征第四车牌号码与第一车牌号码相同，且第二车辆抓拍信息对应的待比对车牌号码的可信度大于第四车牌号码的可信度，则用第二车辆抓拍信息替换第三车辆抓拍信息。

26、在一种可能的实现方式中，处理模块具体用于，若不存在标识信息与待比对车牌号码相同的待融合队列，则在接收到第二车辆抓拍信息的目标时长内，查找是否存在标识信息与待比对车牌号码相差n位的待融合队列，n为正整数；若查找到第二待融合队列的标识信息与待比对车牌号码相差n位，则根据待比对车牌号码的可信度、以及每个目标车牌号码的可信度，确定每个目标车牌号码对应的综合可信度，目标车牌号码为第二待融合队列的标识信息，目标车牌号码的可信度为第二待融合队列中采集时间最早的车辆抓拍信息中的车牌号码的可信度；判断每个目标车牌号码对应的综合可信度是否符合预设可信度条件，得到第二判断结果；根据第二判断结果，确定是否对第二车辆抓拍信息和第二待融合队列进行融合。在一种可能的实现方式中，处理模块具体用于，查找是否存在标识信息与待比对车牌号码相差i位的待融合队列，i为正整数；在不存在标识信息与待比对车牌号码相差i位的待融合队列的情况下，查找是否存在标识信息与待比对车牌号码相差i+1位的待融合队列；其中，在首次查找时，i为1。

27、在一种可能的实现方式中，处理模块具体用于，获取与目标车牌号码相差n位的第二车牌号码或第三车牌号码的可信度；根据每个目标车牌号码的可信度，以及与目标车牌号码相差n位的第二车牌号码或第三车牌号码的可信度，确定每个目标车牌号码对应的综合可信度。在一种可能的实现方式中，处理模块具体用于，若第二判断结果表征符合预设可信度条件的综合可信度为一个，则判断第三待融合队列中是否存在第二采集方向的车辆抓拍信息，得到第三判断结果，第二采集方向为第二车辆抓拍信息中的第二车辆图像的采集方向，第三待融合队列为，符合预设可信度条件的综合可信度对应的目标车牌号码，所对应的第二待融合队列。

28、在一种可能的实现方式中，若第三判断结果为第三待融合队列中不存在第二采集方向的车辆抓拍信息，则将第二车辆抓拍信息存入第三待融合队列中；若第三判断结果为第三待融合队列中存在第二采集方向的车辆抓拍信息，则判断第三待融合队列中第二采集方向的车辆抓拍信息中的第五车牌号码是否与目标车牌号码相同，得到第四判断结果；根据第四判断结果，对第二车辆抓拍信息和第三待融合队列进行融合。

29、在一种可能的实现方式中，处理模块具体用于，若第四判断结果表征第三待融合队列中第二采集方向的车辆抓拍信息中的第五车牌号码与目标车牌号码不同，确定第五车牌号码与目标车牌号码之间的相同字符数量为第一数值，以及与目标车牌号码相差n位的待比对车牌号码与目标车牌号码之间的相同字符数量为第二数值；在第二数值大于第一数值，或者第二数值等于第一数值，且与目标车牌号码相差n位的待比对车牌号码的可信度大于第五车牌号码的可信度的情况下，用第二车辆抓拍信息替换第三待融合队列中第二采集方向的车辆抓拍信息。

30、在一种可能的实现方式中，处理模块具体用于，若第二判断结果表征存在多个综合可信度均符合预设可信度条件，从符合预设可信度条件的多个综合可信度对应的目标车牌号码所对应的第二待融合队列中，确定与第二车辆抓拍信息相似度最高的车辆抓拍信息所在的第四待融合队列；根据第二采集方向，对第二车辆抓拍信息和第四待融合队列进行融合。在一种可能的实现方式中，处理模块还用于，若第一车牌号码无字符，且第二车牌号码无字符，在第一车辆抓拍信息与第二车辆抓拍信息的相似度在预设相似度范围内的情况下，对第二车辆抓拍信息和第一待融合队列进行融合。

31、第三方面，本技术提供一种电子设备，包括：一个或多个处理器；一个或多个存储器；其中，一个或多个存储器用于存储计算机程序代码，计算机程序代码包括计算机指令，当一个或多个处理器执行计算机指令时，电子设备执行上述第一方面所提供的任一种车辆信息融合方法。

32、第四方面，本技术提供一种计算机可读存储介质，计算机可读存储介质存储有计算机执行指令，当计算机执行指令在计算机上运行时，使得计算机执行上述第一方面所提供的任一种车辆信息融合方法。

33、第五方面，本技术提供一种计算机程序产品，该计算机程序产品包括计算机指令，当计算机指令在电子设备上运行时，使得电子设备执行如第一方面及其任一种可能的设计方式所述的车辆信息融合方法。

34、本技术中第二方面到第五方面及其各种实现方式的具体描述，可以参考第一方面及其各种实现方式中的详细描述；并且，第二方面到第五方面及其各种实现方式的有益效果，可以参考第一方面及其各种实现方式中的有益效果分析，此处不再赘述。

35、本技术的这些方面或其他方面在以下的描述中会更加简明易懂。