多路视频检测系统中的目标检测方法、装置及服务器的制造方法
【专利摘要】本发明公开了一种多路视频检测系统中的目标检测方法、装置及服务器，该方法包括：获取摄像头采集的第一视频图像；根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量；根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个GPU检测所述第一视频图像的检测时间；将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测。该方案确保针对多路视频检测系统中的目标的检测在最短时间内完成，进而确保了目标检测的实时性。
【专利说明】多路视频检测系统中的目标检测方法、装置及服务器
【技术领域】
[0001]本发明涉及通信【技术领域】，尤指一种多路视频检测系统中的目标检测方法、装置及服务器。
【背景技术】
[0002]目标检测是指从一副图片或者一帧视频图像中标定出目标的位置和大小，比如人脸检测、车牌检测等等；目标检测是视频监控中的一个重要环节，通常采用的算法是:用一个固定大小(例如:20X20)的窗口，按照固定的步长(例如:1个像素)在待检测图像上滑动，窗口每次滑动到一个位置，都判断窗口中包含的图像是否为待检测目标。该算法是一种计算密集型算法，对于一帧1080P (大小为1920X 1080)的视频图像，需要计算2014000次，这样会导致中央处理器(Central Processing Unit, CPU)负载很重。为了降低CPU的负载，将部分检测功能转移到图形处理器(Graphic Processing Unit,GPU)上。在多路视频检测系统中，为了满足目标检测的实时性需求，通常会包含多个GPU，如图1所示。
[0003]每一视频图像的目标检测时间与该图像中包含的目标数量成正相关，目标数量越多，检测时间越长。针对多路视频的目标检测对实时性要求较高，需要在规定时长内完成所有视频的检测。目前，通常的做法是为每个GPU分配固定的一路或多路视频进行检测，这样极易出现GPU负载不均衡的现象，在某个GPU上处理的多路视频中，每一路视频的每一视频图像都包含多个目标时，该GPU非常忙碌，这就使得该GPU无法在规定时长内完成所有计算；而在另一个GPU处理的多路视频上，每一路视频的每一视频图像都包含少数目标或者不包含目标，该GPU非常空闲。当多个GPU负载不均衡时，可能会导致检测时间超时，影响目标检测的实时性。
【发明内容】
[0004]本发明实施例提供一种多路视频检测系统中的目标检测方法、装置以及服务器，用以解决现有基于多路视频的目标检测方法中存在的检测时间超时、影响目标检测的实时性的问题。
[0005]第一方面，提供一种多路视频检测系统中的目标检测方法，包括:
[0006]获取所述多路视频检测系统中的摄像头采集的第一视频图像；
[0007]根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，所述第二视频图像是所述摄像头在所述第一视频图像之前采集到的；
[0008]根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个图形处理器GPU检测所述第一视频图像的检测时间；
[0009]将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，每个所述GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测所述第一视频图像的检测时间之和。
[0010]结合第一方面，在第一种可能的实现方式中，还包括:
[0011]接收确定出的GPU发送的从所述第一视频图像中实际检测出的目标的数量。[0012]结合第一方面或者第一方面的第一种可能的实现方式，在第二种可能的实现方式中，根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，具体包括:
[0013]通过下列公式预测所述第一视频图像中包括的目标的数量:F' U=CiFiH+
(1-α ) F' i,t-l ；
[0014]其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的所述目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的所述目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的所述目标的数量，α为遗忘因子，0〈α〈I。
[0015]结合第一方面、第一方面的第一种可能的实现方式或者第一方面的第二种可能的实现方式，在第三种可能的实现方式中，在根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量之前，还包括:
[0016]获取一组实验图像，所述一组实验图像中每个实验图像包括的目标的数量均不同；
[0017]依次使用各个GPU检测所述一组实验图像；
[0018]记录各个GPU的检测时间与目标的数量的对应关系。
[0019]结合第一方面、第一方面的第一种可能的实现方式、第一方面的第二种可能的实现方式或者第一方面的第三种可能的实现方式，在第四种可能的实现方式中，根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个GPU检测所述第一视频图像的检测时间，具体包括:
[0020]若预测出的所述第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找所述整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测所述第一视频图像的检测时间；
[0021]若预测出的所述第一视频图像中包括的目标的数量为浮点数，则确定大小最接近所述浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测所述第一视频图像的检测时间。
[0022]结合第一方面、第一方面的第一种可能的实现方式、第一方面的第二种可能的实现方式、第一方面的第三种可能的实现方式或者第一方面的第四种可能的实现方式，在第五种可能的实现方式中，将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，具体包括:
[0023]计算各个GPU的总检测时间；
[0024]将总检查时间最短的GPU的标识ID信息与所述摄像头关联；
[0025]将所述第一视频图像发送给与所述摄像头关联的GPU的ID信息所标识的GPU进行目标检测。
[0026]第二方面，提供一种多路视频检测系统中的目标检测装置，包括:[0027]获取单元，用于获取所述多路视频检测系统中的摄像头采集的第一视频图像；
[0028]预测单元，用于根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，所述第二视频图像是所述摄像头在所述第一视频图像之前采集到的；
[0029]确定单元，用于根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个图形处理器GPU检测所述第一视频图像的检测时间；
[0030]收发单元，用于将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，每个所述GPU的总检测时间是该GI3U检测自身已接收且未完成检测的视频图像和检测所述第一视频图像的检测时间之和。
[0031]结合第二方面，在第二种可能的实现方式中，所述收发单元，还用于:
[0032]接收确定出的GPU发送的从所述第一视频图像中实际检测出的目标的数量。[0033]结合第二方面或者第二方面的第一种可能的实现方式，在第二种可能的实现方式中，所述预测单元，具体用于:
[0034]通过下列公式预测所述第一视频图像中包括的目标的数量:F' i；t=a Fi t^1+
(卜α ) P' i,t-l ；
[0035]其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的所述目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的所述目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的所述目标的数量，α为遗忘因子，0〈α〈I。
[0036]结合第二方面、第二方面的第一种可能的实现方式或者第二方面的第二种可能的实现方式，在第三种可能的实现方式中，所述确定单元，具体用于:
[0037]若预测出的所述第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找所述整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测所述第一视频图像的检测时间；
[0038]若预测出的所述第一视频图像中包括的目标的数量为浮点数，则确定大小最接近所述浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测所述第一视频图像的检测时间。
[0039]结合第二方面、第二方面的第一种可能的实现方式、第二方面的第二种可能的实现方式或者第二方面的第三种可能的实现方式，在第四种可能的实现方式中，所述收发单元，具体用于:
[0040]计算各个GPU的总检测时间；
[0041]将总检查时间最短的GPU的标识ID信息与所述摄像头关联；
[0042]将所述第一视频图像发送给与所述摄像头关联的GPU的ID信息所标识的GPU进行目标检测。
[0043]第三方面，提供一种服务器，包括:
[0044]处理器，用于获取多路视频检测系统中的摄像头采集的第一视频图像；根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，所述第二视频图像是所述摄像头在所述第一视频图像之前采集到的；根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个图形处理器GPU检测所述第一视频图像的检测时间；
[0045]收发器，用于将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，每个所述GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测所述第一视频图像的检测时间之和。
[0046]结合第三方面，在第一种可能的实现方式中，所述处理器，具体用于:
[0047]通过下列公式预测所述第一视频图像中包括的目标的数量:F' i；t=a Fi t^1+
(卜α ) P' i,t-l ；
[0048]其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的所述目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的所述目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的所述目标的数量，α为遗忘因子，0〈α〈I。
[0049]结合第三方面或者第三方面的第一种可能的实现方式，在第二种可能的实现方式中，所述处理器，具体用于:
[0050]若预测出的所述第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找所述整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测 所述第一视频图像的检测时间；
[0051]若预测出的所述第一视频图像中包括的目标的数量为浮点数，则确定大小最接近所述浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测所述第一视频图像的检测时间。
[0052]根据第一方面提供的多路视频检测系统中的目标检测方法、第二方面提供的多路视频检测系统中的目标检测装置或者第三方面提供的服务器，针对多路视频检测系统中摄像头采集的第一视频图像，不再固定分配给一个GPU进行目标检测，而是动态为其确定检测的GPU，首先预测第一视频图像中包括的目标的数量，然后确定各个GPU检测第一视频图像的检测时间，最后将总检测时间最短的GPU确定为检测第一视频图像的GPU,从而实现了各个GPU之间的负载均衡，确保针对多路视频检测系统中的目标的检测在最短时间内完成，进而确保了目标检测的实时性。
【专利附图】
【附图说明】
[0053]图1为现有技术中的多路视频检测系统的架构图；
[0054]图2为本发明实施例中多路视频检测系统中的目标检测方法的流程图；
[0055]图3为本发明实施例中能力曲线的示意图；
[0056]图4为本发明实施例中多路视频检测系统中的目标检测装置的结构示意图；
[0057]图5为本发明实施例中多路视频检测系统中的服务器的结构示意图。
【具体实施方式】[0058]针对现有的基于多路视频的目标检测方法中存在的检测时间超时、影响目标检测的实时性的问题，本发明实施例提供一种多路视频检测系统中的目标检测方法，该方法可以应用在如图1所示的多路视频检测系统中，该系统包括一个服务器、多个摄像头和多个GPU,服务器接收多个摄像头采集的视频图像，并分发给各个GPU进行目标检测。
[0059]该方法的流程如图2所示，执行主体可以是服务器，具体包括:
[0060]S20:获取多路视频检测系统中的摄像头采集的第一视频图像。
[0061]在多路视频检测系统中，一般会有多个摄像头，可以按照设定时间周期轮询获取各个摄像头采集的第一视频图像，设定时间周期可以根据实际需要确定，例如5s、6s、7.5s、IOs等等，也可以随机获取各个摄像头采集的第一视频图像，当然也可以采用其它方式获取。
[0062]S21:根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测第一视频图像中包括的目标的数量，第二视频图像是摄像头在第一视频图像之前采集到的。
[0063]首先在摄像头采集第一视频图像之前采集的视频图像中选取随机一个已检测视频图像或者选取时间最近的一个已检测视频图像作为第二视频图像，然后获取从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，据此可以预测出第一视频图像中包括的目标的数量。
[0064]其中，从第二视频图像中实际检测出的目标的数量是由检测第二视频图像的GPU提供的。
[0065]S22:根据预置的目标数量与检测时间的对应关系、以及预测出的第一视频图像中包括的目标的数量，确定多路视频检测系统中各个GPU检测第一视频图像的检测时间。
[0066]S23:将总检测时间最短的GPU确定为检测第一视频图像的GPU，并将第一视频图像发送给确定出的GPU进行目标检测，每个GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测第一视频图像的检测时间之和。
[0067]该方案中，针对多路视频检测系统中摄像头采集的第一视频图像，不再固定分配给一个GPU进行目标检测，而是动态为其确定检测的GPU，首先预测第一视频图像中包括的目标的数量，然后确定各个GPU检测第一视频图像的检测时间，最后将总检测时间最短的GPU确定为检测第一视频图像的GPU，从而实现了各个GPU之间的负载均衡，确保针对多路视频检测系统中的目标的检测在最短时间内完成，进而确保了目标检测的实时性。
[0068]具体的，上述S21中的根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测第一视频图像中包括的目标的数量，具体包括:
[0069]通过下列公式预测第一视频图像中包括的目标的数量:F' i t=a Fi,t-1+ (1-α )
F' i,t-1 ；
[0070]其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的目标的数量，F' 为预测的摄像头i采集的第二视频图像t-1中包括的目标的数量，Fi,t-1是实际检测出的摄像头i中采集的第二视频图像t-1中包括的目标的数量，a为遗忘因子，0〈α〈1，较佳值为0.5。
[0071]具体的，上述S21中的在根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测第一视频图像中包括的目标的数量之前，还包括:[0072]获取一组实验图像，一组实验图像中每个实验图像包括的目标的数量均不同；
[0073]依次使用各个GPU检测一组实验图像；
[0074]记录各个GPU的检测时间与目标的数量的对应关系。
[0075]下面以目标检测为人脸检测为例来说明，预先从将要检测的第一视频图像或者已经检测过的第二视频图像中提取一组图像，每张图像中包含0，1，2，...，N张人脸，这组图像作为实验图像；依次使用各个GPU来检测该组实验图像，记录各个GPU的检测时间与人脸数量的对应关系，以二元组〈人脸数，检测时间T>的形式记录，当然也可以采用其他形式近记录。
[0076]然后还可以人脸数量为横坐标、以检测时间为纵坐标，拟合出一条曲线，得到每个GPU的能力曲线，图3所示为一个GPU的能力曲线的示意图。
[0077]具体的，上述S22中的根据预置的目标数量与检测时间的对应关系、以及预测出的第一视频图像中包括的目标的数量，确定多路视频检测系统中各个GPU检测第一视频图像的检测时间，具体包括以下两种情况:
[0078]第一种情况，若预测出的第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测第一视频图像的检测时间。
[0079]在这种情况中，可以根据预测出的第一视频图像中包括的目标的数量直接从二元组或者能力曲线上查找到各个GPU的检测时间。
[0080]第二种情况，若预测出的第一视频图像中包括的目标的数量为浮点数，则确定大小最接近浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测第一视频图像的检测时间。
[0081]在这种情况中，无法根据预测出的第一频帧图像中包括的目标的数量直接从二元组或者能力曲线上查找到各个GPU的检测时间，首先需要确定大小最接近浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测第一视频图像的检测时间。
[0082]具体的，上述S23中的将总检测时间最短的GPU确定为检测第一视频图像的GPU，并将第一视频图像发送给确定出的GPU进行目标检测，具体包括:
[0083]计算各个GPU的总检测时间；
[0084]将总检查时间最短的GPU的标识(Identification, ID)信息与摄像头关联；
[0085]将第一视频图像发送给与摄像头关联的GPU的ID信息所标识的GPU进行目标检测。
[0086]动态调整检测多路视频的GPU，是为了实现负载均衡，从而使得全部检测完多路视频的时间最短，因此可以计算各个GPU的总检测时间，即各个GPU检测已接收到的视频图像和所述第一视频图像的检测时间之和。
[0087]将总检查时间最短的GPU的ID信息与该摄像头关联起来，将该GPU作为检测第一视频图像的GPU，并将第一视频图像发送给与该GPU进行目标检测。在下一次轮询到该摄像头之前的这段时间，都是由该GPU来检测该摄像头采集的第一视频图像的。[0088]基于同一发明构思，本发明实施例提供一种多路视频检测系统中的目标检测装置，结构如图4所示,包括:
[0089]获取单元40，用于获取多路视频检测系统中的摄像头采集的第一视频图像。
[0090]预测单元41，用于根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测第一视频图像中包括的目标的数量，第二视频图像是摄像头在第一视频图像之前采集到的。
[0091]确定单元42，用于根据预置的目标数量与检测时间的对应关系、以及预测出的第一视频图像中包括的目标的数量，确定多路视频检测系统中各个GPU检测第一视频图像的检测时间。
[0092]收发单元43，用于将总检测时间最短的GPU确定为检测第一视频图像的GPU，并将第一视频图像发送给确定出的GPU进行目标检测，每个GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测第一视频图像的检测时间之和。
[0093]可选的，上述收发单元43，还用于:接收确定出的GPU发送的从第一视频图像中实际检测出的目标的数量。
[0094]具体的，上述预测 单元41，用于根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测第一视频图像中包括的目标的数量，具体用于:
[0095]通过下列公式预测第一视频图像中包括的目标的数量:F' U=CiFi^+ (1-α )
F' i,t-1 ；
[0096]其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的目标的数量，α为遗忘因子，0〈α〈1。
[0097]具体的，上述确定单元42，具体用于:
[0098]若预测出的第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测第一视频图像的检测时间；
[0099]若预测出的第一视频图像中包括的目标的数量为浮点数，则确定大小最接近浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测第一视频图像的检测时间。
[0100]具体的，上述收发单元43，具体用于:
[0101]计算各个GPU的总检测时间；
[0102]将总检查时间最短的GPU的ID /[目息与摄像头关联；
[0103]将第一视频图像发送给与摄像头关联的GPU的ID信息所标识的GPU进行目标检测。
[0104]基于同一发明构 思，本发明实施例提供一种服务器，该服务器的结构如图5所示，包括:
[0105]处理器50，用于获取多路视频检测系统中的摄像头采集的第一视频图像；根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测第一视频图像中包括的目标的数量，第二视频图像是摄像头在第一视频图像之前采集到的；根据预置的目标数量与检测时间的对应关系、以及预测出的第一视频图像中包括的目标的数量，确定多路视频检测系统中各个GPU检测第一视频图像的检测时间。
[0106]收发器51，用于将总检测时间最短的GPU确定为检测第一视频图像的GPU，并将第一视频图像发送给确定出的GPU进行目标检测，每个GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测第一视频图像的检测时间之和。
[0107]处理器50与收发器51之间通过总线连通。
[0108]具体的，上述处理器50，具体用于:通过下列公式预测第一视频图像中包括的目标的数量:F' i t=a FiH+ (1-α ) F' i；t_!；
[0109]其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的目标的数量，a为遗忘因子，0〈α〈1。
[0110]具体的，上述处理器50，具体用于:[0111]若预测出的第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测第一视频图像的检测时间；
[0112]若预测出的第一视频图像中包括的目标的数量为浮点数，则确定大小最接近浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测第一视频图像的检测时间。
[0113]本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
[0114]这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
[0115]这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
[0116]尽管已描述了本发明的可选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括可选实施例以及落入本发明范围的所有变更和修改。
[0117]显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
【权利要求】
1.一种多路视频检测系统中的目标检测方法，其特征在于，包括: 获取所述多路视频检测系统中的摄像头采集的第一视频图像； 根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，所述第二视频图像是所述摄像头在所述第一视频图像之前采集到的； 根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个图形处理器GPU检测所述第一视频图像的检测时间； 将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，每个所述GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测所述第一视频图像的检测时间之和。
2.如权利要求1所述的方法，其特征在于，还包括: 接收确定出的GPU发送的从所述第一视频图像中实际检测出的目标的数量。
3.如权利要求1或2所述的方法，其特征在于，根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，具体包括: 通过下列公式预测所述第一视频图像中包括的目标的数量:F' U=CiFi^+ (1-α )F' i,t-1 ； 其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的所述目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的所述目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的所述目标的数量，α为遗忘因子，0〈α〈I。
4.如权利要求1-3任一所述的方法，其特征在于，在根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量之前，还包括: 获取一组实验图像，所述一组实验图像中每个实验图像包括的目标的数量均不同； 依次使用各个GPU检测所述一组实验图像； 记录各个GPU的检测时间与目标的数量的对应关系。
5.如权利要求1-4任一所述的方法，其特征在于，根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个GPU检测所述第一视频图像的检测时间，具体包括: 若预测出的所述第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找所述整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测所述第一视频图像的检测时间； 若预测出的所述第一视频图像中包括的目标的数量为浮点数，则确定大小最接近所述浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测所述第一视频图像的检测时间。
6.如权利要求1-5任一所述的方法，其特征在于，将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，具体包括: 计算各个GPU的总检测时间； 将总检查时间最短的GPU的标识ID信息与所述摄像头关联； 将所述第一视频图像发送给与所述摄像头关联的GPU的ID信息所标识的GPU进行目标检测。
7.一种多路视频检测系统中的目标检测装置，其特征在于，包括: 获取单元，用于获取所述多路视频检测系统中的摄像头采集的第一视频图像； 预测单元，用于根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，所述第二视频图像是所述摄像头在所述第一视频图像之前采集到的； 确定单元，用于根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个图形处理器GPU检测所述第一视频图像的检测时间； 收发单元，用于将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，每个所述GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测所述第一视频图像的检测时间之和。
8.如权利要求7所述的装置，其特征在于，所述收发单元，还用于: 接收确定出的GPU发送的从所述第一视频图像中实际检测出的目标的数量。
9.如权利要求7或8所述的装置，其特征在于，所述预测单元，具体用于: 通过下列公式预测所述第一视频图像中包括的目标的数量:F'i,t=aFi,t+ (1-α )F' i,t-1 ； 其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的所述目标的数量，F' i,t-1为预测的摄像头i采集的第二视频图像t-1中包括的所述目标的数量，Fi,t-1是实际检测出的摄像头i中采集的第二视频图像t-1中包括的所述目标的数量，α为遗忘因子，0〈α〈1。
10.如权利要求7-9任一所述的装置，其特征在于，所述确定单元，具体用于: 若预测出的所述第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找所述整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测所述第一视频图像的检测时间； 若预测出的所述第一视频图像中包括的目标的数量为浮点数，则确定大小最接近所述浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测所述第一视频图像的检测时间。
11.如权利要求7-10任一所述的装置，其特征在于，所述收发单元，具体用于: 计算各个GPU的总检测时间； 将总检查时间最短的GPU的标识ID信息与所述摄像头关联； 将所述第一视频图像发送给与所述摄像头关联的GPU的ID信息所标识的GPU进行目标检测。
12.—种服务器,其特征在于,包括: 处理器，用于获取多路视频检测系统中的摄像头采集的第一视频图像；根据从第二视频图像中预测出的目标的数量和实际检测出的目标的数量，预测所述第一视频图像中包括的目标的数量，所述第二视频图像是所述摄像头在所述第一视频图像之前采集到的；根据预置的目标数量与检测时间的对应关系、以及预测出的所述第一视频图像中包括的目标的数量，确定所述多路视频检测系统中各个图形处理器GPU检测所述第一视频图像的检测时间； 收发器，用于将总检测时间最短的GPU确定为检测所述第一视频图像的GPU，并将所述第一视频图像发送给确定出的GPU进行目标检测，每个所述GPU的总检测时间是该GPU检测自身已接收且未完成检测的视频图像和检测所述第一视频图像的检测时间之和。
13.如权利要求12所述的服务器，其特征在于，所述处理器，具体用于: 通过下列公式预测所述第一视频图像中包括的目标的数量:F' U=CiFi^+ (1-α )F' i,t-1 ； 其中，F' i，t为预测的摄像头i采集的第一视频图像t中包括的所述目标的数量，F' 为预测的摄像头i采集的第二视频图像t-Ι中包括的所述目标的数量，Fi^1是实际检测出的摄像头i中采集的第二视频图像t-Ι中包括的所述目标的数量，α为遗忘因子，0〈α〈1。
14.如权利要求12或13所述的服务器，其特征在于，所述处理器，具体用于: 若预测出的所述第一视频图像中包括的目标的数量为整数，则从预置的目标数量与检测时间的对应关系中查找所述整数对应的检测时间，将查找到的各个GPU对应的检测时间作为对应GPU检测所述第一视频图像的检测时间； 若预测出的所述第一视频图像中包括的目标的数量为浮点数，则确定大小最接近所述浮点数的两个整数，从预置的目标数量与检测时间的对应关系中查找确定出的两个整数对应的检测时间，根据查找到的各个GPU对应的两个检测时间使用线性插值法得到对应GPU检测所述第一视频图像的检测时间。
【文档编号】G06K9/00GK103646235SQ201310603859
【公开日】2014年3月19日 申请日期:2013年11月25日 优先权日:2013年11月25日
【发明者】聂雪军, 胡敏, 郭志建 申请人:华为技术有限公司