对象监控方法和装置,以及监控系统操作方法

文档序号:6426664阅读:120来源:国知局
专利名称:对象监控方法和装置,以及监控系统操作方法
技术领域
本发明一般地涉及图像处理的技术领域,更具体而言涉及对摄像装置拍摄的图像中的对象进行监控的方法和装置,以及监控系统的交互操作方法。
背景技术
目前视频监控系统已经被广泛的应用于各种公共场所(如宾馆、商场、车站、机场等)和非公共场所(如工厂、办公楼等),并且随着监控范围的不断扩大,监控系统的规模也在迅速扩大。较大型的监控系统往往需要管理成百甚至上千台监控设备(例如监控摄像装置),由于现有的监控设备无法同时显示所有监控设备的实时数据,大多数监控系统采用各个监控画面轮流显示或者按需要显示的方式,因此当某一监控设备发生报警事件时只能由后台运行,从而无法做到对监控事件的预警或者即时处理。此外,现有的监控系统通常独立·显示各个监控设备的监控画面,用户无法获得对于监控环境全局的情况了解,且更容易产生疲劳感或者注意力下降。另一方面,现有监控系统无法提供某个监控目标在监控环境中的全局信息,比如在某些异常事件发生时,往往需要知道相关可疑人物在监控环境内的不同相机间移动和停留的信息,从而帮助监视员更迅速的检索相关信息。申请号为200710064819. 4,名称为“监控中多路视频信息融合处理与显示的方法和系统”的中国专利申请提出了一种多路视频的融合处理与显示的方法和系统,能够将多路视频以虚拟电子地图的方式显示,然而这项技术不具备多路监控摄像机的联动监视功能,各个监控终端之间仍然是独立监控的。

发明内容
鉴于上述现有技术的状况,本发明的实施例提供一种跨摄像装置的对象监控技术。具体而言,根据本发明的实施例,提供一种监控方法,用于对通过N个摄像装置拍摄的图像中的对象进行监控,改监控方法包括针对N个摄像装置中第i个摄像装置进行如下操作根据预先构建的摄像装置之间的特征转换模型,在该第i个摄像装置所拍摄图像中的对象的特征以及第j个摄像装置所拍摄图像中的对象的特征之间进行特征转换,并基于特征转换结果得到该第i个摄像装置所拍摄图像中的特定对象分别与第j个摄像装置所拍摄图像中一个或多个对象之间的各个第一匹配相似度,其中,N是大于等于2的整数,i是大于等于I且小于等于N的整数,j = 1,2,......,N, j是整数,且i关j ;以及基于各个第一匹配相似度,确定第j个摄像装置所拍摄图像中的、与该特定对象相匹配的对象,以便对该特定对象进行监控。本发明实施例还提供一种监控装置,用于对通过N个摄像装置拍摄的图像中的对象进行监控,该监控装置包括相似度确定单元,其被配置成针对N个摄像装置中第i个摄像装置,根据预先构建的摄像装置之间的特征转换模型,在第i个摄像装置所拍摄图像中的对象的特征以及第j个摄像装置所拍摄图像中的对象的特征之间进行特征转换,并基于特征转换结果得到该第i个摄像装置所拍摄图像中的特定对象分别与第j个摄像装置所拍摄图像中一个或多个对象之间的各个第一匹配相似度,其中,N是大于等于2的整数,i是大于等于I且小于等于N的整数,j = 1,2,......,N, j是整数,且i关j ;以及监控单元,其被配置成基于上述各个第一匹配相似度,确定第j个摄像装置所拍摄图像中的、与特定对象相匹配的对象,以便对该特定对象进行监控。本发明的实施例又提供一种具有如上所述根据本发明实施例的监控装置的摄像设备。本发明的实施例再提供一种监控系统中的操作方法,包括通过上述根据本发明实施例的对象监控方法对监控系统中的对象进行监控,其中,该监控系统包括N个摄像装置;以及·基于监控结果对监控系统所监控的对象进行交互操作。根据本发明实施例,还提供了一种存储有机器可读取的指令代码的程序产品,所述指令代码由机器读取并执行时,可执行上述的对通过N个摄像装置拍摄的图像中的对象进行监控的方法。根据本发明实施例,还提供一种存储介质,其承载有机器可读取的指令代码,所述指令代码由机器读取并执行时,可执行上述的对通过N个摄像装置拍摄的图像中的对象进行监控的方法。从以上可看出,根据本发明的监控技术能够实现监控环境下的跨摄像装置的对象跟踪功能。此外能够将监控环境中的监控信息在虚拟电子地图中实时显示并交互,能够在虚拟电子地图实时显示监视环境下被监视对象的全局路径,同时也能提供某一被监控对象在历史监控视频中的全局路径检索功能。这种监控技术除了高效率地实现上述各项监控功能以外,还可以提高对象监控的精确度。


下面通过结合附图对本发明的各具体实施方式
进行描述,以使得本发明的以上的和其它目的、特点和优点将变得清楚。在各附图中,相同或类似的附图标记表示相同或者类似的功能部件或步骤。在附图中图I是示出根据本发明实施例的对通过N个摄像装置拍摄的图像中的对象进行监控的方法的流程简图; 图2a_2c是示出了在根据本发明实施例的对通过N个摄像装置拍摄的图像中的对象进行监控的方法中使用的颜色转换模型的示意图;图3是示出在根据本发明实施例的对通过N个摄像装置拍摄的图像中的对象进行监控的方法中所使用的时间/空间转换概率分布的示意图;图4是示出图I中方法的一种具体实现方式的流程简图;图5a示出了根据本发明实施例的对通过N个摄像装置拍摄的图像中的对象进行监控的装置的示例性配置的结构框图;图5b示出了图5a所示对象监控装置的一种可替选方案的示例性配置的结构框图;图6是示出图5中所示的相似度确定单元的一种具体实现方式的简化结构框图;图7是示出在图5所示的装置的一种可替选实现方式中还包括的颜色转换模型构建单元的简化结构框图;图8是示出图6中所示的颜色值差异确定子单元的一种具体实现方式的结构简化框图; 图9是示出图5中所示的时间/空间转换概率分布确定单元的一种具体实现方式的结构简化框图;图10是示出图5b所示装置的一种具体实现方式的结构简化框图;图11是示出根据本发明实施例的监控系统中的操作方法的流程简图;图12是通过利用图11所示操作方法实现的一种具体场景的示意图;图13是通过利用图11所示操作方法实现的另一种具体场景的示意图;图14是通过利用图11所示操作方法实现的又一种具体场景的示意图;以及图15是作为本发明的各实施例中可采用的监控设备的个人计算机的示例性结构的框图。
具体实施例方式下面参照附图来说明本发明的实施例。应当注意,为了避免因不必要的细节而模 糊了本发明,在附图中仅仅示出了与根据本发明的实施方案密切相关的设备结构和/或处理步骤,而省略了与本发明关系不大的其他细节。在各附图中相同或者相似的构成元素或部分利用相同或者类似的附图标记来表示。图I是示出根据本发明实施例的对通过N个摄像装置拍摄的图像中的对象进行监控的方法100的流程简图。如图I所示,方法100开始于S110。在S120,针对这N个摄像装置中第i个摄像装置进行如下操作根据预先构建的摄像装置之间的特征转换模型,在第i个摄像装置所拍摄图像中的对象的特征以及第j个摄像装置所拍摄图像中的对象的特征之间进行特征转换,并基于特征转换结果得到第i个摄像装置所拍摄图像中的特定对象分别与第j个摄像装置所拍摄图像中一个或多个对象之间的各个第一匹配相似度。在此,
N是大于等于2的整数,i是大于等于I且小于等于N的整数,j = 1,2,......,N,j是整
数,且i古j。在S130,基于各个第一匹配相似度,确定第j个摄像装置所拍摄图像中的、与特定对象相匹配的对象,以便对该特定对象进行监控。在根据本实施例的对象监控方法中,可以任意选择N个摄像装置中的第i个摄像
装置,然后在该摄像装置与其他摄像装置,即,第j摄像装置(j = 1,2,......,N,且i古j)
之间分别进行对象特征方面的相似度匹配。根据匹配结果,可以确定在第j摄像装置所拍摄图像中的哪个对象与第i摄像装置所拍摄图像中的特定对象相匹配。在此,第i摄像装置所拍摄图像中的特定对象是指预先确定的、需要对其进行监控的对象。容易理解,这个特定对象可以是一个也可以是多个。在系统处理能力和负荷允许的情况下,可以对第i摄像装置所拍摄图像中存在的所有对象分别进行上述的监控处理。此外,根据需要,也可以仅在监控系统的所有N个摄像装置的一部分中进行对象监控处理,在这种情况下,使得本实施例中的第i和第j摄像装置从该一部分摄像装置中选取即可。此外,当要监控的对象大于一个时,可对每一个对象都进行上述的匹配处理,以便实现对所有对象的监控。关于是否找到与上述特定对象相匹配对象的判断标准,例如,可以设定如果所得到的第一匹配相似度大于或等于某个预先设置的阈值,则表明第j摄像装置所拍摄图像中的、同该第一匹配相似度对应的对象与该特定对象是相匹配的,即,属于被监控对象。这种阈值可以根据实际情况来设置,例如通过若干次试验得到或者根据经验值获得,细节在此不再赘述。再者,上述的对象特征相似度匹配处理既可以在第i个摄像装置所拍摄图像中的特定对象与第j个摄像装置所拍摄图像中所有对象之间分别进行,也可以只在该特定对象与第j个摄像装置所拍摄图像中所有对象中的一部分对象之间进行。例如,在可以通过其他方式将第j个摄像装置所拍摄图像中所有对象之中明显不与上述特定对象匹配的对象滤除的情况下,可以只针对滤除后剩余的对象进行上述的对象特征相似度匹配处理,以便得到最终与该特定对象相匹配的对象。·
在执行根据本实施例的监控方法时,例如可以首先针对第i摄像装置所拍摄的第一帧图像来分别进行与其他摄像装置所拍摄的第一帧图像中对象的匹配处理。通常,根据需要选取第i摄像装置拍摄的第一帧图像中的某特定对象作为待监控对象,在找到其他摄像装置中与第i摄像装置所拍摄第一帧图像中该特定对象相匹配的对象之后,则可以依据在各个摄像装置内部的帧跟踪处理(这种处理在各个摄像装置内部是本来就存在的功能)来实现对该特定对象在各个摄像装置内部的监控,而无需再针对其他帧图像都来进行类似的匹配处理。当然,如果摄像装置内部不存在跟踪信息或者内部跟踪信息缺失,则可以对第i摄像装置中每一帧图像都进行上述的匹配处理,以便实现对特定对象的监控。通过执行根据本实施例的对象监控方法,由于利用了不同摄像装置之间对象的特征匹配相似度来执行匹配,因此可以获得令人满意的对象监控精度。此外,由于这种匹配可以在所需要的任意摄像装置之间进行,故可以实现跨摄像装置的联合对象监控,提高了对象监控的效率和准确性。再者,因为不需要在监控系统中布设大量的摄像装置以重叠地覆盖对象可能经过的区域,降低了对象监控的实现成本。在上述实施例的一种可替选方案中,在获取第i个摄像装置和第j摄像装置所拍摄图像中对象之间的第一匹配相似度的同时,还可以根据摄像装置之间的时间/空间转换概率模型,分别获取第i个摄像装置所拍摄图像中的特定对象与第j个摄像装置所拍摄图像中的一个或多个对象在第i个摄像装置和第j个摄像装置所处的位置之间的各个时间/空间转换概率分布。相应地,在后续的处理中,可以基于所获得的各个第一匹配相似度以及各个时间/空间转换概率分布两者,确定第j个摄像装置所拍摄图像中的、与特定对象相匹配的对象,以便对该特定对象进行监控。同理,上述的获取各个时间/空间转换概率分布的处理可以在第i个摄像装置所拍摄图像中的特定对象与第j个摄像装置所拍摄图像中所有对象之间分别进行,但是,例如,在可以通过其他方式将第j个摄像装置所拍摄图像中所有对象之中明显不与该特定对象匹配的对象滤除的情况下,也可以只在该特定对象与第j个摄像装置所拍摄图像中滤除后剩余的对象执行这种处理。通过使用根据本可替选实施例的方法,由于结合了不同摄像装置所拍摄图像中对象的特征匹配相似度以及时间/空间转换分布概率,使得可更精确地锁定在各个摄像装置中同一被监控对象,实现对被监控对象的跟踪,因而进一步改善了对象监控的精度,提高了监控效率。在包括多个摄像装置的监控系统中利用各摄像装置拍摄的图像来对特定对象进行监控时,往往需要找到不同摄像装置拍摄的图像中同一个被监控对象。可以通过寻找各摄像装置拍摄的图像中匹配相似度高的特定对象来确定同一个被监控对象。容易理解,由于各个摄像装置的配置参数、构成部件的特性离散等等方面的原因,即使是拍摄同一个对象,所得到图像也可能存在差异。为此,根据本发明上述实施例的方法在确定摄像装置拍摄的对象之间的匹配相似度时通过使用特征转换模型来对这种特征方面的差异予以考虑。在一种具体实现方式中,这种特征转换模型例如可以是颜色转换模型。这种颜色转换模型可 以表示不同摄像装置拍摄的图像中对象的颜色值之间的对应关系。进一步地,通过利用这种颜色转换模型进行颜色值转换处理可以得到对象的颜色值之间的差异,根据这种差异就可以确定第i摄像装置所拍摄的特定对象与第j摄像装置所拍摄图像中每一个对象在颜色值方面的第一匹配相似度。如上所述,在根据本发明的一种可替选实施例中,在考虑不同摄像装置所拍摄图像中对象的特征值方面的差异的同时也考虑到对象在个摄像装置中出现的时间/空间转换概率分布情况,由此可以更加精确地确定出不同摄像装置中的同一被监控对象。可通过时间/空间转换概率模型来获得这种时间/空间转换概率分布情况。时间/空间转换概率模型描述的是被监控对象在实际监控环境中从一个监控摄像装置所处的地点以正常速度运动到另一个监控摄像装置所处地点所消耗的时间概率模型。在此,所谓“正常速度”,指的是同类别对象在监控环境中行进的典型速度,其例如可通过若干次实验得到或者凭经验得到。在一种具体实现方式中,可以根据与特定对象同类别的对象在各个摄像装置之间的典型行进速度以及摄像装置之间的位置关系来确定这种时间/空间转换概率分布。通常,这种时间/空间转换概率分布呈现出正态分布。下文将会对此进行详细描述。在此需要说明,上述实施例中所提及的获取第i个摄像装置与j个摄像装置所拍摄的视频图像中对象之间的第一匹配相似度以及获取对象在所述第i个摄像装置与所述第j个摄像装置所处的位置之间的时间/空间转换概率分布的处理是级联的关系,而且在执行的先后顺序上没有特别要求。容易理解,如果先求取第一匹配相似度,则可以根据特征转换关系而过滤掉一部分不可能与特定对象匹配的对象,然后再利用时间/空间转换概率模型来对幸存的对象进行处理,以便得到最终的与特定对象最匹配的对象。如果先进行与时间/空间转换概率相关的处理,则同样也可以先过滤掉一部分不可能与特定对象匹配的对象,然后利用特征转换模型来针对幸存的对象求取第一匹配相似度,以便得到最终的与特定对象最匹配的对象。可以看到,无论那种处理模式,都同时考虑了对象在特征转换方面和时间/空间转换概率方面的匹配结果,这有助于进一步提升对象监控的精度。下面结合图2对获取第一匹配相似度的处理的具体例子进行详细描述。首先描述构建颜色转换模型的例子。假设实际监控场景中监控摄像装置编号为CAMi, i e {1,2,...,N},N为摄像装置数目,并且需要确定第i摄像装置CAMi和第j摄像装置CAM^拍摄的图像中对象的颜色转换模型。分别选取摄像装置CAMi和CAM^拍摄的预定数量的图像构成训练图像集,在本例子中,预定数量例如为1000。例如在RGB颜色空间中构建颜色转换模型。计算摄像装置CAMi的训练图像集中各图像的三个颜色通道的颜色直方图R_tf (x),G_tf (x),B_tf (x),其中颜色直方图的取值范围为
。类似地计算摄像装置CAMl^训练图像集三个颜色通道的颜色直方图R_tf (X),G_HJ (x),B_tf (X),颜色直方图的取值范围为
。颜色直方图是本领域常用的概念,其用于描述不同色彩在整幅图像中所占的比例,而并不关心每种色彩所处的空间位置。直方图中的数值都是统计而来,描述了该图像中关于颜色的数量特征,可以反映颜色直方像颜色的统计分布和基本色调。有关颜色直方图的更为详细的信息可参见Shapiro, LindaG.以及 Stockman, George C.所著的“Computer Vision,,Prentice Hall,
2003ISBN 0130307963 ;“Color Histogramhttp://en. wikipedia. org/wiki/Color_histogram。接下来,根据所获得的颜色直方图来建立摄像装置CAMi和CAM^之间颜色值的转换关系,或者说映射关系。在此以R通道直方图处理为例。从R_tf中根据颜色值取值范围依次提取索引值,并在R_tf中分别搜索与索引值最接近的颜色值,根据搜索到的对应的颜色·值建立颜色转换曲线,即摄像装置CAMi与摄像装置CAM^的R通道的颜色值转换模型cfV’j可由如下的式⑴来表示Cfti^ (RJii(X)) = RW _1 (R_Hi(x)),x e
(式 I)公式中的参数X表示颜色直方图中的索引值,即颜色直方图中的颜色值。不同的摄像装置虽然由于配置参数不同可能引起拍摄同样的对象时在整体上存在一些差异,例如色调偏亮或者偏暗,但是,所拍摄图像的颜色直方图,即颜色分布情况应该是相同的。据此,在上面的式(I)的左边,在摄像装置CAMi拍摄图像的颜色直方图中索引值X所对应的是一个比例值R_tf(X),即索引值X所表示的颜色值在整幅图像中所占的比例。在式⑴的右边,
在摄像装置CAMl勺颜色直方图的逆函数RJi厂1中,将比例值R-Hi(X)代入,即得到在摄
像装置CAM^拍摄图像的颜色直方图中与该比例值对应的颜色值。据此,就可以找在摄像装置CAM^所拍摄图像中的、与摄像装置CAMi拍摄图像中各颜色值最接近的颜色值。摄像装置CAMi和CAM^的G通道和B通道的颜色值转换关系如下Cftiij (G-Hi(X)) = G_Hj _1 (G-Hi(X)), x e
(式 2)Cfti-) (BJli(X)) = B_Hj _1 (BJii(X)),x G
(式 3)这种转换关系就是通过训练得到的摄像装置CAMi和CAM^拍摄的图像中对象的颜色转换模型。图2a-2c分别示出了所得到的R,G,B三个颜色通道的颜色转换关系的示意图。在图2a-2c中,横坐标和纵坐标分别表示与待求取颜色转换模型的两个摄像装置CAMi和CAM^相关的颜色直方图中的颜色值。容易理解,上述只是构建摄像装置之间颜色转换模型的一种具体例子,还可以利用各种其他的方法来构建颜色转换模型。下面给出另一个具体例子。分别选取摄像装置CAMi和CAM^的一定数量的训练图像集,在本例子中,图像数量例如为1000。计算摄像装置CAMi的训练图像集R,G,B三个颜色通道的颜色直方图R_tf,G_rf,B_tf,颜色直方图的取值范围为

权利要求
1.一种监控方法,用于对通过N个摄像装置拍摄的图像中的对象进行监控,所述监控方法包括 针对所述N个摄像装置中第i个摄像装置进行如下操作 根据预先构建的摄像装置之间的特征转换模型,在所述第i个摄像装置所拍摄图像中的对象的特征以及第j个摄像装置所拍摄图像中的对象的特征之间进行特征转换,并基于特征转换结果得到所述第i个摄像装置所拍摄图像中的特定对象分别与第j个摄像装置所拍摄图像中一个或多个对象之间的各个第一匹配相似度,其中,N是大于等于2的整数,i是大于等于I且小于等于N的整数,j = 1,2,......,N, j是整数,且i关j ;以及 基于所述各个第一匹配相似度,确定所述第j个摄像装置所拍摄图像中的、与所述特定对象相匹配的对象,以便对所述特定对象进行监控。
2.如权利要求I所述的监控方法,还包括 根据摄像装置之间的时间/空间转换概率模型,分别获取第i个摄像装置所拍摄图像中的特定对象与第j个摄像装置所拍摄图像中的一个或多个对象在所述第i个摄像装置和第j个摄像装置所处的位置之间的各个时间/空间转换概率分布; 所述的确定第j个摄像装置所拍摄图像中的、与所述特定对象相匹配的对象包括基于所述各个第一匹配相似度以及所述各个时间/空间转换概率分布来进行。
3.如权利要求I或2所述的监控方法,其中,所述的特征转换模型是颜色转换模型,第i个摄像装置和第j个摄像装置之间的颜色转换模型表示所述第i个摄像装置所拍摄图像中的对象的颜色值与所述第j个摄像装置所拍摄图像中的对象的颜色值之间的对应关系。
4.如权利要求3所述监控方法,其中,第i个摄像装置所拍摄图像中的特定对象与第j个摄像装置所拍摄图像中任意一个对象之间的第一匹配相似度通过如下方式获得 选择第i摄像装置所拍摄图像中对应于特定对象的子图像区域Obji以及第j摄像装置所拍摄图像中对应于所述任意一个对象的子图像区域Objj ; 根据所述第i摄像装置和第j摄像装置之间的颜色转换模型获得两个子图像区域的颜色值之间的差异;以及 根据所获得的颜色值之间的差异求取所述特定对象与所述任意一个对象之间的第一匹配相似度。
5.如权利要求2所述的监控方法,其中,第i个摄像装置和第j个摄像装置之间的时间/空间转换概率模型通过如下方式构建 基于与所述特定对象同类的对象在包括所述N个摄像装置的监控系统中的典型行进速度以及所述第i个摄像装置和第j个摄像装置之间的位置关系,构建所述特定对象在所述第i个摄像装置与第j个摄像装置之间的、符合正态分布的时间/空间转换概率模型。
6.如权利要求3所述的监控方法,其中,所述摄像装置之间的颜色转换模型通过如下方式构建 分别选取待建立颜色转换模型的第i摄像装置和第j摄像装置所拍摄的预定数量图像作为训练图像集; 分别获取针对第i摄像装置的第一训练图像集的第一颜色直方图和针对第j摄像装置的第二训练图像集的第二颜色直方图; 根据第一颜色直方图和第二颜色直方图确定第一摄像装置所拍摄图像中的对象与第二摄像装置所拍摄图像中的对象的颜色值之间的转换关系,作为所述第i摄像装置和第j摄像装置之间的颜色转换模型。
7.如权利要求6所述的监控方法,其中 所述的分别获取第一颜色直方图和第二颜色直方图包括分别获取 第一训练图像集和第二训练图像集的三个颜色通道R、G、B的颜色直方图; 所述的确定第i摄像装置和第j摄像装置之间的颜色转换模型包括 针对三个颜色通道R、G、B中的每一个,分别获得与第一颜色直方图中颜色值最接近的第二颜色直方图中的颜色值;以及 根据所获得的最接近颜色值之间的对应关系来确定第i摄像装置和第j摄像装置之间的颜色转换模型。
8.如权利要求7所述的监控方法,其中 通过如下方式确定第i摄像装置和第j摄像装置之间的颜色转换模型Cftij (R-Hi(X)) = R_Hj _1 (R_Hi(x)),x G [Ο 255]鲁Cftij (GJii(X)) = G_Hj _1 (GJli(X)),X e [Ο 255]CftiJ (B_Hi(x)) = B_Hi _1 (Β_Η((χ)) ,X €
其中,eft"表示第i摄像装置与第j摄像装置之间的颜色转换模型,R_tf(X),G_tf(x)和B_tf (x)分别表示第i摄像装置R,G,B颜色通道的颜色直方图之值,R_HJ (x),G_HJ (x)和B_HJ(x)分别表示第j摄像装置R,G,B颜色通道的颜色直方图之值,X表示颜色直方图中的索引值,取值范围为

9.如权利要求8所述的监控方法,其中 所述的根据第i摄像装置和第j摄像装置之间的颜色转换模型获得两个子图像区域的颜色值之间的差异包括 通过所述第i摄像装置和第j摄像装置之间的颜色转换模型,获得第i摄像装置中所述子图像区域Obji的颜色值的转换后的颜色值,所述转换后的颜色值对应于所述第i摄像装置的经过颜色转换后的子图像区域Obji'; 针对所述经过颜色值转换后的子图像区域Obji'以及第j摄像装置中所述子图像区域Obj·3,将每个子图像区域划分为num_w * num_h个子图像块,在每个子图像块中计算分别与R,G,B颜色通道对应的颜色直方图RJiJOb^ ),G_Hm, ^Objii ),B_Hm, ^Obju )以及R_Hm,n(Objj), G_Hmjn(Objj), B_Hmjn(Objj),其中,m = I,......, num_w, n = I,......, num_h, num_w和num_h是大于等于I的正整数; 确定所述子图像区域Obji'以及Obf内相互对应的子图像块的分别与R,G,B颜色通道对应的颜色直方图的距离,作为所述子图像区域Obji和子图像区域Obf的颜色值之间的差异;以及 所述的根据所获得的颜色值之间的差异求取所述第一匹配相似度包括 根据所述距离获得子图像区域Obji和Obf的分别与R,G,B颜色通道对应的匹配相似度分量Sim
10.如权利要求5所述的监控方法,其中,所述的构建特定对象在所述第i个摄像装置与第j个摄像装置之间的、符合正态分布的时间/空间转换概率模型包括 基于与所述特定对象同类的M个对象在监控系统中的典型行进速度,求取该类别的对象的行走速度的如下的平均值 和方差σ :
11.如权利要求2所述的监控方法,其中,所述的基于各个第一匹配相似度以及各个时间/空间转换概率分布对所述特定对象进行监控包括 基于所述各个第一匹配相似度以及各个时间/空间转换概率分布确定第i个摄像装置拍摄的图像中的特定对象与第j个摄像装置拍摄的图像中各个对象之间的各个第二匹配相似度; 确定第二匹配相似度最高的对象作为与所述特定对象匹配的被监控对象,并根据匹配结果获取所述被监控对象在所述N个摄像装置中任意K个摄像装置的出现时间以及K个摄像装置的位置,以便生成所述监控对象在K个摄像装置之间的路径,K是大于等于2且小于等于N的整数。
12.如权利要求11所述的监控方法,其中,确定第二匹配相似度最高、且该最高第二相似度大于预定阈值对象作为与所述特定对象匹配的被监控对象。
13.如权利要求11所述的监控方法,还包括 根据所确定的被监控对象的运动方向,估计所述被监控对象未来可能的路径。
14.如权利要求11所述的监控方法,其中,所述基于各个第一匹配相似度以及各个时间/空间转换概率确定所述第二匹配相似度包括 将与第j个摄像装置所拍摄图像中的任意一个对象相关的第一匹配相似度以及时间/空间转换概率分布的乘积或者归一化之后相加的值或者加权平均值作为与该任意一个对象相对应的第二匹配相似度。
15.一种监控装置,用于对通过N个摄像装置拍摄的图像中的对象进行监控,所述监控装置包括 相似度确定单元,其被配置成针对所述N个摄像装置中第i个摄像装置,根据预先构建的摄像装置之间的特征转换模型,在所述第i个摄像装置所拍摄图像中的对象的特征以及第j个摄像装置所拍摄图像中的对象的特征之间进行特征转换,并基于特征转换结果得到所述第i个摄像装置所拍摄图像中的特定对象分别与第j个摄像装置所拍摄图像中一个或多个对象之间的各个第一匹配相似度,其中,N是大于等于2的整数,i是大于等于I且小于等于N的整数,j = 1,2,......,N, j是整数,且i关j ;以及 监控单元,其被配置成基于所述各个第一匹配相似度,确定所述第j个摄像装置所拍摄图像中的、与所述特定对象相匹配的对象,以便对所述特定对象进行监控。
16.如权利要求15所述的监控装置,还包括 时间/空间转换概率分布确定单元,其被配置成针对所述N个摄像装置中第i个摄像装置,根据摄像装置之间的时间/空间转换概率模型,分别获取第i个摄像装置所拍摄图像中的特定对象与第j个摄像装置所拍摄图像中的一个或多个对象在所述第i个摄像装置和第j个摄像装置所处的位置之间的各个时间/空间转换概率分布;以及 所述监控单元被配置成基于所述各个第一匹配相似度以及所述各个时间/空间转换概率分布来确定所述第j个摄像装置所拍摄图像中的、与所述特定对象相匹配的对象。
17.一种具有如权利要求15或16中所述的监控装置的摄像设备。
18.—种监控系统中的操作方法,包括 通过如权利要求1-14中任一项所述的监控方法对监控系统中的对象进行监控,其中,所述监控系统包括所述N个摄像装置;以及 基于监控结果对所述监控系统所监控的对象进行交互操作。
19.如权利要求18所述的方法,其中所述的对监控系统所监控的对象进行交互操作包括 在所述监控系统检测到异常事件的发生的情况下,在与所述监控系统对应的虚拟电子地图中显示异常事件发生地点处的摄像装置的实时图像和/或声音,并且/或者根据需要回放显示与所述地点相关的历史监控视频的摘要信息。
20.如权利要求18所述的方法,其中所述的对监控系统所监控的对象进行交互操作包括 在选择与所述监控系统对应的虚拟电子地图中的特定监控对象的情况下,在线地生成并且显示该特定监控对象在N个摄像装置之间的历史全局路径,并且/或者根据需要回放显示该特定监控对象所经过的区域的历史监控视频。
21.如权利要求18所述的方法,其中所述的对监控系统所监控的对象进行交互操作包括 在从监控系统的历史监控信息中检索特定的被监控对象时,生成并显示该特定的被监控对象的历史全局路径,并且/或者根据需要回放该特定的被监控对象经过区域所包含的摄像装置拍摄的历史监控信息。
22.如权利要求18所述的方法,其中所述监控系统还包括与所述N个摄像装置相关的实时监控显示设备,并且与所述监控系统对应的虚拟电子地图中包括与所述N个摄像装置对应的图标,以及,所述的对监控系统所监控的对象进行交互操作包括 在选择所述虚拟电子地图中特定的图标时,与该特定的图标所对应的摄像装置相关的实时监控显示设备实时地显示该摄像装置拍摄的图像。
全文摘要
公开了对通过N个摄像装置拍摄的图像中的对象进行监控的方法,包括针对所述N个摄像装置中第i个摄像装置,根据预先构建的摄像装置之间的特征转换模型,得到第i个摄像装置所拍摄图像中的特定对象分别与第j个摄像装置所拍摄图像中一个或多个对象之间的各个第一匹配相似度;;以及,基于各个第一匹配相似度确定第j个摄像装置所拍摄图像中的、与特定对象相匹配的对象,以便对该特定对象进行监控。还公开了应用上述监控方法实现有关监控对象的交互操作的方法。通过本发明的实施例,改善了对象监控的效率和精确性,此外提升了监控系统的可交互操作性。
文档编号G06T7/20GK102831615SQ20111016682
公开日2012年12月19日 申请日期2011年6月13日 优先权日2011年6月13日
发明者李亮, 吴伟国 申请人:索尼公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1