对象监视系统、对象监视方法和用于提取待监视对象的程序的制作方法
【技术领域】
[0001]本发明涉及一种用于监视感兴趣的对象的对象监视系统、监视目标提取设备、对象监视方法、监视目标提取方法和监视目标提取程序。
【背景技术】
[0002]已知各种从由为了监视而安装的相机捕获的图像检测各种情形的方法。另外，随着脸部识别技术的新近发展，现在有可能通过比较由用于捕获人脸的相机捕获的图像来确定不同图像中的人是否为相同人。
[0003]也已知各种检测有问题行为(比如倾倒垃圾或者涂鸦)的方法。例如，非专利文献(NPL)I描述了一种通过从由用于监视繁忙场景的相机捕获的图像检测可疑背景改变来检测有问题状态的方法。
[0004]引用列表
[0005]非专利文献
[0006]NPL 1: D.Gibbins, G.N.Newsam and M.J.Brooks, “Detecting Suspic1usBackground Changes in Video Surveillance of Busy Scenes，，，1996。
【发明内容】
[0007]技术问题
[0008]近年来，存在对于不仅从由监视相机捕获的图像检测有问题状态而且还指定这样的问题的原因的需求。例如，优选的是可以从由监视相机捕获的图像自动地发现表现有问题行为(比如倾倒垃圾或者涂鸦)的惯常违反者。
[0009]这需要两种技术，即，检测问题行为(比如倾倒垃圾或者涂鸦)的技术和确定有问题行为是否为相同人所为的技术。然而，难以使用检测有问题行为的技术来指定对每个有问题行为负责的人。
[0010]为了捕获有问题行为的图像，希望安装具有大俯角的相机以即使在拥挤环境中仍然未被其他人遮挡。在另一方面，为了确定不同图像中的人是否为相同人，由于在图像之间的脸部识别中的约束而有必要尽可能从前部捕获每个人脸。因此，为了捕获人脸的图像，希望安装具有小俯角的相机。
[0011]因此，难以使用相同相机来同时实现以上提到的两种技术。换而言之，例如，表现有问题行为的惯常违反者难以通过简单地组合以上提到的两种技术而被自动地发现。
[0012]有鉴于此，本发明的示例性目的是提供一种用来可以从由安装的相机捕获的图像自动地收集被视为特定状态的原因的对象的对象监视系统、监视目标提取设备、对象监视方法、监视目标提取方法和监视目标提取程序。
[0013]对问题的解决方案
[0014]根据本发明的一个示例性方面的一种对象监视系统包括:第一成像装置，该第一成像装置用于通过捕获在第一范围中发生的状态来创建状态图像；第二成像装置，该第二成像装置用于通过捕获在第二范围中存在的监视目标来创建监视目标图像；特定状态检测装置，该特定状态检测装置用于从状态图像检测特定状态；监视目标分析装置，该监视目标分析装置用于使用特定状态从其被检测到的状态图像来分析监视目标的状况；以及监视目标特征提取装置，该监视目标特征提取装置用于基于监视目标的状况，来从监视目标图像提取用于指定监视目标的特征。
[0015]根据本发明的一个示例性方面的一种监视目标提取设备包括:特定状态检测装置，该特定状态检测装置用于从由用于捕获在第一范围中发生的状态的第一成像装置捕获的状态图像检测特定状态；监视目标分析装置，该监视目标分析装置用于使用特定状态从其被检测到的状态图像来分析监视目标的状况；以及监视目标特征提取装置，该监视目标特征提取装置用于基于监视目标的状况，来从由用于捕获在第二范围中存在的监视目标的第二成像装置捕获的监视目标图像提取用于指定监视目标的特征。
[0016]根据本发明的一个示例性方面的一种对象监视方法包括:通过捕获在第一范围中发生的状态来创建状态图像；从状态图像检测特定状态；使用特定状态从其被检测到的状态图像来分析监视目标的状况；基于监视目标的状况、通过捕获在第二范围中存在的监视目标来创建监视目标图像；以及从监视目标图像提取用于指定监视目标的特征。
[0017]根据本发明的一个示例性方面的一种监视目标提取方法包括:从由用于捕获在第一范围中发生的状态的第一成像装置捕获的状态图像检测特定状态；使用特定状态从其被检测到的状态图像来分析监视目标的状况；以及基于监视目标的状况，从由用于捕获在第二范围中存在的监视目标的第二成像装置捕获的监视目标图像提取用于指定监视目标的特征。
[0018]根据本发明的一个示例性方面的一种监视目标提取程序，该监视目标提取程序使得计算机执行:特定状态检测处理，该特定状态检测处理从由用于捕获在第一范围中发生的状态的第一成像装置捕获的状态图像检测特定状态；监视目标分析处理，该监视目标分析处理使用特定状态从其被检测到的状态图像来分析监视目标的状况；以及监视目标特征提取处理，该监视目标特征提取处理用于基于监视目标的状况，从由用于捕获在第二范围中存在的监视目标的第二成像装置捕获的监视目标图像提取用于指定监视目标的特征。
[0019]本发明的有利效果
[0020]根据本发明，可以从由安装的相机捕获的图像自动地收集被视为特定状态的原因的对象。
【附图说明】
[0021][图1]它是描绘了根据本发明的对象监视系统的一个示例性实施例的框图。
[0022][图2]它是描绘了其中状态图像由不同相机捕获的情况的示例的说明图。
[0023][图3]它是描绘了对象监视系统的操作的示例的流程图。
[0024][图4]它是描绘了对象监视系统的特定示例的说明图。
[0025][图5]它是描绘了根据本发明的对象监视系统的示意结构的框图。
[0026][图6]它是描绘了根据本发明的对象监视系统的另一示意结构的框图。
[0027][图7]它是描绘了根据本发明的监视目标提取设备的示意结构的框图。
[0028][图8]它是描绘了根据本发明的监视目标提取设备的另一示意结构的框图。
【具体实施方式】
[0029]图1是描绘了根据本发明的对象监视系统的一个示例性实施例的框图。在这一示例性实施例中的对象监视系统包括状态检测相机11、状态图像存储装置12、监视目标提取装置13、监视目标图像存储装置14、特定状态检测装置15、监视目标分析装置16、时间预测装置17、监视目标特征提取装置18、灰名单存储装置19和对象指定装置20。
[0030]状态检测装置11是被安装用于捕获特定状态将在其中被检测到的范围的图像的相机。特定状态例如意味着其中发生如以上提到的有问题行为(例如，倾倒垃圾、涂鸦、闲逛等)的状态。注意，特定状态不限于其中发生有问题行为的状态而可以例如是其中发生希望的行为的状态。
[0031]状态检测相机11被优选地安装为具有大俯角以便捕获如下图像，可以从该图像更适当地检测到在预定范围中发生的状态。
[0032]在以下描述中，由状态检测相机11捕获的图像被称为“状态图像”。此外，由状态检测相机11捕获的范围被称为“第一范围”以区分它与由以下提到的监视目标提取装置13捕获的范围。第一范围根据状态检测相机11的安装位置、安装角度、设置的缩放等而被确定。例如，第一范围可以由视角表达。状态检测相机11在状态图像存储装置12中登记捕获的状态图像和与状态图像有关的信息。
[0033]状态图像存储装置12存储由状态检测相机11捕获的状态图像。状态图像存储装置12可以存储状态图像被捕获的时间和位置、用于标识捕获状态图像的相机的信息等连同状态图像。
[0034]监视目标提取相机13是被安装用于捕获在预定范围中出现的监视目标的相机。监视目标根据被视为特定状态的原因的对象的类型而被确定。作为示例，以上提到的有问题行为(比如倾倒垃圾、涂鸦或者闲逛)被归于人，并且因此监视目标是人。这里，监视目标提取相机13可以通过捕获人作为监视目标来创建监视目标图像。
[0035]作为另一示例，骑摩托车者的抢夺被归于抢夺者乘骑的摩托车，并且因此监视目标是摩托车。注意，监视目标不限于人或者摩托，而可以是汽车等。
[0036]由监视目标提取相机13捕获的监视目标图像由以下提到的监视目标特征提取装置18用来提取可以用于指定监视目标的特征。监视目标提取相机13优选地被安装为具有小俯角以便捕获如下图像，可以从该图像更适当地提取监视目标的特征。
[0037]在以下描述中，由监视目标提取相机13捕获的图像被称为“监视目标图像”。此夕卜，由监视目标提取相机13捕获的范围被称为“第二范围”。第二范围也根据监视目标提取相机的安装位置、安装角度、设置的缩放等而被确定。例如，第二范围可以由视角表达。第一范围和第二范围可以部分地或者全部地相互重叠或者根本未相互重叠。
[0038]监视目标提取相机13在监视目标图像存储装置14中登记捕获的监视目标图像和与监视目标有关的信息。
[0039]尽管在这一示例性实施例中使用其中用于捕获状态图像的状态检测相机11的数目和用于捕获监视目标图像的监视目标提取相机13的数目中的每个数目是一的示例，但是用于捕获状态图像的相机的数目和用于捕获监视目标图像的相机的数目中的每个数目不限于一，而是可以是两个或者更多个。
[0040]通常地，希望安装具有大俯角的相机以便捕获预定范围的状态，而希望安装具有小俯角的相机以便指定监视目标。因而，状态检测相机11的俯角被设置为大于监视目标提取相机13的俯角。
[0041]监视目标图像存储装置14存储由监视目标提取相机13捕获的监视目标图像。监视目标图像存储装置