图像处理系统、图像处理方法及程序的制作方法
【技术领域】
[0001]本发明的方面涉及图像处理系统、图像处理方法及程序。
【背景技术】
[0002]近年来，使用来自多个摄像机的视频图像用于执行对广泛范围的监视的系统正在被考虑。例如，专利公开JP-A-2008-219570公开了一种设备，该设备能够利用摄像机间耦合关系信息跨过摄像机适当地跟踪(监视)人物。该设备根据人物出现在摄像机视野中的点(出现点)和人物从摄像机视野消失的点(消失点)之间的人物特征量中的相似性确定人物的对应关系。
[0003]在根据相似性自动决定人物的再识别时，如专利公开JP-A-2008-219570中描述的设备的情况，错误可能会发生。考虑到此情况，在人参与的情况下来实现人物的再识别。
[0004]然而，相对于监视而言增加人的参与极有可能使监视工作变得复杂。特别是，当存在多个人物作为受监视目标时，对于用户理解正在对哪些人物执行操作可能变得困难，或者用于指定人物的操作可能变得复杂。
【发明内容】
[0005]本发明的一些方面已经在考虑到这些问题情况下而提出，并且这些方面的目标是提供能够抑制当跟踪人物时与识别目标人物相关可能产生的混淆的图像处理系统、图像处理方法和程序。
[0006]根据本发明的一种图像处理系统包括:输入装置，用于接受由多个摄像机捕获的输入的视频图像；登记装置，能够登记出现在从输入装置输入的视频图像中的一个或多个人物；以及显示控制装置，用于针对由登记装置登记的每个人物显示从摄像机输入的视频图像的可切换窗口。
[0007]根据本发明的另一种图像处理系统包括:输入装置，用于接受从摄像机捕获的输入视频图像；以及显示控制装置，用于针对每个被登记的人物显示从摄像机输入的视频图像的可切换窗口，该显示控制装置显示与捕获了该人物的摄像机相关的信息以及图像捕获的时间。
[0008]根据本发明的又一种图像处理系统包括:输入装置，用于接受从摄像机捕获的输入视频图像；以及显示控制装置，用于针对每个被登记的人物显示从摄像机输入的视频图像的可切换窗口，该显示控制装置显示示出每个被登记的人物的运动的轨迹的地图信息。
[0009]根据本发明的一种图像处理方法包括如下步骤:接受从多个摄像机捕获的输入的视频图像；登记出现在输入的视频图像中的一个或多个人物；以及针对每个被登记的人物显示从摄像机输入的视频图像的可切换窗口。
[0010]根据本发明的程序使得计算机执行如下过程:接受从多个摄像机捕获的输入的视频图像；登记出现在输入的视频图像中的一个或多个人物；以及针对每个被登记的人物显示从摄像机输入的视频图像的可切换窗口。
[0011]此外，如同在本发明中使用的，术语“单元”、“装置”、“设备”和“系统”不仅表示物理的装置还包括该“单元”、“装置”、“设备”和“系统”的功能由软件实现的情况。此外，一个“单元”、“装置”、“设备”和“系统”的功能可以由两个或者多个物理的装置或者设备实现，以及两个或更多“单元”、“装置”、“设备”和“系统”的功能可以由一个物理的装置或者设备实现。
[0012]根据本发明，可以提供能够抑制当跟踪人物时与识别目标人物相关可能产生的混淆的图像处理系统、图像处理方法和程序。
【附图说明】
[0013]图1是示出了根据第一实施例的监视系统的示意性配置的功能框图；
[0014]图2是示出了显示画面的特定示例的视图；
[0015]图3是示出了该显示画面的特定示例的视图；
[0016]图4是示出了如图1所示的信息处理服务器的过程流的流程图；
[0017]图5是示出了能够实现如图1所示的信息处理服务器的硬件配置的功能配置的框图；
[0018]图6是示出了根据第二实施例的监视设备的示意性配置的功能框图；
[0019]图7是示出了根据第三实施例的显示画面的特定示例的视图；
[0020]图8是示出了根据第四实施例的显示画面的特定示例的视图；
[0021]图9是示出了根据第四实施例的显示画面的特定示例的视图；
[0022]图10是示出了根据第五实施例的移动终端的外观的特定示例的视图。
【具体实施方式】
[0023]以下，将描述本发明的实施例。在以下描述中以及在所参考的附图的描述中，相同的或者相似的组件由相同的或者相似的参考符号表示。
[0024](1.第一实施例)
[0025]图1至图5是用于描述第一实施例的视图。以下，第一实施例将参考这些附图按照以下解释的顺序来描述。首先，系统的功能配置作为整体在“1.1”中进行呈现，并且第一实施例的概述作为整体通过示出显示画面的特定示例而在“1.2”中呈现。接下来，过程流在“L 3”中呈现，并且可行的硬件配置的特定示例在“1.4”中呈现。最后，由本实施例取得的操作效果等在“1.5”及其后中描述。
[0026](1.1功能配置)
[0027]监视系统I的功能配置现在将参考图1来描述，该监视系统I是根据本实施例的信息处理系统。图1是示出监视系统I的功能配置的框图。
[0028]监视系统I大致上包括信息处理服务器100和用于捕获视频图像的多个摄像机200 (摄像机200A至200N将共同被称为摄像机200)。
[0029]摄像机200捕获视频图像(对视频图像进行拍摄)。此外，摄像机200判断是否有人物出现在捕获到的视频图像中，并且向信息处理服务器100传输比如在视频图像中的该人物的位置和视觉特征的有关该人物的信息连同捕获到的视频图像。此外，摄像机200可以对捕获到的视频图像中的人物执行跟踪。
[0030]此外，比如人物的检测、人物的视觉特征的提取、以及摄像机里的人物的跟踪的过程可以由例如信息处理服务器100或者另一信息处理设备(未示出)执行。
[0031]信息处理服务器100通过分析从摄像机200捕获的视频图像，执行各种过程，比如人物的检测、将要跟踪的人物的登记、以及被登记的人物的跟踪。
[0032]尽管以下将描述一种情况，其中人物监视基于由摄像机200捕获的实时视频图像来执行，但是本实施例不被限制于该情况，并且例如，可以在先前从摄像机200捕获的视频图像上执行监视(分析)。
[0033]信息处理服务器100包括相机控制单元110、相似性计算单元120、被跟踪人物登记单元130、下一相机预测单元140、显示画面生成单元150、输入设备160、显示设备170、和数据库(DB) 180。
[0034]信息处理服务器100的功能可以由，例如，多个设备比如服务器和客户端来实现，在该情况中，比如摄像机的控制(相机控制单元110)、将要跟踪的人物的登记(监视下的人物)(被跟踪人物登记单元130)、摄像机200的对于接下来将出现哪一个正在跟踪的目标人物的预测(下一相机预测单元140)以及显示画面的生成(显示画面生成单元150)的过程由服务器执行，并且比如用户(观察者)的输入(输入设备160)以及显示画面的输出(显示设备170)的过程由客户端执行。在服务器和客户端之间共享过程的多种方法是可以想到的。
[0035]相机控制单元110控制摄像机200。更具体地，基于由输入设备160输入的用户指令等，相机控制单元110向摄像机200传输用于放大和缩小的命令，向上、向下、向左或向右改变相机方向，改变相机分辨率，改变用于白平衡和增益控制的颜色校正参数等等。此外，相机控制单元110向DB 180登记从摄像机200接收的视频图像或者人物检测信息作为捕获到的视频图像181或者检测到的人物信息183。
[0036]相似性计算单元120通过计算出现在从摄像机200输入的视频图像中的人物和在人物跟踪信息185中登记的人物之间的相似性实现检测监视下的人物的处理。在该过程中，可以按以下方式增加相似性计算的准确性。相似性计算单元120通过从与每个登记的人物相关的多幅人物图像(在多个时机拍摄的相同人物的人物图像)中选择具有与从摄像机200输入的视频图像中的人物的姿势类似的姿势的人物的图像，来计算相似性。“类似的姿势”指具有接近的描述人的姿势和比如面向前、后、右或者左，蹲下以及该人物是否与另一人物重叠的状态的参数的值的姿势。
[0037]基于由输入设备160输入的用户指令等，被跟踪人物登记单元130向DB 180的人物跟踪信息185登记出现在从摄像机200输入的捕获到的视频图像中的人物以作为监视下的人物，该人物是跟踪对象(监视目标/跟踪目标)。此外，当出现在从摄像机200输入的捕获到的视频图像中的该人物被判定为与已经向人物跟踪信息185登记的人物相同的人物时，被跟踪人物登记单元130也可以在人物跟踪信息185中登记该人物。
[0038]下一相机预测单元140预测出现(或者已经消失)在一个摄像机200中的人物接下来有可能出现于其中的摄像机。各种可想到的预测方法的示例包括基于相应摄像机200之间的安装间隔、建筑物的构造、人物的步行速度等等来计算的预测，以及通过统计的方式处理比如人物在摄像机200中的一台摄像机消失中并出现在另一台摄像机中的频率的信息所进行的概率预测。
[0039]显示画面生成单元150生成显示画面，比如在图2和图3(将在稍后描述)中所示的将由显示设备170显示的那些。由显示画面生成单元150生成的显示画面针对每个作为跟踪对象的人物具有一个窗口 21。窗口 21可以通过选项卡25而被切换至另一跟踪对象的另一窗口 21。作为跟踪对象的人物出现或者被预测在不久的将来将出现于其中的摄像机200的视频图像被布置在每个窗口 21中。此外，显示画面生成单元150使得显示设备170显示图形用户界面(GUI)，该图形用户界面可以被用于选择是否将视频图像中出现的人物新登记为作为跟踪对象的人物，是否将出现在视频图像中的人物关联为与已被登记的人物相同的人物，等等。
[0040