影像监视系统、监视装置的制造方法
【技术领域】
[0001]本发明涉及一种使用影像来对监视对象进行监视的技术。
【背景技术】
[0002]近年来，凶恶犯罪增加而安全性的意识提高。随之，在店铺、机场等人员聚集的场所设置有大量的监视摄像机。通过这些监视摄像机拍摄的影像信息被保存在监视记录器等储存装置中并根据需要进行浏览。
[0003]在下述专利文献1中记载了使用多个监视摄像机的监视系统。在该文献中，提取监视对象的运动信息，将所提取的运动信息在多个摄像机之间进行比较，得到监视对象的
?目息。
[0004]现有技术文献
[0005]专利文献
[0006]专利文献1:日本特开2011-193187号公报
[0007]非专利文献
[0008]非专利文献1:Michalis Rapt is and Stefano Soatto, “Tracklet Descriptorsfor Act1n Modeling and Video Analysis”，In Proceedings of the EuropeanConference on Computer Vis1n, September 2010.
[0009]非专利文献2:S.Baker and 1.Matthews “Lucas-kande 20years on:A unifyingframework，，，Internat1nal Journal of Computer Vis1n, vol.53，n0.3，2004.。
【发明内容】
[0010]发明要解决的问题
[0011 ] 在具备多个监视摄像机的监视系统中，在将由多个监视摄像机得到的运动信息在摄像机之间进行比较的情况下，需要考虑各摄像机的设置条件的差异。例如，在构建从多个监视摄像机提取运动信息并寻找进行着相同的运动的人员的系统的情况下，如果多个摄像机以相同的条件被设置，则能够通过上述非专利文献1等的方式来实现。但是，在各摄像机的设置条件不同，例如相对于地面水平地设置的摄像机与朝向地面设置的摄像机等混合存在的情况下，由各摄像机拍摄对象的方式不同，因此即使进行相同的运动也成为不同的运动信息，难以进行摄像机间的运动信息的比较。
[0012]针对该问题，在上述专利文献1中，将从某摄像机得到的运动信息变换为比较对象的摄像机的坐标系之后进行比较。但是，在该方式中，由于将位置信息变换为比较对象摄像机的坐标位置后进行比较，因此如果进行比较的摄像机的视野无重叠，则无法进行比较。
[0013]本发明是为了解决如上所述的问题而完成的，其目的在于提供一种即使在摄像机的设置条件不同的情况下也能够将从多个监视摄像机得到的运动信息进行比较的影像监视技术。
[0014]用于解决问题的方案
[0015]本发明所涉及的影像监视系统的特征在于，具有:提取部，接收来自多个摄像机的影像，从构成影像的多个帧提取运动特征量；存储部，储存来自提取部的提取结果；变换部，对所提取的运动特征量进行变换；以及分析部，对变换后的运动特征量进行分析，变换部保持与多个摄像机的坐标轴不同的虚拟坐标轴，通过计算虚拟坐标轴系中的虚拟视点来对特征量进行变换。
[0016]发明效果
[0017]根据本发明所涉及的影像监视装置，能够对从设置条件不同的多个监视摄像机得到的监视对象的运动信息适当地进行分析。
【附图说明】
[0018]图1是实施例1所涉及的监视系统的示意图。
[0019]图2是实施例1所涉及的监视系统所具备的影像监视装置200的功能框图。
[0020]图3是表示虚拟视点生成部203和变换方法决定部204的结构例的功能框图。
[0021]图4是表示虚拟视点生成部203的处理例的图。
[0022]图5是表示特征量变换部207的结构例的功能框图。
[0023]图6是虚拟视点生成部203的处理流程图。
[0024]图7是特征量变换部207的处理流程图。
[0025]图8是表示实施例1所涉及的影像监视装置的结构例的图。
[0026]图9是表示实施例1所涉及的监视系统的结构例的图。
[0027]图10是表示虚拟设置状态信息设定客户端907的一例的图。
[0028]图11是实施例2所涉及的影像监视装置200的功能框图。
[0029]图12是表示实施例3所涉及的影像监视装置的结构例的图。
[0030]图13是表示实施例4所涉及的虚拟视点生成部203的处理例的图。
【具体实施方式】
[0031]实施例1
[0032]图1是本发明的实施例1所涉及的监视系统的示意图。在图1中，由多个监视摄像机(102、103)对位于监视区域内的监视对象101进行监视。
[0033]通过图像处理在从各监视摄像机得到的影像中提取监视对象的运动特征量(104、105)。运动特征量是能够表现对象的运动量的特征量。例如，使用将在某固定时间内监视对象在画面内移动的坐标的移动量排列而成的运动矢量等。另外，在对象的移动量的计算中使用如非专利文献2所记载的那样的方法等即可。
[0034]从各摄像机得到的运动特征量(104、105)由于摄像机的设置状态不同而难以进行比较。在此，摄像机的设置状态例如是摄像机相对于地面的设置高度、相对于地面的设置角度、摄像机的朝向(视线的方位)、摄像机的视角、摄像机的焦距等。因此，提供在监视系统整体上统一的虚拟设置状态106，对各摄像机设定摄像机的设置状态与虚拟设置状态106的摄像机的设置状态一致的虚拟视点(107、108)。按照所设定的各虚拟视点，分别决定从各摄像机的图像坐标系向各虚拟视点的坐标系的变换方法。按照该变换方法，对运动特征量(104、105)进行变换，得到变换后的运动特征量(109、110)。坐标系的变换方法例如使用通过使用旋转矩阵的坐标变换对运动矢量的坐标位置进行变换的方法等即可。变换后的运动特征量(109、110)是所有摄像机为相同的设置状态的运动特征量，因此比较变得容易。将得到的运动特征量(109、110)保存到数据库111等中来用于分析。
[0035]图2是本实施例1所涉及的监视系统所具备的影像监视装置200的功能框图。影像监视装置200具备虚拟视点生成部203、变换方法决定部204、运动特征量提取部206、特征量变换部207、特征量分析部208、分析结果提示部209。
[0036]虚拟视点生成部203接收预先提供的虚拟设置状态信息201和多台监视摄像机设置信息。在虚拟视点生成部203中，基于接收到的虚拟设置状态信息201和多台监视摄像机设置信息，来生成针对各监视摄像机的虚拟视点信息210。所生成的虚拟视点信息210被输入到变换方法决定部204。在变换方法决定部204中，基于被输入的虚拟视点信息210来决定特征量的变换方法。所决定的变换方法211被输入到特征量变换部207。
[0037]运动特征量提取部206接收多台监视摄像机的影像205。在运动特征量提取部206中，对接收到的来自监视摄像机的影像205进行图像处理，提取监视对象的运动特征量。在运动特征量的提取中使用非专利文献2的方法等即可。运动特征量由提取了特征量的图像上的位置信息和表示运动的特征量构成。作为表示运动的特征量，例如有将图像坐标上的移动量(二维矢量)在时间方向上排列而成的特征量等。所提取的运动特征量被输入到特征量变换部207。特征量变换部208接收运动特征量和特征量的变换方法211，按照特征量的变换方法，对运动特征量进行变换。变换后的运动特征量被输入到特征量分析部208。
[0038]在特征量分析部208中对变换后的运动特征量进行分析。分析得到的结果被输入到分析结果提示部209。在分析结果提示部209中，将分析结果变换为能够提示给监视者的状态并进行提示。作为特征量分析部208的例子，例如可考虑从过去的运动特征量中找出进行着同样的运动的对象并按