影像监视系统以及影像监视方法与流程

本发明涉及影像监视系统以及影像监视方法。

背景技术：

在采用多个监视照相机的影像监视系统中，具有用于监视员掌握作为监视对象的建筑物或用地的整体影像的方法(例如，参照专利文献1以及非专利文献1)。

在专利文献1中，提出了以下这样的方法：管理利用多个监视照相机拍摄的影像和监视照相机的设置场所的信息，合成邻接的监视照相机的影像，生成从正上方俯瞰屋子或地板或建筑物的影像。专利文献1的系统具备多个建筑物内服务器和监视服务器。各个建筑物内服务器根据监视照相机的设置场所的信息，根据邻接的监视照相机的影像来生成合成图像。监视服务器接收由多个建筑物内服务器生成的合成影像作为输入，生成从上俯视地板整体的俯瞰影像。监视服务器根据各个地板的俯瞰影像生成建筑物整体的俯瞰影像。由此，对监视员提供建筑物整体的俯瞰影像。

在非专利文献1中，提出了以下这样的方法：利用多个监视照相机对车站的站台围栏附近的影像进行摄影，通过所拍摄的影像的视点变换来显示从正上方观看的影像。非专利文献1的系统具备控制终端和显示终端。控制终端进行沿着车站的平台围栏设置的监视照相机的影像的视点变换和微调。显示终端接收基于控制终端的视点变换后的影像作为输入，生成相邻地显示邻接的监视照相机的影像的布局。由此，对车站工作人员以及铁道乘务员提供站台与列车的边界位置的俯瞰影像。

现有技术文献

专利文献

专利文献1：日本特开2008-118466号公报

非专利文献

非专利文献1：川边，江上，中山著，“トップビューモニタシステム”，日本铁道控制论协会，2013年11月发行，论文编号407

技术实现要素：

发明所要解决的课题

在向大规模的设施应用提供现有的俯瞰影像的系统时，监视照相机与进行图像处理(例如，视点变换)的计算机之间的网络频带不足。因此，需要导入多个专利文献1的建筑物内服务器或者非专利文献1的控制终端，并将它们分为多个网络段。

例如，在非专利文献1中，记载了所使用的动态图像的分辨率是1920×1080、帧率是30fps(frames·per·second)。在专利文献1中虽然没有明确记载所使用的动态图像的规格，但在以当前在市场上销售的标准的监视照相机的性能为前提的情况下，假定使用与非专利文献1同等性能的照相机。另外，在非专利文献1中，记载了利用以太网(注册商标)连接监视照相机与控制终端之间的情况。当从监视照相机对专利文献1的建筑物内服务器或者非专利文献1的控制终端采用当前在市场上使用的1Gbps(Gigabits·per·second)频带的以太网(注册商标)来发送动态图像时，需要构建集中100台左右的监视照相机而得到的网络段。在一般的监视照相机系统中，除了输出显示用的影像数据之外，还始终从监视照相机输出记录用的影像数据。因此，在现实中，能够与1个网络段连接的监视照相机为几十台左右。

在具有首都圈的商用设施的车站或大型购物中心生成俯瞰影像时，需要几千台以上的监视照相机。因此，必须构建100个以上的网络段。即，如前所述，需要多个专利文献1的建筑物内服务器或者非专利文献1的控制终端，从而产生管理的复杂化或者成本增大的各种课题。

本发明的目的是例如能够在不给影像监视的业务带来阻碍的情况下削减发送由多个监视照相机拍摄的影像所需的通信频带。

解决问题的手段

本发明的一个方式的影像监视系统具备：接收部，其从对某场所的多个区域中的各个区域的影像分别进行拍摄的多个监视照相机接收所拍摄的影像；控制部，其进行在画面上显示由所述接收部接收到的影像的控制；操作部，其受理指定所述多个区域中的一部分区域的操作；以及指示部，在所述控制部使所述多个区域的影像显示在所述画面上的情况下，所述指示部指示所述多个监视照相机以第1形式发送所拍摄的影像，在所述控制部使针对所述操作部指定的区域的影像显示在所述画面上的情况下，指示拍摄该指定的区域的影像的监视照相机以数据量比所述第1形式多的第2形式发送所拍摄的影像。

发明效果

在本发明中，在显示多个区域的影像的情况下，从监视照相机接收质量比显示一部分区域的影像的情况低的影像。因此，根据本发明，不会给影像监视的业务带来阻碍，就能够削减发送由多个监视照相机拍摄的影像所需的通信频带。

附图说明

图1是示出实施方式1的影像监视系统的结构的框图。

图2是示出实施方式1的影像监视系统的控制服务器的结构的框图。

图3是示出实施方式1的影像监视系统的显示服务器的结构的框图。

图4是示出实施方式1的影像监视系统的应用例的图。

图5是示出实施方式1以及实施方式2的影像监视系统的显示服务器的画面显示例的图。

图6是示出实施方式1以及实施方式2的影像监视系统的显示服务器的其它画面显示例的图。

图7是示出实施方式1的影像监视系统的显示服务器的动作例的流程图。

图8是示出实施方式1的影像监视系统的控制服务器的动作例的流程图。

图9是示出实施方式1的影像监视系统的控制服务器的动作例的流程图。

图10是示出实施方式1的影像监视系统的控制服务器的动作例的流程图。

图11是示出实施方式1的影像监视系统的显示服务器的动作例的流程图。

图12是示出实施方式2以及实施方式3的影像监视系统的结构的框图。

图13是示出实施方式2的影像监视系统的监视照相机的结构的框图。

图14是示出实施方式2的影像监视系统的显示服务器的结构的框图。

图15是示出实施方式2以及实施方式3的影像监视系统的应用例的图。

图16是示出实施方式2的影像监视系统的显示服务器的动作例的流程图。

图17是示出实施方式2的影像监视系统的监视照相机的动作例的流程图。

图18是示出实施方式2的影像监视系统的监视照相机的动作例的流程图。

图19是示出实施方式2的影像监视系统的监视照相机的动作例的流程图。

图20是示出实施方式2的影像监视系统的显示服务器的动作例的流程图。

图21是示出实施方式3的影像监视系统的监视照相机的结构的框图。

图22是示出实施方式3的影像监视系统的显示服务器的结构的框图。

图23是示出实施方式3的影像监视系统的显示服务器的画面显示例的图。

图24是示出实施方式3的影像监视系统的显示服务器的动作例的流程图。

图25是示出实施方式3的影像监视系统的监视照相机的动作例的流程图。

图26是示出实施方式3的影像监视系统的监视照相机的动作例的流程图。

图27是示出实施方式3的影像监视系统的监视照相机的动作例的流程图。

图28是示出实施方式3的影像监视系统的显示服务器的动作例的流程图。

图29是示出实施方式3的影像监视系统的显示服务器的动作例的流程图。

图30是示出本发明的实施方式的影像监视系统的各个装置的硬件结构例的图。

具体实施方式

以下，使用附图来说明本发明的实施方式。

实施方式1.

图1是示出本实施方式的影像监视系统100的结构的框图。

在图1中，影像监视系统100具备多个监视照相机101(监视照相机C1-1、C1-2、···、C1-m、C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m)、多个控制服务器200(控制服务器R1、R2、···、Rn)和显示服务器300。

监视照相机C1-1、C1-2、···、C1-m经由LAN102(Local·Area·Network)与控制服务器R1连接。同样，监视照相机C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m也经由其它LAN102与控制服务器R2、···、Rn连接。在来自各个监视照相机101的监视影像的传送以及向各个监视照相机101的控制信息的传送中采用LAN102。LAN102例如是以太网(注册商标)。LAN102不限于有线LAN。在使用具备无线LAN功能的监视照相机101的情况下，LAN102可以是无线LAN。LAN102可以置换为WAN(Wide·Area·Network)等其它种类的网络。

控制服务器R1、R2、···、Rn经由LAN103与公共的显示服务器300连接。在来自各个控制服务器200的监视影像的传送以及向各个控制服务器200的控制信息的传送中采用LAN103。LAN103例如是以太网(注册商标)。LAN103不限于有线LAN，可以是无线LAN。LAN103可以置换为WAN等其它种类的网络。

此外，在图1所示的结构中，1个LAN102与m台监视照相机101、1台控制服务器200连接，但与1个LAN102连接的监视照相机101以及控制服务器200的台数是任意的。例如，与各个LAN102连接的监视照相机101的台数可以不同。1个LAN102可以与2台以上的控制服务器200连接。

另外，在图1所示的结构中，LAN103与n台控制服务器200、1台显示服务器300连接，但与LAN103连接的控制服务器200以及显示服务器300的台数是任意的。例如，LAN103可以仅与1台控制服务器200连接。LAN103可以与2台以上的显示服务器300连接。

各个监视照相机101对作为监视对象的室内或屋外的影像进行摄影。各个监视照相机101向任意的控制服务器200输出所拍摄的影像。

各个控制服务器200接收多个监视照相机101所拍摄的影像的输入。各个控制服务器200在内置的记录介质中记录影像。各个控制服务器200将从多个监视照相机101接收到的影像或在记录介质中记录的影像变换为俯瞰影像。各个控制服务器200合成邻接的监视照相机101的俯瞰影像。然后，各个控制服务器200将多个监视照相机101所拍摄的影像、它们变换后的俯瞰影像以及合成的影像输出至显示服务器300。

各个控制服务器200从显示服务器300接收监视照相机101用的控制信息的输入。各个控制服务器200将控制信息输出至各个监视照相机101。

显示服务器300从多个控制服务器200接收影像的输入。显示服务器300将从多个控制服务器200接收到的影像显示在显示器104上。显示服务器300接收来自影像监视系统100的使用者即监视员的指示。例如，显示服务器300通过键盘以及鼠标105接收俯瞰影像的放大显示或缩小显示的操作。

显示服务器300根据监视员的指示，将控制信息输出至各个控制服务器200，控制信息表示输出影像的监视照相机101和输出的影像的分辨率以及帧率。

图2是示出各个控制服务器200的结构的框图。

在图2中，各个控制服务器200具备第1接收部201、第2接收部202、硬盘203、切换部204、第1发送部205、解码部206、生成部207、第2发送部208、合成部209、第3发送部210、第3接收部211、管理部212和输出部213。

以下，采用图1以及图2来说明控制服务器R1的各部的功能。

第1接收部201以及第2接收部202经由LAN102接收监视照相机C1-1、···、C1-m的影像的输入。第1接收部201将监视照相机C1-1、···、C1-m的影像中的待显示为直播影像的影像发送至切换部204。第2接收部202将监视照相机C1-1、···、C1-m的影像中的待录像的影像记录到硬盘203内。硬盘203是前述的记录介质的例子，可置换为闪速存储器等其它种类的记录介质。

切换部204根据第3接收部211的控制，进行在显示器104上显示直播影像还是显示录像影像的切换。在显示器104上显示直播影像的情况下，切换部204取得第1接收部201的影像。在显示器104上显示录像影像的情况下，切换部204根据时刻等所指定的信息，取得硬盘203的影像。切换部204将所取得的影像输出至第1发送部205。切换部204还将所取得的影像输出至解码部206。

第1发送部205经由LAN103将从第1接收部201或硬盘203取得的影像输出至显示服务器300。

解码部206将为了进行收发而编码后的影像变换为位图(bitmap)图像。解码部206将该位图图像输出至生成部207。

生成部207根据管理部212所记录的监视照相机C1-1、···、C1-m的视场角信息，变换从解码部206输入的位图图像，生成仿佛从正上方俯视在该位图图像中显现的物体的俯瞰影像。生成部207将该俯瞰影像输出至第2发送部208以及合成部209。

第2发送部208取得由生成部207生成的每个监视照相机101的俯瞰影像。第2发送部208经由LAN103将该俯瞰影像发送至显示服务器300。

合成部209取得由生成部207生成的俯瞰影像。合成部209根据在管理部212中记录的监视照相机C1-1、···、C1-m的位置信息，合成邻接的监视照相机101的俯瞰影像。合成部209向第3发送部210输出所合成的俯瞰影像。

第3发送部210经由LAN103将从合成部209输入的合成后的俯瞰影像输出至显示服务器300。

第3接收部211经由LAN103接收从显示服务器300的键盘以及鼠标105(如果显示器104是触摸面板，则可以是显示器104)输入的信息。在该信息中，例如包含监视照相机C1-1、···、C1-m的位置信息和监视照相机C1-1、···、C1-m的视场角信息。或者，包含指定监视照相机C1-1、···、C1-m输出的影像的分辨率以及帧率的信息。或者，包含表示要显示监视照相机C1-1、···、C1-m中的哪个监视照相机101的影像的信息、指定该监视照相机101输出的影像的分辨率以及帧率的信息。

管理部212从第3接收部211接收信息的输入。管理部212记录所输入的信息。

输出部213经由LAN102将在管理部212中记录的、指定影像的分辨率以及帧率的信息输出至监视照相机C1-1、···、C1-m。或者，输出部213根据在管理部212中记录的表示要显示哪个监视照相机101的影像的信息，经由LAN102将在管理部212中记录的、指定该监视照相机101输出的影像的分辨率以及帧率的信息输出至该监视照相机101。

控制服务器R1以外的控制服务器200的各部的功能与上述的控制服务器R1的功能相同。

图3是示出显示服务器300的结构的框图。

在图3中，显示服务器300具备第1接收部301、第1解码部302、显示部303、第2接收部304、第3接收部305、合成部306、操作部307、第1管理部308、第2管理部309和发送部310。

以下，使用图1以及图3，说明与控制服务器R1、R2关联的显示服务器300的各部的功能。

第1接收部301经由LAN103接收控制服务器R1、R2的第1发送部205输出的影像。第1接收部301将接收到的影像输出至第1解码部302。

第1解码部302对从第1接收部301输入的影像进行解码。第1解码部302将解码后的影像输出至显示部303。

显示部303在显示器104上显示从第1解码部302输入的影像。

第2接收部304经由LAN103接收控制服务器R1、R2的第2发送部208输出的每个监视照相机101的俯瞰影像。第2接收部304将接收到的俯瞰影像输出至合成部306。

第3接收部305经由LAN103接收控制服务器R1、R2的第3发送部210输出的合成后的俯瞰影像。第3接收部305将接收到的俯瞰影像输出至合成部306。

合成部306合成从第2接收部304输入的每个监视照相机101的俯瞰影像以及从第3接收部305输入的合成后的俯瞰影像，生成整体的俯瞰影像。合成部306将所生成的整体的俯瞰影像输出至显示部303。

操作部307从键盘以及鼠标105(如果显示器104是触摸面板，则可以是显示器104)接收信息的输入。在该信息中，例如包含监视照相机C1-1、···、C1-m、C2-1、···、C2-m的位置信息、监视照相机C1-1、···、C1-m、C2-1、···、C2-m的视场角信息以及设置有监视照相机C1-1、···、C1-m、C2-1、···、C2-m的场所整体的地图信息。或者，包含与影像的放大显示或缩小显示的操作相关的信息。在与该操作相关的信息中，包含指定监视照相机C1-1、···、C1-m、C2-1、···、C2-m输出的影像的分辨率以及帧率的信息。或者，包含表示要显示监视照相机C1-1、···、C1-m、C2-1、···、C2-m中的哪个监视照相机101的影像的信息和指定该监视照相机101输出的影像的分辨率以及帧率的信息。操作部307将所输入的信息输出至第1管理部308、第2管理部309和发送部310。

第1管理部308接收监视照相机C1-1、···、C1-m、C2-1、···、C2-m的位置信息与监视照相机C1-1、···、C1-m、C2-1、···、C2-m的视场角信息的输入。另外，第1管理部308接收与影像的放大显示或缩小显示的操作相关的信息的输入。第1管理部308将所输入的信息输出至合成部306。

第2管理部309接收地图信息的输入。第2管理部309将所输入的地图信息输出至合成部306。

发送部310经由LAN103将从第1管理部308以及第2管理部309输入的信息输出至控制服务器200的第3接收部211。

与控制服务器R1、R2以外的控制服务器200关联的显示服务器300的各部的功能和与上述的控制服务器R1、R2关联的各部的功能相同。

图4是示出影像监视系统100的应用例的图。

在图4中，场所P例如是大型店铺的内部、游乐园、车站的站台或站内的通路、公寓或大厦的居室或通路。虽然通常利用多个监视照相机101来摄影场所P，但为了简化说明，这里，利用4台监视照相机C1-1、C1-2、C1-3、C2-1对大致整体进行摄影。

监视照相机C1-1对场所P的摄影区域a进行摄影。监视照相机C1-2对场所P的摄影区域b进行摄影。监视照相机C1-3对场所P的摄影区域c进行摄影。监视照相机C2-1对场所P的摄影区域d进行摄影。摄影区域a～d可相互重叠。

控制服务器R1经由LAN102接收监视照相机C1-1、C1-2、C1-3的监视影像。控制服务器R2经由LAN102接收监视照相机C2-1的监视影像。

显示服务器300从控制服务器R1、R2接收监视照相机C1-1、C1-2、C1-3、C2-1的通常的影像、变换这些通常的影像而得到的摄影区域a～d的个别俯瞰影像、以及合成这些个别俯瞰影像而得到的场所P的整体的俯瞰影像。显示服务器300将通常的影像合场所P的整体的俯瞰影像显示在显示器104上。显示服务器300从键盘以及鼠标105受理放大或缩小显示影像或者指定显示位置的操作。显示服务器300从键盘以及鼠标105接收场所P的地图信息、监视照相机C1-1、C1-2、C1-3、C2-1的位置信息、监视照相机C1-1、C1-2、C1-3、C2-1的视场角信息和监视照相机C1-1、C1-2、C1-3、C2-1的分辨率以及帧率的信息的输入。显示服务器300管理所输入的信息。

以下，说明图4的例子中的显示服务器300的画面显示。

图5是示出显示服务器300的画面显示例的图。

在图5中，左侧的显示画面501是在显示器104上显示的场所P的整体的俯瞰影像。当为了警备等而始终对监视影像进行监视的监视员利用显示服务器300的键盘以及鼠标105作出显示整体影像的指示时，在画面上显示场所P的整体影像。

右侧的显示画面502是在显示器104上显示的摄影区域b、d(的一部分)的俯瞰影像。当监视员利用显示服务器300的键盘以及鼠标105作出使显示画面501的中心部进行放大显示的指示(即，放大指示)时，摄影区域a、c从画面的显示范围消失，在画面上显示摄影区域b、d的放大影像。

图6是示出显示服务器300的其它画面显示例的图。

在图6中，左侧的显示画面511与图5的左侧的显示画面501同样是在显示器104上显示的场所P的整体的俯瞰影像。场所P具有关注位置512。关注位置512是为了警备等而对监视影像始终进行监视的监视员需要在监视业务的一个环节中密切监视的区域。

右侧的显示画面513是在显示器104上显示的关注位置512的俯瞰影像。当监视员利用显示服务器300的键盘以及鼠标105作出放大显示显示画面501的关注位置512的指示(即，关注指示)时，摄影区域a、d从画面的显示范围消失，在画面上显示摄影区域b、c的放大影像。

以下，说明图4的例子中的影像监视系统100的动作(本实施方式的影像监视方法)。

首先，说明照相机控制动作。

图7是示出从监视员作出了显示影像的放大指示或关注指示时的显示服务器300的动作例的流程图。

在S601中，操作部307经由键盘以及鼠标105从监视员接收放大指示或关注指示的操作作为显示控制操作。操作部307利用显示控制操作将作为显示对象的摄影区域的信息输出至发送部310。

在S602中，发送部310从第1管理部308以及第2管理部309取得对摄影区域a～d进行拍摄的监视照相机C1-1、C1-2、C1-3、C2-1的信息。发送部310根据在S601中输入的信息和从第1管理部308以及第2管理部309取得的信息，选择显示以及非显示监视照相机。在图5的放大指示的例子中，对摄影区域a、c进行拍摄的监视照相机C1-1、C1-3成为非显示监视照相机，对摄影区域b、d进行拍摄的监视照相机C1-2、C2-1成为显示监视照相机。

在S603中，发送部310从第1管理部308取得在S602中选择的显示监视照相机的设定值。在图5的放大指示的例子中，为了放大监视照相机C1-2、C2-1的影像，将监视照相机C1-2、C2-1的分辨率以及帧率设定为较高的值。

在S604中，发送部310从第1管理部308取得控制服务器200的信息。发送部310根据所取得的信息，选择连接了需要进行设定变更的监视照相机101的控制服务器200。发送部310对所选择的控制服务器200的第3接收部211输出控制信息。在控制信息中包含表示在S602中选择的显示以及非显示监视照相机的信息、在S603中取得的设定值。在图5的放大指示的例子中，示出监视照相机C1-1、C1-3为非显示监视照相机、监视照相机C1-2为显示监视照相机的情况，将指定监视照相机C1-2的分辨率以及帧率的控制信息发送至控制服务器R1。另外，示出监视照相机C2-1为显示监视照相机的情况，将指定监视照相机C2-1的分辨率以及帧率的控制信息发送至控制服务器R2。

图8是示出从显示服务器300发送了控制信息时的控制服务器R1的动作例的流程图。

在S611中，第3接收部211从显示服务器300的发送部310接收在S604中发送的控制信息。第3接收部211将所接收的控制信息输出至切换部204以及输出部213。

在S612中，切换部204根据在S611中输入的控制信息，仅处理显示监视照相机的影像。在图5的放大指示的例子中，停止对摄影区域a、c进行拍摄的监视照相机C1-1、C1-3的影像的输入，仅接收对摄影区域b进行拍摄的监视照相机C1-2的影像的输入。

在S613中，输出部213根据在S611中输入的控制信息，对非显示监视照相机指示停止影像的输出。在图5的放大指示的例子中，对监视照相机C1-1、C1-3指示停止影像的输出。

在S614中，输出部213根据在S611中输入的控制信息，指示显示监视照相机将输出的影像的分辨率以及帧率的值设定得较高。在图5的放大指示的例子中，对监视照相机C1-2通知分辨率以及帧率的设定值。

从显示服务器300发送控制信息时的控制服务器R2的动作与图8所示的动作相同。

接着，说明俯瞰影像生成动作。

如前述的S611那样，第3接收部211从显示服务器300的发送部310接收控制信息。在控制信息中包含通过监视员的操作指定的信息、和预先设定的信息。在控制信息中，例如包含表示在显示器104的画面上显示直播影像和记录影像中的哪一个图像的信息。还包含表示是显示场所P的整体俯瞰影像、还是放大显示一部分摄影区域的俯瞰影像、还是显示一部分摄影区域的通常影像(即，变换为俯瞰影像之前的监视影像)的信息。如前所述，有时还包含表示显示以及非显示监视照相机的信息和显示监视照相机的设定值。

图9以及图10是示出从显示监视照相机发送了影像时的控制服务器R1的动作例的流程图。

在S621中，切换部204根据由第3接收部211接收的控制信息，切换是处理直播影像、还是处理记录影像。在所显示的影像是直播影像的情况下，流程进入S622。在所显示的影像是记录影像的情况下，流程进入S623。

在S622中，切换部204从第1接收部201接收影像的输入。然后，流程进入S624。

在S623中，切换部204从硬盘203取得影像。然后，流程进入S624。

在S624中，切换部204根据由第3接收部211接收的控制信息，判定影像是否是显示监视照相机的影像。在影像是显示监视照相机的影像的情况下，流程进入S625。在影像不是显示监视照相机的影像的情况下，流程结束。在图5的放大指示的例子中，监视照相机C1-1、C1-3是非显示监视照相机，监视照相机C1-2是显示照相机，所以，在影像是监视照相机C1-2的影像的情况下，流程进入S625。在影像是监视照相机C1-1、C1-3的影像的情况下，流程结束。

在S625中，切换部204根据由第3接收部211接收的控制信息，判定所显示的影像是否是通常影像。在所显示的影像是通常影像的情况下，流程进入S626。在显示的影像不是通常影像的情况下，流程进入S627。

在S626中，切换部204直接从第1发送部205向显示服务器300的第1接收部301输出在S622或S623中取得的影像。

在S627中，切换部204根据由第3接收部211接收的控制信息，判定显示的影像是否是俯瞰影像。在显示的影像是俯瞰影像的情况下，切换部204将在S622或S623中取得的影像输出至解码部206。然后，流程进入S628。在显示的影像不是俯瞰影像的情况下，流程结束。

在S628中，解码部206将在S622或S623中取得的影像变换为位图数据。解码部206将该位图数据输出至生成部207。

在S629中，生成部207从管理部212取得监视照相机C1-1、C1-2、C1-3的视场角信息。生成部207基于所取得的视场角信息，根据在S628中输入的位图数据，生成俯瞰影像。生成部207将所生成的俯瞰影像输出至第2发送部208以及合成部209。

在S630中，第2发送部208将在S629中输入的俯瞰影像输出至显示服务器300的第2接收部304。

在S631中，合成部209从管理部212取得监视照相机C1-1、C1-2、C1-3的位置信息。合成部209根据所取得的位置信息，判定是否存在与对应于在S629中输入的俯瞰影像的监视照相机101邻接的监视照相机101。当存在邻接的监视照相机101时，流程进入S632。当不存在邻接的监视照相机101时，流程结束。

在S632中，合成部209合成在S629中输入的俯瞰影像以及邻接的监视照相机101的俯瞰影像。在图5的例子中生成左侧的显示画面501的情况下，在S629中输入监视照相机C1-1、C1-2、C1-3的俯瞰影像，在S632中执行这些俯瞰影像的合成处理。在生成右侧的显示画面502的情况下，只是在S629中生成监视照相机C1-2的俯瞰影像，不执行俯瞰影像的合成处理。

在S633中，合成部209将在S632中合成的俯瞰影像输出至第3发送部210。第3发送部210将所输入的俯瞰影像输出至显示服务器300的第3接收部305。

从显示监视照相机发送了影像时的控制服务器R2的动作与图9以及图10所示的动作相同。

图11是示出从控制服务器R1、R2发送了影像时的显示服务器300的动作例的流程图。

在S641中，在所显示的影像是通常影像的情况下，第1接收部301从控制服务器R1或控制服务器R2的第1发送部205接收影像。第1接收部301将所接收的影像输出至第1解码部302。然后，流程进入S642。在所显示的影像不是通常影像的情况下，流程进入S644。

在S642中，第1解码部302对在S641中输入的影像进行解码。第1解码部302将解码的影像输出至显示部303。

在S643中，显示部303将在S642中输入的影像显示在显示器104上。

在S644中，在所显示的影像是俯瞰影像的情况下，流程进入S645。在所显示的影像不是俯瞰影像的情况下，流程结束。

在S645中，第2接收部304从控制服务器R1以及控制服务器R2的至少任意一个的第2发送部208接收影像。还存在第3接收部305从控制服务器R1以及控制服务器R2的至少任意一个的第3发送部210接收影像的情况。第2接收部304以及第3接收部305将接收到的影像输出至合成部306。

在S646中，合成部306从第1管理部308取得监视照相机C1-1、C1-2、C1-3、C2-1的位置信息。合成部306从第2管理部309取得地图信息。合成部306根据所取得的位置信息以及地图信息，如果需要合成，则合成在S645中输入的影像。合成部306将合成的影像输出至显示部303。如果不需要合成，则合成部306将在S645中输入的影像输出至显示部303。在图5的例子中，在生成左侧的显示画面501的情况下，在S645中输入合成监视照相机C1-1、C1-2、C1-3的俯瞰影像后的俯瞰影像、以及监视照相机C2-1的俯瞰影像，在S646中执行这些俯瞰影像的合成处理。在生成右侧的显示画面502的情况下，在S645中输入监视照相机C1-2的俯瞰影像和监视照相机C2-1的俯瞰影像，在S646中执行这些俯瞰影像的合成处理。

在S647中，显示部303在显示器104上显示在S646中输入的影像。

如上所述，在本实施方式中，在显示场所P的整体的俯瞰影像的情况下，抑制监视照相机C1-1、C1-2、C1-3、C2-1的分辨率以及帧率。因此，不压缩网络频带就能将影像发送至显示服务器300。由此，能够构建提供俯瞰大规模的购物中心、游乐园、车站的站台或站内的通路等需要几千台以上的监视照相机101的场所整体的影像的系统。

在本实施方式中，在放大俯瞰影像、或显示关注点或者显示通常影像的情况下，停止对未显示的区域进行拍摄的监视照相机101的影像的输出，并且将对所显示的区域进行拍摄的监视照相机101的分辨率以及帧率设定得较高。因此，关于需要进行密切监视的区域，能够在显示器104上显示更鲜明的影像。

在本实施方式中，影像监视系统100在控制服务器200中具备第1接收部201和第2接收部202作为接收部。接收部从对某场所P的多个区域(在图5的例子中是摄影区域a～d)中的各个区域的影像分别进行拍摄的多个监视照相机101(在图5的例子中是监视照相机C1-1、C1-2、C1-3、C2-1)接收所拍摄的影像。

影像监视系统100在控制服务器200中具备合成部209、在显示服务器300中具备显示部303和合成部306作为控制部。控制部进行在画面(例如，显示器104的画面)上显示由接收部接收的影像的控制。

影像监视系统100在显示服务器300中具备操作部307。操作部307受理指定上述多个区域中的一部分区域(在图5的放大指示的例子中是摄影区域b、d)的操作(例如，显示控制操作)。

影像监视系统100在控制服务器200中具备管理部212和输出部213、在显示服务器300中具备第1管理部308、第2管理部309和发送部310作为指示部。在通过控制部在画面上显示上述多个区域的影像的情况下，指示部指示多个监视照相机101以第1形式发送所拍摄的影像。在通过控制部在画面上显示对操作部307指定的区域的影像的情况下，指示部指示拍摄该指定的区域的影像的监视照相机101(在图5的放大指示的例子中为监视照相机C1-2、C2-1)以数据量比第1形式多的第2形式发送所拍摄的影像。第1形式以及第2形式例如决定为，以第1形式发送的影像的分辨率以及帧率的至少任意一个比以第2形式发送的影像低。

根据本实施方式，利用上述这样的动作，可削减发送由多个监视照相机101拍摄的影像所需的通信频带，而不会给影像监视的业务带来阻碍。

在通过控制部在画面上显示对操作部307指定的区域的影像的情况下时，优选的是，指示部指示多个监视照相机101中的拍摄该指定的区域的影像的监视照相机101以外的监视照相机101(在图5的放大指示的例子中为监视照相机C1-1、C1-3)不发送所拍摄的影像。由此，可在所显示的影像的发送中使用更多的通信频带。

在本实施方式中，影像监视系统100还在控制服务器200中具备生成部207。生成部207变换由接收部从多个监视照相机101分别接收到的影像，生成相当于从正上方俯视上述各个区域的影像的俯瞰影像(例如，摄影区域a～d各自的俯瞰影像)。

在画面上显示上述多个区域的影像的情况下，控制部进行以下这样的控制：合成由生成部207生成的俯瞰影像，来生成场所P的整体的俯瞰影像，在画面上显示所生成的俯瞰影像。

根据本实施方式，通过上述这样的动作，影像监视的业务的效率提高。

在本实施方式中，控制服务器200与显示服务器300的功能的区分方法不限于以上的情况，可适当变更。例如，可将控制服务器200和显示服务器300合并为单一的服务器。

实施方式2.

关于本实施方式，主要说明与实施方式1的差异。

图12是示出本实施方式的影像监视系统100的结构的框图。

在图12中，影像监视系统100具备多个监视照相机400(监视照相机C1-1、C1-2、···、C1-m、C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m)、多个网络装置106(网络装置T1、T2、···、Tn)和显示服务器300。

监视照相机C1-1、C1-2、···、C1-m经由LAN102与网络装置T1连接。同样，监视照相机C2-1、C2-2、···、C2-m、···、Cn-1、Cn-2、···、Cn-m也经由其它LAN102与网络装置T2、···、Tn连接。LAN102用于从各个监视照相机400传送监视影像以及向各个监视照相机400传送控制信息。

网络装置T1、T2、···、Tn经由LAN103与共用的显示服务器300连接。LAN103用于从各个网络装置106传送监视影像以及向各个网络装置106传送控制信息。

网络装置T1、T2、···、Tn将监视照相机C1-1、C1-2、···、C1-m分为多个网络段。网络装置T1、T2、···、Tn例如是LAN交换机。

在实施方式1中，如图1所示，影像监视系统100具备进行由多个监视照相机101拍摄的影像的视点变换(即，俯瞰影像的生成)的多个控制服务器200。与此相对，在本实施方式中，如图12所示，将各个控制服务器200置换为网络装置106，利用多个监视照相机400进行监视影像的视点变换。

图13是示出各个监视照相机400的结构的框图。

在图13中，各个监视照相机400具备传感器部401、处理部402、变换部403、第1编码部404、第2编码部405、存储卡406、解码部407、发送部408、接收部409和管理部410。后面叙述各部的动作。存储卡406优选是可拆装的。

图14是示出显示服务器300的结构的框图。

在图14中，显示服务器300具备第1接收部301、第1解码部302、显示部303、第2接收部304、合成部306、操作部307、第1管理部308、第2管理部309、发送部310和第2解码部311。后面叙述各部的动作。

图15是示出影像监视系统100的应用例的图。

在图15中，监视照相机C1-1、C1-2、C1-3、C2-1与场所P的摄影区域a～d的关系和图4的例子是相同的。监视照相机C1-1、C1-2、C1-3所拍摄的影像经由网络装置T1输出至显示服务器300。监视照相机C2-1所拍摄的影像经由网络装置T2输出至显示服务器300。

在图15的例子中，也是利用显示服务器300在显示器104上显示与图5所示的显示画面501、502或者图6所示的显示画面511、513相同的画面。

以下，说明图15的例子中的影像监视系统100的动作(本实施方式的影像监视方法)。

首先，说明照相机控制动作。

图16是示出由监视员作出显示影像的放大指示或关注指示时的显示服务器300的动作例的流程图。

在S701中，操作部307经由键盘以及鼠标105从监视员接收放大指示或关注指示的操作，作为显示控制操作。操作部307通过显示控制操作将作为显示对象的摄影区域的信息输出至发送部310。

在S702中，发送部310从第1管理部308以及第2管理部309取得对摄影区域a～d进行拍摄的监视照相机C1-1、C1-2、C1-3、C2-1的信息。发送部310根据在S701中输入的信息和从第1管理部308以及第2管理部309取得的信息，选择显示以及非显示监视照相机。在图5的放大指示的例子中，对摄影区域a、c进行拍摄的监视照相机C1-1、C1-3成为非显示监视照相机，对摄影区域b、d进行拍摄的监视照相机C1-2、C2-1成为显示监视照相机。

在S703中，发送部310从第1管理部308取得在S702中选择的显示监视照相机的设定值。在图5的放大指示的例子中，为了放大监视照相机C1-2、C2-1的影像，将监视照相机C1-2、C2-1的分辨率以及帧率设定为较高的值。

在S704中，发送部310向需要进行设定变更的监视照相机400的接收部409输出控制信息。在控制信息中，包含表示发送目的地的监视照相机400在S702内被决定为显示以及非显示监视照相机中的哪个照相机的信息、在S703内取得的设定值。在图5的放大指示的例子中，将表示监视照相机C1-1成为非显示监视照相机的控制信息发送至监视照相机C1-1。同样的控制信息也发送至监视照相机C1-3。表示监视照相机C1-2成为显示监视照相机、并指定监视照相机C1-2的分辨率以及帧率的控制信息被发送至监视照相机C1-2。同样的控制信息也被发送至监视照相机C2-1。

接着，说明照相机设定动作。

图17是示出从显示服务器300发送了控制信息时的监视照相机C1-2的动作例的流程图。

在S711中，接收部409接收从显示服务器300的发送部310发送的控制信息。接收部409将所接收的控制信息输出至管理部410。在控制信息中，包含由监视员的操作指定的信息和预先设定的信息。在控制信息中，例如包含表示在显示器104的画面上显示直播影像以及记录影像的哪一个影像的信息。还包含表示是显示场所P的整体的俯瞰影像、还是放大显示一部分摄影区域的俯瞰影像、还是显示一部分摄影区域的通常影像(即，变换为俯瞰影像之前的监视影像)的信息。如在S704中发送的控制信息那样，还存在包含表示发送目的地的监视照相机400是显示以及非显示监视照相机中的哪一个照相机的信息、以及发送目的地的监视照相机400的设定值的情况。

在S712中，管理部410根据在S711中输入的控制信息，针对变换部403设定俯瞰影像的视点变换角度、分辨率和帧率。在图5的放大指示的例子中，将俯瞰影像的分辨率以及帧率的值设定得较高。

在S713中，接收部409根据在S711中接收的控制信息，针对第2编码部405设定通常影像的分辨率以及帧率。

在S714中，接收部409根据在S711中接收的控制信息，控制发送部408，以停止影像的输出、或者开始(或重新开始)影像的输出。在图5的放大指示的例子中，开始影像的输出。

从显示服务器300发送了控制信息时的监视照相机C1-1、C1-3、C2-1的动作与图17所示的动作相同。在图5的放大指示的例子中，在S714中停止从监视照相机C1-1、C1-3输出影像，在S714中开始从监视照相机C2-1输出影像。

接着，说明俯瞰影像生成动作。

图18以及图19是示出发送了影像时的监视照相机C1-2的动作例的流程图。

在S721中，传感器部401利用图像传感器来拍摄摄影区域b的影像。传感器部401将所拍摄的影像输出至处理部402。处理部402对从传感器部401输入的影像进行噪声去除等图像处理。

在S722中，接收部409根据在S711中接收的控制信息，判定所显示的影像是否是俯瞰影像。在显示的影像是俯瞰影像的情况下，流程进入S723。在显示的影像不是俯瞰影像的情况下，流程进入S730。

在S723中，接收部409根据在S711中接收的控制信息，切换是处理直播影像、还是处理记录影像。在显示的影像是直播影像的情况下，流程进入S724。在显示的影像是记录影像的情况下，流程进入S725。

在S724中，变换部403从处理部402接收在S721中处理的影像的输入。然后，流程进入S726。

在S725中，变换部403取得从存储卡406读取并由解码部407解码的影像。然后，流程进入S726。

在S726中，变换部403从管理部410取得监视照相机C1-2的视场角信息。变换部403根据所取得的视场角信息，进行在S724或S725中取得的影像的视点变换，生成俯瞰影像。变换部403将所生成的俯瞰影像输出至第1编码部404。

在S727中，第1编码部404对在S726中输入的俯瞰影像进行编码。第1编码部404将已编码的俯瞰影像输出至发送部408。

在S728中，发送部408将在S727中输入的俯瞰影像输出至显示服务器300的第2接收部304。在图5的例子中，发送摄影区域b的俯瞰影像。

在S729中，接收部409根据在S711中接收的控制信息，判定所显示的影像是否是通常影像。在所显示的影像是通常影像的情况下，流程进入S730。在显示的影像不是通常影像的情况下，流程结束。

在S730中，接收部409根据在S711中接收的控制信息，切换是处理直播影像、还是处理记录影像。在显示的影像是直播影像的情况下，流程进入S731。在显示的影像是记录影像的情况下，流程进入S732。

在S731中，第2编码部405从处理部402接收在S721中处理的影像的输入。第2编码部405对所输入的影像进行编码。第2编码部405将所编码的影像输出至发送部408。然后，流程进入S733。

在S732中，发送部408从存储卡406取得影像。然后，流程进入S733。

在S733中，发送部408将在S731或S732中取得的影像输出至显示服务器300的第1接收部301。

发送影像时的监视照相机C1-1、C1-3、C2-1的动作与图18以及图19所示的动作相同。在图5的例子中生成左侧的显示画面501的情况下，在S728中从监视照相机C1-1、C1-3、C2-1发送摄影区域a、c、d的俯瞰影像。在生成右侧的显示画面502的情况下，只是在S728中从监视照相机C2-1发送摄影区域d的俯瞰影像，不发送摄影区域a、c的俯瞰影像。

图20是示出从显示监视照相机发送了影像时的显示服务器300的动作例的流程图。

在S741中，在显示的影像是通常影像的情况下，第1接收部301从显示监视照相机的发送部408接收影像。第1接收部301将所接收的影像输出至第1解码部302。然后，流程进入S742。在所显示的影像不是通常影像的情况下，流程进入S744。

在S742中，第1解码部302对在S741中输入的影像进行解码。第1解码部302将所解码的影像输出至显示部303。

在S743中，显示部303在显示器104上显示S742中输入的影像。

在S744中，在显示的影像是俯瞰影像的情况下，流程进入S745。在显示的影像不是俯瞰影像的情况下，流程结束。

在S745中，第2接收部304从显示监视照相机的发送部408接收影像。第2接收部304将所接收的影像输出至第2解码部311。

在S746中，第2解码部311对在S745中输入的影像进行解码。第2解码部311将已解码的影像输出至合成部306。

在S747中，合成部306从第1管理部308取得监视照相机C1-1、C1-2、C1-3、C2-1的位置信息。合成部306从第2管理部309取得地图信息。合成部306根据所取得的位置信息以及地图信息，合成在S746中输入的影像。合成部306将所合成的影像输出至显示部303。在图5的例子中生成左侧的显示画面501的情况下，执行监视照相机C1-1、C1-2、C1-3、C2-1的俯瞰影像的合成处理。在生成右侧的显示画面502的情况下，执行监视照相机C1-2、C2-1的俯瞰影像的合成处理。

在S748中，显示部303在显示器104上显示S747中输入的影像。

如上所述，在本实施方式中，在监视照相机400侧执行生成俯瞰影像的处理。与实施方式1同样，在显示场所P的整体的俯瞰影像的情况下，抑制监视照相机C1-1、C1-2、C1-3、C2-1的分辨率以及帧率。因此，不压迫网络频带就能将影像发送至显示服务器300。由此，可构建既不需要实施方式1那样的控制服务器200的导入、又能提供俯瞰大规模的购物中心、游乐园、车站的站台或站内的通路等需要几千台以上的监视照相机400的场所整体的影像的系统。

在本实施方式中，与实施方式1相同，在放大俯瞰影像、或显示关注点或显示通常影像的情况下，使对未显示的区域进行拍摄的监视照相机400的影像的输出停止，并且将对显示的区域进行拍摄的监视照相机400的分辨率以及帧率设定得较高。因此，关于需要密切监视的区域，能够在显示器104上显示更鲜明的影像。

在本实施方式中，影像监视系统100在显示服务器300内具备第1接收部301和第2接收部304作为接收部。接收部与实施方式1同样地从分别对某场所P的多个区域(在图5的例子中是摄影区域a～d)中的各个区域的影像进行拍摄的多个监视照相机400(在图5的例子中是监视照相机C1-1、C1-2、C1-3、C2-1)接收所拍摄的影像。

影像监视系统100在显示服务器300上具备显示部303和合成部306作为控制部。控制部与实施方式1同样地进行在画面(例如，显示器104的画面)上显示由接收部接收的影像的控制。

影像监视系统100在显示服务器300内具备操作部307。操作部307与实施方式1同样地受理指定上述多个区域中的一部分区域(在图5的放大指示的例子中是摄影区域b、d)的操作(例如，显示控制操作)。

影像监视系统100在显示服务器300内具备第1管理部308、第2管理部309和发送部310作为指示部。指示部与实施方式1同样地在利用控制部在画面上显示上述多个区域的影像的情况下，指示多个监视照相机400以第1形式发送所拍摄的影像。指示部在利用控制部在画面上显示对操作部307指定的区域的影像的情况下，指示拍摄该指定的区域的影像的监视照相机400(在图5的放大指示的例子中是监视照相机C1-2、C2-1)以数据量比第1形式多的第2形式发送所拍摄的影像。

根据本实施方式，利用上述这样的动作，与实施方式1同样地能够削减发送多个监视照相机400拍摄的影像所需的通信频带，而不会给影像监视的业务带来障碍。

在本实施方式中，接收部从多个监视照相机400分别接收与从正上方俯视上述各个区域的影像相当的俯瞰影像(例如，摄影区域a～d的各个俯瞰影像)。

在画面上显示上述多个区域的影像的情况下，控制部进行以下这样的控制：合成由接收部接收的俯瞰影像，生成场所P的整体的俯瞰影像，在画面上显示所生成的俯瞰影像。

在本实施方式中，因为多个监视照相机400分别生成俯瞰影像，所以能够节省导入实施方式1这样的控制服务器200的麻烦以及成本。

实施方式3.

关于本实施方式，主要说明与实施方式2的差异。

本实施方式的影像监视系统100的结构与图12所示的实施方式2的结构相同。

在实施方式2中，多个监视照相机400进行监视影像的视点变换。与此相对，在本实施方式中，在显示宽范围的俯瞰影像的情况下，取代显示视点变换后的照相机影像，而显示使各个监视照相机400检测出的人物的图像与背景图像重合而成的影像。根据由各个监视照相机400检测出的人物的位置坐标等元数据(metadata)和显示服务器300管理的地图信息，生成该影像。通过显示这样的影像，能够进行对网络更加没有负担的影像监视。

在本实施方式中，监视照相机C1-1、C1-2、···、C1-m从拍摄的影像中检测人或该人的面部。另外，监视照相机C1-1、C1-2、···、C1-m将取得了人的面部正面或与正面最接近的角度的影像作为最佳拍摄而记录。

图21是示出各个监视照相机400的结构的框图。

在图21中，各个监视照相机400具备传感器部401、处理部402、变换部403、第1编码部404、第2编码部405、存储卡406、解码部407、发送部408、接收部409、管理部410、检测部411和判定部412。后面叙述各部的动作。

图22是示出显示服务器300的结构的框图。

在图22中，显示服务器300具备第1接收部301、第1解码部302、显示部303、第2接收部304、合成部306、操作部307、第1管理部308、第2管理部309、发送部310、第2解码部311、提取部312、变换部313、第1生成部314、第4接收部315、计算部316和第2生成部317。后面叙述各部的动作。

在本实施方式中，能够与图15的例子同样地应用影像监视系统100。

以下，说明图15的例子中的显示服务器300的画面显示。

图23是示出显示服务器300的画面显示例的图。

在图23中，左侧的显示画面521是在显示器104上显示的场所P的整体的俯瞰影像。在为了警备等而始终对监视影像进行监视的监视员使用显示服务器300的键盘以及鼠标105作出显示整体影像的指示时，生成在场所P的背景图像上重叠了在场所P中移动的人物的面部图像后的俯瞰影像(以下，也称为“背景合成影像”)，在画面上显示生成的俯瞰影像。

右侧的显示画面502是在显示器104上显示的摄影区域b、d(的一部分)的俯瞰影像。在监视员使用显示服务器300的键盘以及鼠标105作出对显示画面501的中心部进行放大显示的指示(即，放大指示)时，在画面上显示通过照相机影像的视点变换而获得的摄影区域b、d的俯瞰影像(以下，也称为“视点变换影像”)。

以下，说明图15的例子中的影像监视系统100的动作(本实施方式的影像监视方法)。

首先，说明照相机控制动作。

图24是示出由监视员作出了显示影像的放大指示或关注指示时的显示服务器300的动作例的流程图。

在S801中，操作部307经由键盘以及鼠标105从监视员受理放大指示或关注指示的操作作为显示控制操作。操作部307通过显示控制操作将作为显示对象的摄影区域的信息输出至发送部310。在显示控制操作中，可选择通常影像、视点变换影像和背景合成影像的任意影像，作为在显示器104上显示的影像的种类。此外，在显示场所P的整体的影像的情况下，优选的是，不能选择通常影像。在显示场所P的整体影像的情况下，优选的是，也不能选择视点变换影像。在显示控制操作中，指定显示场所P的哪个范围，所以，可根据所指定的范围，自动地选择显示的影像的种类。

在S802中，发送部310从第1管理部308以及第2管理部309取得对摄影区域a～d进行拍摄的监视照相机C1-1、C1-2、C1-3、C2-1的信息。发送部310根据在S801中输入的信息和从第1管理部308以及第2管理部309取得的信息，选择显示以及非显示监视照相机。在图23的放大指示的例子中，对摄影区域a、c进行拍摄的监视照相机C1-1、C1-3成为非显示监视照相机，对摄影区域b、d进行拍摄的监视照相机C1-2、C2-1成为显示监视照相机。

在S803中，发送部310从第1管理部308取得在S802中选择的显示监视照相机的设定值。在图23的放大指示的例子中，为了放大监视照相机C1-2、C2-1的影像，将监视照相机C1-2、C2-1的分辨率以及帧率设定为较高的值。

在S804中，发送部310向需要进行设定变更的监视照相机400的接收部409输出控制信息。在控制信息中，包含表示在S802中将发送目的地的监视照相机400决定为显示以及非显示监视照相机中的哪一个照相机的信息、和在S803中取得的设定值。在图23的放大指示的例子中，将表示监视照相机C1-1成为非显示监视照相机的控制信息发送至监视照相机C1-1。将同样的控制信息也发送至监视照相机C1-3。将表示监视照相机C1-2成为显示监视照相机并指定监视照相机C1-2的分辨率以及帧率的控制信息发送至监视照相机C1-2。将同样的控制信息也发送至监视照相机C2-1。

在S805中，在S801中选择出的影像的种类是背景合成影像的情况下，流程进入S806。在S801中选择出的影像的种类是视点变换影像的情况下，流程进入S808。

在S806中，发送部310对需要进行设定变更的监视照相机400的接收部409输出追加的控制信息。在追加的控制信息中，包含这样的信息，该信息指示发送检测移动中的人物的面部而得到的坐标、和最佳地拍摄出面部的最佳拍摄图像。

在S807中，第1管理部308指示变换部313以及计算部316执行处理，指示合成部306停止处理。

在S808中，发送部310对需要进行设定变更的监视照相机400的接收部409输出追加的控制信息。在追加的控制信息中包含指示发送视点变换影像的信息。

在S809中，第1管理部308指示合成部306执行处理，指示变换部313以及计算部316停止处理。

接着，说明照相机设定动作。

图25是示出从显示服务器300发送了控制信息时的监视照相机C1-2的动作例的流程图。

在S811中，接收部409接收从显示服务器300的发送部310发送的控制信息。接收部409将所接收的控制信息输出至管理部410。在控制信息中，包含通过监视员的操作而指定的信息和预先设定的信息。在控制信息中，例如包含表示在显示器104的画面上显示直播影像以及记录影像中的哪个影像的信息。还包含是表示显示场所P的整体的俯瞰影像、还是放大显示一部分摄影区域的俯瞰影像、还是显示一部分摄影区域的通常影像(即，变换为俯瞰影像之前的监视影像)的信息。如在S804中发送的控制信息的那样，还具有包含表示发送目的地的监视照相机400是显示以及非显示监视照相机中的哪一个照相机的信息、和发送目的地的监视照相机400的设定值的情况。还具有包含S806或S808中发送的追加的控制信息的情况。

在S812中，管理部410根据在S811中输入的控制信息，针对变换部403设定俯瞰影像的视点变换角度、分辨率和帧率。在图23的放大指示的例子中，将俯瞰影像的分辨率以及帧率的值设定得较高。

在S813中，接收部409根据在S811中接收到的控制信息，针对第2编码部405设定通常影像的分辨率以及帧率。

在S814中，管理部410根据在S811中输入的控制信息，判定所指定的影像的种类是背景合成影像、视点变换影像和通常影像中的哪个影像。在所指定的影像的种类是背景合成影像的情况下，流程进入S815。在所指定的影像的种类是视点变换影像的情况下，流程进入S816。在所指定的影像的种类是通常影像的情况下，流程进入S817。

在S815中，管理部410指示检测部411执行面部检测处理。然后，流程进入S817。

在S816中，管理部410指示变换部403执行视点变换处理。然后，流程进入S817。

在S817中，接收部409根据在S811中接收到的控制信息，控制发送部408，以停止影像的输出或者开始(或重新开始)影像的输出。在图23的放大指示的例子中，开始影像的输出。

从显示服务器300发送了控制信息时的监视照相机C1-1、C1-3、C2-1的动作与图25所示的动作相同。在图23的放大指示的例子中，在S817中停止从监视照相机C1-1、C1-3输出影像，在S817中开始从监视照相机C2-1输出影像。

接着，说明俯瞰影像生成动作。

图26以及图27是示出发送影像时的监视照相机C1-2的动作例的流程图。

在S821中，传感器部401利用图像传感器对摄影区域b的影像进行摄影。传感器部401将所拍摄的影像输出至处理部402。处理部402对从传感器部401输入的影像进行噪声去除等图像处理。

在S822中，接收部409根据在S811中接收到的控制信息，判定所显示的影像是否是背景合成影像。在显示的影像是背景合成影像的情况下，流程进入S823。在显示的影像不是背景合成影像的情况下，流程进入S829。

在S823中，接收部409根据在S811中接收到的控制信息，切换是使用直播影像、还是使用记录影像。在所显示的影像是直播影像的情况下，流程进入S824。在显示的影像是记录影像的情况下，流程进入S825。

在S824中，检测部411从处理部402接收在S821中处理的影像的输入。然后，流程进入S826。

在S825中，检测部411取得从存储卡406读取并由解码部407解码的影像。然后，流程进入S826。

在S826中，检测部411从在S824或S825中取得的影像中检测人物的面部，将显现出面部的坐标与面部的图像一起输出至判定部412。

在S827中，判定部412将在S826中输入的面部的图像作为最佳拍摄图像进行记录。之后，每当在S826中输入面部的图像时，如果该图像是以比记录的最佳拍摄图像更接近于正面的角度拍摄的图像，则判定部412改写所记录的最佳拍摄图像。判定部412将面部的坐标和最佳拍摄图像输出至发送部408。

在S828中，发送部408将在S827中输入的面部的坐标和最佳拍摄图像输出至显示服务器300的第4接收部315。在图23的放大指示前的例子中，发送在摄影区域b检测的人物的面部的坐标和最佳拍摄图像。

在S829中，接收部409根据在S811中接收到的控制信息，判定所显示的影像是否是视点变换影像。在显示的影像是视点变换影像的情况下，流程进入S830。在显示的影像不是视点变换影像的情况下，流程进入S836。

在S830中，接收部409根据在S811中接收到的控制信息，切换是处理直播影像、还是处理记录影像。在显示的影像是直播影像的情况下，流程进入S831。在显示的影像是记录影像的情况下，流程进入S832。

在S831中，变换部403从处理部402接收在S821中处理的影像的输入。然后，流程进入S833。

在S832中，变换部403取得从存储卡406读取并由解码部407解码的影像。然后，流程进入S833。

在S833中，变换部403从管理部410取得监视照相机C1-2的视场角信息。变换部403根据所取得的视场角信息，进行在S831或S832中取得的影像的视点变换，生成视点变换影像。变换部403将所生成的视点变换影像输出至第1编码部404。

在S834中，第1编码部404对在S833中输入的视点变换影像进行编码。第1编码部404将编码后的视点变换影像输出至发送部408。

在S835中，发送部408将在S834中输入的视点变换影像输出至显示服务器300的第2接收部304。在图23的放大指示后的例子中，发送摄影区域b的视点变换影像。

在S836中，接收部409根据在S811中接收到的控制信息，来判定所显示的影像是否是通常影像。在显示的影像是通常影像的情况下，流程进入S837。在所显示的影像不是通常影像的情况下，流程结束。

在S837中，接收部409根据在S811中接收到的控制信息，切换是处理直播影像、还是处理记录影像。在显示的影像是直播影像的情况下，流程进入S838。在显示的影像是记录影像的情况下，流程进入S839。

在S838中，第2编码部405从处理部402接收在S821中处理的影像的输入。第2编码部405对所输入的影像进行编码。第2编码部405将所编码的影像输出至发送部408。然后，流程进入S840。

在S839中，发送部408从存储卡406取得影像。然后，流程进入S840。

在S840中，发送部408将在S838或S839中取得的影像输出至显示服务器300的第1接收部301。

发送影像时的监视照相机C1-1、C1-3、C2-1的动作与图26以及图27所示的动作相同。在图23的例子中生成左侧的显示画面521的情况下，在S828中从监视照相机C1-1、C1-3、C2-1发送在摄影区域a、c、d内检测出的人物的面部的坐标和最佳拍摄图像。在生成右侧的显示画面522的情况下，只是在S835中从监视照相机C2-1发送摄影区域d的视点变换影像，不发送摄影区域a、c的视点变换影像。

图28以及图29是示出从显示监视照相机发送了影像时的显示服务器300的动作例的流程图。

在S851中，在显示的影像是通常影像的情况下，第1接收部301从显示监视照相机的发送部408接收影像。第1接收部301将所接收的影像输出至第1解码部302。然后，流程进入S852。在所显示的影像不是通常影像的情况下，流程进入S854。

在S852中，第1解码部302对在S851中输入的影像进行解码。第1解码部302将所解码的影像输出至显示部303。

在S853中，显示部303将在S852中输入的影像显示在显示器104上。

在S854中，在显示的影像是视点变换影像的情况下，流程进入S855。在显示的影像不是视点变换影像的情况下，流程进入S859。

在S855中，第2接收部304从显示监视照相机的发送部408接收影像。第2接收部304将所接收的影像输出至第2解码部311。

在S856中，第2解码部311对在S855中输入的影像进行解码。第2解码部311将所解码的影像输出至合成部306。

在S857中，合成部306从第1管理部308取得监视照相机C1-1、C1-2、C1-3、C2-1的位置信息。合成部306从第2管理部309取得地图信息。合成部306根据所取得的位置信息以及地图信息，合成在S856中输入的影像。合成部306将所合成的影像输出至显示部303。在图23的例子中生成右侧的显示画面522的情况下，执行监视照相机C1-2、C2-1的视点变换影像的合成处理。

在S858中，显示部303将在S857中输入的影像显示在显示器104上。

在S859中，在显示的影像是背景合成影像的情况下，流程进入S860。在显示的影像不是背景合成影像的情况下，流程结束。

在S860中，提取部312从第1解码部302接收监视照相机C1-1、C1-2、C1-3、C2-1(或者，与显示范围对应的监视照相机400)的通常影像的输入。提取部312去除所输入的通常影像相对于过去的变化部分(即，差分)，提取背景图像。提取部312将所提取的背景图像输出至变换部313。

在S861中，变换部313从第1管理部308取得监视照相机C1-1、C1-2、C1-3、C2-1的位置信息。变换部313从第2管理部309取得地图信息。变换部313根据所取得的位置信息以及地图信息，进行在S860中输入的背景图像的视点变换。变换部313将视点变换后的背景图像输出至第1生成部314。

在S862中，第1生成部314合成在S861中输入的监视照相机C1-1、C1-2、C1-3、C2-1的背景图像，生成场所P的整体的背景图像。第1生成部314将所生成的背景图像输出至第2生成部317。

在S863中，第4接收部315从监视照相机C1-1、C1-2、C1-3、C2-1的发送部408接收面部的坐标和最佳拍摄图像。第4接收部315将所接收的面部的坐标和最佳拍摄图像输出至计算部316。

在S864中，计算部316从第1管理部308取得监视照相机C1-1、C1-2、C1-3、C2-1的位置信息。计算部316从第2管理部309取得地图信息。计算部316根据所取得的位置信息以及地图信息，基于在S863中输入的面部的坐标，计算使最佳拍摄图像与背景图像重叠的坐标。计算部316将所算出的坐标和在S863中输入的最佳拍摄图像输出至第2生成部317。

在S865中，第2生成部317在S862中输入的场所P的整体的背景图像中的、S864中输入的坐标处，合成在S864中输入的最佳拍摄图像，生成背景合成影像。第2生成部317将所生成的背景合成影像输出至显示部303。在图23的例子中生成左侧的显示画面521的情况下，生成场所P的整体的背景合成影像。

在S866中，显示部303将S865中输入的影像显示在显示器104上。

如上所述，在本实施方式中，在显示场所P的整体的俯瞰影像的情况下，不是输出监视照相机C1-1、C1-2、C1-3、C2-1的影像，而是仅输出在通过照相机内的图像处理而检测出的人(或面部)的位置处显示面部的最佳拍摄的影像。因此，能够大幅抑制网络频带的使用率。由此，可构建提供俯瞰需要几千台以上的监视照相机的场所整体的影像的系统。

本实施方式与实施方式2相同，在放大俯瞰影像、或显示关注点、或显示通常影像的情况下，停止对不显示的区域进行拍摄的监视照相机400的影像的输出，并且将对所显示的区域进行拍摄的监视照相机400的分辨率以及帧率设定得较高。因此，关于需要密切监视的区域，可在显示器104上显示更鲜明的影像。

在本实施方式中，影像监视系统100在显示服务器300内具备第1接收部301、第2接收部304和第4接收部315作为接收部。接收部与实施方式2同样地从对某场所P的多个区域(在图23的例子中是摄影区域a～d)中的各个区域的影像分别拍摄的多个监视照相机400(在图23的例子中是监视照相机C1-1、C1-2、C1-3、C2-1)接收所拍摄的影像。另外，接收部从多个监视照相机400接收表示位于场所P的人物的位置的信息。

影像监视系统100在显示服务器300内具备提取部312、变换部313和第1生成部314作为生成部。生成部根据接收部接收到的影像，生成与去除位于场所P的人物后的场所P的整体图像相当的背景图像。

影像监视系统100在显示服务器300内具备显示部303和合成部306作为控制部。在画面(例如显示器104的画面)上显示上述多个区域的影像的情况下，控制部进行以下这样的控制：生成在由生成部生成的背景图像中的由接收部接收到的信息表示的位置处重叠识别处于场所P的人物的识别图像而得到的影像，在画面上显示所生成的影像。

根据本实施方式，利用上述这样的动作，能够进一步削减发送由多个监视照相机400拍摄的影像所需的通信频带。

在本实施方式中，接收部从多个监视照相机400接收表示位于场所P的人物的位置的信息，但显示服务器300的计算部316也可以根据接收部接收到的影像，计算位于场所P的人物的位置。这样，在画面上显示上述多个区域的影像的情况下，控制部可生成在生成部生成的背景图像中的由计算部316算出的位置上重叠识别位于场所P的人物的识别图像而得到的影像。

在本实施方式中，接收部从多个监视照相机400接收位于场所P的人物的面部的图像作为识别图像，但控制部也可以从接收部所接收到的影像中提取位于场所P的人物的面部的图像作为识别图像。

图30是示出本发明的实施方式的影像监视系统100的各装置(即，监视照相机101、控制服务器200、显示服务器300)的硬件结构例的图。

在图30中，影像监视系统100的各装置的整体或一部分是计算机，具备输出装置910、输入装置920、存储装置930、处理装置940这些硬件。硬件被各装置的各部(在本发明的实施方式的说明中作为“部”说明的部件)利用。

输出装置910例如是LCD(Liquid·Crystal·Display)等显示装置、打印机、通信模块(通信电路等)。输出装置910是供在本发明实施方式的说明中作为“部”说明的部件在数据、信息、信号的输出(发送)中使用的。前述的显示器104是输出装置910的例子。

输入装置920例如是键盘、鼠标、触摸面板、通信模块(通信电路等)。输入装置920是供在本发明实施方式的说明中作为“部”说明的部件在数据、信息、信号的输入(接收)中使用的。前述的键盘以及鼠标105是输入装置920的例子。如果显示器104是触摸面板，则显示器104也是输入装置920的例子。

存储装置930例如是ROM(Read·Only·Memory)、RAM(Random·Access·Memory)、HDD(Hard·Disk·Drive)、SSD(Solid·State·Drive)。在存储装置930中存储有程序931、文件932。在程序931中，含有执行在本发明实施方式的说明中作为“部”说明的部件的处理(功能)的程序。在文件932中，含有供在本发明实施方式的说明中作为“部”说明的部件进行运算、加工、读取、写入、利用、输入、输出等的数据、信息、信号(值)等。前述的硬盘203(或记录介质)和存储卡406是存储装置930的例子。

处理装置940例如是CPU(Central·Processing·Unit)。处理装置940经由总线等与其它硬件设备连接而控制这些硬件设备。处理装置940从存储装置930中读出程序931，并执行程序931。处理装置940供在本发明实施方式的说明中作为“部”说明的部件进行运算、加工、读取、写入、利用、输入、输出等。

在本发明实施方式的说明中作为“部”说明的部件可以是将“部”改读为“电路”、“装置”、“设备”。另外，在本发明实施方式的说明中作为“部”说明的部件可以是将“部”改读为“步骤”、“顺序”、“处理”。即，在本发明实施方式的说明中作为“部”说明的部件可通过仅是软件、仅是硬件或者软件与硬件的组合来实现。软件作为程序931存储于存储装置930内。程序931使计算机作为在本发明实施方式的说明中作为“部”说明的部件而发挥功能。或者，程序931使计算机执行在本发明实施方式的说明中作为“部”说明的部件的处理。

以上，虽然说明了本发明的实施方式，但也可以组合这些实施方式中的几个实施方式而实施。或者，也可以部分地实施这些实施方式中的任意1个或几个。例如，也可以仅采用在这些实施方式的说明中作为“部”说明的部件中的任意一个，或者采用几个任意的组合。此外，本发明不被这些实施方式限定，可根据需要进行各种变更。

标号说明

100影像监视系统，101监视照相机，102LAN，103LAN，104显示器，105键盘以及鼠标，106网络装置，200控制服务器，201第1接收部，202第2接收部，203硬盘，204切换部，205第1发送部，206解码部，207生成部，208第2发送部，209合成部，210第3发送部，211第3接收部，212管理部，213输出部，300显示服务器，301第1接收部，302第1解码部，303显示部，304第2接收部，305第3接收部，306合成部，307操作部，308第1管理部，309第2管理部，310发送部，311第2解码部，312提取部，313变换部，314第1生成部，315第4接收部，316计算部，317第2生成部，400监视照相机，401传感器部，402处理部，403变换部，404第1编码部，405第2编码部，406存储卡，407解码部，408发送部，409接收部，410管理部，411检测部，412判定部，501显示画面，502显示画面，511显示画面，512关注位置，513显示画面，521显示画面，522显示画面，910输出装置，920输入装置，930存储装置，931程序，932文件，940处理装置。