专利名称：控制装置、相机系统和程序的制作方法
技术领域：
本发明涉及控制装置、相机系统和程序。
背景技术：
传统上，例如，如在下面的专利文献1中所述，已知一种旨在将成像装置的成像方向迅速移动到期望方向的成像系统。专利文献专利文献1 JP2007-43505A
发明内容
技术问题专利文献1中描述的技术旨在基于矩形全景图像控制成像装置的成像方向。然而，存在如下问题仅仅当与全景图像对应的成像对象为矩形时基于全景图像执行的控制才是直观的。鉴于上述问题作出了本发明，并且本发明的一个目的在于提供一种即使当成像对象不是矩形时仍能够基于全景图像更加直观地控制成像装置的成像方向的控制装置、相机系统和程序。技术方案为了解决上述问题，根据本发明的一个方面，提供了一种控制装置，包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像。显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且该全景图像是圆形全景图像。所述圆形全景图像可以是基于通过相机多次拍摄的图像而产生的。显示控制单元可以响应于全景图像切换操作将在全景图像显示区域中显示的全景图像从圆形全景图像切换到矩形全景图像。显示控制单元可以在全景图像显示区域中显示圆形全景图像和矩形全景图像。显示控制单元能够在屏幕上移动全景图像显示区域。为了解决上述问题，根据本发明的另一个方面，提供了一种控制装置，包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元， 执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像。显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且显示控制单
4元响应于全景图像切换操作切换全景图像的形状。显示控制单元可以响应于全景图像切换操作将全景图像的形状从圆形切换成矩形。为了解决上述问题，根据本发明的另一个方面，提供了一种相机系统，包括拍摄图像的相机和控制相机的控制装置。该控制装置包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像。显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且该全景图像是圆形全景图像。所述圆形全景图像可以是基于通过相机多次拍摄的图像而产生的。显示控制单元可以响应于全景图像切换操作将在全景图像显示区域中显示的全景图像从圆形全景图像切换到矩形全景图像。显示控制单元可以在全景图像显示区域中显示圆形全景图像和矩形全景图像。显示控制单元能够在屏幕上移动全景图像显示区域。为了解决上述问题，根据本发明的另一个方面，提供了一种相机系统，包括拍摄图像的相机和控制相机的控制装置。该控制装置包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像。显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且显示控制单元响应于全景图像切换操作切换全景图像的形状。显示控制单元可以响应于全景图像切换操作，将全景图像的形状从圆形切换到矩形。为了解决上述问题，根据本发明的另一个方面，提供了一种使得计算机起如下部件的作用的程序第一部件，用于执行控制以显示全景图像显示区域和放大图像显示区域， 在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的； 以及第二部件，用于执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像。圆形全景图像可以基于通过相机多次拍摄的图像而产生。第一部件可以响应于全景图像切换操作将在全景图像显示区域中显示的全景图像从圆形全景图像切换到矩形全景图像。第一部件可以在全景图像显示区域中显示圆形全景图像和矩形全景图像。第一部件能够在屏幕上移动全景图像显示区域。发明的有益效果根据本发明，可以提供能够更加直观地在全景图像上控制成像装置的成像方向的控制装置、相机系统和程序。
图1是示出根据本发明的一个实施例的成像系统的整体结构的示意图。图2是示出图1的系统中的相机终端装置和中心服务器的结构的细节的示意图。图3是示出相机终端装置200的平摇操作和俯仰操作的示意图。图4是示出全景图像和俯瞰图像的显示状态的示意图。图5是示出产生俯瞰图像信号DF的处理的示意图。图6是示出产生俯瞰图像信号DF的处理的示意图。图7是示出产生俯瞰图像信号DF的处理的示意图。图8是示出产生俯瞰图像信号DF的处理的示意图。图9是示出监视器的显示屏幕的示意图。图10是示出通过操作面板的操作的示意图。图11是示出当面板“View”被点击时显示诸如“Screen Mode ","View Size”、 "Image Codec”或“Frame Rate”的菜单的状态的示意图。图12是示出当面板“Camera”被点击时显示的菜单的示意图。图 13 是示出当 “Preset position”、“Trigger”、“Other” 或“^formation”被点击时显示的各个菜单的示意图。图14是示出俯瞰图像的显示的示意图。图15是示出俯瞰图像的显示的示意图。图16是示出俯瞰图像的显示的示意图。图17是示出俯瞰图像的显示的示意图。图18是示出俯瞰图像的显示的示意图。图19是示出替代普通全景图像在圆柱曲面上显示的全景图像被用作参考图像的例子的示意图。图20是示出显示第一全景图像的效果的示意图。图21是示出显示第一全景图像的效果的示意图。图22是示出显示第一全景图像的效果的示意图。
具体实施例方式在下文中，将参照附图详细描述本发明的优选实施例。要注意，在本说明书和附图中，功能和结构基本相同的部件用相同的附图标记进行表示，并且省去了重复的解释。要注意，将按照下面顺序进行描述。1.第一实施例(包括相机终端装置和服务器的成像系统的例子)(1)成像系统的结构例子(2)相机终端装置和中心服务器的结构例子(3)显示第一全景图像和第二全景图像的操作(4)产生第一全景图像的处理(5)关于 GUI(6)在第一全景图像上指定拍摄方向
<1.第一实施例〉(1)成像系统的结构例子图1是示出根据本发明的一个实施例的成像系统的整体结构的示意图。成像系统 100包括相机终端装置(IP相机)200、中心服务器300和客户机400。多个相机终端装置 200、中心服务器300和客户机400经由网络500连接。此外，代理服务器600连接到网络 500，并且多个相机终端装置200连接到代理服务器600。另外，监视器310连接到中心服务器300。在这个实施例中，例如，相机终端装置200是布置在建筑内部或外部的监视相机。 当用相机终端装置200获取的图像在中心服务器300的监视器310上进行显示时，可以监视布置了相机终端装置200的区域。客户机400经由网络500连接到相机终端装置200、中心服务器300或者代理服务器600。此外，客户机400能够具有后述的中心服务器300的功能和监视器310的功能。用相机终端装置200拍摄的视频经由网络500被发送至客户机 400。在客户机400的显示屏幕上显示后述的第一全景图像和第二全景图像以及直播视频 (live video)。尽管作为相机终端装置200的例子给出了 IP相机，但是相机终端装置200 不限于此，并且可以是模拟相机。全景图像示出了能够通过相机终端装置200执行成像的范围。全景图像可以是各种形状。例子包括如图4所示的圆形全景图像和矩形全景图像以及如图19所示的投影到圆柱面上的环形全景图像。在下面的实施例中，分别作为第一全景图像和第二全景图像的例子将描述圆形全景图像和矩形全景图像。(2)相机终端装置和中心服务器的结构例子图2是示出图1的系统中的相机终端装置200和中心服务器300的结构的细节的示意图。图2所示的相机终端装置200或者中心服务器300的每个部件能够由硬件(例如， 电路)或者由例如CPU的运算处理单元和使得CPU发挥作用的软件(程序)构成。相机终端装置200的相机单元201包括成像光学单元，并且基于从下面描述的终端控制单元210 提供的成像控制信号CTa执行成像操作，并且还产生视频信号Dcam。此外，相机单元201经由总线220将产生的视频信号Dcam提供给信号处理单元202。要注意，存储器单元203、成像方向控制单元204、网络接口单元206、存储单元207和终端控制单元210也连接到总线 220。信号处理单元202对视频信号Dcam执行压缩处理并且将获得的视频编码信号DV 存储到存储器单元203中。另外，信号处理单元202使用通过顺序地移动相机单元201的成像方向获得的视频信号Dcam产生第一全景图像的视频信号(下文称作“第一全景图像信号”)DF和第二全景图像的视频信号(下文称作“第二全景图像信号”)DP，并且将它们存储到存储器单元207中。要注意，基于从下面描述的终端控制单元210提供的信号处理控制信号CTb，执行对视频信号Dcam的压缩处理以及第一全景图像信号DF或第二全景图像信号 DP的产生。成像方向控制单元204计算向由从下面描述的终端控制单元210提供的方向控制信号CTc指示的方向移动相机单元201的成像方向的速度和加速度。基于该计算结果，成像方向控制单元204还产生用于执行平摇(pan)操作的驱动信号MDp和用于执行俯仰(tilt) 操作的驱动信号MDt，并且将它们提供给成像方向调整单元205。另外，成像方向控制单元 204产生表示相机单元201的成像方向的相机位置信息信号PM并且将它提供给终端控制单元 210。成像方向调整单元205包括用于在水平方向上移动相机单元201的平摇操作电机和用于在垂直方向上移动相机单元201的俯仰操作电机。成像方向调整单元205根据驱动信号MDp驱动平摇操作电机以及根据驱动信号MDt驱动俯仰操作电机以将相机单元201的成像方向调整到由方向控制信号CTc指示的方向。另外，成像方向调整单元205以没有操作范围限制的环形方式执行平摇操作。图3是示出相机终端装置200的平摇操作和俯仰操作的示意图，其示出了相机终端装置200安装在天花板等上的情况。这里，图:3B示出了根据这个实施例的相机终端装置 200的平摇/俯仰操作。同时，图3A示出了用于比较目的的典型相机终端装置的平摇/俯仰操作。如图3A所示，典型相机终端装置执行360°环形平摇操作，并且在从垂直方向到水平方向的90°的范围内执行俯仰操作。与之相对，根据本实施例的相机终端装置200能够执行360°环形平摇操作，并且在以垂直方向为中心的220°的范围内执行俯仰操作。因此，可以通过下面所述的方法产生第一全景图像的视频信号DF并且将它存储到存储单元 207中。下面描述的第一全景图像是圆形全景图像。当通过跨过该圆形的中心附近的区域操作成像方向时，根据本实施例的相机终端装置200能够经由最短路径以机械方式将成像方向移至目标成像方向。同时，典型相机终端装置不能够以这种跨过圆形的中心的方式机械地移动相机成像方向。网络接口单元206是用于经由网络500在相机终端装置200与中心服务器300之间执行通信的接口。终端控制单元210使用成像控制信号CTa控制相机单元201，使用信号处理控制信号CTb控制信号处理单元202，使用方向控制信号CTc控制成像方向控制单元204，并且在顺序地移动成像方向的同时执行成像。然后，终端控制单元210基于获得的视频信号Dcam 产生第一全景图像信号DF和第二全景图像信号DP，并且将它们存储到存储单元207中。根据本实施例的成像系统100能够从相机终端装置200向中心服务器300发送根据视频信号Dcam的直播视频以及根据第一全景图像信号DF或第二全景图像信号DP的第一全景图像或第二全景图像，并且将它们显示在监视器310上。要注意，在本说明书中，第一全景图像和第二全景图像可以称作参考图像。图4是示出第二全景图像和第一全景图像的显示状态的示意图。中心服务器300能够响应于用户的选择在监视器310上显示第一全景图像或第二全景图像之一以及直播视频。或者，中心服务器300能够被构造为显示第一全景图像和第二全景图像二者以及直播视频。尽管图4示出了中心附近的图像缺失的圆形全景图像作为第一全景图像，但是第一全景图像不限于此，并且中心附近的图像没有缺失的圆形全景图像能够用作第一全景图像。相机终端装置200被布置在天花板等上，并且显示相机终端装置200的下方向的区域的图像。因此，如图4所示，在360°的平摇范围和以从相机终端装置200向下延伸的垂直线为中心的220°的俯仰范围内获取第一全景图像，并且第一全景图像的轮廓是圆形的。如上所述，成像方向调整单元205被构造为以环形方式执行平摇操作。因此，为了避免图像的重叠，例如，如图4所示，存储在存储单元207中的第二全景图像在一端与基准方向形成“+180° ”的角度差并且在另一端与基准方向形成“-180° ”的角度差。另外，例如，由于平摇操作范围不受限制，所以与当操作范围受限时不同，不可以把操作范围的中心位置确定为基准方向。由于这个原因，基准方向被预设，并且以使预设的基准方向与第二全景图像的中心位置一致的方式产生第二全景图像信号DP。成像方向控制单元204产生例如表示成像方向相对于预设的基准方向的角度差的信号，作为相机位置信息信号PM。如果基准方向被这样预设，则不需要确定已使用哪个方向作为成像操作的基准以产生第二全景图像。假设相机位置信息信号PM表示成像方向相对于基准方向的角度差，则基于相机位置信息信号PM可以容易地在第二全景图像上确定成像方向的位置。对于俯仰操作，基准方向也是预设的，并且相机位置信息信号PM表示成像方向相对于基准方向的角度差。因此，基于相机位置信息信号PM可以容易地在第一全景图像和第二全景图像的每一个上识别成像方向的位置。要注意，对于俯仰操作，如果相机终端装置 200被布置在天花板上，则垂直方向可以被设置为基准方向。终端控制单元210分析经由网络接口单元206从中心服务器300提供的命令信号 CM以产生成像控制信号CTa、信号处理控制信号CTb和方向控制信号CTc。另外，终端控制单元210执行向中心服务器300发出存储在存储器单元203中的视频编码信号DV、存储在存储单元207中的第一全景图像信号DF和第二全景图像信号DP以及从成像方向控制单元 204提供的相机位置信息信号PM的处理。中心服务器300的网络接口单元301是用于经由网络500在相机终端装置200与中心服务器300之间执行通信的接口。网络接口单元301将从相机终端装置200提供的视频编码信号DV提供给解压缩处理单元302。另外，网络接口单元301将相机位置信息信号 PM提供给位置确定处理单元303并且将第一全景图像信号DF和第二全景图像信号DP提供给图像处理单元304。解压缩处理单元302对视频编码信号DV执行解压缩处理并且将获得的视频信号 Dcam提供给显示处理单元305。位置确定处理单元303确定第一全景图像或第二全景图像中的哪个位置对应于由相机位置信息信号PM指示的成像方向，并且将位置确定结果KP提供给图像处理单元 304。关于相机位置信息信号PM，如果以使预设的基准方向与平摇操作和俯仰操作的中心位置一致的方式产生第一全景图像信号DF或第二全景图像DP并且如上所述相机位置信息信号PM表示基准方向与当前成像方向之间的角度差，则基于相机位置信息信号PM可以容易地确定俯瞰图像或者第二全景图像中的哪个位置对应于当前成像方向。图像处理单元304基于位置确定结果KP执行图像处理并且产生第一全景图像的第一全景图像信号DFC和第二全景图像的第二全景图像信号DPC。关于第二全景图像信号 DPC，可以产生从位置确定结果KP确定的位置被设置为中心位置的第二全景图像信号DPC。 在这种情况下，图像处理单元304确定所确定的位置与第二全景图像的中心位置之间的差量，并且基于确定的差量以使所确定的位置变成图像的中心位置的方式处理第二全景图像。即，图像处理单元304设置使所确定的位置变成中心位置的“士 180° ”的第二全景图像显示框，将差量在第二全景图像显示框之外的区域的第二全景图像粘贴到没有图像的区域，并且由此产生所确定的位置变成中心位置的第二全景图像的第二全景图像信号DPC。在第一全景图像信号DFC的情况下，在下面描述的“第一全景图像进行旋转的模式”下，与第二全景图像信号DPC —样，也确定所确定的位置与第一全景图像的平摇方向上的基准位置
9之间的差量，并且基于确定的差量，以使所确定的位置位于图像之上的方式处理第一全景图像。另外，图像处理单元304显示基于关于第一全景图像信号DFC和第二全景图像信号 DPC的每个的位置确定结果KP的位置(相机单元201的成像光学单元的光轴所面对的位置)。另外，图像处理单元304将通过执行图像处理产生的第一全景图像信号DFC和第二全景图像信号DPC提供给显示处理单元305。显示处理单元305使用从解压缩处理单元302提供的视频信号Dcam以及从图像处理单元304提供的第一全景图像信号DFC和第二全景图像信号DPC，产生显示驱动信号 HD,并且将显示驱动信号HD提供给监视器310。此外，显示处理单元305使用基于从下面描述的控制单元310提供的⑶I显示控制信号CTg产生的⑶I的视频信号，产生显示驱动信号HD，并且将该显示驱动信号HD提供给监视器310。监视器310基于显示驱动信号HD，通过驱动诸如液晶部件、等离子体显示部件或者阴极射线管的显示部件，在屏幕上显示第一全景图像、成像方向位于中心位置的第二全景图像、由相机单元201拍摄的图像(直播视频)、GUI图像等等。对于用户接口单元315，使用⑶I。用户接口单元315使用监视器310向用户呈现信息。当使用操作输入装置(例如，定点装置或键盘)基于呈现的信息执行用户操作时，用户接口单元315将对应于用户操作的操作信号US提供给控制单元310以使它执行期望的操作等。基于操作信号US和监视器310的显示状态，控制单元310确定用户选择了何种处理以及用户请求执行何种处理。基于该确定结果，控制单元310产生命令信号CTm并且将它提供给各个单元以控制中心服务器300的操作。另外，基于确定结果，控制单元310产生命令信号CM并且经由网络接口单元301将它提供给相机终端装置200以控制相机终端装置200的操作。另外，控制单元310产生⑶I显示控制信号CTg并且将它提供给显示处理单元305。尽管在上述例子中相机终端装置200从视频信号Dcam产生第一全景图像的视频信号DF和第二全景图像的视频信号DP，但是也可以由中心服务器300或者客户机400产生第一全景图像的视频信号DF和第二全景图像的视频信号DP。在这种情况下，相机终端装置 200的网络接口单元206将从相机块201输出的视频信号Dcam发送给中心服务器300或者客户机400。通过具有与相机终端装置200的信号处理单元类似的信号处理单元，中心服务器300或者客户机400能够产生第一全景图像的视频信号DF和第二全景图像的视频信号 DP。第一全景图像的视频信号DF和第二全景图像的视频信号DP被存储在中心服务器300 或者客户机400的存储器(诸如硬盘)中。(3)显示第一全景图像和第二全景图像的操作接下来，将描述显示第一全景图像和第二全景图像的操作。在操作开始时，控制单元310向相机终端装置200发送请求第一全景图像信号DF、第二全景图像信号DP、相机位置信息信号PM和视频编码信号DV的命令信号CM。如果存储单元207存储了第一全景图像信号DF和第二全景图像信号DP，则相机终端装置200读取第一全景图像信号DF和第二全景图像信号DP并且将它们发送至中心服务器300。如果图像存储单元207没有存储第一全景图像信号DF或第二全景图像信号DP，则相机终端装置200控制相机单元201、信号处理单元202和成像方向控制单元204以在移动成像方向的同时执行成像操作。因此，相机终
10端装置200产生第一全景图像信号DF和第二全景图像信号DP并且将它们发送至中心服务器300。要注意，相机终端装置200将产生的第一全景图像信号DF和第二全景图像信号DP 存储在存储单元207中。相机终端装置200将由成像方向控制单元204产生的相机位置信息信号PM提供给中心服务器300。另外，相机终端装置200开始相机单元201的成像操作，并且通过信号处理单元202对获得的视频信号Dcam进行压缩，然后将视频编码信号DV存储到存储器单元203中。另外，相机终端装置200将存储在存储器单元203中的视频编码信号DV提供给中心服务器30。要注意，当如图1所示相机终端装置200和网络500经由代理服务器600 进行连接时，经由代理服务器600执行相机终端装置200与中心服务器300之间的信息交换。中心服务器300的位置确定处理单元303确定第一全景图像或第二全景图像中的哪个位置对应于由相机位置信息信号PM指示的成像方向，并且将位置确定结果KP提供给图像处理单元304。关于第二全景图像，例如，当由相机位置信息信号PM指示的角度差是 “0° ”时，例如，由于成像方向被设置到基准方向所以成像方向位于第二全景图像的中心位置处。图像处理单元304基于位置确定结果KP执行图像处理。如果位置确定结果KP指示成像方向位于第二全景图像的中心位置，则成像方向的图像位于全景图像的中心。因此， 图像处理单元304不执行第二全景图像处理并且将第二全景图像信号DP作为第二全景图像信号DPC提供给显示处理单元305。同时，当成像方向不位于第二全景图像的中心位置时，图像处理单元304确定成像方向的确定位置与第二全景图像的中心位置之间的差量， 并且基于确定的差量对第二全景图像进行处理以使得确定的位置变成图像的中心位置，并且由此产生第二全景图像信号DPC。因此，关于第二全景图像，当由相机位置信息信号PM指示的角度差是“0° ”时，例如，通过相机单元201拍摄的图像、中心位置与基准方向一致的第二全景图像以及与⑶I有关的图像显示在根据来自显示处理单元305的显示驱动信号HD进行驱动的监视器310的
屏幕上。关于第一全景图像，在下面描述的“第一全景图像进行旋转的模式”的情况下，与第二全景图像信号DPC —样，确定所确定的位置与第一全景图像的平摇方向上的基准位置之间的差量，并且基于确定的差量，对第一全景图像进行旋转以使得所确定的位置位于图像下面(在下述的直线L上)，从而产生第一全景图像信号DFC。此外，图像处理单元304 基于位置确定结果KP在第一全景图像信号DFC和第二全景图像信号DPC的每个中显示成像方向的位置(相机单元201的成像光学单元的光轴所面对的位置)。解压缩处理单元302对视频编码信号DV进行解压缩并且将获得的视频信号Dcam 提供给显示处理单元305。控制单元310将用于⑶I显示的⑶I显示控制信号CTg提供给显示处理单元305。(4)产生第一全景图像的处理接下来，将参照图5到图8描述产生第一全景图像信号DF的处理。当产生第一全景图像信号DF时，获取第一全景图像的每个区域的图像。首先，如图5所示，通过固定相机终端装置200的变焦(zoom)，以给定间隔执行平摇和俯仰以获取静止图像。图5所示的数字表示图像获取顺序。接下来，根据下面的过程[1]到[3]执行静止图像坐标系统的坐标变换。这里，如图6所示，静止图像中的每个点被变换成从相机终端装置200的旋转中心看到的相对位置 (χ， y， ζ)。[1]水平视角为thh[度]且高宽比为a的相机的视点被置于原点，并且使其指向-ζ方向。当考虑距离L的位置处的被摄体平面(x，y，_L)时，可视范围是2LxX2Ly的矩形。这里，Lx = L · tan (thh/2)、Ly = Lx/a 的关系成立。[2]相机的姿态本来由(X，y，ζ, P，q, r)表示。然而，当考虑到视点的位置固定在原点时，χ = y = ζ = 0。因此，这里仅仅考虑(p，q，r)、(ρ :Pan (平摇)(y_轴旋转)、q Tilt (俯仰)(χ-轴旋转)、和r :roll (横滚)(ζ-轴旋转))。[3]当使用(2Lx) X (2Ly)矩形中的点(j，i)时，下面的公式成立。χ = LxX (j-Lx)/Lxy = LyX (i"Ly)/Lyz = -L[4]使用(χ, y，ζ)，应用下面的Roll变换、Tilt变换和Pan变换公式。[数学公式1]■ Roll 变换
权利要求
1.一种控制装置，包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像，其中显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且所述全景图像是圆形全景图像。
2.根据权利要求1的控制装置，其中，所述圆形全景图像是基于由相机多次拍摄的图像而产生的。
3.根据权利要求1的控制装置，其中，显示控制单元响应于全景图像切换操作，将在全景图像显示区域中显示的全景图像从圆形全景图像切换到矩形全景图像。
4.根据权利要求1的控制装置，其中，显示控制单元在全景图像显示区域中显示圆形全景图像和矩形全景图像。
5.根据权利要求1的控制装置，其中，显示控制单元能够在屏幕上移动全景图像显示区域。
6.一种控制装置，包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像，其中显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且显示控制单元响应于全景图像切换操作而切换全景图像的形状。
7.根据权利要求6的控制装置，其中，显示控制单元响应于全景图像切换操作，将全景图像的形状从圆形切换到矩形。
8.一种相机系统，包括拍摄图像的相机和控制相机的控制装置，其中所述控制装置包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的，以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像，显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且所述全景图像是圆形全景图像。
9.根据权利要求8的相机系统，其中，所述圆形全景图像是基于通过相机多次拍摄的图像而产生的。
10.根据权利要求8的相机系统，其中，显示控制单元响应于全景图像切换操作，将在全景图像显示区域中显示的全景图像从圆形全景图像切换到矩形全景图像。
11.根据权利要求8的相机系统，其中，显示控制单元在全景图像显示区域中显示圆形全景图像和矩形全景图像。
12.根据权利要求8的相机系统，其中，显示控制单元能够在屏幕上移动全景图像显示区域。
13.一种相机系统，包括拍摄图像的相机和控制相机的控制装置，其中所述控制装置包括显示控制单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及相机控制单元，执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像，显示控制单元在放大图像显示区域上显示根据相机控制单元的控制通过相机拍摄的图像，并且显示控制单元响应于全景图像切换操作而切换全景图像的形状。
14.根据权利要求13的相机系统，其中，显示控制单元响应于全景图像切换操作，将全景图像的形状从圆形切换到矩形。
15.一种使得计算机起如下部件的作用的程序第一部件，用于执行控制以在一个屏幕上显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的圆形全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在用相机拍摄的图像的全景图像上指定的位置对应的区域进行放大而获得的；以及第二部件，用于执行控制以通过相机拍摄与在全景图像上指定的位置对应的区域的图像。
16.根据权利要求15的程序，其中，所述圆形全景图像是基于通过相机多次拍摄的图像而产生的。
17.根据权利要求15的程序，其中，第一部件响应于全景图像切换操作，将在全景图像显示区域中显示的全景图像从圆形全景图像切换到矩形全景图像。
18.根据权利要求15的程序，其中，第一部件在全景图像显示区域中显示圆形全景图像和矩形全景图像。
19.根据权利要求15的程序，其中，第一部件能够在屏幕上移动全景图像显示区域。
全文摘要
根据本发明的控制装置，提供了一种中心服务器，包括显示处理单元，执行控制以显示全景图像显示区域和放大图像显示区域，在全景图像显示区域中通过相机拍摄的全景图像被显示，在放大图像显示区域中放大图像被显示，该放大图像是通过对与在全景图像上指定的位置对应的区域进行放大而获得的；以及控制单元，执行控制以通过相机终端装置拍摄与在全景图像上指定的位置对应的区域的图像。显示处理单元在放大图像显示区域上显示根据相机控制单元的控制通过相机终端装置拍摄的图像，并且该全景图像是圆形全景图像。
文档编号H04N5/225GK102461153SQ201080024248
公开日2012年5月16日 申请日期2010年6月1日 优先权日2009年6月9日
发明者坂木和则 申请人:索尼公司