针对多视点图像的标签信息的处理装置及其标签信息的处理方法
【技术领域】
[0001] 本技术设及一种在通过从多个视点拍摄拍摄对象而得到的多视点图像中，对关注 部分赋予标签信息的标签信息的处理装置。
【背景技术】
[0002] 专利文献1公开有一种仅使用单台相机即可容易地获取多视点图像的立体影像处 理装置。
[0003] 现有技术文献
[0004] 专利文献
[0005] 专利文献1:日本特开2009-212728号公报
【发明内容】
[0006] 本技术是在从多个视点拍摄特定拍摄对象所得的多个图像信号中对基于各图像 信号的图像所共同拍摄出的关注部分赋予的针对多视点图像的标签信息的处理装置。
[0007] 处理装置具有：显示部，其对基于多个图像信号中拍摄出关注部分的特定的图像 信号的图像进行显示；和控制部，其对显示在显示部上的基于特定的图像信号的图像的关 注部分赋予标签信息。控制部具有:第一功能，获取坐标空间中的标签信息在=维空间上的 坐标，所述坐标是在=维空间上表现拍摄对象时使用的坐标空间中的坐标;第二功能，在显 示部上显示基于其他图像信号的图像，所述其他图像信号是与基于特定的图像信号的图像 的视点不同视点的图像的图像信号，并且拍摄出与通过特定的图像信号拍摄出的关注部分 相同的关注部分;第=功能，将在第一功能中获取的标签信息的坐标转换为，对第二功能中 显示在显示部上的不同视点的图像的每一个图像信号赋予平面上的标签信息的坐标;和第 四功能，对视点不同的每一个图像信号，在通过第=功能得到的规定的坐标位置赋予标签 信息。
[000引根据本发明，在对从多个视点拍摄一个拍摄对象而得到的图像信号赋予标签信息 的情况下，能够容易地确认与赋予的标签信息相关的S维空间上的位置。
【附图说明】
[0009] 图1是用于说明本发明的实施方式的针对多视点图像的标签信息的处理装置的结 构的框图。
[0010] 图2是用于说明本实施方式中的标签信息处理装置的整体动作的流程图。
[0011 ]图3是表示显示在显示部上的图像的一例的说明图。
[0012] 图4是表示在显示部上显示基于多个图像信号的图像时的一例的说明图。
[0013] 图5是用于说明控制部中的计算出标签信息在S维空间上的坐标的功能的流程 图。
[0014] 图6是用于说明在控制部中至少选择一个W上图像信号时的动作的流程图。
[0015] 图7是用于说明在控制部中生成可视信息图的动作的流程图。
[0016] 图8是表示控制部生成的可视信息图的一例的说明图。
【具体实施方式】
[0017] W下，参照附图对本发明的实施方式的针对多视点图像的标签信息的处理方法和 标签信息的处理装置进行说明。但有时会省略过于详细的说明。例如有时会省略对已经公 知的事项的详细说明或实质上相同结构的重复说明。运是为了避免W下的说明过于冗长， 使本领域技术人员更容易理解。此外，发明人为了使本领域技术人员充分地理解本技术而 提供了附图和W下的说明，但其目的不是为了由此限定权利要求中所述的主题。
[0018] 图1是用于说明本发明的实施方式的针对多视点图像的标签信息的处理装置的结 构的框图。
[0019] 如图1所示，标签信息处理装置10具备:控制部11;输入部12;显示部13;模型数据 的保持部14,其用于保持模型数据;校准数据的保持部15,其用于保持校准数据;多视点图 像信号的保持部16,其用于保持多视点图像信号。
[0020] 控制部11按照由软件或固件所记载的计算机程序，控制整个标签信息处理装置 10。该控制部11基于从输入部12输入的控制信号执行规定的动作。另外，控制部11根据需要 从模型数据的保持部14、和校准数据的保持部15读出信息并进行处理。进而，控制部11使显 示部13显示从多视点图像信号的保持部16读出的多视点图像。
[0021] 另外，控制部11具有如下（1)~(4)的控制功能。
[0022] (1)获取标签信息在S维空间上的坐标的第一功能；
[0023] (2)从多视点图像信号的保持部16所存储的多个图像信号选择至少一个W上特定 图像信号的第二功能；
[0024] (3)基于标签信息在S维空间上的坐标，计算出（2)中所选择的图像信号的平面上 的坐标的第=功能；
[0025] (4)生成在选择的图像信号上的标签信息的坐标位置重叠了标签信息的图像信号 并输出到显示部13的第四功能。
[0026] 接下来，对控制部11实现的各个功能进行说明。
[0027] 上述（1)的功能，在从输入部12输入表示赋予标签信息的部位的控制信号的情况 下，对该部位，计算并获取标签信息在=维空间上的坐标。在此，标签信息是对多视点图像 信号的保持部16中收纳的多个图像信号的关注部分赋予的附加信息。即，通过经由输入部 12对图像信号赋予标签信息，从而使用者能够在显示部13上同时视觉识别关注部分、和标 签信息。由此，能够促进使用者对关注部分的理解。
[0028] 关注部分表示图像信号中拍摄出的特定的被摄体的部分，例如人的手、脚等。在关 注部分为人的手的情况下，标签信息成为介绍此人的手的文字等信息。观看者能够通过读 标签信息而理解图像信号中拍摄出的人的手的特性等。
[0029] 另外，标签信息中的=维空间上的坐标，成为将规定的被摄体从多视点图像信号 的保持部16中存储的图像信号投射到=维空间时使用的坐标轴的坐标。即，通过指定标签 信息在=维空间上的坐标，从而确定多视点图像信号的保持部16具有的图像信号上的位 置。此外，下面对计算出标签信息在=维空间上的坐标的动作进行说明。
[0030] 对于上述(2)的功能，控制部11选择多视点图像信号的保持部16中存储的图像信 号中、在显示部13中显示时使用者能够对赋予标签信息的关注部分进行视觉识别的图像信 号。下面对该图像信号的选择动作进行说明。
[0031] 对于上述(3)的功能，控制部11计算出将在上述（1)的功能中已经计算出的标签信 息在=维空间上的坐标投射至输出到显示部13的图像信号的平面上时得到的坐标。控制部 11将计算出的坐标输出到显示部13。通过运样构成，从而，即使在控制部11从多视点图像信 号的保持部16选择了视点不同的图像信号的情况下，由于能够从标签信息在S维空间上的 坐标计算出选择的图像信号上的坐标，因此也能够在选择的图像信号上重叠标签信息进行 显示。
[0032] 对于上述(4)的功能，控制部11基于上述(3)的功能中计算出的标签信息的坐标， 对上述(2)的功能中选择出的图像信号重叠标签信息，生成新的图像信号。控制部11将生成 的新的图像信号输出到显示部13。
[0033] 接下来，输入部12是从使用者接受对标签信息处理装置10的操作指示的设备。输 入部12例如由鼠标等定位设备构成。此外，也可W使用如触控面板那样的设备或键盘。即， 只要是从使用者接受操作指示的设备，则使用怎样的设备都可W。
[0034] 输入部12在从使用者接受到操作指示的情况下，生成基于该操作指示的控制信 号，并输出到控制部11。
[0035] 显示部13是对从控制部11输出的图像信号进行显示的设备。此时，显示部13从控 制部11获取图像信号，并对获取的图像信号进行显示。
[0036] 模型数据的保持部14存储表示多视点图像信号的保持部16中存储的多个图像信 号共同拍摄出的被摄体在=维空间上的位置的模型数据。在此，模型数据在至少任意地设 定在被摄体的表面的离散点，由=维空间