姿势辨识装置以及姿势辨识装置的控制方法
【技术领域】
[0001]本发明涉及对基于姿势(gesture)的输入操作进行辨识的姿势辨识装置。
【背景技术】
[0002]示出了能够通过姿势来对计算机或电子设备进行输入的装置普及的征兆。
[0003]例如，在专利文献I中，记载了通过摄像机等拍摄用户在空间上做出的姿势，将该姿势变换为输入指令的输入装置。该装置具有:将特定的姿势与特定的输入指令建立关联而存储，对姿势进行辨识的部件；以及将所辨识出的姿势变换为输入指令的部件。由此，用户能够仅通过在设备的前面做出姿势动作而输入任意的指令，而不直接操作输入设备。
[0004]现有技术文献
[0005]专利文献
[0006]专利文献1:(日本)特开2012 — 123608号公报
[0007]在对姿势进行辨识的输入装置中，一般而言，从做出姿势的部位的图像提取代表该部位的位置的点(以下，代表点)，追踪所提取到的代表点的运动，从而判别做出了怎样的姿势。例如，在用户做出张开手掌并描绘图形的姿势的情况下，检测手的中心点，追踪该中心点的轨迹，从而对通过姿势而描绘出的图形的形状进行辨识。
[0008]但是，在使用手做出姿势的情况下，将代表点设定为手的中心不一定是好的。例如，在竖起食指而做出姿势的情况下，追踪食指的前端对用户来说能够得到更自然的辨识结果。在这样的情况下，若将代表点设定为手的中心，则在手没有较大地移动而仅移动了指尖的情况下，存在没有准确地进行输入的顾虑。
[0009]像这样，在使用身体的一部分做出姿势的情况下，在以往的姿势辨识装置中，不能适当地判别代表点处于何处，作为结果，存在不能依照用户的意图来辨识通过姿势表现的轨迹的状况。
【发明内容】
[0010]本发明是考虑上述的课题而完成的，其目的在于，提供在对用户移动对象部位而做出的姿势进行辨识的姿势辨识装置中，依照用户的意图而对姿势进行辨识的技术。
[0011]为了解决上述课题，本发明所涉及的姿势辨识装置采取判定做出姿势的身体部位即对象部位的形状，考虑该形状而决定代表点的位置的结构。
[0012]具体而言，本发明所涉及的姿势辨识装置是从所取得的图像检测姿势，生成与该姿势对应的对于对象设备的命令的姿势辨识装置，其特征在于，具有:图像取得部件，取得图像；对象部位提取部件，从所述取得的图像，提取做出姿势的对象部位；对象部位形状确定部件，确定所述提取到的对象部位的形状；代表点决定部件，对所述对象部位设定代表所述对象部位的位置的点即代表点；姿势辨识部件，基于所述代表点的运动而对姿势进行辨识；以及指令生成部件，生成与所述辨识出的姿势对应的命令，所述代表点决定部件使用所述确定出的对象部位的形状，决定与所述对象部位对应的代表点的位置。
[0013]对象部位是用户做出姿势的部位，典型地说是人的手，但也可以是人体整体，也可以是用户保持的输入用的标记物等。能够通过追踪与对象部位对应的代表点的运动而对所输入的姿势进行辨识，但在本发明所涉及的姿势辨识装置中，使用该对象部位的形状来决定对象部位中的代表点的位置。
[0014]本发明所涉及的姿势辨识装置像这样考虑对象部位的形状而设定代表点的位置。由此，能够依照用户的意图，对通过移动对象部位而输入的姿势进行辨识。
[0015]此外，也可以是，其特征在于，所述代表点决定部件在所述对象部位形状确定部件确定出的对象部位的形状是包含突出的部位的形状的情况下，将代表点设定为该突出的部位的前端。
[0016]在对象部位的一部分是突出的形状的情况下，通过该突出的部位的运动而做出姿势输入的可能性高。例如，用户竖起一部分手指的情况或保持棒状的输入用标记物的情况等。在这样的情况下，优选将代表点设定为该部位的前端。
[0017]此外，也可以是，其特征在于，所述对象部位是人的手，所述代表点决定部件判定所述对象部位形状确定部件确定出的对象部位的形状是第一形状，还是与所述第一形状不同的第二形状，在所述对象部位的形状是第一形状的情况下，将代表点设定为对应于指尖的位置，在所述对象部位的形状是第二形状的情况下，将代表点设定为对应于手的中心的位置。
[0018]在对象部位是人的手的情况下，考虑使用指尖做出姿势的情况和使用手整体做出姿势的情况的两种模式(pattern)。从而，代表点的位置优选设为指尖或手的中心的其中一个。
[0019]在能够估计为使用指尖而不是手整体来做出姿势的情况下，将代表点设定为对应于指尖的位置。由此，即使在以指尖的较小的运动来做出姿势的情况下，也能够依照用户的意图而对该姿势进行辨识。
[0020]此外，也可以是，其特征在于，所述代表点决定部件在所述对象部位形状确定部件确定出的作为对象部位的手的形状是一部分手指伸展的形状的情况下，判定为是第一形状，在是全部手指伸展的形状或者全部手指弯曲的形状的情况下，判定为是第二形状。此夕卜，也可以是，其特征在于，在作为对象部位的手的形状是仅I根手指伸展的形状的情况下，判定为是第一形状。
[0021]在5根手指之中的一部分伸展的情况下，能够估计为使用指尖做出姿势。此外，在全部手指伸展的情况或全部手指弯曲的情况下，能够估计为通过移动手整体而做出姿势。此外，在仅检测到I根伸展的手指的情况下，能够估计为使用指尖做出姿势。另外，一部分手指伸展的状态不包含张开全部手指的状态。
[0022]此外，也可以是，其特征在于，所述代表点决定部件使用由所述对象部位提取部件提取到的对应于该手的区域的重心，作为与所述手的中心对应的位置。
[0023]优选使用易于计算的重心作为与手的中心对应的位置。
[0024]此外，也可以是，本发明所涉及的姿势辨识装置的特征在于，还具有:通知部件，将所设定的代表点的位置通知给用户。
[0025]通知部件例如是显示装置或声音输出装置等。例如，也可以将代表点被设定于何处显示在画面上。通过这样构成，用户能够知道姿势辨识装置追踪的点处于何处，能够进一步提尚可用性。
[0026]另外，本发明能够特定为包含上述部件的至少一部分的姿势辨识装置。此外，还能够特定为所述姿势辨识装置的控制方法、用于使所述姿势辨识装置动作的程序、记录了该程序的记录介质。只要没有产生技术上的矛盾，则能够将上述处理或部件自由组合而实施。
[0027]根据本发明，能够在对用户移动对象部位而做出的姿势进行辨识的姿势辨识装置中，依照用户的意图而对姿势进行辨识。
【附图说明】
[0028]图1是第一实施方式所涉及的姿势辨识系统的结构图。
[0029]图2是说明姿势定义数据的例子的图。
[0030]图3是说明对象部位的提取例的图。
[0031]图4(A)?(B)是说明对象部位的形状的差异的图。
[0032]图5是表示第一实施方式中姿势辨识装置进行的处理的流程图。
[0033]图6是表示第一实施方式中姿势辨识装置进行的处理的流程图。
[0034]图7(A)?⑶是第二实施方式中的通知画面的例子。
[0035]标号说明
[0036]100...姿势辨识装置
[0037]101...图像取得部
[0038]102...姿势提取部
[0039]103...姿势辨识部
[0040]104...指令生成部
[0041]200..?对象设备
【具体实施方式】
[0042](第一实施方式)
[0043]参照作为系统结构图的图1说明第一实施方式所涉及的姿势辨识系统的概要。第一实施方式所涉及的姿势辨识系统是由姿势辨识装置100以及对象设备200构成的系统。
[0044]姿势辨识装置100是使用摄像机对用户做出的姿势进行辨识，且生成对应于该姿势的指令，并发送至对象设备200的装置。
[0045]此外，对象设备200是从姿势辨识装置100接收指令的装置(控制对象的设备)，典型地说，是电视、录影机、计算机、空调、电视会议系统等的电子产品。只要对象设备200能够通过有线或者无线而从姿势辨识装置100接收指令，则也可以是任意的设备。在本实施方式中，设为对象设备200是电视接收机，姿势辨识装置100是被内置于该电视中的装置。
[0046]详细说明姿势辨识装置100。姿势辨识装置100具有图像取得部101、姿势提取部102、姿势辨识部103、指令生成部104。
[0047]图像取得部101是从外部取得图像的部件。在本实施方式中，使用被安装在电视画面的正面上部的摄像机(未图示)来拍摄用户。图像取得部101所使用的摄