。因此，信息处理装置100将点901a与点901b相关联。然后，如果稍后两个指定的位置间的距离增加，则信息处理装置100识别例如有意指示图像放大的用户执行的“捏大”操作。上述操作不仅能由一个用户执行，也能由多个用户执行。
[0089]图8是例示能由变型例中的信息处理装置100执行的关联指令检测处理的示例流程的流程图。
[0090]在步骤S800中，识别单元215获取各个非关联的手区域的指定的位置。在步骤S801中，识别单元215确定是否有彼此接触的指定的位置。然而，即使两个或更多个指定的位置的坐标值彼此不一致，它们也可以相邻地位于狭窄空间(例如lcmX lcm的正方形)中。在此情况下，能够认为指定的位置大致彼此接触。识别单元215能够确定存在正彼此接触的指定的位置。考虑到输入图像的分辨率可以恰当地确定该步骤中要设置的可允许范围。如果识别单元215确定存在至少两个彼此接触的指定的位置(步骤S801中为“是”)，则操作推进至步骤S802。如果识别单元215确定不存在任何彼此接触的指定的位置(步骤S801中为“否”)，则识别单元重复上述处理。可选择地，识别单元215能够终止图8中例示的流程图的处理。
[0091]在步骤S802中，识别单元215基于输入图像的帧间的差别获取指定的位置静止并彼此接触期间的时间长度。在步骤S803中，识别单元215确定所获取的时间长度是否大于预定待机时间。例如，事先设置诸如3秒的预定待机时间。然而，各个用户能够适当地改变待机时间的设置值。在步骤S804中，如果手的指定的位置彼此接触，则关联单元212将手彼此关联，并将关于所关联的手的信息存储在RAM 202中，然后终止图8例示的流程图的处理。
[0092]如上文所述，信息处理装置100能够执行用于识别关联指令操作的处理。这里，关联指令操作时触摸操作的一种，并且信息处理装置100检测在触摸状态下接触的指定的位置。然而，关联指令操作可以是空气中执行的手势操作。
[0093]根据变型例，一旦将手移到操作表面的外部空间，用户就不需要在新执行关联操作中重置入口位置。因此，用户能够顺畅地执行连续工作。此外，由于用户能够在执行多点触摸操作的操作流程中输入指令，因此使用户无需任何菜单选择或任何模式切换就能指示触摸操作是有用的。此外，信息处理装置100能被配置为在输入单点触摸操作时识别关联指令，而在输入多点触摸操作时识别关联取消指令。此外，事先将特定图案注册为指示关联取消处理的命令是有用的。例如，由用户执行的特定图案为通过交叉其两只手而画“X形”。期望该特定图案能明显地与其他多点触摸命令区分开。通过使用上述特定图案，用户能轻松地指示取消关联处理。
[0094](其他示例性实施例)
[0095]本发明还可以通过下述处理而实现:所述处理包括经由网络或适当的存储介质向系统或者装置提供能够实现上述示例性实施例的功能中的至少一种的程序，并促使所述系统或者装置中配设的计算机的至少一个处理器读取并执行所述程序。此外，本发明可以由能够实现上述功能中的一种的电路(例如ASIC)来实现。
[0096]本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给系统或装置，该系统或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。
[0097]虽然参照示例性实施例描述了本发明，但是应当理解，本发明并不限于所公开的示例性实施例。应当对下列权利要求的范围赋予最宽的解释，以使其涵盖所有这些变型例以及等同的结构及功能。
【主权项】
1.一种信息处理装置，所述信息处理装置包括: 图像获取单元，用于获取关于操作表面上的空间的图像的信息； 确定单元，用于基于所述图像获取单元获取的关于所述图像的所述信息，确定要用于操作输入的多个物体中的各个进入到所述空间中的位置；以及 关联单元，用于基于针对所述多个物体的各个所确定的位置，从所述多个物体中确定多个物体的组合，并用于将所组合的多个物体彼此关联。2.根据权利要求1所述的信息处理装置，所述信息处理装置还包括: 识别单元，用于基于关于由所述关联单元关联的所述物体所指定的多个位置的信息，识别与所述多个物体协同输入的一个指令相对应的操作。3.根据权利要求2所述的信息处理装置，其中，被所述识别单元识别的、由所述多个物体协同输入的所述一个指令是与所述多个物体的多点触摸操作输入相对应的指令。4.根据权利要求1所述的信息处理装置，所述信息处理装置还包括: 提取单元，用于从所述图像获取单元定期获取的图像中提取包括要用于操作输入的多个物体的至少一个区域， 其中，所述确定单元将最初提取各个区域的图像的边界与所述区域相交的交叉位置确定为所述物体进入到所述空间中的位置。5.根据权利要求1所述的信息处理装置，其中，要用于操作输入的物体是用户的一只手。6.根据权利要求1所述的信息处理装置，其中，所述关联单元，用于基于针对所述多个物体的各个所确定的位置以及从所述图像获取单元获取的所述图像中获得的各物体的特征，从所述多个物体中确定协同输入所述一个指令的所述多个物体的组合。7.根据权利要求6所述的信息处理装置，其中，要用于操作输入的物体是用户的一只手，以及，从所述图像获得的物体的所述特征包括手的尺寸、颜色、方向以及最新位置中的至少一个。8.根据权利要求6所述的信息处理装置，其中，所述关联单元，用于针对基于对所述多个物体中的各个所确定的位置而关联的手的组合，基于在关于从所述图像获取的手的至少一部分的尺寸上的比较结果，从所述多个物体中确定协同输入所述一个指令的所述多个物体的组合。9.根据权利要求6所述的信息处理装置，其中，所述关联单元，用于针对基于对所述多个物体中的各个所确定的位置而关联的手的组合，基于在关于从所述图像获取的颜色信息上的比较结果，从所述多个物体中确定协同输入所述一个指令的所述多个物体的组合。10.根据权利要求6所述的信息处理装置，其中，所述关联单元，用于针对基于对所述多个物体中的各个所确定的位置而关联的手的组合，基于在关于从所述图像获取的手方向角度差别上的比较结果，从所述多个物体中确定协同输入所述一个指令的所述多个物体的组合。11.根据权利要求1所述的信息处理装置，其中，所述关联单元，用于确定针对各物体所确定的位置间的距离最短、且短于预定距离的多个物体的组合，并且用于将所组合的多个物体彼此关联。12.根据权利要求1所述的信息处理装置，其中，所述操作表面是构成桌面界面系统的桌表面，且所述图像获取单元用于获取由范围图像传感器拍摄的范围图像，所述范围图像传感器安装在其从上方俯视所述桌表面的位置处。13.根据权利要求4所述的信息处理装置，其中，所述操作表面是构成桌面界面系统的桌表面，且所述图像获取单元用于获取由范围图像传感器拍摄的范围图像，所述范围图像传感器安装在其从上方俯视所述桌表面的位置处，以及，基于从所述范围图像传感器到由所获取的范围图像的各像素表示的范围图像的摄像目标被摄体表面的距离和表示所述桌表面的高度的信息，所述提取单元用于从所述范围图像中提取出这样的区域，在该区域中要用于操作输入的多个物体作为摄像目标被摄体而被拍摄。14.一种信息处理装置的控制方法，所述控制方法包括: 获取关于操作表面上的空间的图像的信息； 基于关于所获取的图像的所述信息，确定要用于操作输入的多个物体中的各个进入到所述空间中的位置；以及 基于针对所述多个物体的各个所确定的位置而确定多个物体的组合，并将所组合的多个物体彼此关联。15.一种信息处理装置，所述信息处理装置包括: 图像获取单元，用于获取关于操作表面上的空间的图像的信息； 确定单元，用于基于所述图像获取单元获取的关于所述图像的所述信息，确定要用于操作输入的多个物体中的各个进入到所述空间中的位置；以及 关联单元，用于基于所述确定单元针对所述多个物体的各个所确定的位置，从所述多个物体中将被估计为一个用户的一双手的物体相关联。16.根据权利要求15所述的信息处理装置，其中，所述操作表面是构成桌面界面系统的桌表面，且所述图像获取单元用于获取范围图像传感器拍摄的范围图像，所述范围图像传感器安装在其从上方俯视所述桌表面的位置处。17.根据权利要求15所述的信息处理装置，其中，所述操作表面是构成桌面界面系统的桌表面，且所述图像获取单元用于获取范围图像传感器拍摄的范围图像，所述范围图像传感器安装在其从上方俯视所述桌表面的位置处，以及， 所述信息处理装置还包括:提取单元，其用于基于从所述范围图像传感器到由所获取的范围图像的各像素表示的范围图像的摄像目标被摄体表面的距离和表示所述桌表面的高度的信息，从所述范围图像中提取出这样的区域，在该区域中，要用于操作输入的多个物体作为摄像目标被摄体而被拍摄， 其中，所述确定单元，将最初提取各个区域的图像的边界与所述区域相交的交叉位置确定为所述物体进入到所述空间中的位置。18.一种信息处理装置的控制方法，所述控制方法包括: 通过图像获取单元获取关于操作表面上的空间的图像的信息； 基于关于所获取的图像的所述信息，通过确定单元确定要用于操作输入的多个物体中的各个进入到所述空间中的位置； 基于针对所述多个物体的各个所确定的位置、通过关联单元将被估计为一个用户的一双手的物体相关联。
【专利摘要】本发明公开一种识别多点触摸操作的信息处理装置及其控制方法。传统上，当基于用户的手的三维测量识别输入操作时，很难区分所检测到的多个手是用户的一双手还是多个用户的手。根据本发明的信息处理装置包括：图像获取单元，用于获取关于对操作表面上的空间进行拍摄而得到的图像的信息；位置确定单元，用于基于关于所获取的图像的所述信息而确定要用于操作输入的多个物体中的各个进入到所述空间中的位置；以及关联单元，用于基于针对所述多个物体的各个所确定的位置而确定多个物体的组合，并用于将所组合的多个物体彼此关联。
【IPC分类】G06F3/041
【公开号】CN105468189
【申请号】CN201510604295
【发明人】新井常一
【申请人】佳能株式会社
【公开日】2016年4月6日
【申请日】2015年9月21日
【公告号】EP3001350A1, US20160093038