信息处理方法和电子设备的制作方法
【专利摘要】本发明公开了一种信息处理方法和电子设备。所述方法应用于电子设备，所述电子设备至少具有显示单元和图像采集单元。所述方法包括：利用所述图像采集单元捕捉图像；当所捕捉的图像包括第一预定图像信息时，在所述显示单元上显示与所述第一预定图像信息对应的虚拟化图像；检测用户对所述虚拟化图像的操作；判断所述操作是否满足第一预定条件，并获得第一判断结果；以及当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。因此，在本发明中，可以将增强现实技术应用在用户与电子设备的交互过程中，从而扩充了该交互过程所产生的信息量，并且提升了该交互过程的互动性和趣味性，显著提高了用户体验。
【专利说明】信息处理方法和电子设备
【技术领域】
[0001]本发明涉及计算机【技术领域】，更具体地，本发明涉及一种信息处理方法和电子设备。
【背景技术】
[0002]增强现实(AR)也被称之为混合现实。它是一种计算机图形技术和可视化技术。增强现实不同于已有的仅仅针对虚拟对象或者虚拟信息的虚拟现实(VR)。具体而言，增强现实可以产生现实环境中并不存在的虚拟对象，并通过传感技术将虚拟对象准确“放置”在真实环境中的特定位置上，借助电子设备的显示单元将虚拟对象与真实环境融为一体，以使得该虚拟对象仿佛真正存在于该真实环境中一样。
[0003]另外，随着计算机技术的不断发展，人机交互技术也应运而生。它是一种通过输入单元、输出单元等、以有效的方式来实现用户与电子设备对话的技术。
[0004]然而，目前将增强现实技术与人机交互技术相结合的应用很少，从而导致在用户与电子设备的交互过程中产生的信息量极为有限，并且两者之间的交互缺乏互动性和趣味性。
[0005]因而，需要一种新型的信息处理方法和电子设备来解决上述问题，以向用户提供具有优秀用户体验的人机交互模式。
【发明内容】
[0006]为了解决上述技术问题，根据本发明的一个方面，提供了一种信息处理方法，应用于电子设备，所述电子设备至少具有显示单元和图像采集单元，其特征在于，所述方法包括:利用所述图像采集单元捕捉图像；当所捕捉的图像包括第一预定图像信息时，在所述显示单元上显示与所述第一预定图像信息对应的虚拟化图像；检测用户对所述虚拟化图像的操作；判断所述操作是否满足第一预定条件，并获得第一判断结果；以及当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。
[0007]此外，根据本发明的另一方面，提供了一种电子设备，其特征在于，所述电子设备包括:图像采集单元，用于捕捉图像；显示单元，当所捕捉的图像包括第一预定图像信息时，显示与所述第一预定图像信息对应的虚拟化图像；检测单元，用于检测用户对所述虚拟化图像的操作；第一判断单元，用于判断所述操作是否满足第一预定条件，并获得第一判断结果；以及执行单元，用于当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。
[0008]与现有技术相比，采用根据本发明的信息处理方法和电子设备，可以在用户与电子设备的交互过程中，捕捉一个真实环境的图像，当该图像中包括预定图像信息时，在该真实环境的图像上添加显示一个与该预定图像信息相关联的虚拟化图像，检测用户对该虚拟化图像的操作是否满足预定的交互操作，如果是，则使得电子设备完成与该预定交互操作相关联的特定功能。因此，在本发明中，可以将增强现实技术应用在用户与电子设备的交互过程中，从而扩充了该交互过程所产生的信息量，并且提升了该交互过程的互动性和趣味性，显著提高了用户体验。
[0009]本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
【专利附图】
【附图说明】
[0010]附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中:
[0011]图1图示了根据本发明的信息处理方法。
[0012]图2图示了根据本发明的电子设备。
[0013]图3图示了根据本发明第一实施例的信息处理方法。
[0014]图4图示了根据本发明第一实施例的电子设备。
[0015]图5a到图5e图示了根据本发明第一实施例的显示单元的显示内容。
[0016]图6图示了根据本发明第二实施例的信息处理方法。
[0017]图7图示了根据本发明第二实施例的电子设备。
[0018]图8a到图8f图示了根据本发明第二实施例的显示单元的显示内容。
[0019]图9图示了根据本发明第三实施例的信息处理方法。
[0020]图10图示了根据本发明第三实施例的电子设备。
[0021]图1la到图1ld图示了根据本发明第三实施例的显示单元的显示内容。
[0022]图12图示了根据本发明第四实施例的信息处理方法。
[0023]图13图示了根据本发明第四实施例的电子设备。
[0024]图14a到图14e图示了根据本发明第四实施例的显示单元的显示内容。
【具体实施方式】
[0025]将参照附图详细描述根据本发明的各个实施例。这里，需要注意的是，在附图中，将相同的附图标记赋予基本上具有相同或类似结构和功能的组成部分，并且将省略关于它们的重复描述。
[0026]在下文中，将参考图1和图2来描述根据本发明的信息处理方法和电子设备。
[0027]图1图示了根据本发明的信息处理方法，而图2图示了根据本发明的电子设备。
[0028]图1所图示的信息处理方法可以应用于图2所图示的电子设备。具体地，所述电子设备100包括:图像采集单元110、显示单元120、检测单元130、第一判断单元140、和执行单元150。
[0029]如图1所图示的，所述电子设备定制方法包括:
[0030]在步骤SllO中，利用所述图像采集单元110捕捉图像；
[0031]在步骤S120中，当所捕捉的图像包括第一预定图像信息时，在所述显示单元120上显示与所述第一预定图像信息对应的虚拟化图像；
[0032]在步骤S130中，检测单元130检测用户对所述虚拟化图像的操作；
[0033]在步骤S140中，第一判断单元140判断所述操作是否满足第一预定条件，并获得第一判断结果；以及
[0034]在步骤S150中，当所述第一判断结果表明所述操作满足所述第一预定条件时，执行单元150执行一操作指令。
[0035]由此可见，采用根据本发明的信息处理方法和电子设备，可以在用户与电子设备的交互过程中，捕捉一个真实环境的图像，当该图像中包括预定图像信息时，在该真实环境的图像上添加显示一个与该预定图像信息相关联的虚拟化图像，检测用户对该虚拟化图像的操作是否满足预定的交互操作，如果是，则使得电子设备完成与该预定交互操作相关联的特定功能。因此，在本发明中，可以将增强现实技术应用在用户与电子设备的交互过程中，从而扩充了该交互过程所产生的信息量，并且提升了该交互过程的互动性和趣味性，显著提高了用户体验。
[0036]在下文中，将参考图3、图4、和图5a到图5e来描述根据本发明第一实施例的信息处理方法和电子设备。
[0037]近年来，诸如个人计算机(PC)、平板电脑(PAD)、移动电话、多媒体播放器、个人数字助理(PDA)之类的电子设备越发普及。以移动电话为例，在生活中，用户通常可以通过移动电话来拨打/接听电话、发送短信息(SMS)、多媒体短信息(丽S)、浏览因特网(Internet)或利用即时通信工具进行在线聊天等操作。因而，用户为了保证在移动电话中各种数据的安全和私密，防止未授权用户使用自己的移动电话，他/她往往会对自己的移动电话设置屏幕锁定，使得移动电话在空闲一段时间之后，自动进行锁定状态。然而，在现有技术中，用户只能通过简单的输入密码或绘制连接九点的解锁图案来进行解锁。显然，这个过程的趣味性不强，无法给用户带来充分地参与感。
[0038]另外，随着人脸识别技术的发展，开发出另一种解锁方法，其利用移动电话的摄像头来拍摄使用者的脸部并进行人脸识别，以比对该使用者脸部的特征区域是否与授权用户脸部的特征区域相符，并且当两者相符时，为移动电话解锁。然而，这个方法的缺点在于，在解锁过程中，仅仅执行了简单的人脸识别和比对，当非授权用户例如手持授权用户的脸部照片来进行验证时，容易造成误解锁情况的发生。
[0039]因此，本发明设想出可以在用户对移动电话执行解锁过程中应用本发明，以便在增强解锁安全性的同时，提升用户在解锁过程中的互动性和趣味性。
[0040]下面，在本发明的第一实施例中，将移动电话作为电子设备的示例、并且将信息处理方法应用在对移动电话进行解锁的过程中来进行说明。
[0041]需要说明的是，尽管此处通过将根据本发明的信息处理方法和电子设备应用于移动电话的解锁操作来说明本发明，但是，本领域技术人员能够理解的是，本发明不限于此。而是，还可以将本发明应用于用户与其他电子设备(例如，个人计算机、平板电脑、多媒体播放器、个人数字助理等)的各种交互过程中。
[0042]图3图示了根据本发明第一实施例的信息处理方法，图4图示了根据本发明第一实施例的电子设备100，而图5a到图5e图示了根据本发明第一实施例的显示单元的显示内容。
[0043]图3所图示的根据本发明第一实施例的信息处理方法可以应用于图4所图示的电子设备100。如上所述，根据本发明第一实施例的电子设备100例如是移动电话。与图1中相似的，该电子设备100至少包括:图像采集单元110、显示单元120、检测单元130、第一判断单元140、和执行单元150。此外，该电子设备100还包括:第一识别单元160。
[0044]如图3所图示的，根据本发明第一实施例的信息处理方法包括:
[0045]在步骤S210中，利用图像采集单元捕捉图像。
[0046]具体地，如果用户对自己的电子设备100 (例如，移动电话)执行了锁定保护，则在该电子设备空闲一段时间之后，该电子设备100进入锁定状态。这时，例如在该电子设备100的显示单元120上显示锁定画面，如图5a所图示的。当然，当处于锁定状态时，该电子设备100的显示单元120也可以处于黑屏状态，以节省电力。
[0047]当用户希望再次使用电子设备100时，用户需要首先对对处于锁定状态中的电子设备进行解锁。此时，用户可以操作该电子设备100，使得利用图像采集单元110捕捉某一特征区域，以进行特征区域的比对和验证。
[0048]例如，用户将位于移动电话的前方的摄像头对准例如自己的脸部，以捕捉包括脸部的图像。这时，例如在该电子设备100的显示单元120上显示所捕捉到的用户的脸部图像，如图5b所图示的。其中，该捕捉动作例如可以包括:仅仅利用摄像头进行取景，而不通过按压快门来拍摄图像；或者通过按压快门来实际拍摄图像。这里，以前者为例继续说明。
[0049]然后，图像采集单元110将所捕捉到的包括特征区域的图像发送到第一识别单元160，以进行后续操作。
[0050]在步骤S220中，识别第一预定图像信息。
[0051]具体地，在从图像采集单元110接收到包括特征区域的图像之后，第一识别单元160对该图像中的特征区域进行识别，以确定在所捕捉的图像中是否包括第一预定图像信
肩、O
[0052]例如，第一识别单元160可以采用现有的或者将来开发出的任何一种人脸检测和/或人脸跟踪算法，来在图像采集单元110所捕捉到的原始图像中检测人脸区域，确定该人脸区域的位置，并且提取该人脸区域，以作为第一待比较图像信息。
[0053]然后，第一识别单元160将该第一待比较图像信息(所识别出的人脸图像)与在存储器(未示出)中保存的第一预定图像信息(授权用户的人脸图像)进行比对，从而确定在所捕捉的图像中是否包括第一预定图像信息。
[0054]例如，如果所识别出的人脸图像是授权用户的人脸图像，则该方法进行步骤S230。如果所识别出人脸图像是非授权用户的人脸图像，第一识别单元160通过电子设备的显示单元120向用户提示拒绝访问，并且此方法结束。
[0055]在步骤S230中，当所捕捉的图像包括第一预定图像信息时，在显示单元上显示与所述第一预定图像信息对应的虚拟化图像。
[0056]具体地，当确定出所捕捉的图像包括第一预定图像信息(授权用户的人脸图像)时，第一识别单元160向显示单元120通知这个情况。显示单元120在存储器(未示出)中获取与该第一预定图像信息对应的一个或多个虚拟化图像，并且在自身上显示所获取的虚拟化图像。
[0057]例如，当确定出用户预先设置的与自己脸部对应的虚拟化图像是一个卡通猫的头像时，该显示单元120向用户显示卡通猫头像，如图5c所图示的。在图5c中，该卡通猫头像叠加地显示在所捕捉到的包括用户脸部的图像之上的任何位置处。替换地，也可以仅仅示出了该卡通猫的头像，而不在显示用户头像。[0058]在步骤S240中，检测用户对所述虚拟化图像的操作。
[0059]具体地，在显示单元120向用户显示虚拟化图像之后，检测单元130检测用户对所述虚拟化图像的交互操作。
[0060]例如，该显示单元120和该检测单元130优选地可以通过电子设备100的触摸屏来实现。此时，在显示单元120在屏幕上显示出卡通猫图像之后，检测单元130根据用户在触摸屏上的触摸操作来检测出用户对于该卡通猫头像的交互操作是将该卡通猫头像向右旋转了三圈。
[0061]然后，该检测单元130将该交互操作的结果发送到第一判断单元140，以进行后续操作。
[0062]在步骤S250中，判断所述操作是否满足第一预定条件，并获得第一判断结果。
[0063]具体地，在从检测单元130接收到用户对于该虚拟化图像的交互操作之后，第一判断单元140判断所述操作是否满足第一预定条件，并获得第一判断结果。
[0064]例如，第一判断单元140在存储器中查找是否用户预设了与该卡通猫头像向右旋转了三圈对应的交互操作。如果第一判断单元140判断出该交互操作对应于将电子设备100从锁定状态中恢复到正常操作状态，则它生成指示出该交互操作满足与对电子设备100执行解锁操作对应的第一预定条件的第一判断结果。或者，如果第一判断单元140判断出该交互操作对应于将电子设备100关机，则它生成指示出该交互操作满足与对电子设备100执行关机操作对应的第一预定条件的第一判断结果。然后，该方法进行到步骤S260。
[0065]亦或，如果第一判断单元140判断出该交互操作没有对应对于电子设备100的任何操作，则它生成指示出该交互操作不满足第一预定条件的第一判断结果，并通过电子设备的显示单元120向用户提示拒绝访问，并且此方法结束。
[0066]在步骤S260中，当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。
[0067]具体地，当从第一判断单元140接收到第一判断结果之后，执行单元150从存储器中获取与该第一判断结果对应的操作的操作指令，并且运行该操作指令。
[0068]例如，如果第一判断结果指示出该交互操作满足对应于对电子设备100执行解锁操作的第一预定条件，则执行单元150获取执行解锁操作的相应操作指令,并且执行该操作指令。此时，执行单元150对电子设备100执行解锁操作，并且使得显示单元120显示解锁后的显示画面，如图5e所图示的。然后，用户能够利用解锁后的该电子设备100进行后续操作。
[0069]由此可见，采用根据本发明第一实施例的信息处理方法和电子设备，可以在用户与电子设备的交互过程中，捕捉图像，识别所捕捉的图像是否包括特征区域，当包括时，显示与该特征区域对应的虚拟化图像，并且检测用户对于该虚拟化图像的交互操作，当该交互操作满足预定条件时，执行与该预定条件对应的操作指令。因此，在本发明的第一实施例中，可以将增强现实技术应用在诸如用户对于电子设备进行操作的过程中，在人脸识别的基础上，进一步进行交互操作的识别，避免了当非授权用户手持授权用户的脸部照片而通过验证时造成的误操作情况，从而在增强操作安全性的同时，提升用户在操作过程中的互动性和趣味性。
[0070]需要说明的是，尽管在本发明的第一实施例中将该检测单元130实现为触摸屏来进行说明。但是，本发明不限于此。而是，也可以通过诸如鼠标、键盘、重力传感器、麦克风等其他输入单元来实现该检测单元130。例如，在鼠标或键盘的情况下，检测单元130检测用户对于虚拟化图像所执行的点击和/或拖拉等操作；在重力传感器的情况下，检测单元130检测用户对于虚拟化图像所执行的甩动和/或翻转等操作；在麦克风的情况下，检测单元130检测在显示该虚拟化图像的同时用户所发出的声音(诸如，学猫叫)等操作，从而最终确定该操作是否满足第一预定条件。
[0071]在下文中，将参考图6、图7、和图8a到图8f来描述根据本发明第二实施例的信息处理方法和电子设备。在本发明的第二实施例中，仍然将移动电话作为电子设备的示例、并且将信息处理方法应用在对移动电话进行解锁的过程中来进行说明。
[0072]图6图示了根据本发明第二实施例的信息处理方法，图7图示了根据本发明第二实施例的电子设备100，而图8a到图8f图示了根据本发明第二实施例的显示单元的显示内容。
[0073]图6所图示的根据本发明第二实施例的信息处理方法可以应用于图7所图示的电子设备100。如图7所图示的，除了第一实施例中包括的各个单元之外，该电子设备100至少还包括:第二判断单元170。
[0074]如图6所图示的，根据本发明第二实施例的信息处理方法包括:
[0075]在步骤S310中，利用图像采集单元捕捉图像。
[0076]在步骤S320中，识别第一预定图像信息。
[0077]在步骤S330中，当所捕捉的图像包括第一预定图像信息时，在显示单元上显示与所述第一预定图像信息对应的虚拟化图像。
[0078]步骤S310-S330与第一实施例中的步骤S210-S230相同，并因而省略其详细描述。
[0079]在步骤S340中，检测用户对所述虚拟化图像的操作。
[0080]具体地，在显示单元120向用户显示虚拟化图像之后，检测单元130检测用户对所述虚拟化图像的交互操作。
[0081]例如，该显示单元120和该检测单元130优选地可以通过电子设备100的触摸屏来实现。此时，在显示单元120在屏幕上显示出卡通猫图像之后，检测单元130根据用户在触摸屏上的触摸操作来检测出用户对于该卡通猫头像的交互操作是点击该卡通猫头像，并且将该卡通猫头像向在步骤S320中由第一识别单元160识别出的授权用户的人脸区域移动，如图8d所图示的。
[0082]然后，该检测单元130将该交互操作的结果发送到第一判断单元140，以进行后续操作。
[0083]在步骤S350中，判断所述操作是否满足第一预定条件，并获得第一判断结果。
[0084]具体地，在从检测单元130接收到用户对于该虚拟化图像的交互操作之后，第一判断单元140判断所述操作是否满足第一预定条件，并获得第一判断结果。
[0085]例如，第一判断单元140在存储器中查找是否用户预设了与将该卡通猫头像向用户人脸区域移动的交互操作。如果存在该交互操作，则它生成指示出该交互操作满足第一预定条件的第一判断结果，并且该方法进行步骤S360。否则，该第一判断单元140通过电子设备的显示单元120向用户提示拒绝访问，并且此方法结束。
[0086]在步骤S360中，当所述第一判断结果表明所述操作满足所述第一预定条件时，进一步判断所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系是否满足
第二预定条件，并获得第二判断结果。
[0087]具体地，在第一判断单元140判断出用户的交互操作满足第一预定条件之后，该第二判断单元170进一步判断经过交互操作之后，该虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系是否满足第二预定条件，并获得第二判断结果。
[0088]例如，检测单元130检测到用户在将该卡通猫头像向人脸区域移动、并且最终将该卡通猫的头像移动并停留在人脸区域上(如图Se所图示的)之后，将该新的检测结果进一步发送到第二判断单元170。如果第二判断单元170在存储器中查找用户是否预设了与该卡通猫头像与人脸区域重叠的位置关系对应的交互操作。如果第二判断单元170判断出该位置关系对应于将电子设备100从锁定状态中恢复到正常操作状态，则它生成指示出该位置关系满足与对电子设备100执行解锁操作对应的第二预定条件的第二判断结果。
[0089]优选地，由于人脸在显示单元120中显示是三维(3D)的，所以作为该虚拟化图像的卡通猫头像也可以是三维图像。
[0090]在步骤S370中，当所述第二判断结果表明所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系满足所述第二预定条件时，执行一操作指令。
[0091]具体地，当从第二判断单元170接收到第二判断结果之后，执行单元150从存储器中获取与该第一判断结果对应的操作的操作指令，并且运行该操作指令。
[0092]例如，执行单元150对电子设备100执行解锁操作，并且使得显示单元120显示解锁后的显示画面，如图8所图示的。然后，用户能够利用解锁后的该电子设备100进行后续操作。
[0093]由此可见，采用根据本发明第二实施例的信息处理方法和电子设备，可以在用户与电子设备的交互过程中，捕捉图像，识别所捕捉的图像是否包括特征区域，当包括时，显示与该特征区域对应的虚拟化图像，并且检测用户对于该虚拟化图像的交互操作，当该交互操作满足预定条件时，进一步判断该交互操作所导致虚拟化图像的至少部分与所捕捉图像的至少部分的位置关系是否满足另一预定条件，当全部两个条件都满足时，执行对应的操作指令。因此，在本发明的第二实施例中，可以将增强现实技术应用在诸如用户对于电子设备进行操作的过程中，在人脸识别和交互操作识别的基础上，进一步增加位置识别，从而在充分提高了操作的安全性，并且为用户在操作过程中与电子设备的交互提供了更强的娱乐性。
[0094]在下文中，将参考图9、图10、和图1la到图1ld来描述根据本发明第三实施例的信息处理方法和电子设备。在本发明的第三实施例中，将移动电话作为电子设备的示例、并且将信息处理方法应用在对移动电话外部的门禁装置进行开锁的过程中来进行说明。
[0095]图9图示了根据本发明第三实施例的信息处理方法，图10图示了根据本发明第三实施例的电子设备100，而图1la到图1ld图示了根据本发明第三实施例的显示单元的显示内容。
[0096]图9所图示的根据本发明第三实施例的信息处理方法可以应用于图10所图示的电子设备100。如图10所图示的，除了第一实施例中包括的各个单元之外，该电子设备100至少还包括:第二识别单元180。
[0097]如图9所图示的，根据本发明第三实施例的信息处理方法包括:[0098]在步骤S410中，利用图像采集单元捕捉图像。
[0099]具体地，在本发明的实施例中，除了将根据本发明的信息处理方法和电子设备应用于对应该电子设备自身执行操作之外，还可以用于对电子设备外部的其他任意电子设备执行操作。如上所述，下面将本发明应用在对作为电子设备100的移动电话外部的门禁装置进行开锁的过程中来进行说明。该门禁装置安装在例如公司的各个房门之上，以便对房门的开关和/或考勤等进行控制。
[0100]此时，用户可以操作该电子设备100，使得利用图像采集单元110捕捉某几个特征区域，以进行特征区域的比对和验证。例如，用户将位于移动电话的前方的摄像头对准例如自己的脸部和公司的门禁装置，以捕捉包括脸部和门禁装置的图像。这时，例如在该电子设备100的显示单元120上显示所捕捉到的用户的脸部图像和门禁图像。优选地，该电子设备100还可以与门禁装置建立连接，以读取该门禁装置当前的状态。如果当前该门禁装置处于锁定状态时，该显示单元120显示用户的脸部图像和标记有锁定标记的门禁图像，如图1la所图示的。
[0101]在步骤S420中，识别第一预定图像信息和第二预定图像信息。
[0102]具体地，在从图像采集单元110接收到包括特征区域的图像之后，第一识别单元160对该图像中的第一特征区域进行识别，以确定在所捕捉的图像中是否包括第一预定图像信息。与此并行地或者顺序地，第二识别单元180对该图像中的第二特征区域进行识别，以确定在所捕捉的图像中是否包括第二预定图像信息。
[0103]如上所述，第一识别单元160可以在图像采集单元110所捕捉到的原始图像中提取人脸区域，以作为第一待比较图像信息。然后，第一识别单元160将该第一待比较图像信息(当前用户的人脸图像)与在存储器(未示出)中保存的第一预定图像信息(授权用户的人脸图像)进行比对，从而确定在所捕捉的图像中是否包括第一预定图像信息。
[0104]另外，第二识别单元180可以在图像采集单元110所捕捉到的原始图像中提取关于门禁装置的特征区域，以作为第二待比较图像信息。例如，该门禁装置上优选地提供有条码和/或发射器。该第二识别单元180可以通过在电子设备100中按照的条码读取器(未示出)来去读该条码；亦或，该第二识别单元180可以是传感器，用于接收该发射器发射的无线信号，以确定该禁止装置的标识符(ID)并且将该包括该门禁装置的图像确定为第二待比较图像信息。然后，第二识别单元160将该第二待比较图像信息(当前门禁装置的图像)与在存储器(未示出)中保存的第二预定图像信息(在电子设备100中存储的门禁装置的图像)进行比对，从而确定在所捕捉的图像中是否包括第二预定图像信息。
[0105]如果第一识别单元160所识别出的人脸图像是授权出入第二识别单元180所识别出的门禁装置的用户的人脸图像，则该方法进行步骤S430。否则，通过电子设备的显示单元120向用户提示拒绝访问，并且此方法结束。
[0106]在步骤S430中，当所捕捉的图像包括第一预定图像信息时，在显示单元上显示与所述第一预定图像信息对应的虚拟化图像。
[0107]具体地，当确定出所捕捉的图像包括第一预定图像信息时，第一识别单元160向显示单元120通知这个情况。显示单元120在存储器(未示出)中获取与该第一预定图像信息对应的一个或多个虚拟化图像，并且在自身上与该第二预定图像信息同时显示所获取的虚拟化图像。替换地，此时也可以不再显示该人脸图像。[0108]例如，当确定出用户预先设置的与自己脸部对应的虚拟化图像是一个卡通猫的头像时，该显示单元120向用户显示对应于人脸(第一被拍摄主体)的卡通猫头像和对应于门禁装置(第二被拍摄主体)的图像，如图1lb所图示的。
[0109]在步骤S440中，检测用户对所述虚拟化图像的操作。
[0110]在步骤S450中，判断所述操作是否满足第一预定条件，并获得第一判断结果。
[0111]在步骤S460中，当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。
[0112]在步骤S440到步骤S460中，当检测单元130检测出用户对于该卡通猫头像的交互操作是将该卡通猫头像向门禁装置移动(如图1lc所图示的)时，并且如果第一判断单元140判断出该交互操作对应于将门禁装置从锁定状态中改变到开启操作状态，则它生成指示出该交互操作满足与对门禁装置执行开锁操作对应的第一预定条件的第一判断结果。最终，执行单元150获取执行该开锁操作的相应操作指令，并且执行该操作指令。例如，执行单元150通过无线方式向门禁装置发送开锁编码，使得用户可以开启由该门禁装置控制的大门，如图1ld所图示的。
[0113]其中，优选地，所述第一预定条件可以取决于所述第二图像信息而不同。例如，不同的门禁装置可能对应于不同的第二图像信息。当该第二图像信息对应于办公室的门禁装置时，该第一预定条件可能表现出用户的交互操应该是将该卡通猫头像向门禁装置移动；当该第二图像信息对应于机房的门禁装置时，该第一预定条件可能表现出用户的交互操应该是点击该卡通猫头像；而当该第二图像信息对应于实验室的门禁装置时，该第一预定条件可能表现出用户的交互操应该是将该卡通猫头像向右旋转三圈等等。
[0114]由此可见，采用根据本发明第三实施例的信息处理方法和电子设备，可以在用户与电子设备的交互过程中，同时捕捉至少包括第一被拍摄主体和第二被拍摄主体的图像，识别所捕捉的图像是否包括与所述被拍摄主体对应的至少两个特征区域，当包括时，显示与其中一个被拍摄主体对应的虚拟化图像，并且检测用户对于该虚拟化图像的交互操作，当该交互操作满足预定条件时，通过该电子设备发起用于对与第二被拍摄主体对应的其他电子设备执行操作的操作指令。因此，在本发明的第三实施例中，可以将增强现实技术应用在诸如用户对于正在操作的电子设备之外的其他电子设备的操作过程中，增强用户在利用电子设备控制其他电子设备的过程中的互动性和趣味性。
[0115]在下文中，将参考图12、图13、和图14a到图14e来描述根据本发明第四实施例的信息处理方法和电子设备。在本发明的第四实施例中，仍然将移动电话作为电子设备的示例、并且将信息处理方法应用在对移动电话外部的门禁装置进行开锁的过程中来进行说明。
[0116]图12图示了根据本发明第四实施例的信息处理方法，图13图示了根据本发明第四实施例的电子设备100，而图14a到图14e图示了根据本发明第四实施例的显示单元的显示内容。
[0117]图12所图示的根据本发明第四实施例的信息处理方法可以应用于图13所图示的电子设备100。如图13所图示的，第四实施例至少包括:图像采集单元110、第一识别单元160、显示单元120、第二识别单元180、检测单元130、第一判断单元140、第二判断单元170、和执行单元150。[0118]如图12所图示的，根据本发明第四实施例的信息处理方法包括:
[0119]在步骤S510中，利用图像采集单元捕捉图像。
[0120]此时，例如，用户首先将位于移动电话的前方的摄像头对准例如自己的脸部，以捕捉包括脸部的图像。这时，例如在该电子设备100的显示单元120上显示所捕捉到的用户的脸部图像，如图14a所图示的。
[0121]在步骤S520中，识别第一预定图像信息。
[0122]第一识别单元160可以在图像采集单元110所捕捉到的原始图像中提取人脸区域，以作为第一待比较图像信息。然后，第一识别单元160将该第一待比较图像信息与在存储器(未示出)中保存的第一预定图像信息进行比对，从而确定在所捕捉的图像中是否包括
第一预定图像信息。
[0123]在步骤S530中，当所捕捉的图像包括第一预定图像信息时，在显示单元上显示与所述第一预定图像信息对应的虚拟化图像。
[0124]具体地，当确定出所捕捉的图像包括第一预定图像信息时，显示单元120向用户显示对应于人脸(第一被拍摄主体)的卡通猫全身像的图像，如图14b所图示的。
[0125]在步骤S540中，再次利用图像采集单元捕捉图像。
[0126]此时，在保持在显示单元120上显示所述虚拟化图像的同时，例如，用户再次将位于移动电话的前方的摄像头对准例如自己欲开启的门禁装置，以捕捉包括门禁装置的图像。这时，例如在该电子设备100的显示单元120上显示该虚拟化图像和处于锁定主体的门禁图像，如图14c所图示的。其中，由于摄像头此时并没有对准人脸图像，所以在图14a和图14b中图不的人脸图像已不存在。
[0127]在步骤S550中，识别第二预定图像信息。
[0128]第二识别单元180可以在图像采集单元110所捕捉到的原始图像中提取关于门禁装置的特征区域，以作为第二待比较图像信息。然后，第二识别单元160将该第二待比较图像信息与在存储器(未示出)中保存的第二预定图像信息进行比对，从而确定在所捕捉的图像中是否包括第二预定图像信息。
[0129]在步骤S560中，检测用户对所述虚拟化图像的操作。
[0130]在步骤S570中，判断所述操作是否满足第一预定条件，并获得第一判断结果。
[0131]在步骤S580中，当所述第一判断结果表明所述操作满足所述第一预定条件时，进一步判断所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系是否满足第二预定条件，并获得第二判断结果。
[0132]在步骤S590中，当所述第二判断结果表明所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系满足所述第二预定条件时，执行一操作指令。
[0133]在步骤S560到步骤S590中，当检测单元130检测出用户对于该卡通猫全身像的交互操作是将该卡通猫的手部向显示在门禁装置上的锁具移动(如图1ld所图示的)时，并且如果第一判断单元140判断出在存储器中存在该交互操作，则它生成指示出该交互操作满足第一预定条件的第一判断结果。然后，检测单元130继续检测到用户在将该卡通猫的手部向锁具区域移动、并且最终将该卡通猫的手部移动并释放在锁具区域上(如图He所图示的)之后，将该新的检测结果进一步发送到第二判断单元170。如果第二判断单元170判断出该位置关系对应于将门禁装置从锁定状态中改变到开启操作状态，则它生成指示出该交互操作满足与对门禁装置执行开锁操作对应的第二预定条件的第二判断结果。最终，执行单元150获取执行该开锁操作的相应操作指令，并且使得用户可以开启由该门禁装置控制的大门，如图14e所图示的。
[0134]由此可见，采用根据本发明第四实施例的信息处理方法和电子设备，可以在用户与电子设备的交互过程中，首先捕捉包括第一被拍摄主体的图像，识别所捕捉的图像是否包括与所述第一被拍摄主体对应的特征区域，当包括时，显示与该第一被拍摄主体对应的虚拟化图像，然后在显示该虚拟化图像的同时，再次捕捉包括第二被拍摄主体的图像，识别所捕捉的图像是否包括与第二被拍摄主体对应的特征区域，当包括时，并且检测用户对于该虚拟化图像的交互操作和位置条件，当该交互操作和位置条件都满足预定条件时，通过该电子设备发起用于对与第二被拍摄主体对应的其他电子设备执行操作的操作指令。因此，在本发明的第四实施例中，可以以最优的效果来实现用户在利用电子设备控制其他电子设备的过程中的互动性和趣味性。
[0135]通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助于软件加必需的硬件平台的方式来实现，当然也可以全部通过软件、或硬件来实施。基于这样的理解，本发明的技术方案对【背景技术】做出贡献的全部或者部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如R0M/RAM、磁盘、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
[0136]在上面详细描述了本发明的各个实施例。然而，本领域技术人员应该理解，在不脱离本发明的原理和精神的情况下，可对这些实施例进行各种修改，组合或子组合，并且这样的修改应落入本发明的范围内。
【权利要求】
1.一种信息处理方法，应用于电子设备，所述电子设备至少具有显示单元和图像采集单元，其特征在于，所述方法包括: 利用所述图像采集单元捕捉图像； 当所捕捉的图像包括第一预定图像信息时，在所述显示单元上显示与所述第一预定图像信息对应的虚拟化图像； 检测用户对所述虚拟化图像的操作； 判断所述操作是否满足第一预定条件，并获得第一判断结果；以及 当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。
2.根据权利要求1的方法，其特征在于，在执行一操作指令的步骤之前，所述方法还包括: 判断所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系是否满足第二预定条件，并获得第二判断结果；以及 当所述第二判断结果表明所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系满足所述第二预定条件时，执行所述操作指令。
3.根据权利要求1或2的方法，其特征在于， 当所捕捉的图像包括第一预定图像信息时、在所述显示单元上显示与所述第一预定图像信息对应的虚拟化图像的步骤包括: 当所捕捉的图像包括第一预定图像信息和第二预定图像信息时，在所述显示单元上显示与所述第一预定图像信息对应`的虚拟化图像，其中所述第一预定图像信息对应于第一被拍摄主体，所述第二预定图像信息对应于第二被拍摄主体，并且执行一操作指令的步骤包括: 执行与所述第二被拍摄主体相关联的操作指令。
4.根据权利要求3的方法，其特征在于，所述第一预定条件取决于所述第二图像信息而不同。
5.根据权利要求1的方法，其特征在于，检测用户对所述虚拟化图像的操作的步骤包括: 在保持在所述显示单元上显示所述虚拟化图像的同时，再次利用所述图像采集单元捕捉图像；以及当所捕捉的图像包括第二预定图像信息时，检测用户对所述虚拟化图像的操作，其中所述第一预定图像信息对应于第一被拍摄主体，所述第二预定图像信息对应于第二被拍摄主体，并且 执行一操作指令的步骤包括: 执行与所述第二被拍摄主体相关联的操作指令。
6.根据权利要求1的方法，其特征在于，所述虚拟化图像是三维图像。
7.—种电子设备,其特征在于,所述电子设备包括: 图像采集单元，用于捕捉图像； 显示单元，当所捕捉的图像包括第一预定图像信息时，显示与所述第一预定图像信息对应的虚拟化图像； 检测单元，用于检测用户对所述虚拟化图像的操作； 第一判断单元，用于判断所述操作是否满足第一预定条件，并获得第一判断结果；以及执行单元，用于当所述第一判断结果表明所述操作满足所述第一预定条件时，执行一操作指令。
8.根据权利要求7的电子设备，其特征在于，所述电子设备还包括: 第二判断单元，用于在所述执行单元执行所述操作指令之前，进一步判断所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系是否满足第二预定条件，并获得第二判断结果，并且 当所述第二判断结果表明所述虚拟化图像的至少部分与所述捕捉的图像的至少部分的位置关系满足所述第二预定条件时，所述执行单元执行所述操作指令。
9.根据权利要求7或8的电子设备，其特征在于， 当所捕捉的图像包括第一预定图像信息和第二预定图像信息时，所述显示单元显示与所述第一预定图像信息对应的虚拟化图像，其中所述第一预定图像信息对应于第一被拍摄主体，所述第二预定图像信息对应于第二被拍摄主体，并且 所述执行单元执行与所述第二被拍摄主体相关联的操作指令。
10.根据权利要求9的电子设备，其特征在于，所述第一预定条件取决于所述第二图像信息而不同。
11.根据权利要求7的电子设备，其特征在于， 在所述显示单元保持显示所述虚拟化图像的同时，所述图像采集单元再次捕捉图像， 当所捕捉的图像包括第二预定图像信息时，所述检测单元检测用户对所述虚拟化图像的操作，其中所述第一预定图 像信息对应于第一被拍摄主体，所述第二预定图像信息对应于第二被拍摄主体，并且 所述执行单元执行与所述第二被拍摄主体相关联的操作指令。
12.根据权利要求7的电子设备，其特征在于，所述虚拟化图像是三维图像。
【文档编号】G06F3/01GK103513753SQ201210206764
【公开日】2014年1月15日 申请日期:2012年6月18日 优先权日:2012年6月18日
【发明者】吴承虎 申请人:联想(北京)有限公司