单元420提取使用者的连续多个手部影像(步骤S503)。之后，处理单元440利用整合模块432整合使用者界面与所述各手部影像，以产生多个整合影像，再利用显示模块431将所述各整合影像在屏幕410上显示(步骤S505)。步骤S501、步骤S503以及步骤S505类似于步骤S201、步骤S03以及步骤S205，请参照前述段落的相关说明，在此不再赘述。
[0057]处理单元440将利用检测模块433通过收发单元425检测使用者的手势(步骤S507)。在本实施例中，检测模块443可通过收发单元425发送以及反射的红外线来检测并且定位上述手势。换言之，检测模块443可利用收发单元425检测手势的移动轨迹以及手势在真实空间中的位置。
[0058]必须说明的是，在其它实施例中，处理单元440也可以先执行步骤S507，以利用检测模块433检测出使用者的手势后，再执行步骤S503以及步骤S505，以将产生的整合影像显示在屏幕410上，本发明不在此设限。
[0059]之后，处理单元450将利用映射模块434取得所述各手部影像中上述手势相对于使用者界面上的位置，以产生多个检测位置(步骤S509)。具体地，上述手势在真实空间中的位置与使用者界面的画面存在着位置的映射关系。处理单元440在步骤S507取得上述手势在真实空间中的位置后，将会利用上述映射关系取得相对于使用者界面上的位置，也就是前述的「检测位置」。
[0060]在一实施例中，上述手势与使用者界面的画面的映射关系可以预先以一查找表的形式预存在电子装置400的储存单元430，以在此将此查找表定义为「第二查找表」。查找表的输入索引为各所述手势的真实座标(actual coordinates)，查找表的输出为使用者界面的座标(例如:像素座标)。据此，映射模块434可将上述手势的真实座标输入至第二查找表，以取得使用者界面上的检测位置。
[0061]接着，处理单元450将利用输入模块435在检测位置上产生对应于上述手势的输入信号，用以操作使用者界面(步骤S511)。步骤S511类似于步骤S211，请参照前述段落的相关说明，在此不再赘述。
[0062]类似于图3的使用情景，在一实施例中，电子装置400的显示模块410同样可以显示包括虚拟键盘或是虚拟鼠标。在此的检测模块433可检测使用者的手势为键盘敲击手势，并且直接定位键盘敲击手势的真实座标。处理单元440可利用映射模块434取得键盘敲击手势的真实位置相对于虚拟键盘32的按键位置。输入模块435可在各所述按键位置产生输入信号，从而操作使用者界面上的虚拟键盘。
[0063]综上所述，本发明的电子装置可提供使用者在电子装置以外的位置来对使用者界面进行虚拟输入操作，其通过识别使用者的手势及其位置，将手势位置映射到使用者界面的相对位置，进而在所述相对位置产生对应的输入信号。因此，使用者在电子装置以外的位置的手势操作可对应地在使用者界面产生输入信号，从而操作使用者界面。此外，本发明的电子装置更整合使用者界面以及手部影像从而让使用者可在屏幕画面上看到手部以及使用者界面上的物件的相对关系。据此，使用者可在不携带实体键盘或鼠标等输入装置的情况下，达到接近利用实体输入装置来操作电子装置的效果，并且提供使用者更直觉性的操作。
[0064]虽然本发明已以实施例揭露如上，然其并非用以限定本发明，任何所属技术领域中具有通常知识者，在不脱离本发明的精神和范围内，当可作些许的更动与润饰，故本发明的保护范围以权利要求书的保护范围所界定者为准。
【主权项】
1.一种电子装置，其特征在于，包括: 一屏幕； 一影像提取单元，设置于该电子装置的背面，用以提取一使用者的连续多个手部影像； 一储存单元，记录多个模块； 以及一或多个处理单元，耦接该屏幕、该影像提取单元以及该储存单元，以存取并执行该储存单元中记录的所述模块，所述模块包括: 一显示模块，在该屏幕上显示一使用者界面； 一整合模块，整合该使用者界面与所述各手部影像，以产生多个整合影像，其中该显示模块在该屏幕上显示所述各整合影像； 一识别模块，根据所述各手部影像，识别该使用者的一手势； 一映射模块，取得各所述手部影像中该手势相对于该使用者界面的位置，以产生多个检测位置； 以及一输入模块，根据该使用者界面上的所述检测位置产生对应于该手势的一输入信号，操作该使用者界面。2.如权利要求1所述的电子装置，其特征在于，该储存单元包括多个手势模板影像，该识别模块根据所述手部影像中手部的位置以及移动轨迹，对比所述手部影像与所述手势模板影像，识别该手势。3.如权利要求2所述的电子装置，其特征在于，该储存单元包括一第一查找表，其中该第一查找表的输入索引为所述各手部影像的座标，该第一查找表的输出为该使用者界面的座标。4.如权利要求3所述的电子装置,其特征在于,该映射模块在该第一查找表中输入该手势在所述各手部影像的座标，以取得该使用者界面上的所述检测位置。5.如权利要求1所述的电子装置，其特征在于，该使用者界面包括一虚拟键盘，该识别模块根据各所述手部影像，识别该使用者的该手势为一键盘敲击手势，该映射模块取得所述各手部影像中该键盘敲击手势相对于该虚拟键盘的一按键位置，而根据该输入模块在该虚拟键盘的该按键位置产生的该输入信号，操作该虚拟键盘。6.一种电子装置，其特征在于，包括: 一屏眷; 一影像提取单元，设置于该电子装置的背面，以提取一使用者的连续多个手部影像； 一收发单元，设置于该电子装置的背面，并且具有一发送器以及一接收器； 一储存单元，记录多个模块；以及 一或多个处理单元，耦接该屏幕、该影像提取单元、该收发单元以及该储存单元，以存取并执行该储存单元中记录的所述模块，所述模块包括: 一显示模块，在该屏幕上显示一使用者界面； 一整合模块，整合该使用者界面与所述各手部影像，以产生多个整合影像，其中该显示模块在该屏幕上显示所述各整合影像； 一检测模块，利用该收发单元，以检测该使用者的一手势，其中该手势对应于该影像提取单元所提取的所述各手部影像； 一映射模块，取得该手势相对于该使用者界面上的位置，以产生多个检测位置； 以及一输入模块，根据在该使用者界面上的所述检测位置产生对应于该手势的一输入信号，操作该使用者界面。7.如权利要求6所述的电子装置，其特征在于，该检测模块利用该收发单元，检测该手势的移动轨迹以及该手势在一真实空间中的位置。8.如权利要求7所述的电子装置，其特征在于，该储存单元包括一第二查找表，其中该第二查找表的输入索引为该手势的在该真实空间中的座标，该第二查找表的输出为该使用者界面的座标。9.如权利要求8所述的电子装置，其特征在于，该映射模块在该第二查找表中输入该手势在该真实空间中的座标，以取得该使用者界面的所述检测位置。10.如权利要求6所述的电子装置，其特征在于，该使用者界面包括一虚拟键盘，该识别模块根据各所述手部影像，识别该使用者的该手势为一键盘敲击手势，该映射模块取得该键盘敲击手势相对于该虚拟键盘的一按键位置，而该输入模块根据产生在该虚拟键盘的该按键位置的该输入信号，操作该虚拟键盘。
【专利摘要】一种电子装置包括屏幕、影像提取单元、储存单元及处理单元，其中影像提取单元设置于电子装置的背面，处理单元耦接屏幕、影像提取单元及储存单元。储存单元记录多个模块，处理单元存取并执行所述模块，以进行下列步骤：将使用者界面显示在屏幕上；整合使用者界面与影像提取单元所提取的所述手部影像，以产生多个整合影像，并且将所述整合影像显示在屏幕上；根据所述手部影像，识别使用者的手势，并且取得上述手势相对于使用者界面的位置，以产生多个检测位置；以及根据在使用者界面上的检测位置产生对应于上述手势的输入信号，从而操作使用者界面。
【IPC分类】G06F3/01, G06F3/0487
【公开号】CN104978016
【申请号】CN201410148224
【发明人】林修本
【申请人】宏碁股份有限公司
【公开日】2015年10月14日
【申请日】2014年4月14日