远程控制设备、远程控制方法和远程控制系统与流程

文档序号:16160057发布日期:2018-12-05 19:21阅读:427来源:国知局
远程控制设备、远程控制方法和远程控制系统与流程

本发明涉及远程控制设备、远程控制方法和远程控制系统。



背景技术:

近来,直接穿戴在用户身体上并且便于携带的诸如智能手表或智能眼镜等可穿戴设备,以及诸如由用户的手直接抓握以供使用的终端的设备,正在受到关注。

由于可穿戴设备携带方便,所以可穿戴设备作为未来可代替典型蜂窝电话的下一代设备而变得越来越流行。

然而,用于控制可穿戴设备的大多数用户输入当前依赖于按钮或触摸屏。

然而,可穿戴设备穿戴在诸如用户的身体、颈部、头部、手腕等的人体的一部分上,使得当直接应用检测触摸位置的现有触摸面板时,难以执行输入操作,并且可穿戴设备的优点可能劣化。

因此,可穿戴设备需要能够提供适合于可穿戴设备的特性的界面的传感器,该传感器与现有的仅识别触摸位置的触摸传感器不同。

同时,由于可穿戴设备穿戴在用户的身体上,所以用户输入可以随时随地进行。

通过使用可穿戴设备来远程控制外部设备的远程控制方法正在受到关注。

然而,目前,使用可穿戴设备的远程控制方法仅提供不反映外部设备和可穿戴设备的特性的界面。



技术实现要素:

技术问题

为了解决上述问题,实施例提供了能够使用可穿戴设备有效地控制外部设备的远程控制设备、远程控制方法和远程控制系统。

技术方案

根据实施例,一种为用于根据用户的输入远程控制外部设备的手表式可穿戴远程控制设备的远程控制设备,包括:无线通信单元,其用于将远程执行信号传输到外部设备以控制所述外部设备;手势传感器,其用于感测用户的手势;运动传感器,其用于感测用户的运动;以及控制单元,其用于根据感测到的用户的手势确定控制模式,并且在所确定的控制模式下根据感测到的用户的运动生成远程执行信号。

在这种情况下,手势可以表示在穿戴所述远程控制设备时可维持的身体动作,并且所述手势传感器可以感测至少两种不同的手势。

另外,所述手势传感器可以感测合上拳头的身体动作、打开拳头的身体动作以及展开至少一个手指的身体动作。

另外,所述手势传感器可以根据用户的手势,通过电容的变化来感测与所述远程控制设备进行接触的区域的变化。

另外,所述运动传感器可以包括加速度传感器、陀螺仪传感器和地磁传感器中的至少两个,并且所述运动传感器可以通过使用至少两个模块来感测互不相同的运动。

另外,所述加速度传感器可以感测当用户在预定方向上移动手腕时出现的用户的第一运动,并且所述陀螺仪传感器可以感测当用户在预定方向上倾斜手腕时出现的用户的第二运动。

另外,当所述手势传感器感测到第一手势时,所述控制单元可以在第一控制模式下根据感测到的用户的运动生成远程执行信号,并且当所述手势传感器感测到第二手势时,所述控制单元可以在第二控制模式下根据感测到的用户的运动生成远程执行信号。

另外,当在所述第一控制模式下感测到第一运动时,所述控制单元可以生成第一远程执行信号,并且当在所述第二控制模式下感测到第一运动时,所述控制单元可以生成第三远程执行信号,其中所述第一远程执行信号和所述第三远程执行信号可以控制外部设备的互不相同的功能。

在这种情况下,当在所述第一控制模式下感测到第二运动时,所述控制单元可以生成第二远程执行信号,并且当在所述第二控制模式下感测到第二运动时,所述控制单元可以生成第四远程执行信号,其中所述第一远程执行信号和所述第四远程执行信号可以控制外部设备的互不相同的功能。

另外,所述外部设备可以包括无人机。

在这种情况下,所述第一控制模式可以是当使无人机上升时的控制模式,并且所述第二控制模式可以是当使无人机下降时的控制。

另外,当感测到所述第一运动时,所述控制单元可以控制无人机的倾斜度。可以生成远程执行信号。

另外,当感测到所述第二运动时,所述控制单元可以生成用于控制无人机的加速度方向的远程执行信号。

另外,可以提供所述第一控制模式来控制无人机的运动特性,并且可以提供所述第二控制模式来控制无人机的照相机。

同时,所述外部设备可以包括智能电视。

在这种情况下,可以提供所述第一控制模式来控制智能电视的频道,并且可以提供所述第二控制模式来控制智能电视的声音。

另外,所述无线通信单元可以包括短程通信模块,所述短程通信模块用于通过蓝牙通信方案将远程执行信号直接传输到位于近距离区域内的外部设备。

另外,所述远程控制设备还可以包括输出单元,所述输出单元用于输出手势感测状态和运动感测状态。

另外,根据实施例,一种使用手表式远程控制设备来远程控制外部设备的远程控制方法,包括:启动远程控制;感测用户的手势;根据用户的手势状态确定控制模式;在所确定的控制模式下感测用户的运动输入;在所确定的控制模式下根据运动输入生成远程执行信号;以及将所述远程执行信号无线传输至所述外部设备。

另外,根据实施例,一种远程控制系统,包括:远程控制设备,其为手表式可穿戴设备的,并且用于根据用户的手势确定控制模式,根据在所确定的控制模式下输入的运动生成远程执行信号,并无线传输所述远程执行信号;以及外部设备,其从所述远程控制设备接收所述远程执行信号并根据接收到的远程执行信号而被控制。

有益效果

根据实施例,远程控制设备、远程控制方法和远程控制系统可以提供用户界面,该用户界面可以通过手势和运动容易且直观地控制外部设备。

具体地,根据实施例的远程控制设备可以提供除了传统的触摸输入方案之外的新的输入方案。

更详细地,远程控制设备的手势传感器可以感测适合于由穿戴远程控制设备的用户输入的至少两种用户手势。

另外,手势传感器的传感器电极可以根据用户的手势,通过电容的变化来感测与带进行接触的区域的变化。

因为即使传感器电极设置在带构件中,这种电容传感器电极也可以感测手势,所以可以安全地保护手势传感器免受外部环境的影响,并且带形状可以不受设计限制。

另外,由于手势传感器感测根据用户与传感器电极之间的距离而精确变化的电容,因此手势传感器可以准确地识别用户的手势。

同时,运动传感器可以包括至少两个传感器以精确地感测至少两个用户运动。

具体地,根据实施例,远程控制设备通过区分手势和运动在至少两个阶段提供用于生成执行信号的控制模式,使得可以基于简单的手势和运动生成大量的执行信号。

另外,可以将如上所述生成的大量执行信号提供到专用于外部设备的用户界面。

换句话说,根据实施例,远程控制系统可以提供适合于待控制的外部设备的特性的直观的用户界面。

附图说明

图1是用于说明远程控制系统的视图;

图2是示出根据本发明实施例的可穿戴设备的透视图;

图3是示出根据本发明实施例的可穿戴设备的内部的框图;

图4是示出带部分以示出根据本发明实施例的手势传感器的透视图;

图5至图7是用于说明根据本发明实施例的感测第一手势的方法的视图;

图8至图10是用于说明根据本发明实施例的感测第二手势的方法的视图;

图11是用于说明根据本发明实施例的运动传感器的视图;

图12示出了根据本发明实施例的显示单元的屏幕;

图13是用于说明根据本发明实施例的使用远程控制设备远程控制外部设备的过程的流程图;

图14是示出根据本发明实施例的远程控制系统的示例的框图;

图15是用于说明根据本发明实施例的依据手势的远程控制的视图;

图16是用于说明根据本发明实施例的依据第二运动的远程控制的视图;

图17是用于说明根据本发明实施例的依据第一运动的远程控制的视图;

图18是用于说明根据本发明的另一实施例的远程控制的视图;

图19是示出根据本发明另一实施例的远程控制系统的示例的框图;

图20是用于说明根据本发明的另一实施例的依据在第一控制模式下的运动的远程控制的视图;

图21是用于说明根据本发明的另一实施例的依据在第二控制模式下的运动的远程控制的视图;

图22是表示根据本发明的又一实施例的远程控制系统的示例的框图;

图23至图26是示出根据本发明的又一实施例的执行远程控制的状态的图;

图27是示出根据本发明的又一实施例的远程控制系统的示例的框图;

图28至29是示出根据本发明的又一实施例的执行远程控制的状态的图。

具体实施方式

在下文中,将参照附图详细描述本说明书中公开的实施例,并且,不管附图标记如何,相同或相应的配置元件将被分配相同的附图标记,并且为简单起见,将省略相同的重复描述。在以下描述中使用的元件中提到的后缀“模块”和“单元(或部件)”仅为了简化本发明的描述的目的而单独或组合使用。因此,后缀本身不会用于给出区分相应术语的意义或功能。

另外,将排除对众所周知的特征或功能的详细描述,以免不必要地模糊本说明书中公开的实施例的要点。另外,本说明书中公开的实施例的特征将从附图中更清楚地理解,并且不应被附图限制。应该理解的是,除了附图之外,本公开的精神和技术范围可以涵盖所有改变、等价物和替代物。

在下文中,将参考附图详细描述本发明的实施例。图1是用于说明根据本发明实施例的远程控制系统的视图。

可穿戴设备可以总是由用户穿戴,从而当可穿戴设备用于外部设备的远程控制时可以提高用户便利性。

例如,参考图1,用户可以通过使用可穿戴设备远程控制诸如显示装置、车辆、家用电器或无人机的外部设备。

可由用户穿戴的可穿戴设备可以是穿戴在用户脖子上的颈带(neckband)型设备、穿戴在用户头部上的耳机型设备或穿戴在用户手腕上的手表型设备。

尽管在所述实施例中将上述可穿戴设备中的手表式可穿戴设备描述为远程控制设备,但是可以理解,所述实施例可以应用于上述各种类型的可穿戴设备。

图2是示出根据本发明实施例的可穿戴设备的透视图,图3是示出根据本发明实施例的可穿戴设备的内部的框图。

在下文中,将参照图2和图3更详细地描述根据实施例的远程控制设备100。

当从外面观察时,远程控制设备100可以包括主体201、带205和紧固件207。

首先,主体201可以包括形成外观的壳体。可以在主体201的壳体内部设置能够容纳各种电子元件的内部空间。在这种情况下,主体201可以被分成第一壳体和第二壳体,它们相互装配或拆卸以提供内部空间。

显示单元151可以设置在主体201的前表面上以输出信息。另外,触摸传感器可以设置在显示单元151上以实现触摸屏。

触摸屏可以具有圆形形状,但是不限于此,并且可以具有椭圆形或矩形形状。根据所述实施例的触摸屏的形状可以是能够在视觉上给予用户优异的图像并帮助用户操作触摸屏的任何形状。

带205可以连接到主体201。带205可以穿戴在手腕上,使得带205围绕手腕。

另外,带205可以由柔性材料形成以便容易穿戴。例如,带205可以由皮革、橡胶、硅树脂、合成树脂等形成。

此外,带205可以具有用于穿戴的紧固件207。紧固件207可以被实现为带扣、卡扣钩(snap-fit hook)结构或Velcro尼龙搭扣(商标),并且可以包括可伸展部分或材料。在所述实施例中,提出了将紧固件207实施为带扣的示例。

同时,远程控制设备100的显示单元151被实施为触摸屏,使得显示单元141可以显示由远程控制设备100驱动的应用程序的执行屏幕信息(execution screen information)或根据执行屏幕信息的用户界面(UI)或图形用户界面(GUI)上的信息。在这种情况下,用户可以通过在UI或GUI上执行触摸输入来控制远程控制设备100。

由于穿戴在手腕上的设备的特性,远程控制设备100被限制在显示单元151的尺寸中。通常,显示单元151较小,使得显示单元151上显示的UI和GUI也较小。

因此,当用户用手指触摸显示单元151时,手指覆盖显示单元151的大部分。因此,用户可能错误地触摸非期望的UI或GUI,或者可能在触摸小的UI或GUI时遇到麻烦。

如上所述,在远程控制设备100中,使用传统的触摸输入方案来控制该设备存在很大的不便。因此,需要新的输入方案代替传统的触摸输入方案。

远程控制设备100包括无线通信单元110、输入单元120、传感器单元140、输出单元150、接口单元160、存储器170、控制单元180、电源单元190等。图3中所示的组件对于实现远程控制设备100而言不是必需的,使得本文中描述的远程控制设备100可以具有比以上列出的组件更多或更少的组件。

首先,在这些组件中,无线通信单元110可以包括一个或多个模块,该一个或多个模块使在远程控制设备100和无线通信系统之间以及在远程控制设备100和外部设备之间的无线通信可以进行。另外,无线通信单元110可以包括一个或多个模块,该一个或多个模块用于将远程控制设备100连接到一个或多个网络。

无线通信单元110可以将关于通过远程控制设备100感测到的用户的各种手势和运动输入的数据传输到外部设备。另外,无线通信单元110可以接收外部设备对传输的数据的反馈,并将反馈传输到控制单元180。

无线通信单元110可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一个。

更详细地,移动通信模块112可以与根据技术标准或用于移动通信的通信方案(例如,全球移动通信系统(GSM)、码分多址(CDMA)、码分多址2000(CDMA2000)、增强的语音数据优化或仅增强的语音数据(EV-DO)(enhanced voice-data optimized or enhanced voice-data only)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等)建立的移动通信网络上的基站、外部终端和服务器中的至少一个收发无线信号。

无线信号可以包括外部设备远程控制信号、语音信号、视频呼叫信号或与收发文本/多媒体消息相关联的各种类型的数据。

无线互联网模块113是指用于无线互联网接入的模块,并且可以容纳在远程控制设备100中或者设置在远程控制设备100的外部。无线互联网模块113被配置为根据无线互联网技术收发通信网络中的无线信号。

存在下述技术作为无线互联网技术:例如,有无线LAN(WLAN)、无线保真(Wi-Fi)、直接无线保真(Wi-Fi)(Wireless Fidelity(Wi-Fi)direct)、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行分组接入(HSDPA)、高速上行分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A)等。无线互联网模块113根据包括以上未列出的互联网技术的范围中的至少一种无线互联网技术来收发数据。考虑到WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等的无线互联网接入通过移动通信网络实现,用于通过移动通信网络进行无线互联网接入的无线互联网模块113可以被理解为一种移动通信模块112。

特别地,短程通信模块114用于短程通信,并且蓝牙TM、射频识别(RFID)、红外数据协议(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、直接Wi-Fi和无线通用串行总线(无线USB)技术中的至少一种可用于支持短程通信。短程通信模块114可以支持远程控制设备100与外部设备之间、远程控制设备100与无线通信系统之间、远程控制设备100与其他远程控制设备之间或者远程控制设备100与通过无线区域网络定位移动终端(或外部服务器)的网络之间的无线通信。短程无线通信网络可以是短程无线个人区域网络。

短程通信模块114可以检测(或识别)在远程控制设备100周围的能够被控制的其他外部设备。

在所述实施例中,描述了控制单元180使用短程通信模块114来控制外部设备,但是本发明不限于此。例如,控制单元180可以通过经由短程通信模块114经蓝牙通信方案直接向近距离区域内的外部设备传输远程控制信号来远程控制外部设备。当使用短程通信模块114时,因为短程通信模块114不通过中继网络,所以在高安全性和高响应速度方面对于远程控制可能是有利的。

输入单元120可以包括照相机121或用于输入图像信号的图像输入单元、麦克风122或用于输入音频信号的音频输入单元、用于从用户接收信息的用户输入单元123(例如,触摸键、机械键等)。通过输入单元120收集的语音数据或图像数据可以通过用户的控制命令来分析和处理。

传感器单元140可以包括一个或多个传感器,该一个或多个传感器用于感测远程控制设备100的信息、远程控制设备100的周围环境信息以及用户输入中的至少一个。

在实施例中,传感器单元140可以感测适合由穿戴远程控制设备100的用户输入的至少两个用户输入。

详细地,传感器单元140可以包括用于感测用户输入的手势传感器130、运动传感器141以及用于感测环境信息的其他传感器142中的至少两个。

首先,手势传感器130可以感测用户的手势输入。在这种情况下,用户的手势指的是在用户穿戴远程控制设备100的状态下用户所采取的身体动作。此时,除了简单的单一运动之外,身体动作可以是可维持的。

例如,在手表式远程控制设备100中,手势可以包括合上拳头的身体动作、打开拳头的身体动作以及展开至少一个手指的身体动作。

在实施例中,手势传感器130可以位于远程控制设备100的带205中以感测用户的手势。

图4是示出根据本发明实施例的带205的一部分以示出手势传感器130的透视图,图5至图7是示出根据本发明实施例的感测第一手势的方法的视图,图8至图10是示出根据本发明实施例的感测第二手势的方法的视图。

在下文中,将参照图4至图10更详细地描述手势传感器130。

参照图4,手势传感器130可以包括包含至少一个电极图案的传感器电极131、连接到传感器电极131的传感器接线电极133以及用于将接线电极连接到控制单元180的印刷电路板135。

根据所述实施例的传感器电极131可以通过测量当用户采取手势时用户的与带205接触的穿戴区域的面积来感测用户的手势。

详细地,传感器电极131可以根据用户的手势,通过电容的变化来感测与带205形成接触区域的区域的变化。例如,可以通过电容的变化来检测用户的穿戴区域与设置在带205中的传感器电极131之间的距离根据手势的变化。

即使穿戴区域和传感器电极131以一定距离或更多距离彼此间隔开,电容的这种变化也允许感测用户的手势。因此,即使传感器电极131设置在带205的环绕构件中,传感器电极131也可以感测到手势,从而可以安全地保护手势传感器免受外部环境的影响,并且带205的形状可以不受设计限制。

另外,由于手势传感器130感测到根据用户与传感器电极131之间的距离精确变化的电容,所以手势传感器130可以准确地识别用户的手势。

与实施例不同,手势传感器130可以通过使用由于根据用户的手势的信号的变化而引起的由骨骼肌产生的肌电信号(EMG)来感测手势。然而,当使用EMG信号时,用于识别EMG信号的传感器电极131必须暴露于远程控制设备100的外部,这可能限制设计并且可能容易受到外部环境的影响。

返回参考所述实施例,如图4所示,手势传感器130可以包括:包括至少一个电极图案的传感器电极131;连接到传感器电极131的传感器接线电极133;以及用于将接线电极133连接到控制单元180的印刷电路板135。

详细地,传感器电极131可以包括至少一个电极图案。

例如,可以布置多个电极图案131-1、131-2、131-3、131-4、131-5和131-6。详细地,电极图案131-1、131-2、131-3、131-4、131-5和131-6是条形图案,并且可以在左右重复布置的同时以预定距离彼此间隔开以便在带205内彼此不接触。更详细地,电极图案131-1、131-2、131-3、131-4、131-5和131-6是具有较长的纵向长度的条形图案,并且所述条形图案可以在横向上以相等的间隔彼此间隔开。在所述实施例中,尽管电极图案131-1、131-2、131-3、131-4、131-5和131-6在图中被示出为条形,但是实施例不限于此。换句话说,当用户穿戴形成为带205的传感器时,传感器电极131可以具有可以感测传感器电极131是否与用户的身体的一部分接触的各种形状。

另外,传感器电极131的电极图案131-1、131-2、131-3、131-4、131-5和131-6可以在横向方向上对称地布置。详细地,当电极图案131-1、131-2、131-3、131-4、131-5和131-6的数量是偶数时,左侧的电极图案131-1、131-2和131-3的数量以及右侧的电极图案131-4、131-5和131-6的数量可以关于作为带205的中心的基准线相同,而电极图案131-1、131-2、131-3、131-4、131-5和131-6可以关于基准线在横向方向上对称地布置。或者,当电极图案的数量是奇数时,电极图案可以布置在基准线处,并且多个电极图案可以关于基准线在横向方向上对称地布置。

在电极图案131-1、131-2、131-3、131-4、131-5和131-6中,当输入预定手势时,测量由于用户的穿戴区域与电极图案131-1、131-2、131-3、131-4、131-5和131-6之间的距离变化而导致的电容的变化,从而可以准确地感测用户的手势输入。

参照图5至图7,当用户如图5所示合上拳头时,手腕的肌肉部分地收缩,使得手腕的一部分可以脱离带205。因此,如图6所示,第三电极图案至第五电极图案131-3、131-4和131-5可以与手腕分开。相应地,如图7所示,感测到在第三电极图案至第五电极图案131-3、131-4和131-5中通过与手腕的耦合而产生的电容较小,使得合上拳头的手势可以具有特定的电容值。换句话说,用户合上拳头的手势对应于在电极图案中测量的特定的电容值,并且因此,手势传感器130可以感测用户的手势。

类似地,参照图8至图10,当用户如图8所示打开拳头时,手腕的肌肉扩张,使得与带205接触的手腕区域可以增加。详细地,参考图9,可以理解,带205与整个手腕接触。因此,参考图10,在第一电极图案至第六电极图案131-1、131-2、131-3、131-4、131-5和131-6中通过与手腕的耦合而产生的电容被感测为较大,使得打开拳头的手势可以具有特定的电容值。换句话说,用户合上拳头的姿势对应于在电极图案中测量的特定电容值,并且因此,手势传感器130可以感测用户的手势。

在以上描述中,虽然已经将合上和打开拳头的动作描述为手势,但手势传感器可以识别其他各种手势。例如,手势传感器可以识别用户执行的合上拳头和展开拇指的动作、展开食指的动作、展开中指的动作、展开无名指的动作以及展开小指的动作中的至少两种。

换句话说,手势传感器130可以识别当用户采取手势时穿戴区域和带205之间的距离变化的各种手势。

因此,用户可以通过手指的运动容易地向配置为带205的传感器输入信号,使得可以提供用于手表式远程控制设备100的优化的界面。

传感器电极131可以通过使用自电容方案或互电容方案而根据与用户的穿戴区域的接触程度以及穿戴区域和传感器电极131之间的距离来感测电容的变化。

例如,传感器电极131可以通过自电容方案感测用户的手势。由于自电容方案具有优异的感测灵敏度并且允许近距感测,因此即使穿戴区域与传感器电极131之间的距离大,也可以准确地感测用户的手势。

传感器电极131可以包括诸如氧化铟锡、氧化铟锌、氧化铜、氧化锡、氧化锌或氧化钛的金属氧化物。传感器电极131可以包括纳米线、光敏纳米线膜、碳纳米管(CNT)、石墨烯、导电聚合物或它们的混合物。

当使用诸如纳米线或碳纳米管(CNT)的纳米复合材料时,颜色可以是黑色的,并且可以在通过控制纳米粉末的含量来确保导电性的同时控制颜色和反射率。

另外,传感器电极131可以包括流过电流的具有高导电率的材料。例如,传感器电极131可以包括铬(Cr)、镍(Ni)、铜(Cu)、铝(Al)、银(Ag)、钼(Mo)中的至少一种金属以及它们的合金。在这种情况下,传感器电极131可以是不透明的。

同时,在手势传感器130中,可以设置用于电连接传感器电极131的传感器接线电极133。

可以设置多个传感器接线电极133。换句话说,传感器接线电极133可以包括连接到传感器电极131的一端的第一传感器接线电极133-1和连接到传感器电极131的另一端的第二传感器接线电极133-2。

传感器接线电极133将通过传感器电极131感测到的电容值传输到印刷电路板135,并且印刷电路板135可以连接到控制单元180。

控制器180可以根据由传感器电极131测量的电容值来感测用户的手势。

接下来,传感器单元还可以包括用于感测用户的运动的运动传感器141。

运动传感器141可以包括用于以不同方式感测用户的运动的至少两个传感器,从而可以感测用户的至少两个运动。

图11是用于说明根据本发明实施例的运动传感器141的视图。

详细地,参考图11,运动传感器141可以包括加速度传感器、陀螺仪传感器和地磁传感器。

首先,如图11(a)所示,加速度传感器可以测量当远程控制设备100在空间中沿特定方向移动时出现的加速度的量。例如,加速度传感器可以感测用户向上、向下、向左、向右、向前和向后方向移动手腕的第一运动。

如图11(b)所示,陀螺仪传感器可以测量远程控制设备100在水平面上的倾斜程度。例如,陀螺仪传感器可以感测用户在各个方向上倾斜远程控制设备100的第二运动。

在这种情况下,如图11(c)中所示的地磁传感器可以补偿加速度传感器和陀螺仪传感器的运动感测。

换句话说,传感器单元的运动传感器141可以以各种方式感测由穿戴远程控制设备100的用户采取的各种运动。

另外,传感器单元的其他传感器142可以包括接近传感器、照度传感器、触摸传感器、磁传感器、RGB传感器、红外传感器(IR传感器)、手指扫描传感器、超声波传感器、光学传感器、电池量表、环境传感器(例如,气压计、湿度计、温度计、辐射探测传感器、热量检测传感器、气体检测传感器等)以及化学传感器(例如,电子鼻、医疗传感器、生物传感器等)中的至少一种。同时,本文中公开的远程控制设备100可以通过组合由上述传感器中的至少两个传感器感测到的信息来进一步提高感测手势或感测运动的精确程度。

输出单元150用于生成与视觉、听觉或触觉相关的输出,并且可以包括显示单元151、声音输出单元152、触觉模块153和光输出单元154中的至少一个。显示单元151可以与触摸传感器一起被配置为层结构以实现触摸屏,或者可以与触摸传感器一体地形成以实现触摸屏。这样的触摸屏可以用作在远程控制设备100和用户之间提供输入界面的用户输入单元123,并且可以同时提供远程控制设备100和用户之间的输出界面。

图12示出了根据本发明实施例的显示单元151的屏幕。

用户可以通过输出单元识别手势感测状态和运动感测状态。详细地,如图12所示,当手势或动作被输入时,输出单元可以提供触觉、声音或显示输出。

接口单元160用作到连接到远程控制设备100的各种外部设备的通道。接口单元160可以包括有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、用于连接配备有识别模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口和耳机端口中的至少一种。在远程控制设备100中,即使外部设备通过接口单元160直接连接,也可以执行适当的控制。

另外,存储器170存储支持远程控制设备100的各种功能的数据。存储器170可以存储通过远程控制设备100驱动的多个应用程序、用于远程控制设备100的操作的数据以及指令。这些应用程序中的至少一部分可以通过无线通信从外部服务器下载。另外,这些应用程序中的至少一部分可以从发布时起就存在于远程控制设备100中,以提供远程控制设备100的基本功能。同时,应用程序可以存储在存储器170中,安装在远程控制设备100上,并且通过控制单元180驱动以执行远程控制设备100的操作(或功能)。

除了与应用程序有关的操作之外,控制单元180通常控制远程控制设备100的整体操作。控制单元180可以处理通过上述组件输入或输出的信号、数据、信息等,或者可以驱动存储在存储器170中的应用程序以向用户提供或处理适当的信息或功能。

另外,为了驱动存储在存储器170中的应用程序,可以控制参照图1讨论的组件中的至少一部分。此外,控制单元180可以结合包括在远程控制设备100中的组件中的至少两个来操作以驱动应用程序。

在控制单元180的控制下,电源单元190接收外部电力和内部电力以将电力提供给包括在远程控制设备100中的组件。电源单元190可以包括电池,并且电池可以是内置电池或可更换电池。

根据下面将描述的各种实施例,组件中的至少一部分可以彼此协同操作以实现远程控制设备100的操作、控制或控制方法。另外,远程控制设备100的操作、控制或控制方法可以通过驱动存储在存储器170中的至少一个应用程序在远程控制设备100上实现。

在下文中,将详细描述通过上述远程控制设备100实现的远程控制方法。

图13是用于说明根据本发明实施例的提供远程控制接口的方法的视图。

参考图13,控制单元180可以从手势传感器130感测用户的手势输入(S101)。

详细地,当远程控制设备100被激活并且用户采取特定手势时,手势传感器130可以根据特定手势测量电容变化值,并且可以将测量值传输到控制单元180。

在这种情况下,用户的手势可以表示可维持的身体动作。

例如,当用户进行合上拳头的第一手势时,在第一手势下由传感器电极131产生的电容值可以被传输到控制单元180。或者,当用户采取打开拳头的第二手势时,在第二手势下由传感器电极131产生的电容值可以被传输到控制单元180。

然后,控制单元180可以通过从手势传感器130传输的电容值来确定用户采取的手势的状态(S103)。

详细地,控制单元180将从手势传感器130传输的电容值与存储在存储器中的根据特定手势的电容值进行比较,以计算与传输的电容值相对应的手势,由此确定手势。

更详细地,根据特定手势的电容值作为简档存储在存储器中,并且控制单元180可以通过将感测的电容值与存储器的简档值(profile value)进行比较来检测最接近的简档,并且确定用户已经输入了与检测到的简档相对应的手势。

在这种情况下,控制单元180可以根据用户的手势输入连续地将电容值更新至存储器的简档,以提高手势确定的准确性。

控制单元180可根据手势输入状态生成远程执行信号。换句话说,控制单元180可以提供用于生成与手势输入相匹配的远程执行信号的远程控制界面,并且将远程执行信号传输到外部设备。

另外,控制单元180可根据手势输入状态提供不同的控制模式。换句话说,根据手势输入的远程执行信号可以是控制模式选择执行信号。

更详细地,控制单元180可以在用户所采取的手势中提供不同的控制模式,并且可以在不同的控制模式下接收来自用户的另外的输入以生成控制信号。更具体地,可以根据控制模式来改变由控制单元180生成的与用户的输入相匹配的执行信号。

例如,用户的运动可以根据控制模式产生不同的执行信号。

当控制单元180感测到第一手势时,控制单元180可以进入第一控制模式(S105)。

详细地,当感测到第一手势时,控制单元180可以根据用户在第一控制模式下的运动来生成执行输入。

例如,当控制单元180感测到合上拳头的手势时,可以在第一控制模式下生成根据用户的输入的执行信号。

详细地,控制单元180可以在进入第一控制模式之后感测用户的运动输入(S107)。

例如,控制单元180可以通过运动传感器141感测当在用户合上拳头的手势输入状态下用户通过伸展或拉动拳头而在向上、向下、向左、向右、向前和向后方向移动远程控制设备100时出现的第一运动。

另外,控制单元180可以通过运动传感器141感测当在用户合上拳头的手势输入状态下用户倾斜手腕以改变远程控制设备10的倾斜度时出现的第二运动。

同时,控制单元180可以分别从手势输入和运动输入生成远程执行信号。在这种情况下,无论控制模式如何,运动输入都可以生成匹配的远程执行信号。

另外,控制单元180可以在第一控制模式下根据运动输入来生成远程执行信号(S109)。

详细地,当在第一控制模式下感测到第一运动时,控制单元180可以生成第一远程执行信号。

另外,当在第一控制模式下感测到第二运动时,控制单元180可以生成第二远程执行信号。

另外,第一远程执行信号和第二远程执行信号可以控制外部设备的不同功能。

另外,由此生成的远程执行信号可以通过通信单元被传输到外部设备(S117)。

详细地,控制单元180生成远程执行信号,并通过通信单元将生成的信号传输到外部设备,以便远程控制外部设备。例如,控制单元180可以通过蓝牙通信方案中的短程通信模块将产生的远程执行信号传输到外部设备。

在这种情况下,控制单元180可以通过通信单元接收根据来自外部设备的执行输入的反馈。

这种反馈通过输出单元输出,使得用户可以识别根据手势或运动应用于外部设备的控制操作。

同时,当控制单元180感测到第二手势时,控制单元180可以进入第二控制模式(S111)。

详细地,当感测到第二手势时,控制单元180可以在第二控制模式下根据用户的输入来生成执行信号。

例如,当控制单元180感测到合上拳头的手势时,可以在第二控制模式下生成根据用户的运动输入的执行信号。

详细地,控制单元180可以在进入第二控制模式之后感测用户的运动输入(S113)。

例如,控制单元180可以通过运动传感器141感测当在用户打开拳头的手势输入状态下用户通过伸展或拉动拳头移动远程控制设备100时出现的第一运动。

另外,控制单元180可以通过运动传感器141感测当在用户合上拳头的手势输入状态下用户倾斜手腕以改变远程控制设备10的倾斜度时出现的第二运动。

另外,控制单元180可以在第二控制模式下根据运动输入来生成远程执行信号(S115)。

详细地,当在第二控制模式下感测到第一运动时,控制单元180可以生成第三远程执行信号。

另外,当在第二控制模式下感测到第二运动时,控制单元180可以生成第四远程执行信号。

另外,第一远程执行信号至第四远程执行信号可以控制外部设备的不同功能。

同时,在所述实施例中,尽管描述了控制单元180在通过手势设置控制模式之后利用运动生成执行信号,但是也可以在利用运动设置控制模式之后生成执行信号。

另外,控制单元180可以生成针对手势的执行信号,以及生成针对运动的执行信号,而不管顺序如何,使得用户可以利用运动和手势输入来生成远程控制信号。

另外,控制单元180可以通过组合手势输入和运动输入来生成远程执行信号,并且还可以生成针对手势输入的单独执行信号和针对运动输入的单独执行信号从而生成远程控制信号。

详细地,控制单元180可以有效地组合根据手势输入的执行信号、根据运动输入的执行信号以及根据手势及运动输入的执行信号来反映远程控制设备的特性,以便可以提供适合于远程控制设备的特性的用户界面。之后将描述用户界面的详细描述。

返回到实施例,由此生成的远程执行信号可以通过通信单元被传输到外部设备(S117)。

详细地,控制单元180生成远程执行信号并通过通信单元将生成的信号传输到外部设备,以便远程控制外部设备。例如,控制单元180可以通过蓝牙通信方案中的短程通信模块将生成的远程执行信号传输到外部设备。

在这种情况下,控制单元180可以通过通信单元接收根据来自外部设备的执行输入的反馈。

根据所述实施例,控制单元180通过区分手势和运动在至少两个阶段提供用于生成执行信号的控制模式,从而可以基于简单的手势和运动生成大量的执行信号。

另外,由于可以通过穿戴远程控制设备100的用户容易地输入手势和运动,并且用户可以基于手势和运动输入直观地感知操作,所以可以提供适合于可穿戴远程控制设备100的有效用户界面。

在下文中,将描述通过远程控制方法控制外部设备的具体实例。

图14是示出根据本发明实施例的远程控制系统的示例的框图。图15是用于说明根据本发明实施例的根据手势的远程控制的视图。图16是用于说明根据本发明实施例的依据第二运动的远程控制的视图。图17是用于说明根据本发明实施例的依据第一运动的远程控制的视图。图18是用于说明根据本发明的另一实施例的远程控制的视图。

首先,将参考图14至图18详细描述使用手表式远程控制设备100来控制作为外部设备的无人机的远程控制方法。

如图14所示,用于控制无人机的远程控制系统包括远程控制设备100、包括照相机11的无人机10以及能够显示由照相机11拍摄的图像的显示设备。在这种情况下,远程控制设备100也可以显示由照相机11拍摄的图像,但是在实施例中将图像显示在单独的显示设备上。

可能需要多个控制输入来控制外部设备中的无人机10。例如,可能需要用于使无人机10上升或下降的输入、用于限定无人机10的运动方向(加速度方向)的输入、用于控制无人机10的倾斜度的输入、用于控制无人机10中包括的其他设备的输入(例如,照相机11的拍摄方向)等。

根据实施例的远程控制系统可以使用可穿戴设备提供用户界面,该可穿戴设备专用于具有上述特征的无人机10。

参考图15,远程控制设备100根据用户的手势输入生成并传输用于升降无人机10的远程执行信号,以控制无人机10的垂直运动。

详细地,远程控制设备100可以通过手势传感器130感测第一手势或第二手势。

另外,远程控制设备100可以在第一手势下进入第一控制模式,其中当无人机10上升时可以提供第一控制模式。此时,远程控制设备100可以首先将根据第一控制模式的执行输入传输到无人机10。

相反,远程控制设备100可以在第二手势下进入第二控制模式,其中当无人机10下降时可以提供第二控制模式。此时,远程控制设备100可以首先将根据第二控制模式的执行输入传输给无人机10。

远程控制设备100可以根据控制模式感测运动以生成并传输远程执行信号,由此控制无人机10。

详细地,当在第一控制模式下感测到第一运动时,远程控制设备100可以生成第一远程执行信号,并且当在第一控制模式下感测到第二运动时,远程控制设备100生成第二远程执行信号。

另外,当在第二控制模式下感测到第一运动时,远程控制设备100可以生成第三远程执行信号,并且当在第二控制模式下感测到第二运动时,远程控制设备100生成第四远程执行信号。

另外,第一远程执行信号至第四远程执行信号可以控制无人机10的不同特征。

详细地,参考图16,当感测到通过在打开拳头的同时倾斜手腕来改变远程控制设备100的倾斜度的运动时,远程控制设备100可以生成用于在无人机10升高的同时控制无人机10的倾斜度的执行输入。

相反,当感测到通过在合上拳头的同时倾斜手腕来改变远程控制设备100的倾斜度的运动时,远程控制设备100可以生成用于在无人机10下降的同时控制无人机10的倾斜度的执行输入。

详细地,参照图17,当感测到通过在打开拳头的同时伸出或拉动手将远程控制设备100在特定方向上移动的运动时,远程控制设备100可以生成用于在无人机10升高的同时使无人机10加速的执行输入。

相反,当感测到通过在合上拳头的同时伸出或拉动手将远程控制设备100在特定方向上移动的运动时,远程控制设备100可以生成用于在无人机10下降的同时使无人机10加速的执行输入。

这样,根据所述实施例的远程控制设备100可以提供可以通过简单的手势和运动直观地控制无人机10的各种运动特征的用户界面。

同时,在另一实施例中,控制模式可以控制无人机10的互不相同的模块。

详细地,参照图18,当感测到第一手势状态时,远程控制设备100可以在第一控制模式下控制无人机10的运动特征。例如,当在手被打开的同时感测到各种运动时,远程控制设备100可以生成并传输用于控制无人机10的运动的执行输入。

另外,当感测到第二手势状态时,远程控制设备100可以在第二控制模式下控制无人机10的照相机11。例如,当在拳头合上的同时感测到各种运动时,远程控制设备100可以生成并传输用于控制无人机10的照相机11的拍摄方向、焦点等的执行输入。

这样,根据另一实施例的远程控制设备100可以提供可以通过简单的手势和运动直观地控制无人机10的各种模块的用户界面。

如上所述,根据上述实施例的远程控制系统即使在用户没有看着可穿戴设备时也可以输入手势和运动。因此,用户可以在观察无人机10或观看显示设备的同时通过可穿戴设备容易地控制无人机10。换句话说,根据所述实施例的远程控制系统可以提供适合于待控制的外部设备的特性的直观用户界面。

图19是示出根据本发明的另一实施例的远程控制系统的示例的框图。图20是用于说明根据本发明的另一实施例的依据在第一控制模式下的运动的远程控制的视图。图21是用于说明根据本发明的另一实施例的依据在第二控制模式下的运动的远程控制的视图。

首先,将参考图19至图21详细描述使用手表式远程控制设备100来控制作为外部设备的显示装置30(例如,智能电视30)的远程控制方法。

参照图19,用于控制智能电视30的远程控制系统包括远程控制设备100和显示装置30。

可能需要多个控制输入来控制外部设备中的智能电视30。例如,智能电视30可能需要用于改变频道的输入、用于调节声音的输入、用于控制播放视频选择的输入等。

根据另一实施例的远程控制系统可以提供使用专用于具有上述特征的智能电视30的可穿戴设备的用户界面。

参照图20和图21,远程控制设备100可以根据用户的手势输入来选择待控制的智能电视30的特性。

详细地,远程控制设备100可以通过手势传感器来感测第一手势或第二手势。

另外,远程控制设备100可以在第一手势下进入用于控制智能电视30的第一特性的第一控制模式,其中可以提供第一控制模式以选择频道。

相反,远程控制设备100可以在第二手势下进入第二控制模式,其中可以提供第二控制模式以控制智能电视30的声音。

远程控制设备100可以根据控制模式来感测运动,并且生成并传输远程执行信号以控制智能电视30。

详细地,当在第一控制模式下感测到第一运动时,远程控制设备100可以生成第一远程执行信号,并且当在第一控制模式下感测到第二运动时,远程控制设备100生成第二远程执行信号。

如图20所示,当感测到在打开手的同时向左移动手的运动时,远程控制设备100可以生成用于减少频道号的远程执行信号,并且可以将远程执行信号传输到智能电视30。

同时,当感测到在打开手的同时向右移动手的运动时,远程控制设备100可以生成用于增加频道号的远程执行信号,并且可以将远程执行信号传输到智能电视30。

另外,当在第二控制模式下感测到第一运动时,远程控制设备100可以生成第三远程执行信号,并且当在第二控制模式下感测到第二运动时,远程控制设备100生成第四远程执行信号。

参考图21,当感测到在合上手的同时向上移动手的运动时,远程控制设备100可以生成用于增大声音的远程执行信号,并且可以将远程执行信号传输到智能电视30。

相反,当感测到在合上手的同时向下移动手的运动时,远程控制设备100可以生成用于减小声音的远程执行信号,并且可以将远程执行信号传输到智能电视30。

这样,根据所述实施例的远程控制设备100可以提供可以通过简单的手势和运动来直观地控制智能电视30的各种特性的用户界面。

图22是表示根据本发明的又一实施例的远程控制系统的示例的框图。图23至图26是示出根据本发明的又一实施例的执行远程控制的状态的图。

首先,将参照图22至图26详细描述使用手表式远程控制设备100控制作为外部设备的车辆40(或车辆40中的辅助设备)的远程控制方法。

参考图22,远程控制系统包括可穿戴远程控制设备100和车辆40。

可能需要多个控制输入来控制外部设备中的车辆40。例如,需要用于驱动车辆40的驱动操作输入、用于操作车辆40的其他设备的输入等。

根据又一个实施例的远程控制系统可以提供使用远程控制设备100的用户界面,该远程控制设备100专用于具有上述特征的车辆40。

参照图23和图24,远程控制设备100可以根据用户的手势输入来选择要控制的车辆40的特性。

详细地,远程控制设备100可以通过手势传感器来感测第一手势或第二手势。

另外,当感测到第一手势时,远程控制设备100可以进入用于控制车辆40的第一特性的第一控制模式。例如,第一控制模式可以被提供以控制车辆40的音频输出。

相反,远程控制设备100可以在第二手势下进入第二控制模式。例如,第二控制模式可以被提供以控制车辆40的空调。

远程控制设备100可以根据控制模式来感测运动,并且生成并传输远程执行信号以控制车辆40。

详细地,当在第一控制模式下感测到第一运动时,远程控制设备100可以生成第一远程执行信号,并且当在第一控制模式下感测到第二运动时,远程控制设备100生成第二远程执行信号。

参考图23,远程控制设备100可以通过在合上手的同时向上下移动手的输入来生成用于增加或减少音频输出的远程执行信号,并将远程执行信号传输到车辆40的音频输出设备。

另外,当感测到在合上手的同时向左右移动手的运动时,远程控制设备100可以生成用于选择待输出的文件(或频率)的远程执行信号,并且将远程执行信号传输到音频输出设备。

另外,当在第二控制模式下感测到第一运动时,远程控制设备100可以生成第三远程执行信号,并且当在第二控制模式下感测到第二运动时,远程控制设备100生成第四远程执行信号。

参照图24,当感测到在打开手的同时向上下移动手的运动时,远程控制设备100可以生成用于设定车辆40的空调的温度的远程执行信号,并将远程执行信号传输到空调。

另外,当感测到在打开手的同时将手向左右移动的运动时,远程控制设备100可以生成用于设定空调的风力强度的远程执行信号,并将远程执行信号传输到空调。

这样,根据所述实施例的远程控制设备100可以提供可以通过简单的手势和运动来直观地控制车辆40的各种特性的用户界面,从而可以提高用户的便利性,并且可以通过保持驾驶注意力来实现安全驾驶。

同时,将描述当远程控制设备100位于控制方向盘的手中时用于远程控制设备100的远程控制方法。

参照图25至图26,当远程控制设备位于控制手柄的手中时,通常,用户可以采取用手握住方向盘的第一手势,以及在打开手的同时将手放在方向盘上的第二手势。

如图25所示,当感测到用手抓住方向盘的第一手势时,认为驾驶员在一般的驾驶状态下精确地控制方向盘,使得远程控制设备100可以将用于增加方向盘的转向水平的远程执行信号传输到车辆40。

另外,如图26所示,当感测到在打开手的同时将手放在方向盘上的第二手势时,认为驾驶员正在向方向盘施加大的操作力,例如进行停车,使得远程控制器设备100可以将用于降低方向盘的转向水平的远程执行信号传输到车辆40。

这样,根据所述实施例的远程控制设备100可以提供可以通过简单的手势和运动直观地控制车辆40的转向特性的用户界面。

图27是示出根据本发明的又一实施例的远程控制系统的示例的框图。图28至图29是示出根据本发明的又一实施例的执行远程控制的状态的图。

首先,将参照图27至图29详细描述使用手表式远程控制设备100控制作为外部设备的笔记本电脑50的远程控制方法。在这种情况下,笔记本电脑50可以包括通用计算机、平板电脑等。

参照图27,远程控制系统包括远程控制设备100和笔记本电脑50。

可能需要多个控制输入来控制外部设备中的笔记本电脑50。例如,需要笔记本电脑50的键盘输入、笔记本电脑50的鼠标输入以及按钮输入等。

根据又一实施例的远程控制系统可以提供使用专用于具有上述特征的笔记本电脑50的远程控制设备100的用户界面。

远程控制设备100可以根据用户的手势输入来选择待控制的笔记本电脑50的特性。

详细地,远程控制设备100可以通过手势传感器来感测第一手势或第二手势。

另外,参考图28,远程控制设备100可以在感测到第一手势时进入用于控制笔记本电脑50的第一特性的第一控制模式。例如,第一控制模式可以是笔记本电脑50的键盘输入模式。

如图29所示,远程控制设备100可以在第二手势下进入第二控制模式。例如,第二控制模式可以是笔记本电脑50的鼠标输入模式。

远程控制设备100可以根据控制模式来感测运动,并且生成并传输远程执行信号以控制笔记本电脑50。

详细地,当在第一控制模式下感测到第一运动时,远程控制设备100可以生成第一远程执行信号,并且当在第一控制模式下感测到第二运动时,远程控制设备100生成第二远程执行信号。

如图28所示,远程控制设备100可以根据在打开手的同时移动手指的运动生成键盘输入远程执行信号,并将键盘输入远程执行信号传输到笔记本电脑50。

如图29所示,远程控制设备100可以根据在伸展一根手指的同时移动手指的运动生成鼠标输入远程执行信号,并将鼠标输入远程执行信号传输到笔记本电脑50。

同时,可以通过简单地使用第一手势和第二手势来生成远程执行信号。例如,合上和打开手的手势可以生成用于鼠标点击输入的远程执行信号。

在该实施例中,根据实施例的远程控制设备100可以提供可以通过简单的手势和运动来直观地控制笔记本电脑50的各种特性的用户界面,从而可以提高用户的便利性,并且可以通过保持驾驶注意力来实现安全驾驶。

在本说明书中对“一个实施例”、“实施例”、“示例实施例”等的任何引用意味着结合所述实施例描述的特定特征、结构或特性被包括在本发明的至少一个实施例中。在说明书中各种地方出现的这些短语不一定都指相同的实施例。此外,当结合任何实施例描述特定特征、结构或特性时,认为在本领域技术人员的能力范围内实现与实施例中的其他特征、结构或特性相关的这种特征、结构或特性。因此,与这些组合和修改相关的内容应该被解释为包括在本发明的范围内。

另外,尽管已经参照多个说明性实施例描述了实施例,但是应该理解,本领域技术人员可以设计出许多其他修改和实施例,这些修改和实施例将落入本公开的原理的精神和范围内。更具体地,在本公开内容、附图和所附权利要求的范围内,在主题组合布置的组成部分和/或布置中可以进行各种变化和修改。除了组成部分和/或布置的变化和修改之外,替代使用对于本领域技术人员也将是显而易见的。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1