用于接收用户输入的方法、设备和系统的制作方法

专利名称：用于接收用户输入的方法、设备和系统的制作方法
用于接收用户输入的方法、设备和系统背景技术
计算机技术的进步使得可以制造像同时代的移动通信设备和多媒体设备那样在计算速度方面强有力且仍容易移动或甚至口袋大小的设备。在熟悉的家用电器、个人交通工具或甚至房屋中还存在甚至更高级的特征和软件应用。这种高级设备和软件应用要求能够足够控制它们的输入方法和设备。也许由于这种原因，触摸屏和触摸板形式的触摸输入最近变得更加流行。当前，这种设备能够代替像鼠标和键盘这样的更常规的输入装置。然而，实现大多数软件应用和用户输入系统的输入需要可能要求远远不只是对常规输入装置的替代。
因此，存在对于改善诸如触摸屏和触摸板之类的用户输入装置的可用性和通用性的解决方案的需要。发明内容
现在已经发明了改善的方法和实施该方法的技术设备，通过它们至少可以避免上述问题。本发明的各个方面包括方法、设备、服务器、客户端以及包括其中存储有计算机程序的计算机可读介质，其特征在于在独立权利要求中所记载的内容。本发明的其他实施方式在从属权利要求中公开。
在一个示例实施例中，首先通过诸如触摸屏的用户接口输入设备产生的低级别事件，形成用户接口事件(较高级别事件)。可以通过形成用于用户接口事件的诸如时间和坐标信息的修改量相关信息，来修改用户接口事件。用户接口事件及其修改量被发送到姿势识别引擎，在其中从用户接口事件及其可能的修改量形成姿势信息。姿势信息然后用作装置的用户输入。换句话说，根据一个示例实施例，不能从输入设备的低级别事件直接形成姿势。而是，从低级别事件形成较高级别事件，即用户接口事件，然后从这些用户接口事件识别姿势。
根据第一方面，提供一种用于接收用户输入的方法，包括从用户接口输入设备接收低级别事件；使用所述低级别事件形成用户接口事件；形成用于所述用户接口事件的修改量相关信息；从所述用户接口事件和所述修改量形成姿势信息；以及使用所述姿势信息作为装置的用户输入。
根据一个实施例，该方法还包括将所述用户接口事件和所述修改量转发到姿势识别器，且通过所述姿势识别器形成所述姿势信息。根据一个实施例，该方法还包括从用户接口输入设备接收多个用户接口事件；将所述用户接口事件转发到多个姿势识别器，以及通过所述姿势识别器形成至少两个姿势。根据一个实施例，用户接口事件是触摸、释放、移动和保持的组其中之一。根据一个实施例，该方法还包括从时间信息、区域信息、方向信息、 速度信息和压力信息的组其中至少一个形成所述修改量。根据一个实施例，该方法还包括响应于在适当位置保持触摸输入或按键按压预定时间形成保持用户接口事件，且在形成所述姿势信息时使用所述保持事件。根据一个实施例，该方法还包括从多触摸的触摸输入设备，接收至少两个不同的用户接口事件；以及使用所述至少两个不同的用户接口事件来形成多触摸姿势。根据一个实施例，用户接口输入设备包括触摸屏、触摸板、笔、鼠标、触觉输入设备、数据手套和数据服的组其中之一。根据一个实施例，用户接口事件是向下触摸、释放、保持和移动的组其中之一。
根据第二方面，提供一种装置，包括至少一个处理器；存储器，所述存储器包括计算机程序代码，所述存储器和所述计算机程序代码被配置成利用至少一个处理器促使装置从用户接口输入模块接收低级别事件、使用所述低级别事件形成用户接口事件、形成用于所述用户接口事件的修改量相关信息、从所述用户接口事件和所述修改量形成姿势信息，且使用所述姿势信息作为装置的用户输入。
根据一个实施例，该装置还包括计算机程序代码，该计算机程序代码配置成促使所述装置将所述用户接口事件和所述修改量转发到姿势识别器，且通过所述姿势识别器形成所述姿势信息。根据一个实施例，该装置还包括计算机程序代码，该计算机程序代码被配置成促使所述装置从用户接口输入设备接收多个用户接口事件、将所述用户接口事件转发到多个姿势识别器以及通过所述姿势识别器形成至少两个姿势。根据一个实施例，用户接口事件是触摸、释放、移动和保持的组其中之一。根据一个实施例，该装置还包括计算机程序代码，该计算机程序代码被配置成促使所述装置从时间信息、区域信息、方向信息、速度信息和压力信息的组其中至少一个形成所述修改量。根据一个实施例，该装置还包括计算机程序代码，该计算机程序代码被配置成促使所述装置响应于在适当位置保持触摸输入或按键按压预定时间，形成保持用户接口事件，且在形成所述姿势信息时使用所述保持事件。 根据一个实施例，该装置还包括计算机程序代码，该计算机程序代码被配置成促使所述装置从多触摸的触摸输入设备接收至少两个不同的用户接口事件，且使用所述至少两个不同的用户接口事件来形成多触摸姿势。根据一个实施例，所述用户接口模块包括触摸屏、触摸板、笔、鼠标、触觉输入鼠标、数据手套和数据服的组其中之一。根据一个实施例，所述装置是计算机、便携式通信设备、家用电器具、诸如电视的娱乐设备、诸如汽车、轮船或飞机的交通设备或智能建筑其中之一。
根据第三方面，提供一种系统，包括至少一个处理器；存储器，所述存储器包括计算机程序代码，该存储器和计算机程序代码被配置成利用至少一个处理器促使系统从用户接口输入模块接收低级别事件、使用所述低级别事件形成用户接口事件、形成用于所述用户接口事件的修改量相关信息、从所述用户接口事件和所述修改量形成姿势信息，且使用所述姿势信息作为装置的用户输入。根据一个实施例，该系统包括彼此通信连接地布置的至少两个装置，其中所述至少两个装置中的第一装置被布置为接收所述低级别事件，且所述至少两个装置中的第二装置被布置成响应于从所述第一装置接收用户接口事件形成所述姿势信息。
根据第四方面，提供一种装置，该装置包括处理装置、存储器装置，以及用于从用户接口输入装置接收低级别事件的装置、用于使用所述低级别事件形成用户接口事件的装置、用于形成用于所述用户接口事件的修改量相关信息的装置、用于从所述用户接口事件和所述修改量形成姿势信息的装置；以及用于使用所述姿势信息作为设备的输入的装置。
根据第五方面，提供一种计算机程序产品，该计算机程序产品存储在计算机可读介质上且可以在数据处理设备中执行，该计算机程序产品包括用于从用户接口输入设备接收低级别事件、使用所述低级别事件形成用户接口事件的计算机程序代码部分；形成用于所述用户接口事件的修改量相关信息的计算机程序代码部分；从所述用户接口事件和所述修改量形成姿势信息的计算机程序代码部分；以及用于使用所述姿势信息作为装置的用户输入的计算机程序代码部分。根据一个实施例，所述计算机程序产品是操作系统。


在下文中，将参考附图更详细地描述本发明的各个实施例，附图中
图I示出根据一个示例实施例用于基于姿势的用户输入的方法；
图2示出根据一个示例实施例被布置为接收基于姿势的用户输入的设备和系统；
图3a和3b示出组成触摸用户接口事件的不同示例姿势；
图4a示出根据一个示例实施例的低级别输入系统的状态图4b示出根据一个示例实施例产生用户接口事件且包括保持状态的用户接口事件系统的 状态图5a、5b和5c示出在保持用户接口事件期间诸如微拖拽信号的硬件触摸信号的示例；
图6示出根据一个示例实施例的用户接口系统和计算机程序产品的抽象级别的框图7a示出根据一个示例实施例的姿势识别引擎的视图7b示出根据一个示例实施例的操作中的姿势识别引擎；
图8a和8b示出根据一个示例实施例的保持用户接口事件的产生；
图9示出根据一个示例实施例的用于基于姿势的用户输入的方法；以及
图IOa-IOg示出根据一个示例实施例的用于产生用户接口事件的状态和事件图。
具体实施方式
在下文中，将在触摸用户接口及其方法和设备的上下文中描述本发明的若干实施例。然而，需要理解，本发明不限于触摸用户接口。实际上，不同实施例在需要用户接口操作的改善的任意环境中具有广泛的应用。例如，诸如电子书和数字报纸的具有大触摸屏的设备或诸如平板电脑和台式机的个人电脑和多媒体设备可以受益于本发明的使用。同样，诸如各种车辆、轮船和飞行器的导航接口的用户接口系统可以受益于本发明。计算机、便携式通信设备、家用电器、诸如电视的娱乐设备以及智能建筑也可以受益于不同实施例的使用。 采用不同实施例的设备可以包括触摸屏、触摸板、笔、鼠标、触感输入设备、数据手套或数据服。而且，例如基于触觉的三维输入系统可以使用本发明。
图I示出根据一个示例实施例用于基于姿势的用户输入的方法。在阶段110，接收低级别事件。作为对人使用诸如触摸屏或鼠标的输入设备的响应，可以通过计算机的操作系统产生低级别事件。用户接口事件还可以通过特定用户输入硬件直接产生，或作为硬件事件的响应通过操作系统产生。
在阶段120，形成或产生至少一个用户接口事件。例如通过平均、组合、设定阈值， 通过使用计时器窗口或通过使用过滤或通过任意其他方式，可以从低级别事件产生用户接口事件。例如，相继的两个低级别事件可以解读为一个用户接口事件。也可以例如从其他用户接口事件或响应于程序中的触发器程序性地产生用户接口事件。可以通过使用用户输入硬件本地或远程地产生用户接口事件，例如以使得从作为终端设备动作的远程计算机接收低级别事件。
在阶段130，接收至少一个用户接口事件。可以存在接收的多个用户接口事件，且用户接口事件可以彼此组合、分割或分组在一起和/或诸如用作个人用户接口事件。可以从例如操作系统的相同设备接收用户接口事件，或者可以通过有线或无线通信连接从另一设备接收用户接口事件。这种另一设备可以是作为对于服务的终端设备的计算机、或诸如触摸板或触摸屏之类的连接到计算机的输入设备。
在阶段140,形成用于用户接口事件的修改量(modifier)信息。可以通过操作系统从硬件事件和/或信号或其他低级别事件和数据形成修改量信息，或者可以通过硬件直接形成修改量信息。修改量信息可以与用户接口事件同时形成，或者它可以在用户接口事件之前或之后形成。可以通过使用多个较低级别事件或其他事件形成修改量信息。修改量信息对于很多用户接口事件可是共同的，或它可以针对不同用户接口事件而不同。修改量信息可以包括例如2维或3维坐标形式的位置信息，诸如用户接口上被触摸或点击的点或区域。修改量信息可以包括例如关于触摸或点击的点的移动、拖拽或变化方向的方向信息， 且修改量还可以包括关于这种移动或变化的速度的信息。修改量信息可以包括例如来自触摸屏的压力数据，且它可以包括关于被触摸区域的信息，例如以使得可以识别触摸是手指还是指针设备进行的。修改量信息可以包括邻近数据，该邻近数据例如作为指针设备或手指与触摸输入设备相距多近的指示。修改量信息可以包括计时数据，例如触摸所持续的时间或连续点击或触摸之间的时间或者时钟事件信息或其他时间相关数据。
在阶段150，从至少一个用户接口事件和相应修改量数据形成姿势信息。可以通过组合很多用户接口事件形成姿势信息。该一个或多个事件以及相应的修改量数据通过姿势识别器分析，无论何时只要识别预定姿势，该姿势识别器将输出姿势信号。姿势识别器可以是状态机，或者它可以基于其他种类的模式识别，或它可以是程序模块。姿势识别器可以实施为识别单个姿势或它可以实施为识别多个姿势。可以存在同时、链式或部分同时或部分链式操作的一个或更多姿势识别器。姿势例如可以是触摸姿势，诸如触摸/轻触(tap)、移动/拖拽和/或保持事件的组合，且它可能要求某一时序(例如双轻触的速度)或移动范围或速度以便被识别。姿势本质上也可以是相对的，即，它可能不要求任何绝对计时或范围或速度，而是可以依赖于姿势部分的相对计时、范围和速度。
在阶段160，姿势信息用作用户输入。例如，当检测到姿势时，可以触发菜单选项， 或者可以启动程序的模式或行为中的变化。用户输入可以被一个或更多程序或操作系统或二者接收。接收姿势之后的行为对于接收程序可能是特定的。通过程序接收姿势甚至可以在姿势完成之前开始，以使得程序甚至可以在姿势完成之前响应于姿势准备动作或开始动作。同时，一个或更多姿势可以通过程序和/或操作系统形成且被其使用，且程序和/或操作系统的控制可以以多姿势的方式发生。姿势的形成可以同时发生或者它可以以链式发生，使得首先识别一个或更多姿势，且此后识别其他姿势。姿势可以包括单触摸或多触摸姿势，即，它们可以包括单点触摸或点击，或者它们可以包括多点触摸或点击。姿势可以是单姿势或多姿势。在多姿势中，两个或更多基本同时或连续的姿势用作用户输入。在多姿势中，基本姿势可以是单触摸或多触摸姿势。
图2示出根据一个示例实施例布置为接收基于姿势的用户输入的设备和系统。不同设备可以经由诸如是因特网或局域网的固定网络210或者移动通信网络220连接，移动通信网络诸如是全球移动通信系统(GSM)网络、第三代(3G)网络、3. 5代(3. 5G)网络、第四代(4G)网络、无线局域网(WLAN)、蓝牙 或其他现今或未来网络的。不同网络借助于通信接口 280彼此连接。这些网络包括诸如路由器和交换机之类用于处理数据的网件(未示出)；以及诸如基站230和231之类用于为不同设备提供对网络的接入的通信接口，且基站 230和231本身经由固定连接276或无线连接277连接到移动网络220。
可以存在连接到网络的很多服务器，且在图2a的示例中示出服务器240、服务器 241和服务器242，服务器240用于提供需要用户输入的网络服务且连接到固定网络210，服务器241用于处理从网络中的其他设备接收的用户输入且连接到固定网络210，服务器242 用于提供需要用户输入的网络服务并用于处理从其他设备接收的用户服务，且连接到移动网络220。上述设备中的一些，例如计算机240、241、242可以是使得它们组成因特网，通信元件驻留在固定网络210中。
还存在很多终端用户设备，诸如各种尺寸和格式的移动电话和智能电话251、因特网接入设备(因特网平板电脑)250和个人电脑260之类的。这些设备250、251和260也可以由多个部件构成。各种设备可以经由通信连接而连接到网络210和220，该通信连接诸如是到因特网的固定连接270、271、272和280 ;到因特网210的无线连接273 ;到移动网络220的固定连接275以及到移动网络220的无线连接278、279和282。连接271-282借助于通信连接相应端的通信接口而实施。
图2b示出根据一个示例实施例用于接收用户输入的设备。如图2b所示，服务器 240包括存储器245、一个或更多处理器246、247以及驻留在存储器245中的计算机程序代码248，以例如实施姿势识别。不同服务器241、242和290可以至少包括这些相同元件以用于采用与每个设备相关的功能性。类似地，终端用户设备251包括存储器252、至少一个处理器253和256以及驻留在存储器252中以例如实施姿势识别的计算机程序代码254。终端用户设备还可以具有用于获取照片的至少一个照相机255。终端用户设备还可以包括用于捕获声音的一个、两个或更多麦克风257和258。不同终端用户设备250、260可以至少包括这些相同元件以用于采用与每个设备相关的功能性。一些终端用户设备可以装配有能够获取数字图像的数码相机以及在获取照片时、在其之前或在其之后实现听觉记录的一个或更多麦克风。
需要理解，不同实施例允许在不同元件中实施不同部件。例如，接收低级别事件、 形成用户接口事件、接收用户接口事件、形成修改量信息和识别姿势可以完整地在比如 250、251或260这样的一个用户设备中执行，或者接收低级别事件、形成用户接口事件、接收用户接口事件、形成修改量信息和识别姿势可以完整地在一个服务器设备240、241、242 或290中执行，或者接收低级别事件、形成用户接口事件、接收用户接口事件、形成修改量信息和识别姿势可以跨越多个用户设备250、251、260或跨越多个网络设备240、241、242、 290或跨越用户设备250、251、260和网络设备240、241、242、290实施。例如，可以在一个设备中接收低级别事件，且可以在另一设备中形成用户接口事件和修改量信息，且可以在第三设备中执行姿势识别。作为另一示例，可以在一个设备中接收低级别事件，且低级别事件与修改量信息一起形成为用户接口事件，且用户接口事件和修改量信息可以用在第二设备中以形成姿势且使用姿势作为输入。如上所述，接收低级别事件、形成用户接口事件、接收9用户接口事件、形成修改量信息和识别姿势可以实施为驻留在一个设备上或跨越若干设备分布的软件组件，例如以使得所述设备形成所谓的云。姿势识别还可以是这种服务其中用户设备通过接口接入服务。以类似方式，形成修改量信息、处理用户接口事件以及使用姿势信息作为输入可以使用系统中的各种设备来实施。
不同实施例可以实施为运行在移动设备和可选地服务上的软件。移动电话可以至少装配有存储器、处理器、显示器、键区、移动检测器硬件以及诸如2G、3G、WLAN和其他之类的通信装置。不同设备可以具有像触摸屏(单触摸或多触摸)这样的硬件以及像网络定位或全球定位系统(GPS)模块这样的用于定位的装置。在设备上可以存在各种应用，诸如日历应用、联系人应用、地图应用、消息应用、浏览器应用以及用于办公和/或私有用途的各种其他应用。
图3a和图3b示出组成触摸用户接口事件的不同姿势的示例。在图中，列301示出姿势的名称，列303示出作为用户接口事件的姿势组成，列305显示通过操作系统的或应用中的姿势的行为或使用，且列307指示用于事件的可能符号。在图3a的示例中，向下触摸用户接口事件310是基本交互元件，其缺省行为是指示哪个对象被触摸，且可能提供视觉、 触觉或听觉反馈。触摸释放事件312是另一基本交互元件，缺省地，该基本交互元件执行针对对象的缺省行为，例如激活按钮。移动事件314是另一基本交互元件，缺省地，该基本交互元使得触摸对象或整个画布跟随移动。
根据一个示例实施例，姿势是用户接口事件的组合。轻触姿势320是向下触摸和释放事件的组合。轻触姿势中的向下触摸和释放事件可以具有缺省行为，且在应用或操作系统中，轻触姿势320可以附加地具有特定行为。例如，在画布或内容移动的同时，轻触姿势320可以停止前进的移动。长轻触姿势322是向下触摸和保持事件(参见稍后结合图8a 和8b的保持事件的描述)的组合。长轻触姿势322内的向下触摸事件可以具有缺省行为， 且长轻触姿势322内的保持事件可以具有特定附加行为。例如，可以给出某些情况出现的指示(视觉、触摸、听觉)，且在预定超时之后，用于触摸对象的特定菜单可以被打开，或者在(文本)阅读器中的编辑模式可以被激活且指针可以被可视地带入触摸位置。双轻触姿势324是在设置时间限制内基本相同位置处两个连续向下触摸和释放事件的组合。双轻触姿势例如可以用作缩放开关(放大/缩小)或以其他方式致动缩放，或用作用于某些其他特定行为的触发器。同样，姿势的使用对于应用可以是特定的。
在图3b中，拖拽姿势330是向下触摸和移动事件的组合。向下触摸和移动事件可以具有缺省行为，而拖动姿势作为整体可以具有特定行为。例如，缺省地，内容、控制手柄或整个画布可以遵循拖动姿势的移动。可以通过由手指移动控制滚动的速度来实施迅速滚动。组织用户接口元件的模式可以实施为使得使用向下触摸选择的对象跟随该移动，且可能的拖拽位置通过相应地移动对象或其他相同指示来指示。拖拽姿势332是组成拖拽和释放的用户接口事件的组合。在释放时，在整个内容通过拖拽移动之后可以不对触摸对象执行缺省行为，且在放下之前拖拽到允许的内容区域外时，释放可以取消该动作。在迅速滚动中，放下可以停止滚动，且在组织的模式中，拖拽的对象可以被放置到其指定位置。拂动 (flick)姿势334是向下触摸、移动和触摸释放的组合。在释放之后，内容以触摸释放时它所具有的方向和速度继续其移动。内容可以被手动停止，或在它到达捕捉点或内容结束时停止，或它可以自己减慢以停止。
拖拽(摇动pan)和拂动姿势可以用作列表、网格和内容视图中的缺省导航动作。 用户可以操作内容或画布以使得它遵循移动方向。这种操作方式可以使得作为有效导航元件的滚动条成为不必要的，这为用户接口带来更多空间。因此，例如，使用像动态梯度、雾化等图形效果或在滚动进行时出现的薄滚动条(仅指示，非有效)，滚动指示可以用于指示更多条目可用。当滚动速度对于用户而言太快而不能在视觉上跟随内容时，可以显示(用于分级列表的)索引。
拂动滚动可以在拂动姿势结束时继续，且可以根据拂动结束时的速度确定速度。 可以根本不应用减速或惯性，由此移动无摩擦地继续，直到画布结束或直到使用向下触摸来手动停止。备选地，可以相对于可滚动区域的长度应用减速和惯性，直到达到某一预定速度。可以在到达可滚动区域的结束之前平滑地应用减速。在拂动他滚动之后的向下触摸可以停止滚动。
在滚动区域边缘处的拖拽和保持姿势可以激活迅速滚动。可以通过在滚动区域的边缘和中心之间移动手指来控制滚动的速度。内容缩放动画可以用于指示增加/减小的滚动速度。可以通过提起手指(触摸释放)或通过将手指拖拽到滚动区域的中间来停止滚动。
图4a不出根据一个不例实施例的低级别输入系统的状态图。这种输入系统例如可以用于从触摸屏或另一类型的触摸设备或从由用户操作的一些其他输入装置来接收硬件事件。当触摸输入设备时，从硬件或从硬件的驱动器软件触发向下事件410。当触摸被提起即设备不再被触摸时，触发向上事件420。甚至在设备被触摸不存在移动时，也可以触发向上事件420。这种向上事件可以通过计时器而被滤出。可以在向下事件后触摸点被移动时产生拖拽事件430。可能的状态转变通过图4a的箭头指示，且它们是向下_向上、向上-向下、向下-拖拽、拖拽_拖拽以及拖拽_向上。在利用例如用于创建用户接口事件的硬件事件之前，可以修改硬件事件。例如，噪声事件可以以其他方式被平均或过滤。再者， 取决于设备的方向和类型，触摸点可以朝向手指尖移动。
图4b示出根据一个示例实施例产生用户接口事件且包括保持状态的用户输入系统的状态图。在用户触摸一个触摸屏时，或例如向下按压鼠标按键时，出现向下触摸状态或用户接口事件450。在这种向下触摸状态中，系统已经确定用户已经激活了点或区域，且事件或状态可以通过诸如触摸的持续时间或压力的修改量信息补充。从向下触摸状态450开始，当用户释放按钮或从触摸屏提起触摸时，可以改变释放状态或事件460。例如，可以通过指示自向下触摸事件的时间的修改量来补充释放事件。在释放状态之后，向下触摸事件或状态450可能再次出现。
如果在向下触摸用户接口事件之后(而没有提起触摸)触摸或点击的点移动，则出现移动事件或状态480。如果触摸点的移动跨越足够长的时间，则可以触发多个移动事件。可以通过指示移动方向和移动速度的修改量信息来补充移动事件480 (或多个移动事件)。可以通过提起触摸来终止移动事件480，且出现释放事件460。还可以通过停止移动而不提起触摸来终止移动事件，在这种情况中如果触摸跨越足够长的时间而不移动，则可以出现保持事件470。
当向下触摸或移动事件或状态持续足够长的时间时，可以产生保持事件或状态 470。可以完成保持事件的产生，例如以使得计时器在向下触摸或移动状态中的某一点开始，且当计时器前进到足够大的值时，在状态仍是向下触摸或移动且触摸点未明显移动的情况下产生保持事件。保持事件或状态470可以通过提起触摸(促使触发释放事件460) 而终止，或通过移动激活的点(促使触发移动事件480)而终止。除了仅在系统中具有向下触摸之外，保持状态或事件的存在可以例如通过允许更容易或更可靠的姿势的检测而带来益处。
例如，由于手指的大面积或由于触摸屏的特性或二者，在用户输入设备产生的硬件信号中可能存在噪声。存在强加于基线路径的顶部上的很多种类的噪声。这种噪声可以是所谓的白噪声、粉红噪声或其他种类的噪声。不同噪声类型可能由系统中不同类型的误差源产生。可以使用过滤来去除误差和噪声。
过滤可以直接在触摸屏或其他用户输入设备中发生，或它可以在处理链中稍后发生，例如在驱动器软件或操作系统中发生。此处过滤器可以是一种平均或均值过滤器，其中很多连续点(时间或空间)的坐标通过非加权或加权平均或其他种类的处理或过滤而被平均，其中点的坐标值被处理以得出单组输出坐标。因此，例如在白噪声的情况，噪声可以以 N的平方根的因子被显著减小，其中N是被平均的点的数目。
图5a、5b和5c示出在保持用户接口事件的产生期间的硬件触摸信号(诸如微拖拽信号)的示例。通过用户在触摸屏上保持姿势或向下按压的鼠标至少预定时间，来产生保持用户接口事件。手指按压在触摸屏上相当大区域上，且鼠标可以在向下按压时形成小移动。这些现象导致对于产生的低级别事件的一定程度的不确定性。例如，取决于用户如何接近设备，相同的手和相同的硬件可以导致不同低级别事件xy模式。这在图5a中示出， 其中彼此靠近产生很多低级别向下触摸事件510-517。
在图5b和5c中，示出了来自相同低级别向下触摸和移动事件510-517的两个不同序列。在图5b中，将要被接收的第一事件是事件510且第二事件是事件511。该序列继续到事件514、512、513、516、515和517，且在此之后，移动继续朝向左下角。事件之间的不同移动向量通过箭头520、521、522、523等指示。在图5c中,序列是不同的。它开始于事件 511，继续到512、513、515、516、514和517且在510结束。在结束点之后，移动继续朝向右上角移动。事件之间的移动向量530、513等与图5b完全不同。这导致这种情形需要在这种向下触摸(不处理)期间处理驱动器事件的任意SW可能是或多或少随机的，或至少是硬件相关的。这将使得姿势的解释更加困难。本发明的示例实施例可以消除这种新识别的问题。甚至像按钮这样的用户接口控制可以受益于向下触摸用户接口事件的共同实施，其中驱动器或驱动器上的层将低级别或硬件事件的组转换成单个向下触摸事件。可以以向下触摸类似的方式检测保持事件，由此使得更可靠地检测和解释像长轻触、摇动和滚动这样的姿势。
例如可以通过使用某一事件间隔(诸如10毫秒)进行采样，来产生低级别事件。 当从硬件接收第一向下触摸事件时，计时器可以启动。在预定时间期间，跟随来自硬件的事件，且如果它们保持在某一区域中，可以产生向下触摸事件。另一方面，如果事件(向下触摸或拖拽)在区域外迁移，则产生向下触摸用户接口事件，接着是移动用户接口事件。当接收到来自硬件的第一向下触摸事件时，该区域可以更大，以允许其中用户随意触摸输入设备的“随便触摸”。接受的区域稍后可以减小为更小，以使得可以精确地产生移动用户接口事件。该区域可以确定为椭圆、圆形、方形、矩形或任意其他形状。该区域可以根据第一向下触摸事件定位，或者是被定位为一些事件的位置的平均。如果向下触摸或移动硬件事件继续产生较长时间，则可以产生保持用户接口事件。
图6示出根据一个示例实施例的用户接口系统和计算机程序产品的抽象级别的框图。用户接口硬件可以产生硬件事件或信号或驱动器事件610，例如向上、向下和拖拽驱动器或低级别事件。这些事件的实施可以是硬件相关的，或它们可以对每个硬件起到或多或少相似的作用。驱动器事件610可以被窗口管理器(或操作系统)处理，以产生处理的低级别事件620。根据一个示例实施例，如前面所解释，低级别事件可以用于形成诸如向下触摸、释放、移动和保持之类的用户接口事件630。这些用户接口事件630与修改量一起可以被转发到姿势引擎640，该姿势引擎可以操作为指定关于姿势识别器650可以如何获得且失去对事件的控制的规则。姿势识别器650使用其相应修改量处理用户接口事件630，以识别姿势的开始和/或整个姿势。识别的姿势然后被转发到应用660和操作系统，以用于用户输入。
图7a示出根据一个示例实施例的姿势识别引擎的视图。诸如触摸、释放、移动和保持之类的用户接口事件710被发送到姿势识别器720、721、727，…729。可以存在有条件地或以某一顺序将用户接口事件发送到不同识别器的控制装置，或用户接口事件可以独立于其他识别器被传递到不同识别器。用户接口事件710可以包括修改量信息，以便向识别器给出更多数据，例如移动的方向或速度。姿势识别器对用户接口事件和修改量信息进行操作，且在识别姿势时产生作为输出的姿势信号。该姿势信号和关于特定姿势的相关数据然后可以被发送到应用730以用作用户输入。姿势引擎和/或姿势识别器还可以配置成和/或用于“过滤”转发到应用的姿势。考虑两个应用窗口管理器和浏览器。在两种情况中，姿势引擎均可以被配置成捕获意在被这些应用而不是被捕获姿势的屏幕上的单独应用处理的姿势。这可以带来这样的益处即，在浏览器应用中，既使网页包括Flash区域或完全地实施为Flash程序，像摇动这样的姿势可以以相同方式工作。
图7b示出根据一个示例实施例的操作中的姿势识别引擎。在该示例中，存在用于拂动停止720、轻触721、摇动722和拂动723的4个姿势识别器。在初始状态中，拂动停止识别器720停用，因为没有进行中的拂动，且因此停止拂动姿势是无关的。当触摸用户接口事件712被发送到识别器时，其中任一个都可以不做反应，或者它们可以通过发送可以开始姿势的指示进行反应。当触摸712之后跟随着移动用户接口事件714时，姿势识别器721 未被激活，但是用于摇动的姿势识别器被激活，且识别器告知应用730摇动将要开始。姿势识别器722还可以给出关于摇动的速度和方向的信息。在姿势识别器722识别摇动时，输入用户接口事件714被消耗且未到达其他识别器，即识别器723。因此，用户接口事件以特定顺序被传递到不同识别器，但是事件也可以同时被传递到各个识别器。
在用户接口事件移动是快速移动715，此事件将不被用于摇动的识别器722获取。 而是，用于拂动姿势的识别器732将被激活。结果是，摇动识别器722可以发送摇动结束的指示，且拂动识别器723可以向应用730发送关于拂动姿势开始的信息以及关于拂动的速度和方向的信息。再者，因为姿势拂动现在进行，用于拂动停止的识别器720被启用。在移动用户接口事件715之后，在用户释放按压时，接收释放用户接口事件716，且拂动姿势保持有效(且拂动停止保持使能)。当用户现在触摸屏幕时，接收触摸用户接口事件717。该事件被拂动停止识别器720捕获，该拂动停止识别器720告知应用730拂动将要停止。用于拂动停止的识别器720还停用自身，因为现在不再存在进行中的拂动姿势。
姿势引擎和/或各个姿势识别器可以驻留在应用中、由应用使用的程序库中、操作系统中或与操作系统紧密链接的模块中或这些和其他有意义位置的任意组合中。姿势引擎和识别器也可以跨越若干设备分布。
姿势引擎可以布置为驻留在操作系统中或与之靠近，且应用可以记录它们希望使用姿势引擎接收的姿势。可以存在在姿势引擎或库中可用的姿势和姿势链，或应用可以提供和/或限定它们。应用或操作系统还可以修改姿势引擎的操作和各个姿势的参数(诸如计时器)。例如，姿势链中将要被识别的姿势的顺序可以被限定和/或变更，且姿势可以被启用和禁用。而且，应用或操作系统或设备的状态可以导致姿势识别器的相应集合或链被选择，以使得应用的状态中的变化导致如何识别姿势的变化。姿势识别器的顺序可以对姿势引擎的功能性产生影响例如，拂动停止可以首先处于链中，且在单触摸操作中，对于位置特定的姿势可以比一般姿势来得更早。而且，多触摸姿势可以被首先识别，且剩余事件然后可以被单触摸姿势识别器使用。
当附连到姿势引擎的识别器已经识别姿势时，关于姿势的信息需要被发送到适当应用和/或适当处理。为此，需要知道哪个姿势被识别以及该识别开始、结束或发生的位置。使用位置信息和关于姿势的信息，姿势引擎可以向适当应用和/或窗口发送姿势信息。 诸如移动或双轻触之类的姿势可以在一个窗口中发起且在另一窗口中结束，在这种情况中，姿势识别器可以根据情形向第一窗口、第二窗口或两个窗口发送姿势信息。在屏幕上存在多个触摸点的情况中，姿势识别器还可以选择使用哪个事件流或哪些事件流。处于该目的，可以告知姿势识别器存在多少输入流。
多个同时的姿势也可以被识别。例如，长轻触姿势可以与拖拽姿势同时识别。对于多姿势识别，识别器可以布置为同时操作，或使得它们在一个链中操作。例如，多姿势识别可以在多触摸识别之后发生，且对未被多触摸识别使用的事件进行操作。在多姿势中识别的姿势可以是完全或部分同时的，或它们可以是顺序的或是二者。姿势识别器可以布置为彼此通信，或姿势引擎可以检测多姿势被识别。备选地，应用可以使用来自姿势引擎的多个姿势作为多姿势。
图8a和8b示出根据一个示例实施例的保持用户接口事件的产生。在图8a中解释了低级别事件或驱动器事件，其被用作用于产生保持事件的输入。向上箭头812指示驱动器向上或释放事件。向下箭头813指示驱动器向下事件或触摸用户接口事件。向右箭头 814指示拖拽或移动用户接口事件(在任意方向)。开口向下箭头815指示产生的保持用户接口事件。其他事件816用圆圈标记。
在图Sb中，序列开始于驱动器向下事件813。此时，可以启动至少一个计时器，以检测触摸或向下状态持续的时间。在用户保持触摸或鼠标向下或拖拽它的同时，产生一系列驱动器拖拽事件。如前面所解释，这些事件可以是一系列微拖拽事件。在预定时间消逝且这例如通过计时器检测之后，在820产生触摸用户接口事件。如果拖拽或移动持续较长的时间，且停留在某一区域内或距第一触摸某一距离内，则在822产生保持用户接口事件。 应当注意，可以在未产生触摸事件的情况下产生保持事件。在保持事件计时期间，可以存在一系列驱动器拖拽、向上和向下事件，它们在距离上是如此微小或在时间上如此接近，以使得它们本身未产生用户接口事件，而是贡献于保持用户接口事件。
图9示出根据一个示例实施例用于基于姿势的用户输入的方法。在阶段910，接收诸如向下或拖拽的硬件事件和信号。如前面所解释，例如通过应用过滤，在阶段920，对事件和信号可以过滤，或以另外方式处理。在阶段930，接收例如指示硬件事件的低级别驱动器数据。如前面所解释，在阶段940这些低级别数据或事件可以形成到用户接口事件中，且在阶段945形成到相应修改量中。换句话说，低级别信号和事件被“收集”到用户接口事件及其修改量中。在阶段948，可以从低级别数据或其他用户接口事件或二者，形成诸如保持事件的新事件。需要注意，上述步骤的顺序例如可以改变，例如过滤可以在处理中稍后发生， 且保持事件可以在处理中较早形成。
具有相应修改量的用户接口事件然后可以可能地通过或者由姿势引擎而被转发到姿势识别器。在阶段951、952等，可以识别由相应姿势识别器识别的姿势的开始。不同姿势识别器可以布置为进行操作以使得一次仅可以识别一个姿势，或使得多个姿势可以被同时检测。这可以带来这样的益处可以在应用中使用多姿势输入。在阶段961、962等，检测由相应姿势识别器识别的完整姿势。在阶段970，检测/识别的姿势被发送到应用，且可能被发送到操作系统，以使得它们可以用于输入。需要注意，姿势的开始和完整姿势均可以被转发到应用。这可以具有这样的益处如果应用不必等待姿势结束，则应用可以较早地对姿势做出反应。在阶段980，姿势然后被应用用作输入。
作为示例，姿势识别可以操作如下。姿势引擎可以接收在给定屏幕区域中或甚至在整个屏幕中的所有或基本所有用户接口事件。换句话说，操作系统可以为每个应用提供窗口(屏幕区域)，且应用使用该区域以用于用户输入和输出。可以向姿势引擎给出用户接口事件，以使得姿势识别器处于特定顺序，进而使得特定姿势将首先激活其自身，且如果存在剩余的用户接口事件则在稍后激活其他姿势。在整个屏幕区域上识别的姿势可以位于更加专用的姿势之前。换句话说，姿势引擎配置成接收窗口集合的用户接口事件。使用浏览器应用作为示例，既使用户接口事件在Flash窗口中发起，用于将由浏览器识别的姿势(例如摇动、捏拉缩放等)的姿势识别器在例如Flash应用之前接收用户接口事件。另一示例是双轻触；在浏览器的情况中，轻触的序列可能并未落在与发起第一轻触的窗口相同的窗口内。因为姿势引擎接收所有轻触，它也可以识别该情况中的双轻触。又一示例是拖拽；移动可以延伸出开始拖拽的原始窗口。因为姿势引擎从多个窗口或甚至整个用户接口区域接收用户接口事件，所以它能够检测跨越多个应用的窗口区域的姿势。
图IOa-IOg示出根据一个示例实施例的用于产生用户接口事件的状态和事件图的示例。
需要理解，可以存在状态及其功能性的不同实施方式，且不同功能性可以驻留在各种状态中。在该示例实施例中，不同状态可以描述如下。初始(Init)状态是任意事情发生之前状态机驻留的状态且是在完成源于用户输入的所有操作之后所返回的状态。各个输入流从该初始状态开始。调遣(dispatch)状态是没有触摸、保持或抑制计时器正在运行的状态机的一般状态。触摸时间内(InTouchTime)状态是在用户触摸输入设备之后状态机所驻留的状态且是通过提起触摸、从触摸区域移开或通过保持原位足够长的时间而结束的状态。状态还过滤出一些偶然向上和向下事件。此状态的目的是允许在产生用户接口事件之前稳定触摸输入(指尖可能稍微移动，铁笔可能略微跳动或其他类似微移动可能发生)。触摸区域内(触摸区域中)状态是滤出停留在触摸区域中的事件(来自微移动的事件)的状态。保持时间中_U(InHoldTime_U)状态是监控触摸的保持向下的状态且在保持停留足够长的时间时则产生保持事件。该状态的目的是滤出微移动以查看是否要产生保持用户接口事件。保持时间中_D(InH0ldTime_D)状态用于处理保持期间的向上-向下事件。状态抑制_0 (Suppress_D)用于滤出偶然向上和向下序列。抑制_D状态的功能性在可能容易发生这种偶然向上/向下事件的电阻性触摸板的场合下可能是有利的。
在图IOa的示例中，状态机处于Init状态。当接收向下触摸硬件事件时，事件被消耗(即，并不进一步传递或允许稍后使用)，且计时器被初始化(事件的消耗使用如图IOa 所示具有虚线周边的方框标记)。如果没有计时器被使用，则产生触摸用户接口事件(事件的产生使用如图IOa所示顶部具有水平线的方框标记)。在此之后，如果保持计时器> 0， 则状态机进入保持时间中_U状态(状态转变使用左边具有垂直线的方框标记)。如果触摸区域> 0，则状态机进入触摸区域中状态，以确定触摸是否停留在原始区域内。否则，状态机然后进入调遣状态。不同于向下事件的其他事件可能是错误的，且可以被忽略。
在图IOb的示例中，状态机处于调遣状态。如果接收拖拽或向上硬件事件，则事件被消耗。对于电容性触摸设备，产生释放用户接口事件，且对于电阻性触摸设备，如果没有抑制计时器被激活，则产生释放。在产生释放之后，状态机进入Init状态。对于电阻性触摸设备，如果存在有效的抑制计时器，则计时器被初始化，且状态机进入抑制_D状态。如果接收拖拽硬件事件，则产生移动用户接口事件。如果不匹配用户保持用户接口事件的标准， 则状态机进入调遣状态。如果匹配用于保持的标准，则初始化保持定时器，且状态机进入保持时间中—U状态。
在图IOc的示例中，示出对在触摸时间中状态的硬件事件的过滤。如果在(初始) 触摸区域内接收拖拽硬件事件，则事件被消耗且状态机进入在触摸时间中状态。如果接收到在预定触摸区域外的电容性设备中的拖拽事件或向上事件，所有计时器清零且产生触摸用户接口。状态机然后进入调遣状态。如果接收到来自电阻性触摸设备的触摸超时事件或向上事件，则触摸计时器清零且产生触摸事件。如果保持计时器> 0，则状态机进入触摸保持中-U状态。如果没有有效保持计时器且接收到触摸超时，则状态机进入触摸区域中状态。如果接收到电阻性向上事件且没有有效保持计时器，则状态机进入调遣状态。图IOC 的状态机可以具有在保持检测期间消除零星向上/向下事件的益处。
在图IOd的示例中，示出对触摸区域中状态的硬件事件的过滤。如果在触摸区域内接收到拖拽硬件事件，则事件被消耗且状态机保持在触摸区域中状态中。换句话说，如果接收到足够靠近原始向下事件的拖拽事件，则如前所述，状态机将这些事件作为微拖拽事件而滤出。如果在区域外接收拖拽事件或接收向上事件，则状态机进入调遣状态。
在图IOe的示例，示出对抑制_0状态中的偶然向上和向下硬件事件的过滤。如果接收到向下硬件事件，则抑制计时器被清零且事件被重命名为拖拽硬件事件。状态机然后进入调遣状态。如果接收到抑制超时事件，则抑制计时器被清零且产生释放用户接口事件。 状态机然后进入Init状态。换句话说，状态机使用拖拽事件代替偶然向上事件以及随后的向下事件。如果在超时期间没有检测到向下事件，则产生释放。抑制_D状态可以用于电阻性输入设备。
在图IOf的示例，示出对保持在保持时间中_U状态期间的硬件事件的过滤。如果接收向下硬件事件，则状态机进入保持时间中_D状态。如果在保持区域内接收到拖拽事件，则事件被消耗且状态机保持在保持时间中』状态中。如果接收到保持区域外的拖拽事件或电容性向上事件，则保持计时器被清零且状态机进入调遣状态。如果接收到来自电阻性输入设备向上事件，则事件被消耗，抑制计时器被初始化，且状态机进入保持时间中_D 状态。如果接收到保持超时，则产生保持用户接口事件，且保持计时器重新开始。状态机保持在保持时间中』状态。换句话说，在保持计时器产生超时时，产生保持用户接口事件，且如果在保持区域外接收到拖拽事件或接收到有效向上事件，则放弃保持检测。
在图IOg的示例，示出对保持在保持时间中_D状态期间的硬件事件的过滤。如果接收到向上硬件事件，则状态机进入保持时间中_U状态。如果接收到超时，则产生释放用户接口事件，计时器被清零且状态机进入Init状态。如果接收到向下硬件事件，则事件被消耗，且抑制计时器清零。如果在保持区域内接收到事件，则状态机进入保持时间中』状态。如果在保持区域外接收到事件，则产生移动用户接口事件，保持计时器清零且状态机进入调遣状态。换句话说，如果原先接收了向上事件(在保持时间中』中)，则进入保持时间中_D状态。状态等待向下事件一个指定时间，且如果产生了超时，则状态产生释放用户接口事件。如果接收到向下事件，则如果在保持区域内接收到事件，则状态机返回到原先状态，且如果在保持区域外接收到事件，则产生移动事件。
本发明可以通过将硬件事件或低级别事件抽象到较高级别用户接口事件而提供益处。例如，当用户改变移动方向或停止移动时，电阻性触摸屏可能产生幻象事件。根据一个示例实施例，这种低级别幻象事件不能到达姿势识别器，因为系统首先从低级别事件产生较高级别用户接口事件。在产生用户接口事件的过程中，通过使用计时器或如前面解释的其他方法滤出幻象事件。同时，在对使用本发明的实施例的平台的应用编程时，使用较高级别的用户事件可以更加简单。本发明还可以允许更加简单地实施多姿势识别。再者， 从一个姿势到另一姿势的切换也可以被更加简单地检测。例如，保持用户接口事件的产生可以使得摇动或其他姿势的识别器不必检测移动的结束，因为另一姿势识别器对此进行处理。因为连续从低级别事件产生用户接口事件，本发明还提供可预测性和应用测试的简单性。一般而言，不同实施例可以简化对在应用本发明的平台上的应用的编程和使用。
可以在计算机程序代码的帮助下实施本发明的各个实施例，该计算机程序代码驻留在存储器中，且促使相关装置实施本发明。例如，终端设备可以包括用于处理、接收和传输数据的电路和电子器件；位于存储器中的计算机程序代码；以及在运行计算机程序代码时促使终端设备实施一个实施例的特征的处理器。而且，网络设备可以包括用于处理、接收和传输数据的电路和电子器件；位于存储器中的计算机程序代码；以及在运行计算机程序代码时促使网络设备实施一个实施例的特征的处理器。
很明显，本发明并不只限于上述实施例，而是可以在所附权利要求书的范围内进行修改。
权利要求
1.一种用于接收用户输入的方法，包括从用户接口输入设备接收低级别事件，使用所述低级别事件形成用户接口事件，形成用于所述用户接口事件的修改量相关信息，根据所述用户接口事件和所述修改量形成姿势信息，以及使用所述姿势信息作为装置的用户输入。
2.根据权利要求I所述的方法，还包括将所述用户接口事件和所述修改量转发到姿势识别器，以及通过所述姿势识别器形成所述姿势信息。
3.根据权利要求I或2所述的方法，还包括从用户接口输入设备接收多个用户接口事件，将所述用户接口事件转发到多个姿势识别器，以及通过所述姿势识别器形成至少两个姿势。
4.根据权利要求1、2或3所述的方法，其中所述用户接口事件是触摸、释放、移动和保持的组其中之一。
5.根据权利要求I至4其中任一项所述的方法，还包括从时间信息、区域信息、方向信息、速度信息和压力信息的组其中至少一个形成所述修改量。
6.根据权利要求I至5其中任一项所述的方法，还包括响应于在适当位置保持触摸输入或按键按压预定时间，形成保持用户接口事件，以及在形成所述姿势信息时使用所述保持事件。
7.根据权利要求I至6其中任一项所述的方法，还包括从多触摸的触摸输入设备接收至少两个不同的用户接口事件，以及使用所述至少两个不同的用户接口事件来形成多触摸姿势。
8.根据权利要求I至7其中任一项所述的方法，其中所述用户接口输入设备包括触摸屏、触摸板、笔、鼠标、触觉输入设备、数据手套和数据服的组其中之一。
9.根据权利要求I至8其中任一项所述的方法，其中所述用户接口事件是向下触摸、释放、保持和移动的组其中之一。
10.一种装置，包括至少一个处理器、存储器，所述存储器包括计算机程序代码，所述存储器和所述计算机程序代码被配置成利用所述至少一个处理器促使所述装置至少从用户接口输入模块接收低级别事件，使用所述低级别事件形成用户接口事件，形成用于所述用户接口事件的修改量相关信息，根据所述用户接口事件和所述修改量形成姿势信息，以及使用所述姿势信息作为装置的用户输入。
11.根据权利要求10所述的装置，还包括计算机程序代码，所述计算机程序代码被配置成利用所述至少一个处理器促使所述装置至少将所述用户接口事件和所述修改量转发到姿势识别器，以及通过所述姿势识别器形成所述姿势信息。
12.根据权利要求10或11所述的装置，还包括计算机程序代码，所述计算机程序代码被配置成利用所述处理器促使所述装置至少从用户接口输入设备接收多个用户接口事件；将所述用户接口事件转发到多个姿势识别器，以及通过所述姿势识别器形成至少两个姿势。
13.根据权利要求10、11或12所述的方法，其中所述用户接口事件是触摸、释放、移动和保持的组其中之一。
14.根据权利要求10至13其中任一项所述的装置，还包括计算机程序代码，所述计算机程序代码被配置成利用所述处理器促使所述装置至少根据时间信息、区域信息、方向信息、速度信息和压力信息的组其中至少一个形成所述修改量。
15.根据权利要求10至14其中任一项所述的装置，还包括计算机程序代码，所述计算机程序代码被配置成利用所述处理器促使所述装置至少响应于在适当位置保持触摸输入或按键按压预定时间，形成保持用户接口事件，以及在形成所述姿势信息时使用所述保持事件。
16.根据权利要求10至15其中任一项所述的装置，还包括计算机程序代码，所述计算机程序代码被配置成利用所述处理器促使所述装置至少从多触摸的触摸输入设备接收至少两个不同的用户接口事件，以及使用所述至少两个不同的用户接口事件来形成多触摸姿势。
17.根据权利要求10至16其中任一项所述的装置，其中所述用户接口模块包括触摸屏、触摸板、笔、鼠标、触觉输入设备、数据手套和数据服的组其中之一。
18.根据权利要求10至17其中任一项所述的装置，其中所述装置是计算机、便携式通信设备、家用电器、诸如电视的娱乐设备、诸如汽车、轮船或飞机的交通设备或智能建筑其中之一。
19.一种系统，包括至少一个处理器、存储器，所述存储器包括计算机程序代码，所述存储器和所述计算机程序代码被配置成利用至少一个处理器促使所述系统至少从用户接口输入模块接收低级别事件，使用所述低级别事件形成用户接口事件，形成用于所述用户接口事件的修改量相关信息，根据所述用户接口事件和所述修改量形成姿势信息，以及使用所述姿势信息作为装置的用户输入。
20.根据权利要求19所述的系统，其中所述系统包括彼此通信连接地布置的至少两个装置，并且其中所述至少两个装置中的第一装置被布置为接收所述低级别事件，且其中所述至少两个装置中的第二装置被布置成响应于从所述第一装置接收用户接口事件，形成所述姿势信息。
21.一种装置，包括处理装置、存储器装置以及用于从用户接口输入装置接收低级别事件的装置，用于使用所述低级别事件形成用户接口事件的装置，用于形成用于所述用户接口事件的修改量相关信息的装置，用于根据所述用户接口事件和所述修改量形成姿势信息的装置；以及用于使用所述姿势信息作为装置的用户输入的装置。
22.—种计算机程序产品，所述计算机程序产品存储在计算机可读介质上，且可在数据处理设备中执行，所述计算机程序产品包括用于从用户接口输入设备接收低级别事件的计算机程序代码部分，用于使用所述低级别事件形成用户接口事件的计算机程序代码部分，用于形成用于所述用户接口事件的修改量相关信息的计算机程序代码部分；用于根据所述用户接口事件和所述修改量形成姿势信息的计算机程序代码部分；以及用于使用所述姿势信息作为装置的用户输入的计算机程序代码部分。
23.根据权利要求22所述的计算机程序产品，其中该计算机程序产品是操作系统。
全文摘要
本发明涉及用于接收用户输入的方法、设备和系统。首先通过诸如触摸屏的用户接口输入设备产生的低级别事件形成用户接口事件。通过形成用于用户接口事件的诸如时间和坐标信息之类的修改量相关信息，来修改该用户接口事件。事件及其修改量被发送到姿势识别引擎，在其中从用户接口事件及其修改量形成姿势信息。姿势信息然后用作装置的用户输入。换句话说，姿势不能从输入设备的低级别事件直接形成。而是，从低级别事件形成用户接口事件，且然后从这些用户接口事件识别姿势。
文档编号G06F3/0487GK102939578SQ201080067200
公开日2013年2月20日 申请日期2010年6月1日 优先权日2010年6月1日
发明者A·多郎克, E·里科拉 申请人:诺基亚公司