一种用于处理触摸事件的方法、系统、触摸敏感设备与流程

相关申请的交叉引用

本申请是国际申请号为pct/us2009/035858、国际申请日为2009年03月03日、中国国家申请号为200980000015.5的发明专利申请的分案申请。

本主题主要涉及web浏览(webbrowsing，网页浏览)服务。

背景技术：

web页面(webpage,网页)是用标记语言创建的，该标记语言提供了这样一种手段，即用于描述文档中基于文本的信息的结构并为该文本增补交互表单、嵌入图像及其他对象。一种流行的标记语言是超文本标记语言(html)，该语言是用被尖括号(anglebracket)包围的标记的形式编写的。html可以描述web页面的外观和语义，并且可以包括嵌入式脚本语言代码(例如)，该代码可以影响web浏览器及其他html处理器的行为。为开发人员提供了在web页面中添加鼠标事件处理机(handler)或事件监听器(listener)的能力。这些鼠标事件处理机可以被指定到web页面中的特定区域，并且可以被配置成接收这些区域中的鼠标事件，例如鼠标释放(mouseup)事件或鼠标按下(mousedown)事件。

相比之下，对使用触摸敏感设备导航的web页面来说，这些web页面通常需要对由用户使用一个或多个手指触摸web页面以及做出手势所产生的触摸事件做出响应。常规的鼠标事件处理机不能正确解释这些触摸事件。由此，这些触摸事件需要一种不同的触摸事件模型来正确解释触摸事件并且允许开发人员充分利用触摸敏感显示器或设备的能力。

技术实现要素：

从触摸敏感设备中可以获取一个或多个触摸输入信号。如果触摸输入信号与触摸敏感设备上显示的web页面中的一个或多个区域相关联，那么与web页面的区域相关联的触摸事件将会由web页面进行处理。如果触摸输入信号不与web页面中的区域相关联，那么与触摸敏感设备相关联的应用处理触摸输入信号。

在某些实施方式中，一种方法包括：接收触摸输入信号；确定触摸输入信号是否与触摸敏感设备上显示的web页面中的一个或多个区域相关联；以及如果触摸输入信号与web页面的一个或多个区域相关联，则将触摸事件转发到web页面，以便进行处理。

在这里还公开了涉及系统、方法和计算机可读介质的其他实施方式。

附图说明

图1示出的是例示web页面文档。

图2示出的是例示的具有多点触摸能力的设备的处理堆栈。

图3是用于处理触摸事件的例示处理的流程图。

图4示出的是例示的具有多点触摸能力的设备。

图5是用于图4中具有多点触摸能力的设备的例示网络操作环境的框图。

图6是图4中具有多点触摸能力的设备的例示实施方式的框图。

具体实施方式

例示的web页面结构和dom

图1a显示的是可以在浏览器上显示的例示web页面100。该浏览器可以主存在便携式设备上，诸如图4中具有多点触摸能力的设备400上。在web页面100上可以显示一个或多个单元，即单元102(“单元1”)、单元104(“单元2”)以及单元106(“单元3”)。这些单元102、104、106可以与用户可选的web页面100中的各区域相对应，并且在这里还可以提供附加功能作为选择结果。举例来说，这些单元可以对应于web页面100上的按钮。此外，这些单元还可以嵌套，以使一个单元包含另一个单元。例如，单元104包含了单元108。在所显示的示例中，举例来说，单元108是一个嵌套在单元104内部的擦除器控制(scrubbercontrol)，而单元104则例如可以是媒体播放器的用户界面。

在某些实施方式中，用户可以使用手指而不是鼠标以结合web页面100上的单元执行各种功能。例如，用户可以使用图4所示的触摸敏感显示器402来触摸web页面100的单元。在一个示例中，用户可以通过用一个或多个手指触摸该单元和/或通过做出像轻扫(swipe)、合拢(pinch)或旋转(rotate)运动之类的手势来选择某个单元。为了识别触摸输入信号，web页面100的某些区域可以与触摸事件处理机相关联。如将要参考图1b所描述的那样，这种处理可以用dom以及嵌入式脚本语言来实现。

图1b是与web页面100相关联的例示性dom150。dom150提供了web页面100的结构表示，并且将web页面内容描述成是一组可以被脚本语言(例如)解释的对象。在某些实施方式中，dom150通过将web页面100中的单元102、104、106、108映射到树的各独立节点来提供对web页面结构的访问。例如，单元102对应于节点154。单元104对应于节点156。单元106对应于节点158。单元108对应于节点160。根节点152对应于整个web页面100。

在某些实施方式中，通过将dom150中的相应节点与触摸事件处理机相关联，可以将web页面100中的一个或多个单元102、104、106、108与一个或多个相应的触摸事件处理机相关联。触摸事件处理机可以被插入到web页面100的html标签中，并且该触摸事件处理机可以在例如用户在web页面100上的某个单元内部进行触摸或做出手势时运行脚本语言来执行动作。举例来说，可以与dom150一起工作，以便将动作附着于不同的触摸事件。

在某些实施方式中，一个或多个单元102、104、106、108可以接收由事件处理机或监听器检测到的触摸输入。如参考图2所描述的那样，该触摸输入可以由触摸事件模型检测并处理成触摸事件，其中该触摸事件模型可以在软件堆栈的一个或多个层中实施。触摸事件可以由web页面100进一步处理。触摸事件可以采用与触摸敏感设备产生的原始触摸输入信号相比更易于在应用中使用的格式(例如属性)。举例来说，每一个触摸事件都可以包括一组当前正在发生的触摸所在的坐标。

web页面100中的每一个单元及其关联事件处理机都可以接收、处理和操作触摸事件。举个例子，如果驱动器202(图2)感测到与单元102相关联的触摸点110或是与单元104相关联的触摸点112，那么与单元102或104相关联的事件处理机就可以接收指示该单元已被触摸的独立的触摸事件，并且可以可选地将触摸事件发送到web页面100以供进一步处理。在某些实施方式中，如果被触摸的web页面100的区域不与事件处理机相对应，那么所述输入可由应用层214中的浏览器处理，而非web页面100来处理。

在某些实施方式中，应用层214中的浏览器可以接收所有触摸输入。该浏览器可以确定触摸输入是否与包含触摸处理机的web页面100的区域相关联。如果触摸输入与包含触摸处理机的web页面100的区域相关联，那么触摸事件模型可以产生触摸事件，并且将该触摸事件发送到web页面100以供处理。如果触摸输入并非web页面100的区域，那么浏览器可以处理该触摸输入。

参考图1的示例，用户可以在不释放第一触摸的同时(例如在保持手指按住第一触摸点的同时)，在第二位置触摸web页面100。举例来说，用户可以使用第一手指来对触摸点110进行触摸，并且在不从触摸点110释放开第一手指的情况下使用第二手指来对第二触摸点112进行触摸。由此，第二触摸点112上的第二触摸可以与触摸点110上的触摸同时发生。在本示例中，浏览器确定触摸点110和112是包含触摸处理机的web页面100的区域。于是，触摸事件模型分别为触摸点110和112上的触摸输入产生第一触摸事件和第二触摸事件，并且将第一和第二触摸事件发送到web页面100以供处理。

但是，存在用户在第三位置(例如触摸点114)触摸web页面100的情况。这时，浏览器将会确定该触摸不与关联于触摸处理机的web页面100的区域相关联。在这种情况下，浏览器不会向web页面100发送任何触摸事件以供处理。相反，浏览器会自己处理该事件。

在某些实施方式中，如果浏览器与触摸处理机相关联，那么浏览器可以根据与该浏览器相关联的触摸处理机来处理输入。例如，浏览器可以与允许用户缩放浏览器显示的触摸处理机相关联。

在某些实施方式中，在dom150中可以逐手指逐节点地检测触摸事件。例如，用户可在基本上相同的时间在触摸点110和触摸点112处触摸该触摸敏感显示器402，并且触摸事件模型可以检测到两个独立的触摸事件。由于dom150中的每一个节点102和104都与独立的触摸事件处理机相关联，因此，可以为触摸点110和触摸点112检测到独立触摸事件。

在某些实施方式中，触摸事件可以作为eventtarget(事件目标)而被递送到web页面100。触摸事件的某些示例可以包括触摸开始(touchstart)，触摸移动(touchmove)，触摸结束(touchend)以及触摸取消(touchcancel)。此外，其他触摸事件也是可能的。触摸开始是当用户首次将手指放在触摸敏感显示器402上且位于web页面100中与事件处理机相关联的一区域内时检测到的触摸事件。当用户在web页面100上四处移动其手指时，则可以检测到一个或多个触摸移动事件。当用户将其手指抬离web页面100时，则会检测到触摸结束事件。当系统中断常规事件处理时，则可检测到触摸取消。例如，触摸取消事件可以在为防止无意触摸而锁定触摸敏感显示器402时发生。

在某些实施方式中，手势事件还可以通过组合两个或多个触摸事件而被检测。与触摸事件相似，手势事件(gestureevent)同样可以作为事件目标(eventtarget)而被递送到web页面100。手势事件的某些示例可以是手势开始(gesturestart)，手势改变(gesturechange)和手势结束(gestureend)。手势事件可以包括缩放和/或旋转信息。旋转信息可以包括旋转值，该旋转值是一个以度数为单位的相对增量。web页面100上的单元可以根据该旋转值而被动态旋转。缩放信息可以包括一个缩放值，该缩放值是以文档像素为单位的相对增量。对与手势事件相关联的web页面100上的单元来说，其大小可以根据该缩放值而被动态调整。此外，其他手势事件也是可能的。

在某些实施方式中，可以接收一个包含了用于标识web页面100上的一个或多个触摸的触摸事件数据的触摸列表。触摸事件数据可以包括触摸标识符以及至少一组触摸位置坐标。此外，该触摸列表还可以包括涉及与每一个触摸相关联的触摸事件目标的触摸事件数据。在某些实施方式中，这样一个触摸位置坐标组可以包括客户机坐标、页面坐标和屏幕坐标。在某些实施方式中，触摸事件数据可以标识一个或多个有改变的触摸。

在某些实施方式中，gestureevent可以在touchevent之前被发送到web页面100。举个例子，如果用户将手指放在触摸点110和触摸点112上，然后使用这些手指在触摸敏感显示器上做出顺时针或逆时针旋转手势，那么触摸事件模型将会检测到这些多个触摸事件，并且会将这些触摸事件组合成一个手势事件。然后，该手势事件可以被发送到web页面100，其后跟随的是经组合形成该手势事件的各触摸事件。这样一来，开发人员可以访问手势事件以及该手势事件中的各个单独的触摸事件，由此就能在开发web应用时，为开发人员提供更大的灵活性。

在某些实施方式中，触摸事件是依照如下顺序接收的：触摸开始事件、一个或多个触摸移动事件、以及触摸结束或触摸取消事件。通过使用图1a的示例，当用户接触触摸点110时，与单元102相关联的第一触摸事件处理机将会检测到第一触摸开始事件。当用户接触触摸点112时，与单元104相关联的第二触摸事件处理机将会检测到第二触摸开始事件。当用户旋转其手指而没有抬起其手指时，第一和第二触摸事件处理机将会检测到触摸移动事件，并且该触摸移动事件可以被触摸事件模型解释成是旋转手势事件。当用户结束旋转并且将其手指抬离web页面100时，第一和第二触摸事件处理机将会检测到触摸结束事件。所有或某些触摸事件可以通过触摸事件应用编程接口(api)而对开发人员可用。触摸api可以作为软件开发工具包(sdk)或是作为应用的一部分(例如作为浏览器工具包的一部分)而对开发人员可用。该触摸事件api可以依靠其他服务、框架和操作系统来执行其各种功能。如参考图2所述，在触摸事件与那些可以插入文档用以在应用中定义事件动作的属性相关联的情况下，这些服务、框架和操作系统可以是软件或处理堆栈的一部分。

例示的idl

现在将用接口描述语言(idl)描述例示的触摸事件模型。idl的功能和数据结构可以由web设计人员或应用开发人员通过api来访问。对触摸事件和/或手势事件的访问可以与那些可插入标记语言文档(例如html，xml)用以在应用中定义事件动作的属性相关联。例如，这些属性可以插入到html文档的一个或多个html标签中，用以产生在触摸敏感显示器402上显示的web页面。该事件动作可以包括运行一个嵌入式脚本(例如)。

以下是通过使用如上的例示idl来处理触摸事件的html代码片段的示例。举例来说，以下html显示的是用html代码添加到单元中的触摸事件监听器touchstart和gesturestart：

this.element.addeventlistener(′touchstart′，function(e){returnself.ontouchbegin(e)}，false)；

this.element.addeventlistener(′gesturestart′，function(e){returnself.ongesturestart(e)}，false)；

与以上idl相对应的html代码可以如下：

用于多点触摸设备的例示处理堆栈

图2是例示的具有多点触摸能力的设备的处理堆栈的图示。如上所述的触摸事件模型可以在处理堆栈及堆栈中的用户各类资源的一个或多个区域中实施。硬件200的层可以包括各种硬件接口元件，例如触摸敏感或启用的设备或是触摸敏感显示器。该触摸敏感设备可以包括显示器以及用于同时感测多个触摸的面板。该硬件层200还可以包括用于检测触摸敏感显示器或设备的定向(例如纵向，横向)的加速度计。由此，用于指示定向的信号可由触摸事件模型用来缩放web页面以进行最优显示。

驱动器层202中的一个或多个驱动器可以与硬件200进行通信。例如，这些驱动器可以接收和处理由硬件层200中的触摸敏感显示器或设备产生的触摸输入信号。核心操作系统(os)204可以与一个或多个驱动器进行通信。核心os204可以处理从一个或多个驱动器接收的原始输入数据。在某些实施例中，这些驱动器可以被认为是核心os204的一部分。

一组os应用编程接口(api)206可以与核心os204进行通信。这些api可以是一组通常与操作系统包含在一起的api(例如linux或unixapi)。其中一组核心基础api208可以使用osapi206，而一组基础api210则可以使用核心基础api208。

web页面软件开发工具包(sdk)210可以包括一组被设计成供在设备上运行的应用使用的api。而触摸事件api则例如可被包含在web页面sdk210中。web页面sdk210的api可以利用基础api208。web页面sdk210例如可以包括由apple提供的webkit(web工具包)。web页面sdk210可以作为api提供，或者也可以通过应用，例如，通过诸如由apple提供的之类的浏览器来访问。

在设备上运行的应用214可以利用web页面sdk210的api来创建web页面。web页面sdk210的api则又可以与各下层单元进行通信，由此最终与触摸敏感显示器或设备以及各种其他用户接口硬件进行通信。虽然每一层都可以利用其下方的层，但这并不总是需要的。例如在某些实施例中，应用214可以不定期地与osapi206通信。

例示的触摸事件优化处理

图3是用于优化触摸事件处理的处理300的流程图。该处理300是以接收来自触摸敏感设备的触摸输入信号为开始的(302)。将会对触摸输入信号是否与触摸敏感显示设备上显示的web页面的一个或多个区域相关联做出判定(304)。所述web页面的一个或多个页面可以与触摸事件相关联。举例来说，该判定可由与触摸敏感设备相关联的应用(例如浏览器)来做出。如果触摸信号与web页面的一个或多个区域相关联，那么与web页面的一个或多个区域相关联的触摸事件可以由web页面进行处理(306)。如果触摸信号不与web页面的一个或多个区域相关联，那么该应用可以处理该触摸信号。

移动设备综述

图4是例示的具有多点触摸能力的设备400的框图。在某些实施方式中，具有多点触摸能力的设备400包括触摸敏感显示器402。触摸敏感显示器402可以实施液晶显示器(lcd)技术，发光聚合物显示器(lpd)技术或是某些其他显示器技术。触摸敏感显示器402可以对触觉(haptic)和/或与用户的触知(tactile)接触敏感。

在某些实施方式中，触摸敏感显示器402可以包括多点触摸敏感显示器402。举例来说，触摸敏感显示器402可以处理多个同时的触摸点，这其中包括处理与每一个触摸点的压力、角度和/或位置相关的数据。此类处理使用多个手指、和弦(chording)及其他交互来方便手势和交互。此外，也可以使用其他触摸敏感显示器技术，例如使用指示笔或其他指示设备来进行接触的显示器。关于多点触摸敏感显示器技术的某些示例在美国专利no.6,323,846、no.6,570,557、no.6,677,932以及美国专利公开2002/0015024a1中有所描述，这其中的每一份文献全都在这里全部引入作为参考。在某些实施方式中，具有多点触摸能力的设备400可以在触摸敏感显示器402上显示一个或多个图形用户界面，以便为用户提供对各种系统对象的访问以及向用户传达信息。

例示的具有多点触摸能力的设备的功能

在某些实施方式中，具有多点触摸能力的设备400可以实施多种设备的功能，例如电话设备、电子邮件设备、网络数据通信设备、wi-fi基站设备以及媒体处理设备。在某些实施方式中，具有多点触摸能力的设备400可以包括用于显示web页面(例如web页面100)的web浏览器404。触摸敏感显示器402可以接收在web页面100上产生的触摸输入信号，并且如上所述的触摸模型可以用于根据触摸输入信号来确定触摸和/或手势事件。在某些实施方式中，具有多点触摸能力的设备400可以实施网络分布功能。在某些实施方式中，在具有多点触摸能力的设备400接近用户耳朵时，可以锁操作(lockdown)触摸敏感显示器402。这种锁操作将会导致产生如参考图1b所描述的触摸取消事件。

在某些实施方式中，如指向箭头474所示，加速度计472可以用于检测具有多点触摸能力的设备400的移动。相应地，显示对象和/或媒体可以根据检测到的定向，例如，纵向或横向来呈现。在某些实施方式中，具有多点触摸能力的设备400可以包括用于支持位置确定能力的电路和传感器，其中举例来说，该能力可以是由全球定位系统(gps)或其他定位系统(例如使用wi-fi接入点的系统、电视信号、蜂窝网格、统一资源定位符(url))提供的。在某些实施方式中，定位系统(例如gps接收机)既可以集成到具有多点触摸能力的设备400中，也可以作为能通过接口来与具有多点触摸能力的设备400耦合的独立设备来提供，以便提供对基于位置的服务的访问。这种具有多点触摸能力的设备400还可以包括一个或多个无线通信子系统。

在某些实施方式中，可以包括诸如通用串行总线(usb)端口或对接端口(dockingport)之类的端口设备，或是某些其他有线端口连接。端口设备，例如可用于与其他计算设备建立有线连接，所述其他计算设备例如可以是其他具有多点触摸能力的设备400、网络接入设备、个人计算机、打印机或是能够接收和/或发射数据的其他处理设备。在某些实施方式中，端口设备允许具有多点触摸能力的设备400使用一种或多种协议来与主机设备同步，诸如可以使用tcp/ip、http、udp以及其他任何已知协议。

网络操作环境

图5是用于图4中具有多点触摸能力的设备400的例示网络操作环境600的框图。举例来说，图4中具有多点触摸能力的设备400可以在数据通信中经一个或多个有线和/或无线网络510进行通信。例如，无线网络512可以是例如蜂窝网络，它可以通过使用网关516来与诸如因特网之类的广域网(wan)514进行通信。同样，接入点518可以是诸如802.11g无线接入点，它可以提供对广域网514的通信访问。在某些实施方式中，语音和数据通信可以经由无线网络512和接入点518来建立。例如，具有多点触摸能力的设备400a可以经由无线网络512、网关516以及广域网514(例如使用tcp/ip或udp协议)来发出和接收电话呼叫(例如使用voip协议)，发送和接收电子邮件消息(例如使用pop3协议)，以及检索电子文档和/或流，例如web页面、照片和视频。同样，具有多点触摸能力的设备400b可以经由接入点518和广域网514来发出和接收电话呼叫，发送和接收电子邮件消息，以及检索电子文档。在某些实施方式中，具有多点触摸能力的设备400可以使用一条或多条电缆与接入点518物理连接，并且接入点518可以是个人计算机。在这种配置中，具有多点触摸能力的设备400可以被称为“带缆(tethered)”设备。

具有多点触摸能力的设备400a和400b还可以借助其他手段来建立通信。例如，具有多点触摸能力的设备400a可以经由无线网络512而与其他无线设备，例如与其他具有多点触摸能力的设备400、蜂窝电话等等进行通信。同样，具有多点触摸能力的设备400a和400b可以通过使用一个或多个通信子系统来建立诸如个人局域网之类的点对点通信520，其中所述通信子系统可以是图4所示的bluetooth^tm通信设备488。此外，也可以实施其他的通信协议和拓扑结构。

举例来说，具有多点触摸能力的设备400可以经由一个或多个有线和/或无线网络510而与网络资源530进行通信。例如，该网络资源可以如参考图1～2所述，是用于递送那些能够经由触摸模型而被触摸的web页面的web服务器。

还可以提供包括软件更新服务的其他服务，其中所述软件更新服务自动确定是否存在用于具有多点触摸能力的设备400上的软件的软件更新，随后则将该软件更新下载到具有多点触摸能力的设备400，在设备400上软件可以被手动或自动解包和/或安装。

例示的移动设备架构

图6是图4中具有多点触摸能力的设备400的例示实施方式的框图600。具有多点触摸能力的设备400可以包括存储器接口602、一个或多个数据处理器、图像处理器和/或中央处理单元604、以及外围接口606。存储器接口602、一个或多个处理器604和/或外围接口606既可以是分立元件，也可以集成在一个或多个集成电路中。在具有多点触摸能力的设备400中，各种元件可以通过一条或多条通信总线或信号线来耦合。

传感器、设备和子系统可以耦合到外围接口606，以便帮助实现多种功能。例如，运动传感器610、光传感器612和接近度传感器614可以耦合到外围接口606，以方便有关图4所述的定向、照明和接近度功能。其他传感器616同样可以与外围接口606相连，例如定位系统(例如gps接收机)、温度传感器、生物测定传感器或其他感测设备，由此可以帮助实施相关的功能。

相机子系统620和光学传感器622可以用于方便诸如记录照片和视频剪辑的相机功能的实现，其中所述相机子系统和光学传感器例如可以是电荷耦合器件(ccd)或互补金属氧化物半导体(cmos)光学传感器。

可以通过一个或多个无线通信子系统624来帮助实现通信功能，其中所述无线通信子系统可以包括射频接收机和发射机和/或光(例如红外)接收机和发射机。通信子系统624的特定设计和实施方式可以取决于具有多点触摸能力的设备400打算在经其工作的一个或多个通信网络。例如，具有多点触摸能力的设备400可以包括被设计成经gsm网络、gprs网络、edge网络、wi-fi或wimax网络以及bluebooth^tm网络上工作的通信子系统624。特别地，无线通信子系统624可以包括主机协议，以使设备500可被配置成用于其他无线设备的基站。

音频子系统626可以与扬声器628以及麦克风630相耦合，以便帮助实施启用语音的功能，例如语音识别、语音复制、数字记录和电话功能。

i/o子系统640可以包括触摸屏控制器642和/或一个或多个其他输入控制器644。触摸屏控制器642可以耦合到触摸屏646。举例来说，该触摸屏646和触摸屏控制器642可以使用多种触摸感测技术中的任何一种来检测与之进行的接触和移动或是暂停，其中感测技术包括但不局限于电容性、电阻性、红外和表面声波技术，以及其他的接近度传感器阵列或其他用于确定与触摸屏646的一个或多个接触点的部件。

一个或多个其他输入控制器644可以耦合到其他输入/控制设备648，例如一个或多个按钮、摇杆开关、拇指旋轮、红外端口、usb端口、和/或指示笔之类的指针设备。所述一个或多个按钮(未显示)可以包括用于控制扬声器628和/或麦克风630音量的向上/向下按钮。

在一个实施方式中，可以通过按住按钮持续第一持续时间来解除触摸屏646的锁定；并且如果按住按钮持续第二持续时间，其中第二持续时间长于第一持续时间，那么可以接通或切断具有多点触摸能力的设备400的电源。用户能够定制一个或多个按钮的功能。此外，举例来说，触摸屏646也可以用于实施虚拟或软按钮和/或数字键盘或键盘。

在某些实施方式中，具有多点触摸能力的设备400可以呈现已记录的音频和/或视频文件，例如mp3、aac和mpeg文件。在某些实施方式中，具有多点触摸能力的设备400可以包括mp3播放器的功能，例如ipod^tm。由此，具有多点触摸能力的设备400可以包括一个与ipod兼容的32引脚连接器。此外还可以使用其他的输入/输出和控制设备。

存储器接口602可以与存储器650相耦合。该存储器650可以包括高速随机存取存储器和/或非易失性存储器，例如一个或多个磁盘存储设备、一个或多个光学存储设备、和/或闪存存储器(例如nand，nor)。存储器650可以存储操作系统652，例如darwin、rtxc、linux、unix、osx、windows，或是vxworks之类的嵌入式操作系统。该操作系统652可以包括用于处理基本系统服务以及执行依赖于硬件的任务的指令。

存储器650还可以存储通信指令654，以便帮助实施与一个或多个附加设备、一个或多个计算机和/或一个或多个服务器的通信。该存储器650可以包括用于帮助实施图形用户界面处理的图形用户界面指令656；用于帮助实施与传感器相关的处理和功能的传感器处理指令658；用于帮助实施与电话相关的处理和功能的电话指令660；用于帮助实施与电子消息收发相关的处理和功能的电子消息收发指令662；用于帮助实施与web浏览相关的处理和功能的web浏览指令664；用于帮助实施与媒体处理相关的处理和功能的媒体处理指令666；用于帮助实施与gps和导航相关的处理和功能的gps/导航指令668；用于帮助实施与相机相关的处理和功能的相机指令670；和/或其他那些用于帮助实施如参考图1～5描述的处理和功能的其他消息收发指令672。

以上标识的每个指令和应用都可以与用于执行上述一个或多个功能的一组指令相对应。这些指令没有必要实现为独立的软件程序、过程或模块。存储器650可以包括附加的指令或更少的指令。此外，具有多点触摸能力的设备400的各种功能可以在硬件和/或软件中实施，包括在一个或多个信号处理和/或专用集成电路中实施。

所描述的特征既可以在数字电子电路中实施，也可以在计算机硬件、固件、软件或其组合中实施。这些特征可以在计算机程序产品中实施，其中该产品有形包含在机器可读存储设备或传播信号之类的信息载体中，以便由可编程处理器加以执行；此外，方法步骤可以由可编程处理器来执行，其中该处理器将会执行指令程序，以便通过对输入数据执行操作并产生输出来执行所描述的实施方式的功能。

有利的是，所描述的特征可以在一个或多个计算机程序中实施，其中所述计算机程序可以在可编程系统上运行，该可编程系统包括至少一个可编程处理器，所述至少一个可编程处理器被耦合以从数据存储系统、至少一个输入设备以及至少一个输出设备中接收数据和指令并向其传送数据和指令。计算机程序是一组可以直接或间接在计算机中使用，以便执行某些活动或是带来某种结果的指令。计算机程序可以用包括编译或解释性语言在内任何形式的编程语言来编写(例如objective-c、java)，此外，它也可以采用任何形式来部署，包括独立程序或是模块、元件、子例程，或是适合在计算环境中使用的其他单元。

作为例示，适于执行指令程序的处理器包括任何类型的计算机中的通用和专用微处理器，以及唯一处理器或是多处理器或核之一。通常，处理器会接收来自只读存储器、随机存取存储器或是这二者的指令和数据。计算机的基本部件是用于执行指令的处理器以及一个或多个用于存储指令和数据的存储器。通常，计算机还包括一个或多个用于存储数据文件的大容量存储设备或者以可操作的方式耦合成与至所述一个或多个用于存储数据文件的大容量存储设备进行通信；此类设备包括磁盘，例如内部硬盘和可移除盘；磁光盘；以及光盘。适合有形包含计算机程序指令和数据的存储设备包括任何形式的非易失性存储器，其示例包括：半导体存储器设备，如eprom、eeprom以及闪存设备；磁盘，例如内部硬盘和可移除盘；磁光盘；以及cd-rom和dvd-rom盘。处理器和存储器可以由asic(专用集成电路)补充或可被引入其内。

为了提供与用户的交互，这些特征可以在计算机上实施，其中该计算机具有crt(阴极射线管)或lcd(液晶显示器)监视器之类的显示设备用于向用户显示信息，并且还具有键盘以及鼠标或轨迹球之类的指示设备以供用户向计算机提供输入。

这些特征可以在计算机系统中实施，其中该计算机系统包括诸如数据服务器之类的后端元件，或者包括诸如应用服务器或因特网服务器之类的中间件元件，或者可以包括诸如具有图形用户界面或因特网浏览器的客户计算机之类的前端元件或其任意组合。系统元件可以借助诸如通信网络之类的任何形式的数字数据通信介质来连接。通信网络的示例包括lan、wan以及构成因特网的计算机和网络。

计算机系统可以包括客户机和服务器。客户机和服务器通常彼此远离，并且通常是通过网络来交互的。客户机与服务器的关系是借助运行在相应计算机上并且彼此具有客户机-服务器关系的计算机程序来产生的。

在这里已经描述了多种实施方式。但是应该理解，各种修改都是可行的。例如，通过组合、删除、修改或补充一个或多个实施方式的要素，就可以构成更多的实施方式。另举一例，图中描述的逻辑流程无需按照显示的特定次序或顺序来实现预期结果。此外，可以提供其他步骤，也可以从所描述的流程中删除步骤，并且可以向所描述的系统添加或从中移除其他元件。因此，其他实施方式处于所附权利要求的范围内。