专利名称：协调在具有两个或多个显示器的设备上显示的图像的制作方法
相关申请本申请根据35 USC§120要求于2001年4月2日提交的、申请号为No.60/280,791的美国临时专利申请的优先权。
背景技术：
本发明一般涉及手持通信和计算设备，比如蜂窝电话手机、灵巧电话、网络电话和PDA等。更具体地，本发明涉及用于协调在具有两个或多个显示器的手持设备上，特别是在那些包括直视显示器(direct-view display)和微显示器(microdisplay)的设备上，显示的图像的系统和方法，所述直视显示器用于观看相对较低分辨率的文本或图像(像当今在大多数蜂窝电话中构造的显示器)，所述微显示器使用放大光学器件来显示图像，当微显示器被拿近用户的眼睛时，用户能看到比直视显示器显示的图像更大和更高的分辨率。
使用近来开发的高分辨率的微显示模块技术，设备制造者能把微显示器嵌入到设备中，或者把包括可穿戴的显示器的微显示器附属到设备上，并允许用户在小型设备上观看全尺寸的网页—以及能够观看大的视频和静止图像、设计图、办公文档和其它的高分辨率内容。
设备制造者已经试验了在设备中嵌入微显示器以及将微显示器附属到设备上(包括附属可穿戴的靠近眼睛的显示器)。然而，在本发明之前，不便于和难于对微显示器增强的手持设备的微显示器上显示的全尺寸网页以及其他文档和应用程序进行导航，以及与它们交互。带有嵌入的微显示器的设备必须被拿近眼睛以便在微显示器上浏览内容。尽管用户不介意暂时将设备拿近眼睛来观看内容(毕竟，我们用照相机就是如此)，但用户不想使设备靠近眼睛的情况保持较长的时间周期。如果用户花费5分钟、10分钟或更多的时间来阅读一组网页或其他的文档或者与之交互，并且如果他们在那个时间中必须连续地将设备拿近眼睛，那么他们将会因该设备而变得很不舒服。而且，当设备必须靠近眼睛从而在打字中看到该文本时，在手持设备上键入文本(已经是相当别扭的活动)是特别别扭的。具有附属的可穿戴的显示器的设备(比如Xybernaut Corp在他们的可穿戴计算机系统中使用的头戴式单目显示器)允许用户在较长的时间周期中(相对于带有嵌入显示器的手持设备)舒适地使微显示器保持为靠近眼睛；但用户仍发现很难把文本键入到该可穿戴的显示器上看到的文档中。在该设备的微显示器上显示的网页或其他文档中键入文本典型地包括使用光标控制来在该微显示器上所示的虚拟键盘图像上“打字”(例如，使光标在虚拟键盘上显示的每个字符间移动并点击)，或使用分离的物理设备(比如小键盘、键盘、写字板或书写板，或虚拟键盘)来打字。使用在微显示器上显示的虚拟键盘来打字是乏味和缓慢的(特别是在将设备拿近眼睛时)，因为这需要用户在虚拟键盘上仔细地把光标定位在每个小字符上，以便键入每个字符。此外，在常规计算机上用一个鼠标在虚拟键盘上键入文本也是别扭的，并且当使用靠近眼睛的微显示器时就更为别扭。即使当用户可以在可穿戴的显示器上看文档的同时在物理键盘上键入文本时，如果用户没有很好的学会打字指法(也就是打字而不看键盘)，那么用户也会经历一种不舒服的思维不连续，因为他们要在键盘和可穿戴显示器的靠近眼睛的微显示器上所显示的图像之间频繁地移动他们的眼睛。
然而，在手持设备中使用靠近眼睛的微显示器的潜在好处是巨大的他们能允许用户在小型设备上观看全尺寸的网页和其它高分辨率的内容。因此，解决上述问题将使得能够开发引人注目的新类型的手持设备。本专利描述了帮助解决这些问题的发明。
可通过其而实现本发明的一种设备在美国专利申请S/N＿＿＿中被公开并要求保护，该申请与本申请在相同的时间提交，并转让给共同的受让人，以及被在此引入作为参考。
在使用本发明的设备中，至少一个显示器是直视显示器，就像2001中使用的多数蜂窝电话或PDA上的那些显示器，用于在大约12-24英寸的正常阅读距离上观看(本专利将其称作“臂长”观看)。并且该显示器中的至少一个是微显示器，它是带有放大光学元件的微小显示器，当微显示器被放在靠近眼睛的位置时，用于观看较大的、较高分辨率的图像。该微显示器能被嵌入设备中，或者能被附属到设备上，或者微显示器可以是(无线地或通过电缆)附属到设备的可穿戴显示器。许多数字视频摄像机将微显示器用作它们的取景器当用户把取景器放到他们的眼前而摄像机正在回放视频时，用户能观看到比在小的直视显示器上所看到的更大的视频剪辑的图像。近年来，高分辨率微显示器已经被开发，它能呈现大得足以显示大部分的网页的图像。例如，inviso Inc.的3430Optiscape II微显示器显示800×600像素彩色图像，对用户显现为大概2.5英尺以外的19英寸大小的监视器。由于是使用光学来生成看上去很大的图像(尽管事实上微显示器模块很小)，所以这些图像通常被称作“虚拟图像”。并且在本专利中，我们有时称它们“表观图像(apparent image)”。本发明的优选实施例通常在使用能显示至少800像素宽和至少600像素高的彩色图像的微显示器的设备上实现。
本发明优选实施例的重要的公共特性是，它们被设计为便于在以下两者之间无缝地、自然地变换，即靠近眼睛去观看在设备的微显示器上的内容，和在臂长距离去观看在直视显示器上的内容之间。能够进行这种无缝过渡的关键是用于智能地协调微显示器上图像和直视显示器上图像的软件、硬件和存储机制。使用本专利的说明和本专利的图(帮助示例了在此公开的本发明的一些图形用户接口元件)，则开发计算和通信设备的本领域的普通硬件和固件技术工程师将能够实现在此公开的本发明的硬件和存储装置，并且有关手持设备软件工程领域的普通程序员将能够编写他们自己的代码以实现在此公开的软件发明，用于那些包含在此公开的本发明的硬件和存储装置的设备。
本发明的优选实施例是具有一个微显示器和一个直视显示器的“灵巧电话”，除电话呼叫之外它还支持诸如即时消息传递、电子邮件和联系管理等功能。由于多数即时消息是例如相对较短的文本消息，所以灵巧电话能在直视显示器上显示即时消息，以便用户能在臂长距离上看到该消息，并能同时看到手持电话上的按键、按钮和控制，使得用户能容易地键入回复消息。当一个即时消息包括对网页URL的引用，或包括附带的照片或其他相对较大的高分辨率图像或文档时，则当用户选择观看那个网页或附件时，该灵巧电话能在微显示器中显示网页或附件而不是在直视显示器中显示。通过将微显示器拿到用户眼前，这就允许用户看到相对大和高分辨率的网页或附件，非常像是PC显示的类似的图像。
此外，当该设备正在一个显示器中显示图像，而没有在其它显示器中显示图像(或正准备显示图像)时，则该设备能在没有显示那个图像的显示器中的一个或多个显示器上显示文本或图形指示，表明其他显示器的其中之一正在显示那个图像(或该设备正准备显示那个图像)。例如，如果用户(在带有一个直视显示器和一个微显示器的设备上)在直视显示器中看到即时消息，并且那个即时消息引用一个网页URL，那么如果用户选择观看那个网页，则该设备下载或准备用于在该微显示器上显示的网页，该设备能在直视显示器上显示一个闪烁眼睛的图标；并且当在该微显示器上准备好用于观看的网页时，该设备能在该直视显示器上显示一个静态图标。这就让用户知道，用户现在能将该设备靠近眼睛来以高分辨率、放大的形式观看网页。可以在用户能使用直视显示器操作功能、导致内容接着出现在该微显示器上的任何时间使用该同样的技术，反之亦然。(如果用户使该设备靠近眼睛并操作导致新的内容出现在直视显示器上的功能，微显示器就能显示某一在直视显示器上有新内容观看的指示。)。提供这些提示是重要的，因为当使设备保持在臂长距离时，用户通常不能看到微显示器上的内容，并且当观看靠近眼睛的微显示器时，用户通常不能看到直视显示器上的内容(或者不会想到去看直视显示器)。
设备设计者可以选择将直视显示器用作用于许多灵巧电话功能的主要显示器，该灵巧电话功能包括即时消息传递、电子邮件、电话拨号、联系管理、调度管理、计算器功能等等，并将微显示器用作与该直视显示器相协调的高分辨率观看器。
在新兴的因特网使能的移动设备的时代，本发明的一些最重要的实施例包括以许多方式协调微显示器和直视显示器，这些方式都允许人们舒适地在小型设备上访问全页面的万维网内容和与之交互。本发明的一个重要的方式是如下地工作当用户正在观看靠近眼睛的设备的微显示器上的网页(或其他的内容)时，该设备将允许用户在网页的特殊部分上定位光标或矩形轮廓(或表示“感兴趣区域”的一些其他的指示)，然后，当用户把该设备移出到臂长时，用户应该能在直视显示器上观看那个感兴趣的区域—就是说，观看微显示器上出现的较大图像的一个子集。本专利将把该子集称作“感兴趣子集区域”或“感兴趣区域”。
当直视显示器显示该感兴趣区域时，该直视显示器充当用户已经在微显示器上观看过的较大图像上的一个窗口。就是说，在微显示器上看到的感兴趣图像部分的区域被镜像到直视显示器上。然后该用户应该能够阅读那个感兴趣区域中的文本或与其中的内容交互，或者使用设备上的控制来向左、右、上、下或其它方向滚动该感兴趣的区域，从而看到该图像的不同部分而不是当前在直视显示器中所示的该图像的子集。如果在直视显示器中观看图像的同时用户移动该感兴趣区域，则当用户返回到微显示器中观看该图像时，该设备能用图形指示该感兴趣区域已经移动到那里—例如，通过在该微显示器中看到的图像之上按感兴趣区域的形状来覆盖一个矩形(通常对应于直视显示器的像素宽度和高度)。设备制造者可以选择不在微显示器中观看的图像上明显地显示该感兴趣区域的矩形或其他明确表示，或者选择使这种类型的明确的“感兴趣区域”指示器对于用户来说是可以选择的。无论感兴趣区域是否在微显示器上观看到的图像上明确地勾画出来，该设备都可以在直视显示器中如上所述地镜像该感兴趣的区域。还要注意的是，感兴趣区域不必是矩形。例如，设备设计者能选择使用圆形或其他形状的直视显示器(例如，在一块手表或一个非常规的蜂窝电话或PDA上)，然后选择使用相应形状的感兴趣区域。
通过本发明而简化的使用模型反映当一个人使用台式计算机监视器时发生的情况典型地，人们简单地“接受”全屏监视器显示(即看到全部图像而不是首先在显示器的任意具体区域上集中注意力)，然后将注意力集中到具体的感兴趣区域(比如他们想阅读的文本，或他们想键入的地方的一个文本插入点，或一些其他感兴趣的项目)。本发明允许用微显示器增强的设备来模型化该特性。
作为结果，本发明使得比用于许多类型的微显示器增强的设备的先前设计更符合人机工程学和具有更好的功耗特性。根据本发明，一个用户可以选择简单地观察微显示器上显示的内容的一个大区域，并快速地浏览大面积的内容以识别他们想集中注意力的感兴趣区域，接着(如果他们希望的话)他们能把设备拿到臂长距离来观看和在直视显示器上与感兴趣的区域交互。通过允许用户在微显示器上观看大面积的内容，用户能快速地确定他们自己的方向和快速地浏览大面积的内容以便找到具体感兴趣的区域—就象他们工作在台式监视器前一样。这是用户在那些不包括嵌入的或者附带的微显示器的小型电话、PDA和手持计算机上可用的小的直视显示器上无法做到的。然后，通过允许用户在保持臂长距离的直视显示器上移动感兴趣的区域，用户能在将设备保持为臂长距离(即通常的阅读距离)的同时选择去进行他们的大部分活动阅读、打字以及与内容的其它交互。能够在将设备保持为臂长距离时频繁地操作设备以及与网页和其它的内容交互，这对多数人来说比必须长时间地将设备拿近眼睛更为舒适。并且比起将设备拿近眼睛来说，在处于臂长距离的设备上键入文本要容易得多。此外，当用户不将设备拿近眼睛时，微显示器能被关闭或使其空闲，从而节省电力，因而使用本发明的设备比让微显示器连续处于开状态的设备使用明显更少的电力。同样地，当用户将设备拿近眼睛时，设备上的直视显示器能被关闭、变暗或使其空闲，从而节省电力。
很清楚的是，智能地协调微显示器上的内容和直视显示器上的内容的本方法还能应用于除网页之外的各种各样的内容，包括诸如电子表格、演示文稿、文字处理器文件、蓝图、视频、数据库形式和其他类型的图像、文档和应用程序等等。
本发明的主要宗旨是，使人们能够在具有内置或可附属的微显示器的小型设备上舒适地访问全尺寸的万维网内容(和其它的高分辨率或大的可视内容)并与之交互。但是即使当微显示器是连接到设备的可穿戴显示器的一部分而不是被嵌入或附属到设备上时，本发明的有关于智能地协调直视显示器和微显示器的实施例也是可应用的。可穿戴的显示器可以包括一个或两个微显示器。例如，Inviso Inc.的称作“eShades”的双目可穿戴显示产品概念包括两个微显示器，每个眼睛一个。如果用户正穿戴着可穿戴的显示器并观看该可穿戴显示器的靠近眼睛的微显示器，则他们会发现难于打字，尤其是在用户打字时必须频繁地查看设备的键盘以找到字母键的情况下。单目可穿戴显示器(即只有一个微显示器安置在一只眼睛的前面)让用户用另一只眼睛查看键盘；以及许多双目可穿戴显示器(像Inviso Inc.的eShades概念产品)允许用户看到显示器的下面，并因此看到保持在可穿戴显示器视域之下的该设备的键盘。但是在打字的同时，必须在键盘和微显示器呈现的图像之间不断地移动一只眼睛是很不方便的。而如果围绕着当前文本输入点的区域(例如，可以是基于万维网形式的可编辑的文本字段)被镜像到用户正在用来打字的设备的直视显示器中，理想地，该直视显示器靠近设备上的键盘，则多数用户将会更舒适。这就允许用户在打字的同时保持他们的眼睛集中在设备上的小区域中。
附图简述
图1A是通过微显示器增强的手机的侧视图。
图1B是通过微显示器增强的手机的正面图。
图1C是人手中拿着的通过微显示器增强的手机的正面图。
图2A是具有直视显示器和微显示器的翻盖型手机的侧视图。
图2B是具有直视显示器和微显示器的翻盖型手机的正面图。
图2C是人手中拿着的具有直视显示器和微显示器的翻盖型手机的正面图。
图3A是具有微显示器和直视显示器的手机的可替换结构的侧视图。
图3B是具有微显示器和直视显示器的手机的可替换结构的正面图。
图3C是人手中拿着的具有微显示器和直视显示器的手机的可替换结构的正面图。
图4示例了带有两个显示器和带有按钮用于上高亮突出及选择在该显示器之一上显示的可选择项目列表中的可选择项目的手机。
图5示例了按照本发明的手机，显示了直视显示器和微显示器上的图像的协调。
图6示例了按照本发明的手机，显示了直视显示器上的指示(靠近图6左边所示)，它指示在手机的微显示器上有准备好供观看的新内容。
优选实施例详述下面描述本发明能在其上被具体实施的手机。图1A显示了侧视的通过微显示器增强的手机118。图1B显示了它的正面图。图1C也是该手机的正面图，它被显示为拿在人的手中。该手机包括安置在直视显示器101上方的微显示器100。该手机的多数元件能被应用到各种各样的设备，包括蜂窝电话、“灵巧电话”、网络电话、PDA、手持计算机、遥控装置等等。在本专利的整个剩下的部分中，多数对“手机”的引用都可以指任何这些类型的设备。
直视显示器可以是任何种类的直视显示器，但最好它是薄的位图LCD显示器，具有比微显示器低的分辨率，但足以再现较大图像的可识别部分。例如，具有3比特灰度级的160×120像素的直视显示器(白、黑和白黑之间的六个强度的灰度)将足以显示文本和简单的图形，同时仍然保持直视显示器的成本相对较低。
在图1A的手机的侧视图和图1B的手机的第一个正面图的下方是包括有电子和光学器件的inviso 3430 Optiscape微显示器模块的侧视图116和正面图117示例—这仅仅是为了示例它们相对于整个手机的相对大小。该手机上许多其它的元件在当今的蜂窝电话上是常见的，比如扬声器114、电源开/关按钮108、麦克风115、“START CALL(开始呼叫)”和“END CALL(结束呼叫)”按钮112。
手机用户频繁地与手机上支持的各种功能交互，比如即时消息传递、电子邮件、联系管理、根据联系列表拨号、计算器、万维网浏览等等。为了与这些功能交互，用户需要在使用这些功能时看到(或听到)反馈。例如，当键入一个即时消息时，用户需要看到用户正在键入的文本以便知道正在正确地键入。对于包括即时消息的多数功能来说，手机表现的反馈是相对简单和简明的，能够以几行文本或以低分辨率的小位图显示来表示。按照本发明制造的手机，通常可以在图1B的直视显示器100上呈现相对简单的或简短的反馈，如同在只有直视显示器的传统手机上的呈现一样。这允许用户在将手机保持在臂长距离(与靠近眼睛相对)的同时看到反馈，以便他们仍然能很容易地看到和操作手机的按钮和其它的控制。但是当一个功能包括观看一个大图像或者与之交互时，比如网页、电子表格或附属到电子邮件的高分辨率的文档，则按照本发明制造的手机应该在图1B的微显示器101上显示那个图像。
尽管不同的手机在两个显示器(微显示器101和直视显示器100)上显示的内容方面可以不同，但通常设计者应该力争使用户在观看直视显示器的同时与手机的功能交互。与将设备拿近眼睛相比，这使得更容易看到和操作设备的更多按钮和控制(例如，键入或通过该功能特性导航)。当然，通过设计手机，设计者也可以使用户在将设备拿近眼睛而使用微显示器的同时与功能交互，以便在微显示器上显示一些反馈(以代替或附加于在直视显示器上显示那个反馈)。
对于诸如图1所示的一个手机，将微显示器放在靠近手机的顶部和将直视显示器放在电话的中间(在键盘之上)具有两个优点。首先，与把微显示器放在手机的中间或底部相比，它使用户更容易地让微显示器接近眼睛。第二，这使直视显示器(在那里将呈现被键入的多数文本的反馈)被放置在靠近键盘的地方(以便用户不必过远地使他们的眼睛从打字键盘移动到显示反馈的显示器)。
此外，可以这样来设计该设备，使得按下该设备上的给定按钮(或按下一个或多个按钮或控制的组合)会导致该设备(在一个或多个显示器上)弹出或显示与设备有关的或与设备上前面窗口有关的菜单栏中的一个菜单(比如多数PC文档上的文档左上角处的“文件”菜单)，同时高亮突出那个菜单中的顶部菜单项。接着按下设备上的左或右箭头按钮，比如图1上控制113中的那些，便可以关闭当前弹出的菜单，以及导致弹出菜单栏中先前的或下一个菜单，并在该菜单上高亮突出该顶部项。此外，还可以这样设计设备，使得另外按压设备上的向上或向下箭头(比如图1上控制113中的那些)从而高亮突出当前弹出菜单中的下一个或先前的菜单项。在那点上，按下电话上的“输入”或“选择”按钮导致高亮突出的菜单被选择。当以此方式被选择时，不同类型的项目可以做不同的事情。典型地，选择一个项目将导致与用户使用鼠标点击那个项目类型的情况下在PC上所出现的相同行为。例如，选择当前没有被选取的复选框将导致它被选取；而选择当前被选取的复选框会导致它不被选取。
还可以这样设计该设备，使得经过语音识别软件的口头命令能被用于弹出和遍历菜单或选择菜单项；并且其中只有当用户压住该设备上为那个功能设计的按钮时，该设备的语音识别特性才被使能。这种“即按即讲(push-to-talk)”按钮可以处于设备的侧面，那里用户可以用拿设备的手的手指或拇指来压下它。
图2A-2C示例了具有直视显示器200和微显示器201的翻盖型手机。微显示器相对较厚(因为它们的放大光学元件)而直视显示器相对较薄(由于它们是较低的分辨率以及不需要放大的光学元件)。因此翻盖型电话将把直视显示器放在电话的薄的部分上，它可以翻转离开电话的主体。在图2B中，这是电话的顶部。也可以这样设计翻盖型电话，其中键盘和直视显示器是在电话的相对较薄的底部，而微显示器是在上翻的电话的相对较厚的顶部。但这将趋于使电话感到顶部重。
图3A-图3C示例了具有如图3A的侧视图所看到的微显示器300和直视显示器301的手机的引人注目的替换结构。在该实施例中，直视显示器被直接放在微显示器之上。如上所述，对于多数功能(例如，进行电话呼叫、滚动通过联系列表和即时消息传递)，用户简单地使用直视显示器来用于反馈，因为该反馈由相对低分辨率的文本或图像组成。在这些例子中，当用户观看图3B的电话305的正面时，他或她在直视显示器302上看到相对较低分辨率的文本或图像。但当用户决定以最佳的全屏、高分辨率显示来观看图像或文档(网页、excel电子表格、大的照片等等)时，则手机将在微显示器上显示该图像或文档。手机能被设计为具有这样的按钮(或其它的控制)，用户使用它来使该直视显示器变为透明的(以及使微显示器打开)，使得用户能透过它观看微显示器。但是优选实施例将包括图3B中的距离感应器304，当用户的眼睛靠近微显示器(在2-3英寸内)时它自动地感应，然后自动地使直视显示器(图3A和3B中的302)透明并打开该微显示器(图3A中的300和图3C中的303)，以便用户能透过直视显示器301看到微显示器300呈现的图像。各种距离感应器技术(包括超声波距离感应器)被用于当前的数字视频摄像机、静物摄影机以及其他的电子设备。例如，Sony Mavica MVC CD 1000数字静物摄影机在它的背面具有直视显示器和在它的取景器中具有一个独立的中间分辨率的微显示器，并且它包括距离感应器以便当用户把他们的眼睛靠近取景器时，基于微显示器的取景器自动打开。只有当手机正在显示高分辨率图像，并且当感应器感应到用户的眼睛离微显示器足够近(大约三英寸内)时，图3A-3C的手机才自动地打开微显示器。在其他的所有时间，手机将自动地关闭微显示器，相对于在所有时间上让微显示器处于开的状态、或者即使当用户的眼睛没有靠近微显示器时仍让微显示器处于开的状态的设备，可以节省非常多的电力。在此所使用的语句“关闭微显示器”意味着停用微显示器以便它不产生图像或不产生妨碍直视显示器的正确操作的任何光。但这并不一定意味着不提供电力给微显示器。然而，最后的结果实质上是节省电力。
图3A-3C的手机也可以被制造为比两个显示器分离的手机(图1A-1C)要短，因为在此设计中两个显示器是彼此重叠的，尽管这可能使得该电话在从侧面观看时要厚一点。
手机也可以被设计成在手机的一侧具有直视显示器(比如前面)，而在另一侧具有微显示器(比如背面)。但在观看直视显示器和观看微显示器之间转换时，这需要用户翻转手机，这比简单地把手机拿到眼边从而观看微显示器中的图像要别扭一些。
在这些双显示器设备中的任何设备上，该显示器中的一个或两个可以是触摸感应的(像许多当今的PDA)，允许用户通过在显示器的触摸感应区域移动他们的手指、钢笔或者输入笔来输入数据和控制该设备的各方面。
图1A-图3C示例的每个手机被显示为在右侧具有三个侧按钮(“转换”、“第二字母”和“第三字母”侧按钮)，用户在用另一只手敲击手机的面板键(face-key)的同时能用拿电话的手去按压该侧按钮。例如，为了键入小写字母“m”，用户可以只键入“6”键。为了键入大写字母“M”，用户键入“6”键并同时按住“转换”侧按钮。为了键入小写字母“u”，用户键入“8”键并同时按住“第二字母”侧按钮。为了键入大写字母“U”，用户键入“8”键并同时按住“转换”和“第二字母”侧按钮。这可以允许比当前的蜂窝电话和PDA更快地键入文本。这对于打字密集的应用和功能是重要的，比如即时消息传递、电子邮件、与一些网页交互以及涉及将信息输入到表格或文档的其它的应用。这种使能快速键入的发明是提交于＿＿＿＿并转让给共同受让人的专利申请S/N＿＿＿＿的主题，该申请被在此引入作为参考。
该设备还能包括图1B的滚轮控制102，当按一个方向滚动时，把当前的可选择项目的显示列表中的高亮突出从当前高亮突出的项目变化到下一个可选择的项目；并且，当按另一个方向滚动时，将高亮突出从当前的高亮突出项目变化到在前的可选择项目。这类似于在Windows PC上使用Tab向前和Tab向后键以便在网页、对话或其他的文档上将高亮突出的项目(经常被程序员称作“焦点”)从一个可选项目移动到下一个或在前的一个。注意，可选项的“列表”不必表现为直线状的。一个网页具有可选项的“列表”，如在网页的HTML中所看到的，即使那些项目被非直线状地安排在二维设计中。实际上，“可选”项可以是任何可以被选择的显示的项目，或者在文本输入框的情况中，是任何可以被键入的显示的项目。该设备也可以被设计来应用于作为网页和其它文档一部分的项目，以及应用于由手机本身显示的项目，比如电话设备上可用功能的列表。在所有这些情况中，滚轮控制也能被用于遍历通过项目列表以及选择项目。也可以按下滚轮控制102来选择任何所显示的项目列表中的高亮突出项目。
如图4所示，该设备包括按钮401，当简单地按下该按钮时，将可选择项显示列表中的高亮突出从一个选择项变化到在前的一个。本专利还涉及高亮突出的可选项作为“焦点对准(in-focus)”项目，“聚焦的项目”，或者“聚焦”项目。该设备还能包括按钮403，当简单地按下该按钮时，将可选项的显示列表中的高亮突出从一个可选项变换到下一个。该设备还能包括按钮402，当按下该按钮时，在项目的显示列表中选择高亮突出的项目。这些按钮不必配置成图4中显示的按钮401，402和403，它们可以配置成设备上别的地方的箭头键和其他的按钮—比如图1B中的箭头和输入按钮113。这些按钮的每个可以是多个速度(multiple speed)的(本专利也将其称为“多速”)，例如，当重压时，快速地将聚焦项目从当前高亮突出的可选项移动到下一个或在前的一个项目，但当轻压时则慢慢移动高亮突出。这些按钮可以得到许多名称—比如Tab向前和Tab向后、上和下等等。本专利将一般地称它们为上和下或者上/下。如果它们是多速的，则本专利把它们称作多速上/下控制。这些按钮可被放置在塑料的共享长度之下以便形成拨动开关(toggle switch)，如图5所示，使一个按钮在该开关的一侧之下，而另一个按钮在该开关的另一侧之下。
作为操作上述按钮的另外的例子，当图4的按钮401(或403)被按压并被保持多于定义的时间周期时(例如，多于0.5秒)，那么不是将该高亮突出从一个可选项移动到在前(或下一个)项目仅仅一次，而是将高亮突出移动到在前(或下一个)可选项，简短地停留(例如0.25秒)，移动到在前之前(或下下一个)的可选项，简短停留，并继续向回(或向前)移动通过该可选项列表，只要用户继续按压该相应的按钮401(或403)便如此。这是一种对如上所述的连续地滚动该滚轮控制以便快速地前后移动该高亮突出通过该可选项列表的简单的替换方案。
该设备也可以被设计成这样，使得按压按钮401或403的时间越长，移动高亮突出通过可选项列表的速度就越快，直到某一最大速度(并且使该速度以定义好的增量从相对慢加速到相对快)。
现在回到在如上述类型的手机中实现的本发明的说明。本发明能实施于具有两个或多个显示器的手机或其他的手持设备中，所述的显示器之一能显示内容(比如图像、文档、网页、文本、或其他的内容)，所述内容包括对其他内容的一个或多个引用，比如引用图像、文档、网页、文本或其他的内容。当用户指明期望观看所引用的内容时，例如，通过使用按钮或控制来与第一显示器(比如是直视显示器)交互并在上面点击、选择、或打开所引用的内容，则所引用的内容被显示在其他显示器中的一个显示器上，比如显示在微显示器上，以便像高分辨率的PC显示器那样进行观看。所以，用户能使用设备的直视显示器阅读附属有照片或有到网页URL的引用的电子邮件或即时消息，当用户点击或选择附件或网页URL时，手机在微显示器上显示该附件或网页URL。此外，设备能在微显示器上显示全部网页(或该网页的大部分)，然后在直视显示器上显示该网页的子集。当微显示器正在显示具有可被选择或键入的项目的文档或图像时(比如网页或应用程序表格)，那么在任何给定的时间上，那些项中的零个或一个项被“聚焦”，然后那个项目以某种方式在视觉上被高亮突出，例如通过以浅灰色画出那个项目的轮廓。“聚焦”意味着如果用户要在手机上使用一个“选择”控制(无论是什么名称)或者要开始键入，则那个“聚焦”项目将是被选择的项目，或者，如果它是文本输入框，则它应该是要键入字符的项目。这与在台式Windows PC上可以在万维网浏览器和其它应用程序中“聚焦”项目的方式是相同的。在桌面应用中，“焦点”对准的项目通常在图形上是高亮突出的，例如，具有浅灰色的轮廓。因而，如果微显示器正在显示文档或图像(比如网页或应用程序表格)并且如果该文档或图像上的一个项目被“聚焦”，则围绕着“聚焦”项目的文档或图像的子集能被显示在直视显示器上。如果用户想键入或使用手机的选择控制，这就能提供将被键入或者选择的项目的特写镜头。当用户将设备拿在一或二英尺远时能看到该区域，因为它是被显示在直视显示器中的。相比较于将设备拿近眼睛的情况，这进而又使用户更容易地看到设备上的按钮和控制。这将允许用户在直视显示器上观看整个网页的子集的同时更加容易地在电话上键入或者是使用控制。这在图5中能够被最好地看到。在该图中，微显示器500显示网页，同时它的子集被显示在直视显示器501上。
实现这个的一种方法是规定直视显示器上所示的子集将包括“聚焦”项目和在该表格上相应于那个项目的任何文本或图形标签或者符号的文本或者位图表示。例如，如果“聚焦”项目是网页表格上的文本输入框“姓”，则直视显示器将显示标签“姓”以及相应的文本输入框，用户将在该文本输入框中键入他的或她的姓。实际中，通过用户键入、按下按钮或使用设备上的其他控制可以改变该“聚焦”的项目(和因此而改变在直视显示器上显示的图像子集)。例如，用户能使用图1中的滚轮控制102，或图4上的下/上按钮，在电话手机上前后移动焦点通过该项目列表，所述的项目是在当前网页或文档上可以被选择或被键入的。当用户使用控制来改变焦点时，直视显示器应该通过显示围绕新的“聚焦”项目(或围绕尽可能多的适合该感兴趣区域的焦点)的该网页或文档的“感兴趣区域”子集来改变，以反映该新的焦点。如果用户期望选择一个项目或键入，这就使用户在任何给定的瞬间上总是很容易看到将被选择或键入的项目。图5示例了这个概念。图5将在下面被解释。另外，用户通过该设备本身或者通过该设备在网络上访问的服务，对设备讲话，使用语音识别软件来翻译用户的口头命令，也可以改变该聚焦的项目(也就是直视显示器上显示的图像子集)。还有就是，聚焦的项目(也就是直视显示器上显示的图像子集)可以通过运行在该设备内的计算机处理器上的软件而改变。这可以通过使大的图像由许多更小的帧组成，以及快速地改变在该直视显示器中显示该较大图像的哪些子集来产生直观显示。
也可以通过用户键入、按下按钮、说话或使用该设备上的其它控制，来改变该聚焦的项目，并且当该焦点改变时，微显示器中所示的图像自动滚动以使该聚焦的项目保持在视域中。这与以下发生的情况类似，即如果用户在计算机监视器上观看一个大的网页表格并且该表格延伸超过了正显示该表格的窗口底部。就是说，如果用户重复地使用Tab按钮以朝着表格的末端移动焦点，则当该焦点超过窗口的底部到一个能被键入或选择的项目，而该项目出现在该表格处于窗口以下的部分中时，万维网浏览器通常将在窗口内自动向上滚动该表格，以便在该窗口内将看到该新的聚焦的项目。在本发明中，当用户在一个显示器上所示的文本输入字段中键入，并且那个文本输入字段也显示在另一个显示器上(有时称作“反照现象(echoing)”)时，则出现在第一显示器中的新的文本也将出现在另一个显示器中，这反映以下的事实，即两个显示器正显示相同的文本输入字段。例如，在用户正穿戴附属于具有直视显示器的手持设备上的可穿戴显示器时，如果用户在直视显示器和可穿戴显示器中显示的域内键入文本，则新键入的文本将出现在这两个显示器上—因此当用户的眼睛在直视显示器和可穿戴显示的微显示器之间前后移动时他们将不会被搞糊涂。
例如，如果用户改变出现在多于一个显示器中的复选框、单选按钮、或其它“状态”控制的状态，则显示相同状态控制的所有显示器应以其当前状态来显示该状态控制。如果用户在一个或多个显示器上所示的文本输入字段中输入、或者是用图1的箭头键113或其它的控制来改变文本输入点或选择区，则在文本输入点(或者选择区域的末端)移出在任何给定显示器中可见的该文档图像的子集的情况下，显示器将自动地滚动该图像，使得该文本输入点(或选择区域的末端)将出现在那个显示器中。这与文档在台式显示器的窗口中的自动滚动是相似的，只是由于该设备可以在不同的显示器中显示同一文档的不同子集，所以它必须在不同的显示器中自动滚动该图像不同的次数。例如，如果相对较低分辨率的直视显示器显示更高分辨率的微显示器中所示文档的小的子集，则当用户在该文档中键入一个长的消息时该直视显示器必须自动滚动几次，而微显示器则可以更少地自动滚动。
在本文中，微显示器显示相对较高的分辨率的大的表观图像(也就是虚拟图像，如早先所讨论的)，如果该设备使用相对较低分辨率的位图直视显示器，则在任何给定的时间上，直视显示器能显示该微显示器中所示的较大、较高分辨率表观图像的子集。就是说，直视显示器作为该较大图像中的一个窗口，显示来自该较大表观图像中的“感兴趣区域”。
此外，手持设备上的控制，比如箭头按钮或拇指滚轮或者类似的控制，能在较大的图像中以下/上、右/左或以其它的方向移动感兴趣区域窗口(即直视显示器中所示的网页、应用文档、或其他的图像的子集的边界)。例如，在启动时，直视显示器可以显示微显示器中看到的图像的左上角子集，所述的图像本身可以是更大的可滚动文档或网页的子集。接着用户能使用控制来使该直视显示器示出该微显示器中看到的图像的不同子集。
此外，当用户在微显示器中可见的文档或网页中键入时，包括文本输入点的文档或网页的子集能自动地在直视显示器和微显示器中被滚动观看。就是说，“感兴趣区域”能被自动地移动到该文本输入点周围。通常，直视显示器中所示的感兴趣区域是微显示器上显示的较大图像中所示的围绕着当前“焦点”的一个比特区域。例如，网页具有一组可选择的项目，比如链接、按钮、可编辑的文本字段、等等。如台式PC上所看到的，在任何给定的时间上，可选项的其中之一能被“聚焦”，并且用户能使用Tab向后和Tab向前键来向后和向前移动该焦点通过该组可选项。(在台式PC键盘上，这些通常是相同的键Tab向后＝换位Tab向前)。通过按下一个按钮(通常是空格键)用户能选择当前被聚焦的可选项。如专利申请S/N＿＿＿中所讨论的，制造商可以设计蜂窝手机或其他的手持设备，在其上用户能使用拇指滚轮或其它的控制在网页或屏幕上向后和向前移动焦点通过可选项的列表。但用户如此操作时，如果正被观看的网页或应用文档大于微显示器中可见的图像区域，则微显示器中所示的网页或应用文档的图像将自动滚动以便总是将焦点保持在该微显示器的视域中，正像当用户在较小的万维网浏览器窗口中显示的大的网页上跨过(tab)可选项(使用Tab键)时，台式PC上所出现的那样。同样的，随着焦点被移动，如果正被观看的网页或应用文档大于直视显示器中可见的图像区域，则直视显示器中所示的网页或应用文档的图像将自动地滚动以便总是将焦点保持在该直视显示器的视域中。在一个优选实施例中，按照本发明，每个显示器(当被观看时)将显示聚焦项(即可选项，如果用户击打选择键则被选择)和紧紧包围该聚焦项目的区域(它通常包括相应于聚焦的可选项的文本或图像标签，比如“姓”标签)。因此每个显示器作为正被观看的网页或文档上的窗口，直视显示器是比微显示器小的窗口。
在本文中，微显示器显示一个网页的相对较高分辨率的大的表观图像。如果该设备使用纯文本(即没有位图)的直视显示器，那么在任何给定时间上，直视显示器能显示该网页上相应于该聚焦项目的文本。例如，如果聚焦项目是网页上一个表格的文本输入字段，假设用户将他们的姓键入所述的文本输入字段，则直视显示器能显示紧接在那个文本输入字段(例如“姓＿＿”)的左边(和/或右边)的任何文本。这个文本通常能从定义该网页的HTML中被提取(通过解释HTML以确定什么文本位于该可选的聚焦项目的左边)。但通常不能够提取相应于该聚焦项目的适当的文本(例如，因为没有相应于该聚焦项目的文本存在)。为此，如上所述，该设备的优选实施例将使用位图直视显示器来代替仅仅文本的直视显示器。
如早先所注意的，本发明允许用户舒适地与小型设备上的全尺寸网页和其它的高分辨率或大的内容交互的一个重要方式是通过智能地协调直视显示器的内容与微显示器的内容来实现的。这里是本发明的几个重要实施例的说明。
参考图5，当用户在靠近眼睛的设备的微显示器500上观看网页502时，该设备将允许用户在网页502的任何选择的部分上定位光标(比如当在台式计算机上移动鼠标时通常看到的箭头光标)或矩形轮廓503或者它们两个(或者一些“感兴趣区域”的其他指示)。接着当用户把设备移出到臂长时，用户将能够在该设备的直视显示器上观看那个“感兴趣区域”，也就是观看微显示器上出现的较大图像的子集。
在图5中，从网页窗口502的左角延伸到该电话手机的嵌入微显示器500的线意味着显示当微显示器被拿近眼睛时，用户能看到类似网页窗口502的相对大的、高分辨率的图像。并且从“感兴趣区域”矩形503延长到手机的直视显示器501的更长更窄的线意味着显示该网页的一小部分能在该直视显示器上变得可见。在该例中，当前的感兴趣区域是网页上的小表格，用户能在其中输入地址以查找地图。
当直视显示器501显示该感兴趣区域时(矩形503内的区域)，直视显示器作为较大图像上的窗口，该较大的图像在微显示器被拿近眼睛时将能在该微显示器上看到。当在臂长距离(就是说，在正常的阅读距离)上观看该直视显示器501时，用户将能够阅读文本或者与那个感兴趣区域中的内容交互，或者使用该设备上的控制来左右、上下或按其它方向滚动该感兴趣的区域，以便看到除直视显示器中当前所示的图像子集以外的该图像的不同部分。如果用户在观看该直视显示器中的图像的同时移动该感兴趣的区域，那么当用户返回去观看微显示器中的图像时，该设备能图形地表示该感兴趣区域已经被移动到哪里—例如，这是通过在微显示器中所看到的图像之上重叠一个按感兴趣区域的形状和尺寸的矩形503来进行的。感兴趣区域的形状和尺寸通常应当是与直视显示器501的像素宽度和高度相同或接近的。
如图5所示，直视显示器501典型地具有比微显示器少得多的像素。例如，当今的灵巧电话典型地具有小于200像素宽度和小于250像素高度的显示器，以及当今的PDA典型地具有小于300像素宽度和小于400像素高度的显示器。与之相对比，Inviso Inc.的现有的微显示器能够显示800×600像素区。直视显示器的尺寸和形状能被用于定义感兴趣区域的尺寸和形状。由于用户在观看微显示器上的内容的同时使用设备上的控制(或语音识别，或其他的装置)来四处移动感兴趣区域，所以该设备能通过在该微显示器500中被观看的图像上显示那个尺寸的矩形来显示该感兴趣区域的位置。当用户移动感兴趣区域时，矩形在该图像中四处移动。如果用户接着在臂长距离观看直视显示器501中的感兴趣区域，并且接着使用该设备上的控制(或其他的装置)来滚动感兴趣区域到被观看内容的其他部分(如早先所描述的)，则当用户将设备拿近眼睛来观看微显示器中的内容时，显示感兴趣区域的矩形应该被显示在微显示器上正被观看的图像上、它的新位置中。
要注意的是，使用矩形来显示感兴趣区域只是一种选择。该设备可以使用各种技术来在该微显示器上指示感兴趣区域。或者设备制造者能够选择不在微显示器图像上明确标记感兴趣区域—而改为选择仅仅处理围绕光标的区域或围绕高亮突出的“聚焦”区域作为感兴趣区域(本专利中其他地方所讨论的)。可替换的，如果感兴趣区域在微显示器上被标记出来(例如用矩形)，则设备制造者能给用户隐匿那个标记或者显示那个标记的选择。
如上所述，当对用户来说在微显示器中具有新内容供查看时，在直视显示器上显示图标或其他的可视提示有时是有用的，反之亦然，这是因为当看直视显示器时难于看到微显示器上的内容，反过来也一样。图6图示了用于提供此可视提示的优选实施例。图6右边的样品电话具有靠近顶部的微显示器604和在微显示器下面的直视显示器600。直视显示器601被以特写的形式显示在图6的左边。在该例中，用户(迈特)已经接收了一个即时消息。用户典型地将在直视显示器600(在左边601以特写的形式显示)上在臂长距离(也就是正常阅读距离)阅读即时消息。此例中该即时消息包括一个URL603，引用一个具有地图的网页(与图5所示的网页相似)。在该优选实施例中，当用户操作电话上的控制以打开该URL关联的网页时，在该设备下载和准备用于显示网页的同时，该设备将在直视显示器上显示一个闪烁眼睛的图标602。以及当网页已准备好在微显示器604上被观看时，该设备能显示一个稳定(不闪烁)眼睛的图标602。该指示的形式并不重要—它可以是不同的图标或文本、或者一些其他的可视提示，并且它可以闪烁或者不闪烁。重点在于，当用户将设备拿在臂长距离时，有时他们很难知道可在靠近眼睛的微显示器上观看的内容什么时候有了显著变化，(由于在臂长距离难于看到在微显示器上的内容)，因而在那些时间，在直视显示器上提供可视提示是有用的。同样的，如果用户正在微显示器上观看内容，则在某些情况下，当有可用于在直视显示器上观看的重要新内容时，在微显示器上提供可视提示是有用的，因为用户不会想到在看微显示器的同时去看直视显示器(即使微显示器是在头戴的可穿戴显示器上而不是嵌入在具有直视显示器的手持设备中)。
在前述的讨论中，我们已经使用网页作为内容的主要例子，该内容能通过智能地协调一个设备的直视显示器和微显示器上显示的图像来更容易地被访问。但对于本领域的技术人员来说应该清楚的是相同的技术能应用到各种各样的内容，包括计算机应用、文档(尤其包括电子表格、演示文稿和文字处理器文档)、照片、视频，以及更多的内容。
当设计具有各种各样的形状因数和结构的设备时可以使用本发明。例如，在其表面具有直视显示器和靠近其顶部具有嵌入的微显示器的设备可以很好地工作。但设备制造者可以选择将一个或多个微显示器嵌入或附属到该设备的任何部分(例如，在电话底部的铰链上或在侧边上)，并且仍利用本发明来智能地协调在该设备的多个显示器上的内容，以及因此而在人机工程学方面改善该设备。
尽管前面的描述已经参考本发明的特定实施例，但本领域技术人员应该清楚的是，在不脱离本发明的原理和精神的情况下可以作出这些实施例的改变，本发明的范围是通过所附权利要求来定义的。
权利要求
1.一种显示图像的电话手机或其他的手持设备，所述设备具有一个表面，所述表面具有用于显示所述图像的两个或多个显示器和用于控制所述显示器的控制元件，其中用户能操作所述控制元件来影响在该显示器中的一个或多个显示器上的视觉改变。
2.权利要求1的设备，其中至少一个显示器是直视显示器。
3.权利要求1的设备，其中至少一个显示器是微显示器。
4.权利要求1的设备，其中该设备正好具有两个显示器。
5.权利要求4的设备，其中该设备包括一个直视显示器和一个微显示器。
6.权利要求1或2或3或4或5的设备，它操作从所述设备远程发送的功能。
7.权利要求6的设备，其中这种功能从以下组中被选择，该组包括即时消息传递、电子邮件、联系管理、调度管理和电话呼叫。
8.权利要求6的设备，其中所述功能的这样的至少一个功能是在直视显示器中被显示的。
9.权利要求8的设备，其中显示的功能包括能被显示在该微显示器中的一个附件。
10.权利要求9的设备，还包括一个距离感应器，其中用户通过把微显示器拿到用户眼前而影响在该微显示器中显示所述附件。
11.权利要求1的设备，其中，当一个图像被显示在一个显示器中而不显示在其他显示器中时，则该设备能在不显示那个图像的显示器中的一个或多个显示器上显示一个文本或图形指示，所述指示表明其他显示器之一正在显示那个图像。
12.权利要求11的设备，其中至少一个显示器是直视显示器。
13.权利要求11的设备，其中至少一个显示器是微显示器。
14.权利要求11的设备，其中该设备正好具有两个显示器。
15.权利要求14的设备，其中该设备包括一个直视显示器和一个微显示器。
16.权利要求9或10的设备，其中(1)该被显示的功能是从功能组中取得的，该功能组包括即时消息传递、电子邮件、联系管理、调度维护、计算功能和进行电话呼叫、观看因特网内容以及观看其他类型的文档，(2)该附件是从附件组中取得的，该附件组包括网页URL、照片图像、电子表格、演示文稿、Adobe Acrobat文件、文字处理器文档和其它类型的内容，以及(3)该控制能够由用户操作以便在微显示器中显示该附件。
17.权利要求16的设备，还包括控制元件，当该控制元件被激活时，使得该设备在直视显示器中显示一个指示，向用户表明所有或部分的所述附件何时被下载或准备用于在微显示器上显示，或者使得该设备在直视显示器中显示一个指示，表明该附件何时准备好以便在微显示器上观看。
18.一种具有两个或多个显示器的电话手机或其他的手持设备，所述设备具有可由用户操作的控制，以便(1)使得该显示器之一显示包括对其他内容的一个或多个引用的第一内容，和(2)使得那个被引用的内容被显示在其他显示器之一中。
19.权利要求18的设备，其中所述第一内容是从以下组中被选择的内容，所述的组包括图像、文档、网页或文本，以及被引用的内容是从以下组中被选择的内容，所述的组包括图像、文档、网页、文本或其他的内容。
20.权利要求18的设备，其中至少一个显示器是直视显示器。
21.权利要求18的设备，其中至少一个显示器是微显示器。
22.权利要求18的设备，其中该设备正好具有两个显示器。
23.权利要求22的设备，其中该设备包括一个直视显示器和一个微显示器。
24.一种显示图像的电话手机或其他的手持设备，所述设备具有用于显示所述图像的两个或多个显示器和用于控制所述显示器的控制元件，其中用户能操作所述控制元件以使得第一显示器显示一个图像，而使得第二显示器显示所述图像的感兴趣子集区域。
25.权利要求24的设备，其中该设备能在一个显示器中基本上显示全部网页和在该显示器中的另一个显示器上显示所述网页的一个子集的特写镜头。
26.权利要求24的设备，其中至少一个显示器是直视显示器。
27.权利要求24的设备，其中至少一个显示器是微显示器。
28.权利要求24的设备，其中该设备正好具有两个显示器。
29.权利要求24的设备，其中该设备包括一个直视显示器和一个微显示器。
30.权利要求23的设备，其中，当第一显示器正在显示具有能被选择或键入的项目的第一内容时，这种项目的其中之一被聚焦。
31.权利要求30的设备，其中所述一个聚焦项目通过以一个视觉上可辨别的阴影来勾画该项目的轮廓而被高亮突出。
32.权利要求30的设备，它具有一个选择功能，借此用户可以选择所述的一个项目。
33.权利要求32的设备，还包括一个或多个面板键，如果所述一个项目是可编辑的文本字段，则当用户按下该面板键时，使得一个字符被键入所述一个项目中。
34.权利要求30的设备，还包括可由用户操作的控制，如果该设备已经准备具有一个聚焦项目的图像用于在该微显示器中显示，则使得包围该聚焦项目的所述图像的子集被显示在该直视显示器中。
35.权利要求34的设备，其中直视显示器中显示的子集是所述一个项目的特写镜头。
36.权利要求34的设备，其中直视显示器中显示的子集包括该聚焦项目和相应于那个项目的文本或图形标签或符号的文本或位图表示。
37.权利要求36的设备，其中该聚焦项目是网页表格上的“姓”文本输入框，而该子集包括标签“姓”，和将键入姓的相应的文本输入框。
38.权利要求34的设备，包括可由用户操作的控制，使得直视显示器中显示的子集通过用户操作被改变。
39.权利要求36的设备，其中该设备包括来自以下组中的一个控制元件，该组包括滚轮控制或上/下按钮或多速上/下控制，它们能够由用户操作以使得该聚焦项目从当前的聚焦项目改变到能被选择或键入的在前的或下一项目。
40.权利要求39的设备，包括当聚焦项目从一个可选项改变到一个新的聚焦项目时使得该直视显示器中显示的图像同时改变的软件。
41.权利要求40的设备，其中通过显示包围全部或部分的所述新的聚焦项目的该图像的子集来改变所述图像。
42.权利要求34的设备，包括麦克风和话音识别软件，能允许用户通过对该设备讲话而使该聚焦项目从一个可选项改变到另一个可选项。
43.权利要求34的设备，包括计算机处理器，其中所述微显示器中的所述聚焦项目和直视显示器中显示的所述图像子集能通过运行在该设备内的所述计算机处理器上的软件而被改变。
44.权利要求43的设备，其中所述改变通过使一个大图像由许多较小的帧构成和快速地改变在该直视显示器中显示该大图像的哪个子集而产生直观显示。
45.权利要求43的设备，其中可以通过用户键入、按下按钮、说话、或使用该设备上的其它控制而改变该聚焦项目，以及其中随着焦点改变，如果微显示器正在显示一个图像，则微显示器中所示的图像自动滚动以使该聚焦项目保持在视域中，而如果直视显示器正在显示一个图像，则直视显示器中所示的图像自动滚动以使该聚焦项目保持在视域中。
46.权利要求24的设备，具有能够由用户按下的多个面板键，以产生进入到第一显示器中显示的文本输入字段的新文本，该文本输入字段也被显示在第二显示器上，使得出现在所述第一显示器中的新文本也将出现在所述第二显示器中。
47.权利要求24的设备，包括能够由用户按下的至少一个控制按钮，以产生出现在多于一个显示器中的复选框、单选按钮或其它状态控制的改变的状态，并使所有显示相同的复选框、单选按钮或其它的状态控制的显示器同时改变到所述改变的状态。
48.权利要求24的设备，能够在所述显示器的至少一个显示器中显示所述图像的子集，和进一步具有以下组中的一个，所述组包括(1)能够由用户按下的多个面板键，以产生键入到所述一个或多个显示器上所示的文本输入字段中的文本，和(2)箭头键或其它的控制，当用户启动该控制时，改变所述文本输入点，其中如果该文本输入点移出在任何给定显示器中可见的所述图像的子集，则该显示器将自动地滚动该图像，使得该文本输入点将出现在那个显示器中。
49.权利要求29的设备，其中微显示器显示相对较高的分辨率的大的表观图像，直视显示器是低分辨率的位图直视显示器，所述直视显示器作为所述较大的表观图像中的一个窗口。
50.权利要求29的设备，其中第一显示器是微显示器，而第二显示器是直视显示器，所述设备进一步包括可由用户操作的控制，以便使直视显示器中显示的所述感兴趣子集区域的边界在微显示器显示的图像中向下或向上或向右或向左或者按其他方向移动。
51.权利要求50的设备，进一步包括用于输入文本的面板键，该图像是文档或网页，以及随着用户操作所述面板键来输入文本到所述文档或网页中，包括文本输入点的文档或网页的子集被自动地滚动到直视显示器和微显示器的视域中。
52.权利要求51的设备，其中直视显示器中显示的子集是一小块区域，它包含微显示器中显示的图像的所有或部分的当前聚焦区域。
53.一种计算机实现的方法，产生用于解释在显示图像的电话手机或其他手持设备上的控制元件的操作的代码，所述电话手机或其他设备具有(1)表面，所述表面具有用于显示所述图像的两个或多个显示器，和(2)可由用户操作的控制元件，用于控制所述显示器，所述代码响应于这样的操作而实现一个或多个显示器上的视觉改变。
54.权利要求53的方法，其中至少一个显示器是直视显示器。
55.权利要求54的方法，其中至少一个显示器是微显示器。
56.权利要求55的方法，其中该设备正好具有两个显示器。
57.权利要求56的方法，其中该设备包括一个直视显示器和一个微显示器。
58.权利要求53或54或55或56或57的方法，操作从所述设备远程发送的功能。
59.权利要求58的方法，其中这样的功能从以下组中被选择，所述的组包括即时消息传递、电子邮件、联系管理、调度管理和电话呼叫。
60.权利要求58的方法，其中该功能中这样的至少一个功能是在直视显示器中被显示的。
61.权利要求60的方法，其中被显示的功能包括能被显示在微显示器中的一个附件。
62.权利要求61的方法，所述控制元件包括距离感应器，所述代码响应于用户把所述距离感应器拿到用户眼前而实现在微显示器中显示所述附件。
63.权利要求53的方法，其中响应于一个图像被显示在一个显示器中而不显示在其他显示器中的至少一个显示器上，该代码实现在不显示那个图像的显示器中的一个或多个显示器上显示一个文本或图形指示，所述指示表明其他显示器的其中之一正在显示那个图像
64.权利要求61或62的方法，其中(1)该功能从功能组中取得，所述功能组包括即时消息传递、电子邮件、联系管理、调度维护、计算功能、进行电话呼叫、观看因特网内容和观看其他类型的文档，(2)该附件是从附件组中取得的一个附件，所述附件组包括网页URL、照片图像、电子表格、演示文稿、Adobe Acrobat文件、文字处理器文档和其它类型的内容，和(3)控制元件包括用户能够操作的第一控制，以便在微显示器中显示附件，所述代码响应于所述第二控制的操作来实现这样的附件的这种显示。
65.权利要求64的方法，其中所述控制元件包括第二控制元件，当用户激活该控制元件时，在直视显示器中显示一个指示，向用户表明该附件已经被打开和正被显示在微显示器中，并且所述代码响应于所述激活而实现这样的指示的这种显示。
66.一种计算机实现的方法，产生用于解释在具有两个或者多个显示器的电话手机或其他手持设备上的控制元件的操作的代码，所述电话手机或其他设备具有可由用户操作的第一控制元件，以便(1)使得第一显示器显示包括对其他内容的一个或多个引用的第一内容，和(2)使得那个被引用的内容被显示在第二显示器中，并且所述代码响应于所述控制的操作来实现每个所述显示。
67.权利要求66的方法，其中第一内容是从以下组中选择的内容，该组包括图像、文档、网页、文本或其他内容，以及被引用的内容是从以下组中选择的内容，该组包括图像、文档、网页、文本或其他的内容。
68.权利要求67的方法，其中该设备包括一个直视显示器和一个微显示器。
69.一种计算机实现的方法，产生用于解释在显示图像的电话手机或其他手持设备上的控制元件的操作的代码，所述电话手机或其他设备具有(1)显示所述图像的两个或多个显示器，和(2)用于控制所述显示器的控制元件，其中用户能操作所述控制元件，以使得第一显示器显示一个图像和使得第二显示器显示所述图像的一个感兴趣子集区域，并且所述代码响应于所述控制元件的操作而实现所述子集的显示。
70.权利要求69的方法，其中所述控制元件包括可由用户操作的第一控制以便(1)在一个显示器中基本上显示全部网页，和(2)在该显示器的另一个显示器中显示该网页的一个子集的特写镜头，所述代码响应于所述第一控制的操作而实现所述一个显示器中的所述显示和所述另一个显示器中的所述显示。
71.权利要求69的方法，其中该设备包括一个直视显示器和一个微显示器。
72.权利要求69的方法，其中所述控制元件包括可由用户操作的第二控制，当第一显示器正在显示具有能被选择或键入的项目的第一内容时，使得这种项目的其中之一被聚焦，所述代码实现所述的这种项目的其中之一。
73.权利要求72的方法，其中，响应于用户操作所述第二控制，所述代码通过以视觉上可辨别的阴影来勾画所述一个聚焦项目的轮廓而实现那个项目的高亮突出。
74.权利要求73的方法，其中该设备具有可由用户操作的选择功能，以便选择所述一个聚焦项目，所述代码响应于所述选择功能的操作而实现所述一个项目的选入。
75.权利要求74的方法，其中该设备进一步包括一个或多个面板键，如果所述一个项目是可编辑的文本字段，则当用户按下该面板键时，使得一个字符被键入所述一个项目中，所述代码响应于用户按下所述一个或多个面板键而实现字符的如此键入。
76.权利要求69的方法，其中所述控制元件包括可由用户操作的第三控制，如果该设备已经准备具有一个聚焦项目的图像用于在微显示器中显示，则使得包围该聚焦项目的所述图像的子集被显示在直视显示器中，所述代码响应于所述第三控制的操作而实现所述图像子集的这样的显示。
77.权利要求76的方法，其中直视显示器中显示的子集是所述一个项目的特写镜头。
78.权利要求76的方法，其中直视显示器中显示的子集包括该聚焦项目和相应于那个项目的文本或图形标签或符号的文本或位图表示。
79.权利要求76的方法，其中聚焦项目是网页表格上的“姓”文本输入框，而该子集包括标签“姓”，和将键入姓的相应的文本输入框。
80.权利要求76的方法，其中控制元件包括可由用户操作的第四控制，使得直视显示器中显示的子集通过用户操作而被改变，所述代码响应于所述用户操作来实现所述改变。
81.权利要求78的方法，其中该设备包括以下组中的至少一个控制元件，该组包括滚轮控制或上/下按钮或多速上/下控制，它们能够通过用户操作来使得该聚焦项目从当前的聚焦项目改变到能被选择或键入的在前的或下一个项目。
82.权利要求81的方法，其中该方法包括当聚焦项目从一个可选项改变到一个新的聚焦项目时使得直视显示器中显示的图像同时改变的软件。
83.权利要求82的方法，其中通过显示包围全部或部分的所述新的聚焦项目的该图像的子集来改变所述图像。
84.权利要求62的方法，其中所述电话手机或其他的手持设备进一步包括菜单按钮，以及如果在所述距离感应器感应到所述设备上的微显示器接近一个物体的同时用户按下所述菜单按钮，则该设备将在微显示器上显示一个菜单，否则该设备将在该直视显示器上显示所述菜单。
85.权利要求76的方法，其中该设备包括麦克风和话音识别软件，允许用户通过对该设备讲话而使得该聚焦项目从一个可选项改变到另一个可选项，所述代码响应于用户如此讲话而实现所述改变。
86.权利要求76的方法，其中该设备包括计算机处理器，其中所述微显示器中的所述聚焦项目和直视显示器中显示的所述图像子集能通过运行在该设备的所述计算机处理器上的软件而被改变。
87.权利要求85的方法，其中所述改变通过使一个大图像由许多较小的帧构成和快速地改变在直视显示器中显示该较大图像的哪个子集而产生直观显示。
88.权利要求69的方法，其中可以通过用户键入、按下按钮、说话或使用该设备上的其它控制来改变该聚焦项目，以及其中随着焦点改变，如果微显示器正在显示一个图像，则微显示器中显示的图像自动滚动以使该聚焦项目保持在视域中，并且如果直视显示器正在显示一个图像，则直视显示器中显示的图像自动滚动以使该聚焦项目保持在视域中。
89.权利要求69的方法，其中该设备具有能够由用户按下的多个面板键，以产生进入到第一显示器中显示的文本输入字段的新文本，该文本输入字段也被显示在第二显示器上，使得出现在所述第一显示器中的新文本也将出现在所述第二显示器中，所述代码响应于用户如此按下所述面板键而实现所述第一显示器和第二显示器中出现的新文本。
90.权利要求69的方法，其中该设备包括能够由用户按下的至少一个控制按钮，以产生出现在多于一个显示器中的复选框、单选按钮、或其它状态控制的改变的状态，并使所有显示相同的复选框、单选按钮或其它的状态控制的显示器同时改变到所述改变的状态。
91.权利要求69的方法，其中该设备能够在所述显示器的至少一个显示器中显示所述图像的子集，和进一步具有以下组中的至少一个，该组包括(1)能够由用户按下的多个面板键，以产生键入到所述一个或多个显示器上所示的文本输入字段中的文本，和(2)箭头键或其它的控制，当用户启动该控制时，改变所述文本输入点，其中如果文本输入点移出任何给定显示器中可见的所述图像的子集，则所述代码实现所述任意给定显示器自动滚动该图像，使得文本输入点将出现在所述任意给定的显示器中。
92.权利要求71的方法，其中微显示器显示相对较高分辨率的大的表观图像，直视显示器是低分辨率的位图直视显示器，所述直视显示器作为所述较大的表观图像中的一个窗口。
93.权利要求69的方法，其中第一显示器是微显示器和第二显示器是直视显示器，所述控制元件的子集可由用户操作，以便使直视显示器中显示的所述感兴趣子集区域的边界向下或向上或者向右或向左或按其它方向移动通过该微显示器中显示的图像，所述代码响应于所述控制元件的所述子集的操作而实现所述边界的所述移动。
94.权利要求92的方法，其中该设备进一步包括可由用户操作以输入文本的面板键，该图像是具有文本输入点的文档或网页，所述代码响应于用户操作所述面板键输入文本到所述文档或网页中而实现包括该文本输入点的文档或网页的子集自动滚动到该直视显示器和微显示器的视域中。
95.权利要求92的方法，其中直视显示器中显示的子集是一小块区域，包含微显示器中显示的图像的所有或部分的当前聚焦区域。
96.权利要求63的方法，其中该设备包括一个直视显示器和一个微显示器。
97.一种存储媒介，具有嵌入其中的计算机实现的方法，其产生用于解释在显示图像的电话手机或其他手持设备上的控制元件的操作的代码，所述电话手机或其他设备具有(1)表面，所述表面具有用于显示所述图像的两个或多个显示器，和(2)可由用户操作的控制元件，用于控制所述显示器，所述代码响应于这样的操作而实现一个或多个显示器上的视觉改变。
98.权利要求97的存储媒介，其中至少一个显示器是直视显示器。
99.权利要求98的存储媒介，其中至少一个显示器是微显示器。
100.权利要求99的存储媒介，其中该设备正好具有两个显示器。
101.权利要求100的存储媒介，其中该设备包括一个直视显示器和一个微显示器。
102.权利要求97或98或99或100或101的存储媒介，它操作从所述设备远程发送的功能。
103.权利要求102的存储媒介，其中这样的功能从以下组中被选择，所述组包括即时消息传递、电子邮件、联系管理、调度管理和电话呼叫。
104.权利要求102的存储媒介，其中该功能的这样的至少一个功能是在直视显示器中被显示的。
105.权利要求104的存储媒介，其中显示的功能包括能被显示在微显示器中的一个附件。
106.权利要求105的存储媒介，其中所述控制元件包括距离感应器，所述代码响应于用户把所述距离感应器拿到用户眼前而实现在微显示器中显示所述附件。
107.权利要求97的存储媒介，响应于一个图像被显示在一个显示器中而不显示在其它显示器的至少一个显示器中，该代码实现在不显示那个图像的显示器中的一个或多个显示器上显示一个文本或图形指示，所述指示表明其他的显示器的其中之一正在显示那个图像
108.权利要求105或106的存储媒介，其中(1)该功能从功能组中取得，该功能组包括即时消息传递、电子邮件、联系管理、调度维护、计算功能、进行电话呼叫、观看因特网内容和观看其他类型的文档，(2)该附件是从附件组中取得的附件，该附件组包括网页URL、照片图像、电子表格、演示文稿、Adobe Acrobat文件、文字处理器文档和其它类型的内容，和(3)控制元件包括能够由用户操作的第一控制以便在微显示器中显示那个附件，所述代码响应于所述第二控制的操作而实现这样的附件的这种显示。
109.权利要求108的存储媒介，其中所述控制元件包括第二控制元件，当用户激活该控制元件时，在直视显示器中显示一个指示，向用户表明该附件已经被打开和正被显示在微显示器中，并且所述代码响应于所述激活而实现这样的指示的这种显示。
110.一种存储媒介，具有嵌入其中的计算机实现的方法，其产生用于解释在具有两个或多个显示器的电话手机或其他手持设备上的控制元件的操作的代码，所述电话手机或其他设备具有可由用户操作的第一控制元件，以便(1)使得第一显示器显示包括对其他内容的一个或多个引用的第一内容，和(2)使得那个被引用的内容被显示在第二显示器中，和所述代码响应于所述控制的操作而实现每个所述显示。
111.权利要求110的存储媒介，其中所述第一内容是从以下组中选择的内容，该组包括图像、文档、网页或文本，以及被引用的内容是从以下组中选择的内容，该组包括图像、文档、网页、文本或其他的内容。
112.权利要求111的存储媒介，其中该设备包括一个直视显示器和一个微显示器。
113.一种存储媒介，具有嵌入其中的计算机实现的方法，其产生用于解释在显示图像的电话手机或其他手持设备上的控制元件的操作的代码，所述电话手机或其他设备具有(1)显示所述图像的两个或多个显示器，和(2)用于控制所述显示器的控制元件，其中用户能操作所述控制元件，以使得第一显示器显示一个图像，和使得第二显示器显示所述图像的感兴趣子集区域，并且所述代码响应于所述控制元件的操作而实现所述子集的显示。
114.权利要求113的存储媒介，其中所述控制元件包括可由用户操作的第一控制，以便(1)在一个显示器中基本上显示全部网页，和(2)在另一个显示器中显示该网页的一个子集的特写镜头，所述代码响应于所述第一控制的操作而实现在所述一个显示器中的所述显示和在所述另一个显示器中的所述显示。
115.权利要求113的存储媒介，其中该设备包括一个直视显示器和一个微显示器。
116.权利要求113的存储媒介，其中所述控制元件包括可由用户操作的第二控制，当第一显示器正在显示具有能被选择或键入的项目的第一内容时，使得这样的项目的其中之一被聚焦，所述代码实现所述这样的项目的其中之一。
117.权利要求116的存储媒介，其中，响应于用户操作所述第二控制，所述代码通过以视觉上可辨别的阴影来勾画所述一个聚焦项目的轮廓而实现那个项目的高亮突出。
118.权利要求117的存储媒介，其中该设备具有可由用户操作的选择功能，以便选择所述一个聚焦项目，所述代码响应于所述选择功能的操作而实现所述的一个项目的选择。
119.权利要求118的存储媒介，其中该设备还包括一个或多个面板键，如果所述一个项目是可编辑的文本字段，则当用户按下该面板键时，使得一个字符被键入所述一个项目中，所述代码响应于用户按下所述一个或多个面板键而实现所述字符的如此键入。
120.权利要求113的存储媒介，其中所述控制元件包括可由用户操作的第三控制，使得如果该设备已经准备具有一个聚焦项目的图像用于在微显示器中显示，则包围该聚焦项目的所述图像的子集被显示在直视显示器中，所述代码响应于所述第三控制的操作而实现被这样显示的所述图像的所述子集。
121.权利要求120的存储媒介，其中直视显示器中显示的子集是所述一个项目的特写镜头。
122.权利要求120的存储媒介，其中直视显示器中显示的子集包括聚焦项目和相应于那个项目的文本或图形标签或符号的文本或位图表示。
123.权利要求120的存储媒介，其中聚焦项目是网页表格上的“姓”文本输入框，以及该子集包括标签“姓”，和姓将被键入的相应的文本输入框。
124.权利要求120的存储媒介，其中控制元件包括可由用户操作的第四控制，使得直视显示器中显示的子集通过用户操作被改变，所述代码响应于所述用户操作而实现所述改变。
125.权利要求122的存储媒介，其中该设备包括以下组中的至少一个控制元件，该组包括滚轮控制或上/下按钮或多速上/下控制，它们能够通过用户操作而使得该聚焦项目从当前的聚焦项目改变到能被选择或键入的在前的或下一个项目。
126.权利要求125的存储媒介，其中该方法包括当聚焦项目从一个可选项改变到一个新的聚焦项目时使得直视显示器中显示的图像同时改变的软件。
127.权利要求126的存储媒介，其中通过显示包围所述新的聚焦项目的全部或部分的该图像的子集来改变所述图像。
128.权利要求120的存储媒介，其中该设备包括麦克风和话音识别软件，允许用户通过对该设备讲话而使得该聚焦项目从一个可选项改变到另一个可选项，所述代码响应于用户如此讲话而实现所述改变。
129.权利要求120的存储媒介，其中该设备包括一个计算机处理器，其中所述微显示器中的所述聚焦项目和直视显示器中显示的所述图像子集能通过运行在该设备的所述计算机处理器上的软件被改变。
130.权利要求129的存储媒介，其中所述改变通过使一个大图像由许多较小的帧组成，和快速地改变在直视显示器中显示该大图像的哪个子集而产生直观显示。
131.权利要求113的存储媒介，其中可以通过用户键入、按下按钮、说话、或使用该设备上的其它控制来改变该聚焦项目，以及其中随着焦点改变，如果微显示器正在显示一个图像，则微显示器中显示的图像自动滚动以使该聚焦项目保持在视域中，以及如果直视显示器正在显示一个图像，则直视显示器中显示的图像自动滚动以使该聚焦项目保持在视域中。
132.权利要求113的存储媒介，其中该设备具有能够由用户按下的多个面板键，以产生进入到第一显示器中显示的文本输入字段的新文本，该文本输入字段也被显示在第二显示器上，使得出现在所述第一显示器中的新文本也将出现在所述第二显示器中，所述代码响应于用户如此按下所述面板键而实现所述第一显示器和第二显示器中出现的新文本。
133.权利要求113的存储媒介，其中该设备包括能够由用户按下的至少一个控制按钮，以产生出现在多于一个显示器中的复选框、单选按钮或其它状态控制的改变的状态，并使所有显示相同的复选框、单选按钮或其它状态控制的显示器同时改变到所述改变的状态。
134.权利要求113的存储媒介，其中该设备能够在所述显示器的至少一个显示器中显示所述图像的子集，和还具有以下组中的至少一个，该组包括(1)能够由用户按下的多个面板键，以产生键入到所述一个或多个显示器上所示的文本输入字段中的文本，和(2)箭头键或其它的控制，当用户启动该控制时，改变所述文本输入点，其中如果文本输入点移出任何给定显示器中可见的所述图像的子集，则所述代码实现所述任意给定显示器自动地滚动该图像，使得该文本输入点将出现在所述任意给定的显示器中。
135.权利要求115的存储媒介，其中微显示器显示相对较高分辨率的大的表观图像，直视显示器是低分辨率的位图直视显示器，所述直视显示器作为所述较大的表观图像中的一个窗口。
136.权利要求113的存储媒介，其中第一显示器是微显示器，而第二显示器是直视显示器，所述控制元件的子集可以由用户操作，以便使直视显示器中显示的所述感兴趣子集区域的边界向下或向上或者向右或向左或者按其他方向移动通过微显示器中显示的图像，所述代码响应于所述控制元件的所述子集的操作而实现所述边界的所述移动。
137.权利要求136的存储媒介，其中该设备还包括可由用户操作以输入文本的面板键，该图像是具有文本输入点的文档或网页，所述代码响应于用户操作所述面板键输入文本到所述文档或网页中，而实现包括该文本输入点的文档或网页的子集被自动地滚动到直视显示器和微显示器的视域中。
138.权利要求136的存储媒介，其中直视显示器中显示的子集是一小块区域，包含微显示器中显示的图像的所有或部分的当前聚焦区域。
139.权利要求107的存储媒介，其中该设备具有一个直视显示器和一个微显示器。
140.权利要求1或24的设备，其中所述设备是电话、灵巧电话、PDA、手持计算机或手表。
141.权利要求1或24的设备，其中该设备可以无线地接收和发射数据。
142.权利要求1或24的设备，其中该设备包括嵌入或附属的靠近该设备的表面顶部的微显示器，靠近该设备的表面底部的键盘或触摸板，以及在该微显示器与触摸板之间的该设备表面上可见的直视显示器。
143.权利要求1或24的设备，其中该设备包括具有直视显示器的第一部分，具有微显示器和键盘或触摸板的第二部分，和连接所述第一部分到所述第二部分的铰链，其中所述微显示器处于所述铰链和所述键盘或触摸板之间。
全文摘要
公开了一种具有至少两个显示器的手持电子设备。至少一个显示器是直视显示器，就象那些在2001中使用的多数的蜂窝电话或PDA上的一样，用于在大约12－24英寸的正常阅读距离上观看(“臂长距离”观看)。其他显示器的至少一个是微显示器，具有放大光学元件的微小显示器，当微显示器被放置在靠近眼睛时被用于观看较大的、较高分辨率的图像。本发明以允许人们在小型设备上舒适地访问以及与整个网页交互的方式来协调微显示器和直视显示器。当用户在拿近眼睛的设备的微显示器上观看网页时(或其它内容)，该设备允许用户在网页的特定部分上定位光标或矩形轮廓(或“感兴趣区域”的一些其它的指示)，然后当用户把设备移出以便用臂长距离观看时，用户能够在直视显示器上观看感兴趣区域—就是说，观看出现在微显示器上的较大图像的一个子集。
文档编号G06F3/048GK1533637SQ02807744
公开日2004年9月29日 申请日期2002年4月2日 优先权日2001年4月2日
发明者马修·G·帕拉科夫, 马修 G 帕拉科夫 申请人:运行移动系统公司