专利名称：移动设备可视输入系统和方法
技术领域：
本发明一般涉及图像捕获和处理，并且更具体地，涉及经由移动设备的图像捕获和处理。
背景技术：
由于物理信息输入控件(按钮，按键)的大小和数量，诸如PDA和智能电话之类的便携信息设备受限于信息输入的用户界面能力。输入信息还常常意欲用于第二信息处理的立即使用，并且，从除了键盘键入以外的输入方法传输的信息通常未被无缝地融合，其导致对用户操作的破坏和缺乏直觉性。因此，本发明的目的是向移动设备提供改进的图像捕获和识别功能。在以下的公开中至少满足了这些目标中的某些。
发明内容
本发明提供了针对诸如PDA(个人数字助理)之类的便携通信设备或配备有成像能力的智能电话的改进的用户界面和信息处理能力。在本发明中，由内嵌的相机所捕获的图像被分析，以检测相关信息的存在，即，利用图像识别软件和0CR(光学特征识别)技术来捕获商用名片的图像。该相关信息包括名字、电话号码、电子邮件地址、因特网访问地址等。 所检测到的相关信息被作为覆盖层显示在原始图像之上。该覆盖层可将相关信息加下划线、加框或高亮，并且，将其与屏幕上的控制(超链接)相关联，以用于后续的用户操作。与具体的相关信息相关联的控制执行具体的动作。例如，如果检测到电话号码，则用户可打电话或发送SMS (短消息服务)至电话号码。如果检测到电子邮件id，则新的电子邮件创作屏幕被在便携设备中打开。另外，所捕获的原始图像可与其所检测到的元素(电话号码、邮件id等)和某些另外的可用信息一起编码，并且，被发明到服务器以用于进一步的处理，诸如，存档、共享和分析。网络服务器分析该图像，以用于提取设备无法提取的另外的信息。服务器将所检测到的信息作为原始图像的元数据的索引。然后，服务器可利用该元数据以用于进一步的应用，诸如，用户上载文件的关系数据库、对其他专用和公用网络内容的推荐等。本发明的系统包括将相关的检测到的信息作为覆盖层显示在所捕获的图像之上，该覆盖层带有用于后续用户操作的屏幕上的控制；将屏幕上的控制与具体的用户动作 (发送邮件、呼叫等)相关联，将所捕获的图像与其他信息(日期、时间等)一起编码为标准格式，并且，将其发送到网络服务器以用于进一步的处理，并且，在网络服务器处接收已编码的图像，并且，将所包含的信息做索引以用于第二应用(对网络内容的推荐等)。本发明包括用于应用带有文本和/或模式检测算法的便携信息/通信设备的可视图像输入以提高从所捕获的图像所包含的信息的可用性的系统和方法。本发明利用嵌入式相机输入并组合图像处理技术、模式识别技术和通信/信息处理步骤，以提供改进的图像数据。一方面是一种用于在移动设备上处理图像的系统，包括移动设备，该移动设备包括相机，该相机用于捕获数字图像；显示器，该显示器用于显示所捕获的图像；以及图像处理模块，该图像处理模块被配置为检测包括在所捕获的图像中的一个或多个类型的信息；其中，图像处理模块被配置为将所检测到的信息作为单独层覆盖在所捕获的图像之上， 以用于在显示器上查看。在一个实施例中，所覆盖的信息被修改图形，以将其从所捕获的图像中可视地区分开。在另一实施例中，所检测到的信息包括文本；并且其中，文本的一个或多个部分是各自可被选择的，以用于执行关于所选文本的后续动作。一个或多个控制被应用到所检测到的信息，使得一个或多个控制提供在选择文本的一个或多个部分时在移动设备上执行动作的指令。例如，图像处理模块可被配置为识别与电话号码相关联的文本，使得一旦选择与电话号码相关联的文本，应用到电话号码的控制自动拨叫电话号码。另外，图像处理模块可被配置为识别与电子邮件地址相关联的文本，使得应用到电子邮件地址的控制包括超链接，一旦选择与电子邮件地址相关联的文本，该超链接打开消息应用。另外，图像处理模块被配置为识别与URL相关联的文本，使得应用到URL的控制包括超链接，一旦选择与URL相关联的文本，该超链接自动打开浏览器应用。在另一实施例汇总，该系统包括远程服务器；以及无线连接，该无线连接将移动设备耦合到远程服务器，使得所捕获的图像和检测到的信息可被上载到远程服务器以用于进一步的处理。所捕获的图像和所检测到的信息在上载前被编码成标准成像格式。在优选的实施例中，远程服务器包括被配置为从所捕获的图像检测第二信息的第二图像处理模块。例如，第二图像处理模块被配置为将检测到的信息作为第二应用的元数据的索引。第二图像处理模块被配置为上载所检测到的信息，以用于在关系数据库中使用。在一个实施例中，远程服务器包括被配置为将所检测到的第二信息上载回移动设备的数据传输模块。
另一方面是一种用于在移动设备上处理图像的方法，包括用与移动设备相关联的相机捕获数字图像；检测包括在所捕获的图像中的一个或多个类型的信息；将所检测到的信息作为单独层覆盖在所捕获的图像之上；以及将所捕获的图像和所检测到的信息覆盖显示在与移动设备相关联的显示器上；在优选实施例中，所覆盖的信息被修改图形，以将其从所捕获的图像中可视地区分开。当所检测到奥的信息包括文本时，该方法还包括将文本的一个或多个部分指定为各自可选的，以用于执行关于所选文本的后续动作；在另一实施例中，该方法还包括将一个或多个控制应用到所检测到的信息；并且其中，一个或多个控制提供一旦选择文本的一个或多个部分就在移动设备上执行动作的指令。在移动设备上执行动作包括以下的一个或多个一旦选择与电话号码相关联的文本就自动拨叫电话号码，一旦选择与电子邮件相关联的文本就打开消息应用，或一旦选择与URL 相关联的文本就打开浏览器应用。在另一实施例中，该方法还包括经由无线连接，将移动设备耦合到远程服务器； 将所捕获的图像和所检测到的信息上载到远程服务器；以及执行对所捕获的图像和所检测到的信息的另外处理。在另一实施例中，执行另外的处理可包括从所捕获的图像检测第二信息，将检测到的信息作为第二应用的元数据的索引和/或上载所检测到的信息，以用于在关系数据库中使用。另一方面是一种移动设备，包括相机，该相机用于捕获数字图像；显示器，该显示器用于显示所捕获的图像；以及图像处理模块，该图像处理模块被配置为检测包括在所捕获的图像中的一个或多个类型的信息；其中，图像处理模块被配置为将所检测到的信息作为单独层覆盖在所捕获的图像之上，以用于在显示器上查看。将在说明书的以下部分中给出发明的其他方面，其中，详细的描述是出于完全公开发明的优选实施例的目的，而不是对其进行限制。
通过参照以下的图，可更加完整地理解发明，该图仅用于示出目的图1是根据本发明的用于图像捕获和识别的系统的示意图。图2示出了在图1的系统中所使用的各种软件应用模块。图3示出了根据本发明的用于处理图像数据的方法的流程图。图4示出了根据本发明的方法的所捕获的图像和所识别的数据。
具体实施例方式更具体地参照图，出于示出的目的，本发明体现在图1至图4中所一般示出的装置中。将理解，该装置可随着配置和部件的细节的不同而不同，并且，该方法可随着具体的步骤和序列的不同而不同，只要不偏离此处所公开的基本概念即可。本发明包括连同图像处理技术、模式识别技术一起的嵌入式相机输入，并且，通信 /信息处理步骤提高了相机电话/设备的信息处理能力的可用性。
图1示出了根据本发明的图像识别系统10。系统10包括经由无线连接14耦合到远程服务器16的嵌入了相机的电话(例如，智能电话等)/PDA12。电话12包括相机观、显示器M、键盘22和存储器20，该存储器20包括根据本发明所适配的软件，以用于经由处理器18来处理所捕获的图像。电话12还包括天线26，以用于无线地与其他电话或服务器16
ififn。图2示出了存储在存储器20和服务器16中的用于根据本发明处理图像数据的软件模块。电话存储器20包括图像捕获模块30、图像预处理模块32、用户输入/操纵模块 36，以及数据传输模块38，该数据传输模块38用于无线地将已经预处理的图像传输到网络服务器以用于高级图像处理。服务器16包括用于对图像的进一步处理的高级图像处理模块49和数据传输模块42，该数据传输模块42用于接收已经预处理的电话数据并将已经高级处理的图像返回到电话以供用户使用。图3示出了根据本发明的图像识别方法100。在输入阶段期间，图像捕获操作一般由用户执行。可以是图像捕获模块30的一部分的图像识别算法以预定间隔搜索相机观实时示图查找器模式的输入图像，以在步骤102处搜索预定义信息类型的一般模式。这些模式可包括电话号码、电子邮件地址文本信息、条形码信息等。当所希望的信息图像被在所捕获的帧中合适地定位时，图像被捕获到设备104。该捕获控制可由如下中的任一个调用1)通过控制输入的用户操作，诸如，物理的(例如，键盘22或屏幕上的“快门”按钮)、2~)用于进一步处理的适当定位的自动图像区域提取算法、 或3)其他输入传感器信号，诸如，来自单独嵌入到设备上的麦克风的音频输入、加速计等 (未示出)。接下来，图像预处理模块32可被用于检测/识别阶段，图4中进一步示出了该检测/识别阶段。图4示出了对商用名片的图像捕获150，该商用名片152具有文本信息154 和其他图形信息，诸如，图片156和商标158。在步骤106处，所捕获的图像150被分析以用于模式/文本识别。该预处理模块包括特别配置用于识别各种信息类型(诸如，电话号码 176、电子邮件地址168、因特网接入地址/网站174、或一般字/短语级别文本识别)的软件/代码。然后，所检测/识别的文本或其他信息160被显示为所捕获的原始图像150之上的覆盖层，以创建新处理的图像180(带有覆盖160)。在步骤110处，所捕获的信息160可被显示为加下划线的、带框的、加粗的、高亮的、或其他可视修改，以与原始图像的信息相区另IJ，并且，在步骤112处，可与屏幕上的控制(超链接)相关联，以用于后续的用户操作。可选地，如果针对在一个原始捕获的图像中的不同信息类型，检测到多个区域 (例如，文本区域160.、图片区域170、商标区域172)，在步骤108处，它们被同时呈现，以用于用户后续选择在原始图像中所识别的选项中的一个。在步骤112的信息处理阶段期间，取决于检测到的信息类型，附加到所捕获图像 150的控制(例如，超链接)被与动作相关联。例如，电话号码176可具有设置有预处理模块32的动作的预定集合。针对电话号码176，控制动作(例如，通过选择相关联的超链接)可以是通过呼叫设备12系统的电话呼叫应用(未示出)的对检测到的号码176的电话呼叫的开始。可选地，通过当操作超链接控制时的另外的下拉菜单选项，SMS/MMS消息开始选项(例如，发送文本、消息等)可被作为可替换选项包括。针对电子邮件地址168，编程的控制动作可以是通过存储在设备上的电子邮件应用(未示出)打开新的电子邮件创作屏幕。当检测到诸如URL之类的因特网接入地址174时，编程的控制动作可以是通过利用设备上的网页浏览应用(未示出)而打开因特网页面。针对一般的文本或不落入具体的与应用相关联的动作中的任一个的所识别的信息(例如，名字162、位置164、或公司名字166)，默认的控制动作可以是对网页浏览应用的预定义网络服务的因特网搜索查询请求，或对专用网络搜索查询客户端应用的因特网搜索查询请求。用户指定的动作阶段可以经由用户输入模块36发起，并且，可基于在步骤114处从原始捕获150检测到的信息来向用户提供提示或菜单。所捕获信息的各自组成部分(例如，电话号码、电子邮件等)可各自由用户选择，以用于操作关于所选择的组成部分的命令。在步骤114中的用户控制操作或之前的步骤112的多个检测到的动作中的一个之后， 所希望的应用程序可被激活。在优选的实施例中，系统10可包括另外的基于服务器的处理阶段。在步骤114处的用户指定的动作的背景中，或其完成之后，所捕获的图像与检测到的信息元素一起被在步骤116处编码成标准的成像格式(例如，诸如JPG、GIF、PNG、TIF等的压缩格式)。可选地，另外的信息也可与图像一起编码，例如，其他传感器输入，诸如，日期/时间、地理位置日期等，其可被设备I2系统软件的其他组件可用。该数据可被编码为标签数据，或者在图像文件格式中，或作为单独的元数据文件。在步骤118处，已编码并已预处理的一个或多个文件被经由数据传输模块38 (其可包括用于图像编码/加标签步骤116的代码)在无线连接14上上载到预定义的网络服务，该预定义的网络服务具有被配置用于存档、共享和分析/合成上载数据的计算机/服务器16。网络服务服务器优选地包括高级图像处理应用40，该高级图像处理应用40被配置为利用服务器16的另外的计算处理功率来在步骤120处进一步分析图像并执行第二图像分析和数据提取。应用10可提取另外的信息元素，诸如，第二文本信息元素(如可被作为原始图像150的更小区域捕获)，其可能需要另外的在便携设备系统上不能立即可用的图像处理功率。处理还可在包括数据的图形或其他类型的其他指定区域(例如，170、172) 上完成。在步骤122处，网络服务服务器可将检测到的元素(例如，文本数据160)作为原始图像150的元数据做索引。然后，该元数据可被用于服务或设备其他应用对信息的第二应用。这些第二应用的示例是1)用户上载的档案文件的关系数据库、幻对其他专用或公用网络内容的推荐、3)与其他通信服务的关联/开始，作为向家人、朋友或社区的通知、4) 与用户指定的档案存储方法的自动同步(诸如，家用计算机上的库备份)、幻对上载信息的排序/分类，以用于对原始图像等的进一步搜索。在步骤IM处，第二图像、或其部分，以及已处理的图像可随后被上载回设备12。通过在便携设备12和远程服务器16处将一般的图像文本识别处理分为软件组件和处理，该便携设备12可限制对处理功率的需求，以仅本地提取与便携设备12和其嵌入式设备的立即功耗相关的信息元素。另外，立即提取的信息元素160被立即提供为对原始图像150和超链接动作控制的覆盖。对输入到设备特征的物理信息的直觉性关联是终端用户很容易识别的，从而提高了设备的可用性。通过无缝地集成网络上载，对标签/索引信息元素的详细分析和对用户网络服务 /应用环境的关系分析以及相同的物理输入(主要是原始图像数据150)可被合成到更大的信息结构上下文的一部分之中。通过参照对根据发明的实施例的方法和系统的流程图阐释，描述了本发明的实施例。这些方法和系统还可被实现为计算机程序产品。在这方面，流程图的每个块或步骤以及流程图中的块(和/或步骤)的组合可通过各种装置实现，诸如，硬件、固件和/或软件， 该软件包括体现为计算机可读程序代码逻辑的一个或多个计算机测绘那个徐指令。如将被理解的，任意这种计算机程序指令可被载入到计算机中，包括但不限于通用计算机或专用计算机、或其他制造机器的可编程处理装置，使得在计算机或其他可编程处理装置上执行的计算机程序指令创建用于实现在一个或多个流程图的一个或多个块中所指定的功能。因此，流程图的块支持用于执行所指定功能的装置的组合、用于执行所指定功能的步骤的组合、以及计算机程序指令，诸如，体现在计算机可读程序代码逻辑装置中，以用于执行所指定的功能。还将理解，流程图阐释的每个块以及流程图阐释中的块的组合可由基于硬件的专用计算机系统实现，该基于硬件的专用计算机系统可执行所指定的功能或步骤、或专用硬件和计算机可读程序代码逻辑装置的组合。另外，诸如体现为计算机可读程序代码逻辑之类的这些计算机程序指令还可被存储在计算机可读存储器中，该计算机可读存储器可指导计算机或其他可编程处理装置来以特定的方式工作，使得存储在计算机可读存储器中的指令制造包括指令装置的制品，该指令装置实现了在一个或多个流程图的一个或多个块中所指定的功能。计算机程序指令还可被载入到计算机或其他可编程处理装置上，以导致一系列操作步骤在计算机或其他可编程处理装置上执行，以产生计算机实现的处理，使得在计算机或其他可编程处理装置上执行的指令提供用于实现在一个或多个流程图中的一个或多个块中所指定的功能的步骤。因此，可见本发明中包括以下创造性实施例1. 一种移动设备，包括相机，该相机用于捕获数字图像；显示器，该显示器用于显示所捕获的图像；以及图像处理模块，该图像处理模块被配置为检测包括在所述所捕获的图像中的一个或多个类型的信息；其中，所述图像处理模块被配置为将所检测到的信息作为单独层覆盖在所述所捕获的图像之上，以用于在所述显示器上查看。2.根据实施例1所述的设备，其中，所覆盖的信息被修改图形，以将其从所述所捕获的图像中可视地区分开。3.根据实施例1所述的设备其中，所述所检测到的信息包括文本；并且其中，所述文本的一个或多个部分是各自可被选择的，以用于执行关于所选文本的后续动作。4.根据实施例2所述的设备其中，一个或多个控制被应用到所述所检测到的信息；并且其中，所述一个或多个控制提供在选择文本的一个或多个部分时在所述移动设备上执行动作的指令。5.根据实施例3所述的设备其中，所述图像处理模块被配置为识别与电话号码相关联的文本；并且其中，一旦选择与所述电话号码相关联的文本，应用到所述电话号码的控制自动拨叫所述电话号码。6.根据实施例3所述的设备其中，所述图像处理模块被配置为识别与电子邮件地址相关联的文本；并且其中， 应用到所述电子邮件地址的控制包括超链接，一旦选择与所述电子邮件地址相关联的文本，该超链接自动打开消息应用。7.根据实施例3所述的设备其中，所述图像处理模块被配置为识别与URL相关联的文本；并且其中，应用到所述URL的控制包括超链接，一旦选择与所述URL相关联的文本，该超链接自动打开浏览器应用。8. 一种用于在移动设备上处理图像的系统，包括(a)移动设备，所述移动设备包括(i)相机，该相机用于捕获数字图像；(ii)显示器，该显示器用于显示所捕获的图像；以及(iii)图像处理模块，该图像处理模块被配置为检测包括在所述所捕获的图像中的一个或多个类型的信息；(iv)其中，所述图像处理模块被配置为将所检测到的信息作为单独层覆盖在所述所捕获的图像之上，以用于在所述显示器上查看；(b)远程服务器；以及(c)无线连接，该无线连接将所述移动设备耦合到所述远程服务器，使得所述所捕获的图像和检测到的信息可被上载到所述远程服务器以用于进一步的处理。9.根据实施例8所述系统，其中，所覆盖的信息被修改图形，以将其从所述所捕获的图像中可视地区分开。10.根据实施例8所述的系统其中，所述所检测到的信息包括文本；并且其中，所述文本的一个或多个部分是各自可被选择的，以用于执行关于所选文本的后续动作。11.根据实施例9所述的系统其中，一个或多个控制被应用到所述所检测到的信息；并且其中，所述一个或多个控制提供在选择文本的一个或多个部分时在所述移动设备上执行动作的指令。12.根据实施例10所述的系统其中，所述图像处理模块被配置为识别与电话号码相关联的文本；并且其中，一旦选择与所述电话号码相关联的文本，应用到所述电话号码的控制自动拨叫所述电话号码。13.根据实施例10所述的系统其中，所述图像处理模块被配置为识别与电子邮件地址相关联的文本；并且其中，应用到所述电子邮件地址的控制包括超链接，一旦选择与所述电子邮件地址相关联的文本，该超链接自动打开消息应用。14.根据实施例10所述的系统其中，所述图像处理模块被配置为识别与URL相关联的文本；并且其中，应用到所述URL的控制包括超链接，一旦选择与所述URL相关联的文本，该超链接自动打开浏览器应用。15.根据实施例8所述的系统，其中，所述所捕获的图像和所检测到的信息在上载前被编码成标准成像格式。16.根据实施例8所述的系统，其中，所述远程服务器包括被配置为从所述所捕获的图像检测第二信息的第二图像处理模块。17.根据实施例16所述的系统，其中，所述第二图像处理模块被配置为将检测到的信息作为第二应用的元数据的索引。18.根据实施例16所述的系统，其中，所述第二图像处理模块被配置为上载所述所检测到的信息，以用于在关系数据库中使用。19.根据实施例16所述的系统，其中，所述远程服务器包括被配置为将所检测到的第二信息上载回所述移动设备的数据传输模块。20. 一种用于在移动设备上处理图像的方法，包括用与所述移动设备相关联的相机捕获数字图像；检测包括在所述所捕获的图像中的一个或多个类型的信息；将所述所检测到的信息作为单独层覆盖在所捕获的图像之上；将所述所捕获的图像和所检测到的信息覆盖显示在与所述移动设备相关联的显不器上。21.根据实施例20所述的方法，其中，所覆盖的信息被修改图形，以将其从所述所捕获的图像中可视地区分开。22.根据实施例20所述的方法，其中，所检测到的信息包括文本，所述方法还包括将所述文本的一个或多个部分指定为各自可选的，以用于执行关于所选文本的后续动作。23.根据实施例20所述的方法，还包括将一个或多个控制应用到所述所检测到的信息；并且其中，所述一个或多个控制提供在选择文本的一个或多个部分时在所述移动设备上执行动作的指令；24.根据实施例23所述的方法，其中，在所述移动设备上执行动作包括以下的一个或多个一旦选择与所述电话号码相关联的文本就自动拨叫电话号码，一旦选择与电子邮件相关联的文本就打开消息应用，或一旦选择与URL相关联的文本就打开浏览器应用。25.根据实施例20所述的方法，还包括经由无线连接，将所述移动设备耦合到远程服务器；将所述所捕获的图像和所检测到的信息上载到所述远程服务器；以及执行对所述所捕获的图像和所检测到的信息的另外处理。26.根据实施例25所述的方法，其中，所述所捕获的图像和所检测到的信息在上载前被编码成标准成像格式。27.根据实施例25所述的方法，其中执行另外的处理包括从所述所捕获的图像
检测第二信息。28.根据实施例27所述的方法，还包括将检测到的信息作为第二应用的元数据的索引。29.根据实施例观所述的方法，还包括上载所述所检测到的信息，以用于在关系数据库中使用。
30.根据实施例27所述的方法，还包括将所检测到的第二信息上载回所述移动设备。虽然以上的描述可包括细节，但是，这些不应当被看作是限制发明的范围，而是仅提供对该发明的当前优选的实施例中的某些的阐释。因此，将理解，本发明的范围完全涵盖对本领域技术人员而言可变得显然的其他实施例，并且因此，本发明的范围仅由所附权利要求限定，其中，对单体的参照并不意欲意味着“一个并且仅一个”，除非如此明确地声明， 而是意味着“一个或多个”。本领域技术人员所公知的等同于上述优选实施例的元素的所有结构的、化学的和功能的等同物都通过引用被明确结合于此，并且，意欲被当前的权利要求所涵盖。另外，设备或方法不必涉及由本发明所寻求解决的每一个问题，因为其将由本权利要求所涵盖。另外，本公开中的元素、组成部分或方法步骤都不意欲专用于公共，不管元素、组成部分或方法步骤是否明确地在权利要求中叙述。此处，没有权利要求元素将在35U. S. C. 112的第六段所提供的法理下理解，除非元素被用短语“用于…的装置”而被明确描述。
权利要求
1.一种移动设备，包括相机，该相机用于捕获数字图像；显示器，该显示器用于显示所捕获的图像；以及图像处理模块，该图像处理模块被配置为检测包括在所述所捕获的图像中的一个或多个类型的信息；其中，所述图像处理模块被配置为将所检测到的信息作为单独层覆盖在所述所捕获的图像之上，以用于在所述显示器上查看。
2.根据权利要求1所述的设备，其中，所覆盖的信息被修改图形，以将其从所述所捕获的图像中可视地区分开。
3.根据权利要求1所述的设备其中，所述所检测到的信息包括文本；并且其中，所述文本的一个或多个部分是各自可被选择的，以用于执行关于所选文本的后续动作。
4.根据权利要求2所述的设备其中，一个或多个控制被应用到所述所检测到的信息；并且其中，所述一个或多个控制提供在选择文本的一个或多个部分时在所述移动设备上执行动作的指令。
5.根据权利要求3所述的设备其中，所述图像处理模块被配置为识别与电话号码相关联的文本；并且其中，一旦选择与所述电话号码相关联的文本，应用到所述电话号码的控制自动拨叫所述电话号码。
6.根据权利要求3所述的设备其中，所述图像处理模块被配置为识别与电子邮件地址相关联的文本；并且其中，应用到所述电子邮件地址的控制包括超链接，一旦选择与所述电子邮件地址相关联的文本，该超链接自动打开消息应用。
7.根据权利要求3所述的设备其中，所述图像处理模块被配置为识别与URL相关联的文本；并且其中，应用到所述URL的控制包括超链接，一旦选择与所述URL相关联的文本，该超链接自动打开浏览器应用。
8.一种用于在移动设备上处理图像的系统，包括(a)移动设备，所述移动设备包括 (i)相机，该相机用于捕获数字图像；( )显示器，该显示器用于显示所捕获的图像；以及(iii)图像处理模块，该图像处理模块被配置为检测包括在所述所捕获的图像中的一个或多个类型的信息；(iv)其中，所述图像处理模块被配置为将所检测到的信息作为单独层覆盖在所述所捕获的图像之上，以用于在所述显示器上查看；(b)远程服务器；以及(c)无线连接，该无线连接将所述移动设备耦合到所述远程服务器，使得所述所捕获的图像和检测到的信息可被上载到所述远程服务器以用于进一步的处理。
9.根据权利要求8所述系统，其中，所覆盖的信息被修改图形，以将其从所述所捕获的图像中可视地区分开。
10.根据权利要求8所述的系统其中，所述所检测到的信息包括文本；并且其中，所述文本的一个或多个部分是各自可被选择的，以用于执行关于所选文本的后续动作。
11.根据权利要求9所述的系统其中，一个或多个控制被应用到所述所检测到的信息；并且其中，所述一个或多个控制提供在选择文本的一个或多个部分时在所述移动设备上执行动作的指令。
12.根据权利要求10所述的系统其中，所述图像处理模块被配置为识别与电话号码相关联的文本；并且其中，一旦选择与所述电话号码相关联的文本，应用到所述电话号码的控制自动拨叫所述电话号码。
13.根据权利要求10所述的系统其中，所述图像处理模块被配置为识别与电子邮件地址相关联的文本；并且其中，应用到所述电子邮件地址的控制包括超链接，一旦选择与所述电子邮件地址相关联的文本，该超链接自动打开消息应用。
14.根据权利要求10所述的系统其中，所述图像处理模块被配置为识别与URL相关联的文本；并且其中，应用到所述URL的控制包括超链接，一旦选择与所述URL相关联的文本，该超链接自动打开浏览器应用。
15.根据权利要求8所述的系统，其中，所述所捕获的图像和所检测到的信息在上载前被编码成标准成像格式。
16.根据权利要求8所述的系统，其中，所述远程服务器包括被配置为从所述所捕获的图像检测第二信息的第二图像处理模块。
17.根据权利要求16所述的系统，其中，所述第二图像处理模块被配置为将检测到的信息作为第二应用的元数据的索引。
18.根据权利要求16所述的系统，其中，所述第二图像处理模块被配置为上载所述所检测到的信息，以用于在关系数据库中使用。
19.根据权利要求16所述的系统，其中，所述远程服务器包括被配置为将所检测到的第二信息上载回所述移动设备的数据传输模块。
20.一种用于在移动设备上处理图像的方法，包括 用与所述移动设备相关联的相机捕获数字图像；检测包括在所述所捕获的图像中的一个或多个类型的信息； 其中，所检测到的信息包括文本；将所述文本的一个或多个部分指定为各自可选的，以用于执行关于所选文本的后续动作；将所述所检测到的信息作为单独层覆盖在所捕获的图像之上；将所述所捕获的图像和所检测到的信息覆盖显示在与所述移动设备相关联的显示器上；将一个或多个控制应用到所述所检测到的信息；其中，所述一个或多个控制提供在选择文本的一个或多个部分时在所述移动设备上执行动作的指令；经由无线连接，将所述移动设备耦合到远程服务器；将所述所捕获的图像和所检测到的信息上载到所述远程服务器；以及执行对所述所捕获的图像和所检测到的信息的另外处理。
全文摘要
用于在移动设备上处理图像的系统和方法，包括移动设备，该移动设备包括相机，该相机用于捕获数字图像；显示器，该显示器用于显示所捕获的图像；以及图像处理模块，该图像处理模块被配置为检测包括在所捕获的图像中的一个或多个类型的信息。图像处理模块被配置为将所检测到的信息作为单独层覆盖在所捕获的图像之上，以用于在显示器上查看。该系统还包括无线连接，该无线连接将移动设备耦合到远程服务器，使得所捕获的图像和检测到的信息可被上载到远程服务器以用于进一步的处理。
文档编号H04W4/12GK102474902SQ201080035845
公开日2012年5月23日 申请日期2010年10月1日 优先权日2009年10月5日
发明者白井和彦, 羽原恭宽 申请人:索尼公司, 索尼电子有限公司