具有集成照片管理系统的移动设备的制作方法

文档序号:7681338阅读:331来源:国知局
专利名称:具有集成照片管理系统的移动设备的制作方法
技术领域
本发明涉及用于组织和查找数字照片的自动化系统,具体地说,涉 及一种用于使照片与元数据关联起来的自动化系统,该元数据与数字照 片中描绘的一个或者更多个图像有关。
背景技术
在过去几年中,数字摄影的用途已经得到了显著扩展。数字摄影系 统质量的提高再加上数字摄像装置器件制造成本的降低已经导致数字摄 像装置得到了广泛使用。此外,尺寸减小再加上质量提高和成本降低已
经能够使数字摄像装置集成到诸如移动电话和个人数字助理(PDA)的 各种移动电子装置中。
并不像传统的胶片摄影(其有与所拍摄的各照片相关的所用胶片的 成本),数字摄影没有与各照片相关的增量成本。因此,与使用传统的胶 片摄像装置相比,数字摄像装置用户常常拍摄数量更多的照片。
与拍摄许多数字照片有关的难点在于将这些数字照片传输到计算机 系统进行存储时对照片进行组织和管理。典型地,将各照片作为文件(根 据时间顺序自动指派文件名称)存储在目录(也是根据时间顺序指派目 录名称)内。
一种组织和管理数字照片的显而易见的办法是利用对于标识照片的 图像内容有用的文件和目录名称在嵌套目录内组织照片。虽然这种方案 有用,但是这种方案并不是最优的。手动改变文件名称并且将数字照片 重新组织到嵌套目录结构不仅耗时而且繁琐。此外,如果不知道正确的 目录名称和文件名称,则这种方案不利于查找或者定位照片。
多个提供商的"相册"软件应用程序都在使数字照片的组织变得更容 易。例如,可从Adobe系统⑧得到的Photoshop⑧使用户能够将基于文本的标签与各照片关联起来。因此查找特征能够实现基于该文本进行査找。 虽然这种类型的方案有助于查找,但是手动输入与各照片相关联的文本 会很耗时并且繁琐。
还提出过使用面部识别技术来辅助将基于文本的标签与集合内的照
片相关联。在2004年出版并且作者为Andreas Girgensohn, John Adcock 禾口 Lynn Wilcox的题为"Leveraging Face Recognition Technology to Find and Organize Photographs"的论文中,作者提出使用面部探测器自动地从 照片中提取面部图像。然后根据与选择的模型的相似性对面部图像进行 分类。用户接口呈现分类后的面部图像,从而使得用户可以将面部图像 指派给个人(例如对面部图像加标签)。指派给面部图像的标签与提取了 面部图像的照片相关联。因为用户对所提取的面部图像加标签,因此面 部图像变成了用于对其他面部图像进行分类的模型。在一个替代变形实 施方式中,系统可以向面部图像指派名称,并且提示用户确认该指派。 在另一个变形实施方式中,可以将许多类似的面部图像呈现给用户,以 便利用个人姓名对面部图像加标签(例如批量指派方法)。在将标签指派 给照片之后,可容易地根据标签内容对照片进行组织和分类。
所提议系统的一个难点是这些系统设计成在将照片下载到计算机系 统并且输入管理应用程序之后使用加标签的照片。需要一种不会承受已 知系统的缺点的用于对数字照片进行组织的改进的系统和方法。具体地 说,需要一种改进的系统和方法,用于自动地将基于文本的元数据与移 动设备拍摄的数字照片相关联,其中基于文本的元数据描述了在数字照 片中描绘的图像,包括在数字照片中描绘了其图像的个人身份。

发明内容
本发明的第一方面包括一种移动设备,该移动设备包括用于拍摄数 字照片的摄像装置和照片管理应用程序。
所述照片管理应用程序接收所述数字照片,获取包括与数字照片有 关的信息的信息记录,并且将与数字照片有关的信息的至少一部分与所 述数字照片相关联起来。将与所述数字照片有关的信息的至少一部分与所述数字照片相关联起来可以包括将这种信息写入与所述数字照片相关联的基于文本的元数据记录(例如,XML记录)中。
在一个实施方式中,所述移动设备还可以包括网络通信系统和联系人目录。所述联系人目录存储了多个联系人记录。各联系人记录包括标识了个人和与该个人相关联的至少一个网络地址(例如,该个人的电话号码、电子邮件和文本消息发送地址)的联系人信息。用户接口使得能够选择联系人记录,以便通过所述网络通信系统发起与包含在该联系人记录中的网络地址的通信。
所述联系人记录还可以包括所述个人的作为呼叫线路标识照片使用的面部图像。例如,如果所述移动设备包括用于通过所述网络通信系统
发出和接收电话呼叫的电话应用程序,则当来电呼叫的主叫方ID信号与
联系人记录中的电话号码匹配时,所述电话应用程序可以驱动所述用户接口显示所述联系人记录的呼叫线路标识照片。
在该实施方式中,照片管理应用程序可以通过将所选择的联系人记录识别为信息记录而获得信息记录。所选择的联系人记录可以为多个联系人记录中的其中之一,该多个联系人记录中的其中之一包括面部图像(例如呼叫线路标识照片),该面部图像与在数字照片的描绘的至少一个面部图像匹配。
在第一子实施方式中,所述联系人记录还可以包括标识了照片共享设定和照片非共享设定中的一个的照片共享指示。在该子实施方式中,如果包含在所述选择的联系人记录中的照片共享指示标识了所述照片共享设定,则所述照片管理应用程序可以开始向标识地址发送所述照片的副本。 一个示例包括通过电子邮件向所述联系人记录中标识的电子邮件
地址发送所述照片。
在第二实施方式中,移动设备可还包括本地通信系统,用于与所述移动设备周围的所述移动设备可以进行电子通信的通信区域内的远程移
动设备进行通信。例如,所述本地通信系统可以是蓝牙无线电⑧(Bluetoothradio )、 Wi-Fi无线电、近场通信系统、红外通信系统或者具有定义了本地通信系统中的任何一个。
在本第二实施方式中,所述照片管理应用程序可以通过显示所述通信区域内的多个远程移动设备中各个远程移动设备的指示来获得所述信息记录。例如,如果所述本地通信系统为蓝牙⑧无线电,则所述照片管理
应用程序可以驱动蓝牙⑧(Bluetooth )无线电进入发现模式,以便标识所述移动设备可以与其建立通信会话的所有其他支持蓝牙②的装置。
所述照片管理应用程序然后显示所述数字照片中描绘的至少一个面部图像,并且获取选择的远程移动设备的用户选择。用户浏览所述面部图像,并且将所述个人识别为所述通信区域内的个人中的一个。所述选择的远程移动设备为所述多个远程移动设备中所述用户标识为属于所述通信区域内所述数字照片中描绘的个人的一个远程移动设备。
所述照片管理应用程序然后试图从所述选择的远程移动设备获取作为信息记录的个人联系人记录。所述个人联系人记录(可以是电子名片)包括所述选择的远程移动设备的用户的标识。假定所述远程装置允许向所述移动设备发送所述个人联系人记录,则所述移动设备将所述个人联系人记录用作所述信息记录,所述信息记录的至少一部分与所述数字照片相关联。
同时在一个子实施方式中,所述个人联系人记录可还包标识了照片共享设定和照片非共享设定中的一个的照片共享指示。在该子实施方式中,如果所述照片共享指示标识了所述照片共享设定,则所述照片管理应用程序开始向所选择的远程移动设备发送所述照片的副本。该发送可以通过所述本地通信系统进行。或者,该发送可以通过其他手段(例如,通过发送到所述个人联系人记录中包含的电子邮件地址的电子邮件)来进行。
在所述移动设备包括联系人目录的另一个子实施方式中,所述照片管理应用程序还可以将所述个人联系人记录写入所述联系人目录中作为新记录。此外,可以将所述数字照片中描绘的面部图像与所述新联系人记录相关联起来作为其呼叫线路标识照片。因此,所述数字照片中描绘的面部图像可以起到呼叫线路标识照片的作用,并且可以为标识将来拍 摄到的其他数字照片中的个人的图像提供基础。
在另一个子实施方式中,所述移动设备本身可以包括机主标识记录 (例如,所述移动设备机主的电子名片)。该记录还可以包括标识了共享 设定和非共享设定中的一个的机主共享指示。如果所述共享指示设定为 共享设定,则在所述通信区域内的一个远程移动设备发起所述机主标识 记录的请求时,所述移动设备可以向该远程移动设备提供所述机主标识 记录。
例如,如果具有类似于所述移动设备能力的远程移动设备的用户拍 摄到描绘了所述移动设备的机主的照片,则所述远程移动设备可以发起 所述机主标识记录的请求。如果所述共享指示设定为共享设定,则所述 移动设备可以向所述远程移动设备提供所述机主标识记录。
在第三实施方式中,所述移动设备可以包括网络通信系统,用于通 过广域网(例如,移动电话业务提供商网络、互联网业务提供商网络和 公众互联网的组合)与远程目录服务器进行通信。
在该第三实施方式中,所述照片管理应用程序可以通过经所述网络 通信系统向远程目录服务器发起请求来获取所述信息记录。所述请求可 以包括包含所述数字照片的至少一部分的数字图像。从包含所述信息记 录的远程目录服务器接收响应。
在所述数字图像包括所述数字照片中描绘的个人的面部图像的示例 中,所述信息记录可以包括个人联系人记录(例如,电子名片),该个人 联系人记录包括在数字照片中描绘的个人的标识。
在该示例的子实施方式中,所述请求还可以包括将所述移动设备识 别为所述请求的源的源标识。所述个人联系人记录(存储在目录服务器 中)还可以包括组授权记录,该组授权记录标识了源、源类目、源组或 者对用于确定是否允许请求的源接收所述个人联系人记录的其它标准。
如果源的标识标识了所述源为允许接收所述个人联系人记录的源, 则所述响应的信息记录包括所述个人联系人记录。否则,所述信息记录 可以包括数字照片中描绘的个人标识未被允许的指示。在该示例的另一个子实施方式中,所述个人联系人记录还可以包括 标识照片共享设定和照片非共享设定中的一个的照片共享指示。如果所 述照片共享指示标识为所述照片共享设定,则所述照片管理应用程序可 以开始向所标识的地址(例如,电子邮件地址)发送所述照片的副本。
在第二个示例中,所述移动设备还可以包括用于标识拍摄所述数字 照片的地点的全球定位系统,并且所述数字图像可以是所述数字照片中 描绘的名胜的图像。
在该示例中,所述请求还可以包括标识了拍摄照片的地点的地点标 识符。所述响应的信息记录可以包括与所述名胜相关联的描述性数据, 例如该名胜的标识。
与所述名胜相关联的其他描述性数据可以包括标识了拍摄所述数字 照片的地区的地理标识符。例如,如果所述请求的地点标识符包括迪斯 尼公园范围内的GPS坐标,则所述地理标识符可以将该地区标识为迪斯 尼公园、奥兰多和/或佛罗里达中的任何一个。
在第三示例中,所述数字图像可以是所述数字照片中描绘的酒瓶标 签(标识葡萄酒的)。在该示例中,所述信息记录可以包括和葡萄酒相关 联的描述性数据。
在第四实施方式中,所述移动设备还可以包括基本内容数据库和包 括显示屏和信息输入系统(例如,触摸屏、键盘或者其他控制装置)的 用户接口 。所述基本内容数据库可以针对多个类目中的各类目将所述类 目的标识与内容识别数据相关联起来。
在该第四实施方式中,所述照片管理应用程序可以通过将所述基本 内容数据库的多个类目中的各个类目的内容识别数据应用于在所述数字 照片中描绘的图像来获得所述信息记录,以便标识选择的类目。所述选 择的类目是包括所述图像对应的内容识别数据的类目。
在该第四实施方式的子实施方式中,可以通过例如电子邮件、蓝牙⑧、
Wi-Fi、近场通信系统、红外或者其他通信系统与选择的远程装置交换所 述内容识别数据。这使得来自所述移动设备的基本内容数据库的内容识 别数据能够被发送到所述选择的远程移动设备,并且使得从所述远程移动设备接收到的内容识别数据能够输入到所述基本内容数据库中作为新 类目或者作为新类目的补充性内容识别数据。
在该第四实施方式的另一个子实施方式中,可以与所述选择的类目 的标识相关联地显示图像,以便进行用户确认。当被确认时,所述选择 的类目作为所述信息记录与所述数字照片相关联起来。或者,所述用户 可以不必确认所述选择的类目,而是通过所述信息输入系统输入新的类 目标识符。
在这种情况下,所述新类目i)作为所述信息记录与所述数字照片 相关联起来;和ii)结合所述内容识别数据写入所述基本内容数据库中作 为新类目,以便用作对将来的照片内容进行分类的模型(例如,学习形 式)。
为了实现前述和相关目的,本发明包括此后充分描述并且在权利要 求中具体指出的特征。以下描述和附图详细地阐述了本发明的特定示例 性实施方式。然而,这些实施方式仅仅表示可以使用本发明的原理各种 方式中的几个。根据本发明的结合附图所考虑的以下详细描述,本发明 的其他目的、优点和新颖特征将变得清楚。
应当强调的是,本说明书中使用的术语"包括(comprise/comprising)" 是用来说明存在所陈述的特征、整体、步骤或者组件,但是并不排除存 在或者添加一个或者更多个其它特征、整体、步骤、组件或者其组合。


图1是表示实现根据本发明一个实施方式的照片管理系统的示例性 移动设备的图2a是表示根据本发明一个实施方式的示例性数字照片的图; 图2b是表示根据本发明一个实施方式的示例性元数据记录的图; 图3a是表示根据本发明一个实施方式的示例性数字照片的图; 图3b是表示根据本发明一个实施方式的示例性元数据记录的图; 图4a是表示根据本发明一个实施方式的示例性数字照片的图4b是表示根据本发明一个实施方式的示例性元数据记录的图;图5a是表示根据本发明一个实施方式的示例性数字照片的图; 图5b是表示根据本发明一个实施方式的示例性元数据记录的图; 图6是描述了根据本发明一个实施方式的示例性内容数据库的表格; 图7是表示根据本发明一个实施方式的照片管理应用程序的示例性
操作的流程图; .
图8a是表示根据本发明一个实施方式的照片管理应用程序的示例性
操作的流程图8b是表示根据本发明一个实施方式的照片管理应用程序的示例性 操作流程图9a是表示实现根据本发明一个实施方式的照片管理系统的示例性 移动设备的示例性用户接口的图9b是表示实现根据本发明一个实施方式的照片管理系统的示例性 移动设备的示例性用户接口的图IO是描绘了本发明一个实施方式的示例性结构的图,其中从远程 目录服务器获得信息记录;
图lla描绘了与根据本发明一个示例性实施方式的"人物"类目相关 联的示例性标识数据库;
图lib描绘了与根据本发明一个示例性实施方式的"人物"类目相关 联的示例性标识数据库;
图lie描绘了与根据本发明一个示例性实施方式的"名胜"类目相关 联的示例性标识数据库;
图lid描绘了与根据本发明一个示例性实施方式的"葡萄酒"类目相 关联的示例性标识数据库;
图12a描绘了与根据本发明一个示例性实施方式的"人物"类目相关 联的示例性响应元数据结构;
图12b描绘了与根据本发明一个示例性实施方式的"狗"类目相关联 的示例性响应元数据结构;
图12c描绘了与根据本发明一个示例性实施方式的"名胜"类目相关 联的示例性响应元数据结构;以及图12d描绘了与根据本发明一个示例性实施方式的"酒标签"类目相 关联的示例性响应元数据结构。
具体实施例方式
这里所提到的术语"电子设备"包括便携式无线电通信设备。术语"便 携式无线通信设备"(在这里也称为"移动无线终端"或者"移动设备")包 括诸如移动电话、寻呼机、通信器(例如电子记事薄、个人数字助理
(PDA)、智能电话等)的所有设备。
本说明书中讨论的许多元件(不论称为"系统"、"模块"、"电路"还是 类似的)可以以硬件电路、执行软件代码的处理器、或者硬件电路和执 行代码的处理器的组合来实现。因此,整个说明书中所使用的术语电路 旨在包含硬件电路(不论是分立元件还是集成电路块)、执行代码的处理 器、硬件电路和执行代码的处理器的组合、或者本领域中的技术人员熟 悉的以上组件的其他组合。
在附图中,具有标号的各要素与具有相同标号的其它要素类似,而
与标号后面的任何字母标记无关。在文中,其后跟随有特定字母标记的 标号指的是具有该标号和字母标记的特定要素,而没有特定字母标记的 标号指的是具有相同标号的所有要素,而与附图中位于标号后面的任何 字母标记无关。
参考图1,示例性移动设备10实施为移动电话、移动PDA或者其 他移动设备,其可以包括网络通信系统22和用于通过与网络通信系统22 兼容的广域网络30与其他装置进行通信的电话应用程序24、电子邮件应 用程序26和/或消息收发应用程序28中的其中之一。在该示例性实施方 式中,广域网络30可以为无线电话业务提供商网络、互联网业务提供商 网络、广域数据网络和/或公共互联网的任意组合。
移动设备10可以包括联系人目录32,该联系人目录32包括多个联 系人记录34。各联系人记录34可以包括传统联系人信息字段36,例如 个人的姓名、地址、电话号码、电子邮件地址、文本消息地址、生日等。 联系人目录32起到提供与在联系人记录34中标识的个人相关联的网络地址(例如,电话号码、电子邮件地址、文本地址)的传统目的的作用,
以使电话应用程序24、电子邮件应用程序26或者消息收发应用程序28 中的任何一个能够通过网络通信系统22发起与该网络地址的通信(消息 或者会话)。
此外,各联系人记录23可以包含作为联系人的面部图像的呼叫线路 标识照片58。在该示例性实施方式中,当来电呼叫的主叫方ID信号与包 含了线路标识照片58的联系人记录34中的电话号码匹配时,电话应用 程序24驱动用户接口 21显示呼叫线路标识照片58。
移动设备10还包括数字摄像装置系统12、照片管理应用程序42和 联系人数据库43。 一般而言,数字摄像装置系统12用于拍摄数字照片 14,而照片管理应用程序42用于i)获得包含该数字照片相关信息的信 息记录;和ii)将该数字照片相关信息的至少一部分作为基于文本的元数 据与所拍摄的照片14相关联。可以从内容目录32、内容数据库43或者 远程源(诸如由远程目录服务器13操作的内容数据库43)的任意组合获 得信息记录。基于文本的元数据标识数字照片14中描绘的内容,使得可 以容易地根据内容查找和/或分类照片集(例如,利用元数据查找或者分 类)。
参考图2a,可以想到,各数字照片14可以在中央或显著区域16内 包含的基本内容15。在图2a的示例中,显著区域16通常位于数字照片 14的中心,而基本内容15为个人(例如,多个面部图像212a、 212b和 212c)。
参考图2b,可以将与照片14相关联的示例性元数据44构造为XML 记录47。 XML结构的使用仅仅为示例性,而不是要限制发明范围。示例 性的XML元数据记录47可以包括i)标识拍摄照片14的日期的日期 要素51; ii)标识拍摄照片14的时间的时间要素52; iii)标识拍摄照片 的地点的地点要素53,该地点要素可以包括GPS纬度/经度、国家、城市 和/或诸如名胜标识(例如迪士尼(Disney ))的其它地点标识信息的任 意排列形成的标识;和iv)基本内容要素54,其包括类目标识符要素55, 并且在基本内容类目为"人物"的示例中,针对照片14中描绘的每个个人,基本内容要素54可以包括标识个人的个人标识要素56a、 56b和56c。此 外,还可以包含与个人相关的附加信息要素,例如电子邮件地址。应当 理解的是,如个人标识要素56c所表示的,可以将不能识别的个人在个 人标识要素中标识为"未标识"。
图3a展示了一个示例,其中数字照片14包含描绘了显著区域16内 的狗的基本内容15。参考图3b,示例性XML元数据记录47包括i) 标识了拍摄照片14的日期的日期要素51; ii)标识了拍摄照片14的时间 的时间要素52; iii)标识了拍摄照片的地点的地点要素53;和iv)包含 类目标识符要素55的基本内容要素54,并且在基本内容类目为"狗"的示 例中,基本内容要素54可以包含子数据要素57,该子数据要素57还在 狗类目内标识了主题,例如品种、狗的名称、主人姓名。
图4a展示了一个示例,其中数字照片14包含描绘了名胜的基本内 容15,该名胜可以是建筑物、建筑或者艺术结构、著名的自然风景特写、 轮船或者感兴趣的其他目标中的任何一个。参考图4b,示例性XML元 数据记录47包括i)标识拍摄照片14的日期的日期要素51; ii)标识 拍摄照片14的时间的时间要素52; iii)标识拍摄照片的地点的地点要素 53;和W)包含类目标识符要素55的基本内容要素54,并且在基本内容 类目为"名胜"的示例中,基本内容要素54可以包含子数据要素,例如标 识了名胜的名胜标识符要素218和有关该名胜的附加信息219,例如用于 获取关于该名胜的更多信息的事实、统计量和/或URL。
图5a展示了一个示例,其中数字照片14包括描绘了酒瓶标签220 的基本内容15。参考图5b,示例性XML元数据记录47包括i)标识 拍摄照片14的日期的日期要素51; ii)标识拍摄照片14的时间的时间要 素52; iii)标识拍摄照片的地点的地点要素54;和iv)包括类目标识符 要素55的基本内容要素54,并且在基本内容类目为"酒标签"的示例中, 基本内容要素54可以包括葡萄酒数据要素221,其标识了葡萄酒酿造年 代、葡萄园地点、葡萄酒赢得的奖项和品酒专家通常希望知道的有关葡 萄酒的其他数据。
应当理解的是,将在图2b、图3b、图4b和图5b中描述的示例性元数据记录47与照片集中的各数字照片相关联使得能够基于内容容易地对 照片集进行查找和/或分类(例如,利用基于文本的元数据进行査找或者 分类)。
回到图l,照片管理应用程序42可以通过i)参考用于标识拍摄数
字照片的日期和时间的内部时钟系统(未示出);和ii)参考用于获取拍 摄数字照片的地点的全球定位系统(GPS)来获取用于生成各XML元数 据记录的信息记录。
此外,为了获取对拍摄数字照片的地点从国家、州、城市、街道、 地区、名胜方面或其他人类可识别的方面作出的标识,照片管理应用程 序42可以参考将GPS坐标与这些人类可识别的方面相关联的GPS数据 库49。在一个实施方式中,GPS数据库49可位于移动设备10的内部。 或者,可以在远程目录服务器13上面操作GPS数据库49。
为了对数字照片14的基本内容15进行分类,照片管理应用程序42 可以访问基本内容数据库43,该基本内容数据库43也可位于移动设备 10上或者在远程目录服务器13上面操作该基本内容数据库43。
参考图6,示例性的基本内容数据库43对于多个预定类目238中的 各类目可以包括内容识别数据45,该内容识别数据45用于在多个预定类 目238 (例如,人物、狗、名胜和酒标签)中的一个类目内对基本内容 15进行分类。内容识别数据45可以是模型照片的形式,显著区域16内 的图像可以与该模型照片进行比较。或者,内容识别数据45可以是代表 类目(例如,人物、狗、名胜和酒标签)的特征数据的形式,该特征数 据表示可以应用于从显著区域16中提取出的特征,以确定该基本内容15 最佳地与哪一个类目对应。
回到图1,在确定了数字照片14的基本内容15的类目之后,照片管 理应用程序42可以通过访问由移动设备10存储的数据或者通过从目录 服务器13获得附加信息而获得有关数字照片14中描绘的主题的附加信 息(例如,有关主题的类目特定信息)。
在一个具体实施方式
中,照片管理应用程序42可以通过访问联系人 目录32,具体地是通过访问联系人目录32的呼叫线路标识照片58,对数字照片14中描绘的人物进行识别,访问联系人目录32的呼叫线路标
识照片58是为了将在数字照片14中描绘的个人图像与呼叫线路标识照 片58进行比较,进而对在数字照片14中描绘的个人进行识别。
图7的流程图表示照片管理应用程序32的操作的一个示例性方面, 照片管理应用程序32用于i)获取包括与数字照片有关的信息的信息记 录;和ii)将信息记录的至少一部分作为如在图2b、 3b、 4b和5b中描绘 的XML元数据记录47与数字照片相关联。
结合图1参考图7,步骤100表示从摄像装置系统12接收照片14。
步骤101表示参考内部时钟(未示出)以便确定拍摄数字照片14的 曰期和时间,并且通过将日期要素51和时间要素52写入与数字照片14 相关联的元数据记录47中(图2b、 3b、 4b和5b)而将这些日期和时间 与数字照片14相关联。
步骤102表示通过将地点要素53写入元数据记录47中来将拍摄数 字照片14的地点与数字照片14相关联起来。如上所述,移动设备10可 以包括GPS系统46,该系统46检测来自GPS卫星的信号,并且由此计 算移动设备10的地点(典型地为经度、纬度和海拔)。照片管理应用程 序42可以访问地点数据库49 (本地或者远程),以便获得从国家、州、 城市、街道、街道地址、主要名胜、或者对注明地点有用的其他人类可 以识别的基于文本的数据方面的地点的标识。步骤102表示将这种基于 文本的地点数据写入与数字照片14相关联的元数据记录47 (图2b、 3b、 4b和5b)中的可应用地点要素53。
步骤103表示对基本内容15所在的显著区域16进行标识。显著区 域16通常是照片14的中心,但是也可以偏离中心。如果偏离中心,则 可以根据对显著特征的包含(与欠显著背景相对)来识别显著区域16。
步骤104表示通过参考基本内容数据库43 (本地或者远程)来确定 基本内容15最佳地对应于哪一个分类,以对显著区域16内的基本内容 15进行分类。
如上所述,基本内容数据库43可以包括内容识别数据45,用于将基 本内容15分类在多个预定类目(例如,人物、建筑物、马和酒标签)中的一个类目中。照片管理应用程序42可以将显著区域16内的图像与内
容识别数据45进行比较,以便确定基本内容15最佳地与哪一个预定类
目对应。
此外,在步骤104中不能对基本内容类目进行识别的情况下(例如, 基本内容不对应于基本内容数据库43中的任何一个预定类目),则照片 管理应用程序32可以进行如下步骤i)在步骤113中驱动用户接口 21 提示用户输入新的类目;和/或作为替代实施方式,ii)在步骤114中从远 程源获取新类目和/或内容识别数据。
在步骤113中照片管理应用程序32驱动用户接口 21来提示用户输 入新类目的情况下,然后将由用户输入来标识新的预定类目的文本与表 示图像(来自数字照片14)的数据一起添加到基本内容数据库43中,用 作将未来照片的内容分类到该类目的模型。
照片管理应用程序32可以通过以下方式从远程源获取新类目和/或 内容识别数据i)通过电子邮件、蓝牙( )、 Wi-Fi、近场通信系统、 红外或者本地通信系统50 (图1和这里讨论的)或者网络通信系统22支 持的任何其他通信协议与远程移动设备19 (图1)交换类目和内容识别 数据。在从远程源获取新类目和/或内容识别数据的情况下,可以将新类 目和/或内容识别数据写入基本内容数据库43中(位于移动设备10上)。 此后,可以通过照片管理应用程序32反复执行步骤104,以便利用新类 目和/或内容识别数据标识数字照片14的显著区域16内的基本内容15。
将基本内容类目(如果是现有的预定类目则是识别的,或者如果是 新类目则是输入的)(作为元数据)与照片14相关联,该关联可以包括 将类目要素55写入元数据记录47中(图2b、 3b、 4b和5b)。
在对数字照片14进行分类之后,可以将不同的步骤与各类目相关联 起来,以便获取关于用于与数字照片相关联的主题的其他信息。
例如,如果将基本内容分类为"人物",则进一步的信息可以包括如 参考图2b讨论的数字照片14中描绘的各人物的标识。如果将基本内容 分类为"狗",则进一步的信息可以包括如参考图3b描述的以名称、品种 等表示的狗标识。如果将基本内容分类为"名胜",则进一步的信息可以包括如参考图4b描述的名胜标识和有关该名胜的其他信息。如果将基本 内容分类为"酒标签",则进一步骤的信息可以包括如参考图5b描述的葡
萄酒数据。步骤106a、 106b和106c—般地表示分类特定的步骤的执行, 以便根据基本内容的类目获取这种进一步的信息。
特别相关的是步骤106c,该步骤包括步骤107到111,执行这些步骤 以便在将基本内容15分类为"人物"时标识数字照片14内的人物。可以 针对数字照片14的显著区域16中描绘的各人反复执行步骤107到111, 以便标识各个人。
步骤107表示从数字照片14提取个人面部图像(例如图2a的面部 图像212a)。
步骤108表示照片管理应用程序42将提取出的面部图像212a与联 系人目录32的呼叫线路标识照片58进行比较,以便确定所提取出的面 部图像212a是否对应于一个现有联系人。
如果所提取出的面部图像212a与记录34的呼叫线路标识照片58匹 配,则可以将这种记录称为选择的联系人记录。在步骤109中,照片管 理应用程序42获取作为信息记录的选择的联系人记录,并且将来自该选 择的联系人记录的联系人信息36的至少一部分(例如个人的姓名)与数 字照片14相关联起来。如参考图2b描述的那样,这种关联可以包括将 个人标识符要素56写入元数据记录47中。还可以想到,可以通过适当 要素标签将其他联系人信息36 (例如个人的电子邮件、电话号码等)写 入元数据记录47中。
步骤110表示确定照片共享是否对在步骤109中与照片相关联的联 系人信息所表示的个人有效。联系人目录32的各记录34可以包括标识 照片共享设定识别为有效或者失效的照片共享指示40。可以通过照片共 享指示40字段内的"电子邮件"或者适当格式化的"电子邮件地址"标识的 包含来标识有效设定。如果有效,则在步骤111中,照片管理应用程序 42通过网络通信系统22 (或者这里讨论的本地通信系统50)向包含在选 择的联系人记录34中(并且在照片共享指示40字段中标识)的其中一 个网络地址发起通信,并且将数字照片14发送给该网络地址。因此,在数字照片14中描绘的个人将接收到数字照片14的副本。
回到步骤108,如果所提取出的面部图像212a不与任何现有联系人 记录34的呼叫线路标识照片58匹配,则可以采取备选的标识步骤(通 过步骤112表示)来标识个人,并获得用于与照片14相关联的联系人信 息。
结合图1参考图8a、图9a,用于标识个人并获取联系人信息的备选 标识步骤的一个示例性实施方式可以包括如下步骤i)在步骤120中(在 显示器21上)显示所提取的面部图像212a (作为縮略图照片);并且ii) 在步骤122中,显示位于通信区域11内的多个远程移动设备19的列表 150,通信区域11通过移动设备10周围的地区限定,在该地区中,移动 设备10可以利用本地通信系统50建立通信会话。
更详细地,本地无线通信系统50可以为蓝牙(Bluetooth )无线电、 红外通信模块、近场通信(NFC)模块或用于与另一个兼容装置进行短 距离通信的其它系统中的任何一个。照片管理应用程序42驱动本地通信 系统50在通信区域11内发现其他移动设备,并且显示各装置的网络名 称、网络地址或者其他标识符。在本地通信系统50为蓝牙无线电的示例 中,可以使用蓝牙发现协议。
步骤124表示照片管理应用程序42提示用户在列表150中示出的标 识的远程移动设备中选择一个(图9a)。用户可以观看所提取的面部图像, 将个人识别为被拍摄了照片的人中的一个人,并且将在数字照片14中描 绘的个人所拥有的远程移动设备标识为选择的远程移动设备。
在步骤126中,照片管理应用程序42发起与选择的远程移动设备的 通信(或者会话或消息收发),并且如果用户允许选择的远程移动设备发 出电子名片,则从选择的移动设备获取个人联系人记录(例如,电子名 片)。还可以想到,移动设备10进而还可以将机主的ID记录18 (作为电 子名片)提供给选择的移动设备。
在步骤128中,可以将个人联系人记录作为新的联系人记录34添加 到联系人目录32中(并且将提取的面部图像212a作为呼叫线路标识照 片58添加到这种新的联系人记录中)。回到图7,步骤109再次表示将联系人信息的至少一部分(在这种情
况下为来自新的联系人记录的信息)与照片14在步骤109中相关联起来。
结合图9b参考图8b,用于获取联系人信息的备选步骤的另一个示例 性实施方式包括在步骤130中显示所提取的面部图像212a (作为缩略图 照片)。在步骤132中,在显示所提取的面部图像212a的同时,可以显 示手动数据输入字段150,以便提示用户选择/输入联系人信息,来与所 提取的面部图像212a中描绘的个人相关联起来。
步骤134表示将所选择/输入的联系人信息写入联系人目录32的新联 系人记录34中,并且回到图7,步骤109再次表示将联系人信息(手动 输入)作为元数据与照片14相关联起来。此外,可以将所提取的面部图 像212a作为新的联系人记录34的呼叫线路标识照片58添加到这种新的 联系人记录34中。
图10表示照片管理应用程序42操作的示例性方面,照片管理应用 程序42用于i)获取包括与数字照片有关的信息的信息记录;和ii)当 这种信息记录的信息通过远程目录服务器13提供时,将信息记录的至少 一部分作为在图2b、 3b、 4b和5b的任何图中描绘的XML元数据记录 47与数字照片相关联起来。
步骤224表示照片管理应用程序42从摄像装置系统12接收照片14。
步骤226表示参考内部时钟(未示出)来确定拍摄数字照片14的日 期和时间,并且通过将日期要素51和时间要素52写入与数字照片14相 关联的元数据记录47中(图2b、 3b、 4b和5b)而将该日期和时间与数 字照片14相关联起来。
步骤228表示对基本内容15所在的显著区域16进行标识。显著区 域16通常是照片14的中心,但是也可以偏离中心。如果偏离中心,则 可以通过对显著特征(与欠显著背景相对)的包含来被识别显著区域16。
步骤230表示照片管理应用程序42建立向目录服务器13传送的请 求200。请求200可以包括i)用于使目录服务器能够标识并且认证请 求200的来源的认证数据202;和ii)数字图像204,该数字图像204包 括在显著区域16中包含的数字照片14的至少一部分。此外,如果可能,请求200可以包括标识拍摄照片的地点的地点标识206(例如通过拍摄数
字照片的装置测量的GPS位置)。
作为对接收到请求200的响应,目录服务器13的识别应用程序210 将信息记录作为响应208返回。响应208的信息记录可以是元数据结构 209,例如XML记录,其包括对照片管理应用程序组装元数据记录47以 便与数字照片14相关联起来有用的信息,如图2b、 3b、 4b和5b所示。
再回到图2a,作为第一个示例,如果数字照片14包含的基本内容是 人物,则请求200可以包括作为其数字图像204的数字照片14或者所提 取的面部图像212a、 212b和212c中的一个或者更多个的排列,各面部 图像表示在数字照片14中描绘的人物的其中一个人的图像。
参考图12a,在类目为"人物"时可以作为响应元数据结构209被返回 的示例性XML记录217可以包括i)将类目标识为"人物"的类目标 识符要素55; ii)地点要素53,其从国家、城市、州.、街道地址、地区 方面或者其他人类可识别的方面例如"迪斯尼⑧公园(Disney⑧Park)"对 拍摄照片的地点进行标识;和ii)识别应用程序210能够进行识别的各人 的个人ID要素211 (例如数字图像204中包含的各面部图像),并且所识 别的个人允许将身份发布到请求200的源。
对各可标识的个人,XML记录217还可以包括i)标识个人的电子 邮件地址的电子邮件要素212;和ii)标识该个人是否期望得到包含其本 人的照片的副本的照片共享要素213。照片共享要素213还可以包括网络 地址(例如电子邮件地址)的标识,照片副本将发送到该网络地址。可 以想到,XML记录217还可以包括标识其他个人和/或所标识的个人已经 允许公开的联系人信息(例如电话号码、文本消息地址等)的附加要素。
此外,数字图像204包括的个人图像存在如下情形的情况下i)不 能被识别应用程序210识别;或者ii)所描绘的个人尚未允许向请求200 的源公开其个人信息,XML记录217可以包括指示了"未识别/未允许" 而不是个人的个人数据的数据要素215。
再回到图3a,作为第二个示例,如果数字照片14包括的基本内容是 狗,则请求200可以包括作为其数字图像204的数字照片14或者显著区域16的描绘了狗的至少那部分。
参考图12b,在类目为"狗"时可以作为响应元数据结构209被返回的 示例性XML记录217可以包括i)将类目标识为"狗"的类目标识符要 素55; ii)地点要素53;和iii)子数据要素57,其标识了狗类目内的主
题,例如品种、狗的名称、主人的姓名。
结合图1参考图4a,作为第三个示例,如果数字照片14包括名胜的 基本内容,例如轮船、建筑物、建筑或者艺术结构或者感兴趣的其他结 构或目标,则请求200可以包括作为其数字图像204的数字照片14或者 显著区域16的描绘了名胜的至少那部分。
参考图12c,在类目为"名胜"时可以作为响应元数据结构209被返回 的示例性XML记录217可以包括i)将类目标识为"名胜"的类目标识 符要素55; ii)地点要素53; ii)标识数字图像204中描绘的名胜216的 名胜标识要素218;和iii)关于名胜的附加信息要素221,例如事实、统 计量和URL,以便获得关于该名胜的甚至更多的信息。
结合图1参考图4a,作为第三个示例,如果数字照片14包括的基本 内容是酒瓶标签220,则请求200可以包括作为其数字图像204的数字照 片14或者显著区域16的描绘了标签220的至少那部分。
参考图12d,在类目为"酒标签"时可以作为响应元数据结构209被返 回的示例性XML记录217可以包括i)将类目标识为"酒标签"的分类 标识符要素55; ii)地点要素53;和iii)葡萄酒标识要素222,其标识 了与标签222相关联的酒;和iv)关于该葡萄酒的其他数据要素224、 226 和228。其他数据要素224、 226和228可以标识这样信息,如i)葡萄 园地点(数据要素224); ii)该葡萄酒所赢得的奖项(数据要素226); 和iii)品酒专家通常希望知道的关于该葡萄酒的其他有用信息(数据要 素228)。
回到图10,在接收到响应208之后,在步骤232中,照片管理应用 程序42将其中包含的信息与数字照片14相关联起来(如参考图2b、 3b、 4b和5b讨论的那样),从而可以将数字照片14包含在数字照片集中,可 以利用与其关联的元数据对该数字照片集进行存储、编目录、分类和/或搜索。
为了使识别应用程序210能够提供参考图12a、 12b、 12c和12d讨 论的元数据结构209,目录服务器13可以包括数据库234,用于支持识 别应用程序210的操作。在本示例性的实施方式中,数据库234包括i) 将GPS坐标与以人类可识别形式的地点数据相关联起来的地点数据库 49; ii)内容数据库43,如参考图6讨论的那样,内容数据库43将多个 类目238中各类目与内容识别数据45相关联起来,以便确定数字图像204 是否位于该类目中;和iii)多个类目特定标识等级数据库242。更具体地, 各类目238与标识等级数据库242相关联,标识等级数据库242针对类 目238将图像类目内的主题与关于该主题的数据相关联起来。
例如,参考图lla,该图示出了与示例性的图像类目"人物"相关联的 示例性标识数据库242a。标识数据库242a可以包括多个记录244,各记 录244与个人相关联。因此,与个人相关联起来的记录包括i)用于识 别个人图像的标识数据246; ii)关于该个人的个人信息248,例如个人 的姓名248a、电子邮件地址248b、电话号码248c和其他数据248d; iii) 照片共享指示250,其指示了该个人是否希望得到包含其本人的照片的副 本(包括照片副本要发送的目的地的网络地址的标识,例如电子邮件地 址);和iv)组授权数据252,其标识了源、源类目、源组或者其它标准, 用于确定如果在请求200的数字图像204中描绘了该个人时是否允许了 该请求200的源(图IO)接收该个人信息248。
为了标识源、源类目、源组或者其它标准,组授权数据252可以标 识和/或注明i)为这种标识的目的的该个人的来自社会网络网站的朋友 /亲戚/联系人列表;和/或ii)为这种标识目的的俱乐部、团体或者组织或 者其成员列表。
参考图llb,该图示出了与示例性的图像类目"狗"相关联的示例性标 识数据库242b。作为一个示例,标识数据库242b可以包括与多个品种 268相关联的记录。与每个品种268相关联的可以是i)用于识别狗的 图像是否描绘了该品种的标识数据269;和ii)关于该品种268的对组装 参考图12b描述的XML记录的要素57有用的描述性数据271 。参考图Ilc,该图示出了与示例性的图像类目"名胜"相关联的示例性
标识数据库242c。标识数据库242c可以包括多个名胜列表254,各名胜 列表254与多个预定地点256中的其中一个相关联。
各名胜列表254包括可以从预定地点256看到的多个名胜的标识(名 胜标别符255),列表254与预定地点256相关联。与名胜标识符255相 关联的是用于标识数字图像204内的名胜图像的标识数据258和关于该 名胜的描述性数据260。
例如,其中一个预定地点(256a)可以包括迪斯尼⑧公园、奥兰多、 佛罗里达(以请求200的地点标识206 (图10)可以与其相关联的方式 来标识)。因此,与迪斯尼⑧公园、奥兰多、佛罗里达相关联的名胜列表 254可以标识位于迪斯尼⑧公园、奥兰多、佛罗里达中和/或可以从迪斯尼 公园、奥兰多、佛罗里达看到的那些名胜,例如海盗船。在海盗船的示 例中,标识数据258可以包括用于标识轮船的图像的特征数据或者图像 数据。描述性数据260可以包括获得甚至更多信息的关于该轮船的任何 事实、统计量和URL。
参考图lld,该图示出了与示例性的图像类目"葡萄酒"相关联的示例 性标识数据库242d。标识数据库242d可以包括多个记录262,各记录262 与葡萄酒相关联。各记录262将葡萄酒与用于标识请求200的数字图像 204 (图10)中的葡萄酒的酒瓶标签的标识数据264以及和关于该葡萄酒 的描述性数据266 (例如参考图4b讨论的葡萄园地点224、葡萄酒赢得 的奖项226和品酒专家可能通常希望知道的关于该葡萄酒的其他有用信 息228)相关联起来。
返回到图10,识别应用程序210通常操作如下。在接收到请求200 时,识别应用程序210在步骤270中对该请求200的源进行认证。在各 种示例性实施方式中,对该源的认证可以包括建立认证过的TCP/IP会话 和/或网页业务会话(例如,SOAP消息收发)并且借此传输请求200。
步骤271表示参考地点数据库49以便获取地点数据,该地点数据用 于将地点要素53 (从人类可识别的方面)组装成参考图12a、 12b、 12c 和12d描述的示例性元数据结构。步骤272表示确定请求200的数字图像204的选择的图像类目,通 过将内容数据库236中的内容识别数据45应用于数字图像204来选择的 确定选择的图像类目。选择的图像类目为数字图像204对应的图像类目 238。如上所述,这可以包括将数字图像204的特征与各类目238的内容 识别数据45的特征进行比较,以便确定数字图像204的类目。
步骤274表示将请求200的数字图像204与识别数据库242中与选 择的图像类目相关联的主题进行比较,以便i)确定选择的主题;和ii) 获取关于选择的主题的选择的信息。选择的主题为数字图像对应的主题 (例如,数字图像14中描绘的主题)。选择的信息为用于构建参考图12a、 12b、 12c和12d讨论的响应元数据结构209的信息。
例如,如果在步骤272中,将类目确定为"人物",则在步骤274中, 将数字图像204与标识数据库242a的各记录244的标识数据246(图1 la) 进行比较,以便标识数字图像204中描绘的个人。选择的信息可以是与 所标识的个人相关联的记录244的个人信息248的至少一部分。
作为另一个示例,如果在步骤272中,将类目确定为"狗",则在步 骤274中,将数字图像204与各品种268的ID数据269进行比较,以便 确定数字图像204中描绘的狗的品种。选择的信息可以是与所标识的品 种相关联的描述性数据271的至少一部分。
作为又一个示例,如果在步骤272中,将类目确定为"名胜",则在 步骤274中,将数字图像204与名胜列表254 (名胜列表254对应于预定 地点256,预定地点256对应于请求的地点标识206)中的标识数据258 进行比较,以便标识数字图像204中描绘的名胜。选择的信息可以是与 所标识的名胜255相关联的描述性数据260的至少一部分。
作为又一个示例,如果在步骤272中,将类目确定为"酒标签",则 在步骤274中,将数字图像204与各葡萄酒的标识数据264进行比较, 以便确定图像204中描绘的标签220 (图5a)对应的葡萄酒。选择的信 息可以是与这种葡萄酒相关联的描述性数据266的至少一部分。
在所有以上示例中,步骤276表示构建响应元数据结构,并且作为 对请求的响应208,使响应元数据结构开始返回照片管理应用程序42。虽然已经针对特定优选实施方式给出并且描述了发明,显然,在阅 读和理解说本明书之后,本领域中的技术人员将会想到等同内容和修改。
作为一个示例,在图2a、 2b、 2c和2d中表示的元数据结构可以表示为 XML记录。这种表示仅仅是示例性的,并不是要限制所附权利要求中描 述的本发明的范围。本领域中的技术人员将认识到,存在其他等同的元 数据结构,并且选择任何特定的数据结构以便将描述了数字照片内容的 元数据与数字照片相关联起来只是设计选择的事情。
作为第二个示例,在图7中的流程图描绘的示例性实施方式中,从
移动设备本地的信息源获取用于与数字照片相关联的信息记录,而在图 10描绘的示例性实施方式中,从远程目录服务器获取信息记录(或者至 少是信息记录的基本内容部分)。本领域中的技术人员将认识到,对从本 地数据源获取信息记录的一部分(例如类目)和从远程服务器获取信息 记录的一部分的组合只是设计选择的事情。例如,可以想到,可以使用 本地源来确定数字照片位于人物类目中,而可以使用远程源来标识在照 片中描绘的多个人。然而,可以通过目录服务器标识数字照片中描绘的 其他人。
作为第三个示例,图IO表示与作为客户端的移动设备的照片管理应 用程序相互配合的目录服务器,该客户端向目录服务器生成请求。本领 域的技术人员可以认识到,目录服务器还可以从在传统的台式电脑或者 笔记型电脑上运行的传统相册应用程序中的任何一个接收请求,并向其 提供响应。
本发明包括所有这些等同内容和修改,并且仅通过所附权利要求的 范围来限定。
权利要求
1、一种移动设备,该移动设备包括用于拍摄数字照片的摄像装置;和照片管理应用程序,该照片管理应用程序接收所述数字照片;获取包括与所述数字照片有关的信息的信息记录;并且将与所述数字照片有关的信息的至少一部分与所述数字照片关联起来。
2、 根据权利要求1所述的移动设备,该移动设备还包括 网络通信系统;联系人目录,该联系人目录存储了多个联系人记录,各联系人记录 包括标识了个人和与该个人相关联的至少一个网络地址的联系人信息, 所述联系人记录还包括所述个人的面部图像;和用户接口,其使得能够选择联系人记录,并且通过所述网络通信系 统向包含在所述联系人记录中的网络地址发起通信;其中,所述照片管理应用程序通过将选择的联系人记录标识为所述 信息记录来获取所述信息记录,所述选择的联系人记录是所述多个联系 人记录中的包括与所述数字照片中描绘的至少一个面部图像匹配的面部 图像的一个联系人记录。
3、 根据权利要求2所述的移动设备,其中-所述联系人记录还包括标识了照片共享设定和照片非共享设定中的 一个的照片共享指示;并且如果包含在所述选择的联系人记录中的照片共享指示标识了所述照 片共享设定,则所述照片管理应用程序开始向所标识的地址发送所述照 片的副本。
4、 根据权利要求2所述的移动设备,其中关于各联系人记录,所述个人的包含在所述联系人记录中的面部图 像为呼叫线路标识照片,并且所述移动设备还包括用于通过所述网络通信系统发起和接收电话呼叫的电话应用程序,当来电呼叫的主叫方ID信号与联系人记录中的电话号码匹配时,所述电话应用程序进一步驱动所述用户接口来显示所述联 系人记录的呼叫线路标识照片。
5、 根据权利要求1所述的移动设备,该移动设备还包括 本地通信系统,其用于与所述移动设备周围的所述移动设备可以进行电子通信的通信区域内的远程移动设备进行通信;并且其中所述照片管理应用程序通过如下方式来获取所述信息记录显示所述通信区域内的多个远程移动设备中各个远程移动设备的指示;显示所述数字照片中描绘的至少一个面部图像; 获取选择的远程移动设备的用户选择,所述选择的远程移动设备是所述多个远程移动设备中的被所述用户与所述数字照片中描绘的面部图像关联起来的一个远程移动设备;和从所述选择的远程移动设备获取作为所述信息记录的个人联系人记录,所述个人联系人记录包括所述选择的远程移动设备的用户的标识。
6、 根据权利要求5所述的移动设备,其中所述个人联系人记录还包括标识了照片共享设定和照片非共享设定 中的一个的照片共享指示;并且如果所述照片共享指示标识了所述照片共享设定,则所述照片管理 应用程序开始向所选择的远程移动设备发送所述照片的副本。
7、 根据权利要求5所述的移动设备,该移动设备还包括 存储了多个联系人记录的联系人目录,各联系人记录包括标识了个人和该个人的呼叫线路标识照片的联系人信息,所述呼叫线路标识照片 用于在来电呼叫包括对应于所述联系人记录的主叫方ID信号时进行显 示;并且其中所述照片管理应用程序还将所述数字照片中描绘的面部图像与所述个人联系人记录关联起来作为其呼叫线路标识照片;和将所述个人联系人记录写入所述联系人目录。
8、 根据权利要求5所述的移动设备,其中如果所述选择的远程移动 设备被配置成允许将所述个人联系人记录传送到所述移动设备,则所述 照片管理应用程序仅仅从所述选择的远程移动设备获取所述个人联系人 记录。
9、 根据权利要求5所述的移动设备,该移动设备还包括机主标识记 录,该机主标识记录包括所述移动设备的机主的标识和标识了共享设定 和非共享设定中的一个的共享指示;并且其中,当所述通信区域内的一个远程移动设备发起获取所述机主标 识记录的请求时,所述移动设备向该远程移动设备提供所述机主标识记 录。
10、 根据权利要求1所述的移动设备,该移动设备还包括网络通信 系统;并且其中,所述照片管理应用程序通过如下方式来获取所述信息记录 通过所述网络通信系统向远程目录服务器发起请求,该请求包括包含了所述数字照片的至少一部分的数字图像;和通过所述网络通信系统接收来自所述远程目录服务器的响应,该响应包括所述信息记录。
11、 根据权利要求10所述的移动设备,其中 所述数字图像为所述数字照片中描绘的个人的面部图像;并且 所述信息记录包括个人联系人记录,该个人联系人记录包括所述数字照片中描绘的个人的标识。
12、 根据权利要求ll所述的移动设备,其中所述个人联系人记录还包括指示了照片共享设定和照片非共享设定 中的一个的照片共享指示;并且如果所述照片共享指示标识了所述照片共享设定,则所述照片管理 应用程序开始向所标识的地址发送所述照片的副本。
13、 根据权利要求10所述的移动设备,其中所述请求还包括源标识,该源标识标识了所述移动设备, 如果所述源标识在与所述数字照片中描绘的个人相关联的组授权记 录中,则所述信息记录包括个人联系人记录,该联系人记录包括所述数字照片中描绘的个人的标识;并且如果所述源标识不在与所述数字照片中描绘的个人相关联的组授权 记录中,则所述信息记录包括不允许标识所述数字照片中描绘的个人的 指示。
14、 根据权利要求10所述的移动设备,该移动设备还包括用于标识 拍摄所述数字照片的地点的全球定位系统;并且其中,所述数字图像为所述数字照片中描绘的名胜图像; 所述请求还包括标识了拍摄所述照片的地点的地点标识符;并且所述信息记录包括与所述名胜相关联的描述数据。.
15、 根据权利要求14所述的移动设备,其中与所述名胜相关联的描 述数据包括标识了拍摄所述数字照片的地区的地理标识符。
16、 根据权利要求14所述的移动设备,其中与所述名胜相关联的描 述数据包括所述名胜的标识。
17、 根据权利要求10所述的移动设备,其中所述数字图像为所述数字照片中描绘的并且标识了葡萄酒的酒瓶标 签的图像;并且所述信息记录包括与所述葡萄酒相关联的描述性数据。
18、 根据权利要求1所述的移动设备,该移动设备还包括 基本内容数据库,该基本内容数据库针对多个类目中的各类目将该类目的标识与内容识别数据关联起来;并且其中所述照片管理应用程序通过如下方式来获取所述信息记录将所述基本内容数据库的多个类目中的各类目的内容识别数据 应用于所述数字照片中描绘的图像,来标识选择的类目,所述选择的类 目为包括所述图像对应的内容识别数据的类目;并且将所述选择的类目的标识用作所述信息记录。
19、 根据权利要求18所述的移动设备,该移动设备还包括用于与远程移动设备进行通信的通信系统;并且其中所述照片管理应用程序还与选择的远程移动设备交换内容识别数据。
20、 根据权利要求19所述的移动设备,其中所述照片管理应用程序 还将从所述选择的远程移动设备接收到的内容识别数据应用于在所述数 字照片中描绘的所述图像,以便识别所述选择的类目。
21、 根据权利要求18所述的移动设备,该移动设备还包括 包括显示屏和信息输入系统的用户接口;并且 其中所述照片管理应用程序还显示与所述选择的类目的标识相关联的图像;和 只有在所述用户确认正确分类时才将所述选择的类目的标识用 作所述信息记录。
22、 根据权利要求21所述的移动设备,其中所述图像管理应用程序还通过所述信息输入系统获取用户输入的新类目标识符作为所述信息 记录;将所述图像作为内容识别数据与所述基本内容数据库中作为新类目 的所述新分类标识符关联起来。
23、 一种操作移动设备、以获得基于文本的信息并且将其与所述移动设备拍摄到的数字照片关联起来的方法,所述方法包括以下步骤 拍摄数字照片;获得包括与所述数字照片有关的信息的信息记录;和 将与所述数字照片有关的信息的至少一部分与所述数字照片关联起来。
24、 根据权利要求23所述的方法,其中所述信息记录是通过将从联 系人目录选择的联系人记录标识为所述信息记录而获取的所述联系人目录存储了多个联系人记录,各联系人记录包括标识了个人和与所述个人相关联的至少一个网络地址的联系人信息,所述联系 人记录还包括所述个人的面部图像;并且所述选择的联系人记录为所述多个联系人记录中的包括了与所述数 字照片中描绘的至少一个面部图像相匹配的面部图像的一个联系人记 录。
25、 根据权利要求24所述的方法,其中所述联系人记录还包括标识 了照片共享设定和照片非共享设定中的一个的照片共享指示;并且所述方法还包括在所述选择的联系人记录中包含的所述照片共享指 示标识了所述照片共享设定时,开始向所标识的地址发送所述照片的副 本。
26、 根据权利要求24所述的方法,其中,关于各联系人记录,所述 联系人记录中包含的所述个人的面部图像为呼叫线路标识照片,并且所述方法还包括当来电呼叫的主叫方ID信号与一个联系人记录中的 电话号码匹配时,驱动所述用户接口来显示该联系人记录的呼叫线路标 识照片。
27、 根据权利要求23所述的方法,其中所述信息记录通过以下方法 获得显示通信区域内的多个远程移动设备中各个远程移动设备的指示, 所述通信区域为所述移动设备周围的所述移动设备可以通过本地通信系 统进行电子通信的区域;显示在所述数字照片中描绘的至少一个面部图像;获取选择的远程移动设备的用户选择,所述选择的远程移动设备为 所述多个远程移动设备中的被所述用户与所述数字照片中描绘的面部图 像关联起来的一个远程移动设备;和从所述选择的远程移动设备获取作为所述信息记录的个人联系人记 录,所述个人联系人记录包括所述选择的远程移动设备的用户的标识。
28、 根据权利要求27所述的方法,其中所述个人联系人记录还包括标识了照片共享设定和照片非共享设定 中的一个的照片共享指示;并且该方法还包括如果所述照片共享指示标识了所述照片共享设定, 则开始向所选择的远程移动设备发送所述照片的副本。
29、 根据权利要求27所述的方法,该方法还包括-将所述数字照片中描绘的面部图像与所述个人联系人记录关联起来作为其呼叫线路标识照片;并且将该个人联系人记录写入到存储了多个联系人记录的联系人目录 中,各联系人记录包括标识了个人和该个人的呼叫线路标识照片的联系 人信息,以便当来电呼叫包括对应于所述联系人记录的主叫方ID信号时 进行显示。
30、 根据权利要求27所述的方法,其中只有在所述选择的远程移动 设备被配置成允许将所述个人联系人记录发送给所述移动设备时才从所 述选择的远程移动设备获取所述个人联系人记录。
31、 根据权利要求27所述的方法,该方法还包括当所述通信区域内 的一个远程移动设备发起获取机主标识记录的请求时向该远程移动设备 提供所述机主标识记录,所述机主标识记录包括所述移动设备的机主的 标识。
32、 根据权利要求23所述的方法,其中所述信息记录通过如下方式 获得-通过所述网络通信系统向远程目录服务器发起请求,该请求包括包 含了所述数字照片的至少一部分的数字图像;和通过所述网络通信系统接收来自所述远程目录服务器的响应,该响 应包括所述信息记录。
33、 根据权利要求32所述的方法,其中 所述数字图像为所述数字照片中描绘的个人的面部图像;并且 所述信息记录包括个人联系人记录,该个人联系人记录包括所述数字照片中描绘的个人的标识。
34、 根据权利要求33所述的方法,其中所述个人联系人记录还包括指示了照片共享设定和照片非共享设定 中的一个的照片共享指示;并且所述方法还包括如果所述照片共享指示标识了所述照片共享设定, 则开始向所标识的地址发送所述照片的副本。
35、 根据权利要求32所述的方法,其中-所述请求还包括源标识,该源标识标识了所述移动设备, 如果所述源标识在与所述数字照片中描绘的个人相关联的组授权记 录中,则所述信息记录包括个人联系人记录,该联系人记录包括所述数字照片中描绘的个人的标识;并且如果所述源标识不在与所述数字照片中描绘的个人相关联的组授权 记录中,则所述信息记录包括不允许标识所述数字照片中描绘的个人的 指示。
36、 根据权利要求32所述的方法,其中所述数字图像为所述数字照片中描绘的名胜的图像; 所述请求还包括标识了由全球定位系统所测量的拍摄所述照片的地 点的地点标识符;并且所述信息记录包括与所述名胜相关联的描述数据。
37、 根据权利要求36所述的方法,其中与所述名胜相关联的描述数据包括标识了拍摄所述数字照片的地区的地理标识符。
38、 根据权利要求36所述的方法,其中与所述名胜相关联的描述数 据包括所述名胜的标识。
39、 根据权利要求32所述的方法,其中所述数字图像为所述数字照片中描绘的并且标识了葡萄酒的酒瓶标 签的图像;并且所述信息记录包括与所述葡萄酒相关联的描述性数据。
40、 根据权利要求23所述的方法,其中所述信息记录通过如下方式 获得将基本内容数据库的多个类目中的各类目的内容识别数据应用于所 述数字照片中描绘的图像,来标识选择的类目,所述选择的类目为包括 了所述图像所对应的内容识别数据的类目;显示与所述选择的类目的标识相关联的图像;并且如果所述用户通过信息输入系统确认了正确的类目,则将所述选择 的类目的标识用作所述信息记录。
41、根据权利要求40所述的方法,还包括通过所述信息输入系统获取用户输入的新类目标识符作为所述信息 记录;将所述图像作为内容识别数据与所述基本内容数据库中作为新类目 的所述新分类标识符关联起来。
全文摘要
一种移动设备包括诸如广域网络移动电话系统的网络通信系统、用于拍摄数字照片的摄像装置和照片管理应用程序。该照片管理应用程序接收数字照片,获取包括与数字照片有关的信息的信息记录;并且将与数字照片有关的信息的至少一部分与数字照片相关联起来。该信息记录可以从诸如联系人目录的本地来源或者从远程目录服务器获取。
文档编号H04N1/21GK101641948SQ200780052431
公开日2010年2月3日 申请日期2007年9月28日 优先权日2007年3月29日
发明者安娜-玛利亚·拉各斯太特, 托马斯·卡尔-阿克塞尔·瓦希恩伯, 约翰·F·古利克松, 艾拉尔·丹尼斯·福克斯恩兰德, 蓝迪-里瑟·耶尔梅兰·阿尔马斯, 贡纳·克林霍尔特 申请人:索尼爱立信移动通讯有限公司
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1