专利名称：从已知画面场景获取的图像产生增强的摄影制品的制作方法
技术领域：
本发明一般来说涉及摄影领域，具体来说涉及摄影系统，该摄影系统能够获取与在已知画面场景(picture site)获取的照片内容有关的数字数据。更加具体地说，本发明涉及一种利用获取的数据从这样一些场景获取的图像产生增强的摄影制品(enhanced photographicproduct)的方法。
背景技术：
当一个摄影人员，尤其是业余的摄影人员或消费人群中的摄影人员，使用传统的胶片或数字照像机拍摄时，同时还在参观已知的(或者指定的)景点时，如在主题公园或国家公园的预定的好看画面场景，期望能辨别出并能自动增强这些图像，以便产生参观的纪念品(像册、互动地CD或DVD等)。关键的要素是知道客户已获得图像的画面场景的位置以及具有有关这个场景的内容信息(例如，音频、图形、可见的和/或情景的描述内容信息、等)。
在本领域中公知的是，一台使用传统胶片摄影机、电子照像机，或摄像机能够在摄影胶片上记录图像信息，或者能在电子存储器存储这种信息。在本领域公知的还有，可以使用一种无线收发器在低功率、便携式环境中传送或接收数据，例如与上述的画面场景有关的数据。在美国专利NO.4957348中公开了这种装置的一个例子，该装置描述了一种包括了IR发射机的低功率光收发机。数字照像机还能与图像一起存储附加信息。具有这种能力的数字照像机的一个例子是KodakDCS 460数字照相机，它能与数字图像一起存储声音注释和全球定位系统(GPS)参数。而且，由Eastman Kodak公司和其它公司销售的Advanced Photo SystemTM照像机使用了称之为AdvantixTM的摄影胶片，允许照像机在胶片背面的一个干净的磁性层上存储数字信息。在共同转让的美国专利NO.5194892中公开了这一特征，其中还描述了一种用于这种胶片的用户(如照像机用户和照片洗印社)的信息交换系统。
在美国专利NO.5296884中，一种静物视频或胶片照像机能从一个无线源接收位置信息，如GPS信号，然后把这个信息转换成位置名，例如城市名。然后与视频图像一起存储城市名，或者将它们记录在胶片上。除了位置名外，这个专利还涉及到存储与位置有关的各种数据的可能性，如城市名的来源和该地区的特产。而且，还可以安装一个本地的传送站，向例如在旅游区或旅游设施内的照像机直接发送有关位置的代码。在美国专利NO、5479228中，照像机系统包括一个存储器，这个存储器能够存储一组任选的词组，如“新年好”和“生日快乐”，然后将它们存储在AdvantixTM胶片的磁性层上，并在随后的处理操作中打印在照片上。
共同转让的美国专利NO.5768633公开了一种摄影和数据传输系统，这种系统特别适用于内部预演(tradeshow)。在内部预演中，在一个预演台(booth)上安装一个无线通信系统，用于传送与显示的制品有关的无线信息，如制品名称、公司名称、价格、和制品源在因特网上的“统一资派定位器地址”(URL)。这个系统的其它部分是能够接收无线传输的照像机。当使这个照像机进入这个预演台附近并获得这个制品的图像的时候，来自于照像机的触发信号启动来自预演台的无线信号的传输。照像机然后存储具有图像的制品数据或者存储URL地址，URL地址可以引导用户经过因特网得到更多的信息。
EP说明书NO.EP0640938B1描述了一种个人图像记录系统，试图用于产生静物图像或娱乐公园的客人的视频集合。每个客人都与一个唯一的识别符相关联，识别符是由客人佩戴的可读出的标记的形式。当标记进入所关心的位置的附近时，这个标记可触发位于这个所关心的位置的照像机，从而可以获取一个图像，如这个客人的图像。通信网络相互连接照像机和标记读出器以及中央控制系统，产生图像的集合，其中包括获取的图像和其它预先记录的存储电影胶片(stockfootage)。控制系统按照客人的优先顺序将这个图像安排在收集中，从而可以得到参观这个娱乐公园的经过历程。
在共同转让的美国专利NO.6396537中，一种摄影系统使用了与场景位置有关的数据，如吸引参观者的场所，这种数据能与用户互动通信。这个吸引人的场所存储与这个吸引参观者的场所有关的内容数据，用户通过一台允许进行这种通信的照像机与这个吸引参观者的场所通信。除了获取与这个场所有关的图像以外，这个照像机还要存储用户的兴趣与内容数据相互关系的预先确定的个人数据，这个照像机还要包括向吸引人的场所传送个人数据的装置。照像机还包括用于从吸引人的场所接收和显示与个爱好有关的内容数据的装置，以及一个用户接口，用于从显示的内容数据中选择用户希望保存的那一部分。以此方式，利用用户已经获取的特定的画面，就可以很容易地请求、访问、和存储与用户的在摄影项目方面的兴趣有关的信息。
在美国专利6337951中，在一个指定的地方安装一个数据传送器，这里像动物园中一个特殊的动物笼子，拍摄的可能性很大。数据传送器发出有关这个指定位置的照片数据，如位置ID。在照像机中加进接收来自于数据传送器的照片数据的接收器和存储照片数据的存储器。照片数据与在指定位置由照像机获取的数据相关，然后将这个照片数据写入数据存储设备。将来从照像机检索照片数据，并且可以使用照片数据访问与场景对应的数据，如被摄物体的名称和历史。在电子像片簿、图像数据库、或打印数据中可以使用场景数据。
因此，如果在一个已知的位置个人拍照，并且存在有关场景收集到的内容，知道拍摄的地点和时间以及收集到的内容信息的组合可以允许增强图像和表现方式这两者。具体来说，由数字照像机获得的数字图像，或者由胶片上获得的图像数字化得到的数字图像，都可用于产生多媒体文件。这些文件组合静物图像和其它类型数据，如文本、图形、音频、和视频。收集产生多媒体文件所需的额外的数字信息是一个耗费时间的过程。因特网和万维网较早地进行过这种过程，但用于多媒体文件的许多内容都是有版权的，不容易在因特网网站上得到。而且，用户需要一台多媒体计算机将这些信息收集在一起。用户还需要定位这些信息场景的URL地址。
所说的这些系统的缺点是信息过负载和所需要的处理，即，信息量可能会超过试图汇聚与一个特定事件(例如说参观一个主题公园或参观图家公园系统中的一个景点)有关的记录的临时用户的处理能力。况且，在产生增强的摄影制品中涉及的处理过程对于普通的客户的能力(以及时间和兴趣)来说都将是一种挑战。因此渴望找到一种简单易行的方法，将现代照像机的信息处理能力与图像记录组合在一起，以便容易请求和访问与用户的兴趣有关的摄影方面的信息。这将会得到一个增强的摄影制品，同时对于客户的影响最小。
发明内容
本发明将克服上述的一个或多个问题。简而言之，按照本发明的一个方面，描述的是一种摄影系统，用于从一个或多个已知画面场景的画面产生增强的制品，一个或多个已知画面场景的画面位于预定位置并且代表摄影人员感兴趣的内容。这个系统包括(a)包含关于画面场景的内容的数据库；(b)用于获取画面场景图像的照像机；(c)用于建立获取的图像与画面场景的位置的关系并因此可以识别图像位置的处理器，这里，处理器使用图像位置访问所选择的数据库中关于画面场景的内容；(d)制品产生器，用于产生增强的图像制品。在一个实施例中，所说的数据库包含关于画面场景的存储图像，制品产生器组合关于画面场景的内容的存储图像与获取的画面场景的图像，产生新的图像制品。
因为本发明能够建立已知的画面场景和与这个位置有关的有价值的内容的关系，因此本发明具有如下的优点它能为临时的客户提供增强的图像制品，即对于这个景点参观的心爱的纪念品(如像片簿、互动的CD、VCD、等)。
从以下结合附图对本发明的优选实施例和所附的权利要求书的详细描述的评论，将会更加清楚地理解和认识本发明的上述方面和其它方面、目的、特征、和优点。
图1是按照本发明的从在已知的画面场景获取的图像产生增强的摄影制品的摄影系统的一个组合的示意和方块图；图2是在如图1所示的摄影系统中使用的数字照像机的方块图；图3是在如图1所示的摄影系统中使用的胶片摄影机的方块图；图4是产生内容数据库并且附加到内容数据库的方法的流程图；图5是客户与系统互动的方法(包括在线登记)和按照本发明的方法的流程图；图6是客户与系统互动的方法(包括在线登记)和按照本发明的方法的流程图；
图7是从当前获取的图像和一个基准(存储)图像产生增强的摄影制品的方法的流程图；图8是按照图7的方法用当前获得的照片和历史上相关的存储图像(那时的和现在的)制作的增强的摄影制品的实例；图9是从客户照片产生一个像片簿的方法的流程图；图10是从客户照片产生一个CD或VCD的方法的流程图；图11A和11B分别表示产生印有内容数据的并且要附着到照片背面的粘结板的方法流程图和制品实例；图12A、12B、12C是固定到传统的胶片照像机或数字照像机上收集与画面场景有关的元数据的数据收集系统的示意图；图13是使用如图12所示的系统的方法的流程图；图14是表示与一个一次性照像机一起使用的如图12所示的附加装置的示意图；图15是说明图像删除选项的流程图，用于按照图10的流程图产生的记录在CD或DVD上的图像；图16是用于按照本发明从在已知的画面场景获得的图像产生增强的摄影制品的附加实施例的组合的图示和方块图，其中位置数据的收集与图像数据是分开的。
具体实施例方式
因为采用与特定的场景有关的数据收集的摄影系统是众所周知的，所以本说明书将具体指向构成按照本发明的系统和方法的一部分的那些元部件，或者与这些部分更直接协同操作的元部件。可以从在本领域中公知的元部件中选择在这里没有具体表示或描述的那些元部件。可以用软件提供下面将要描述的各实施例的某些方案。如果在下面的材料中指定了按照本发明表示和描述的系统和方法，在这里没有具体表示、描述、和建议的，对于实施本发明有用的软件就是习惯上常用的，并且是在本领域中的通用技术的范围之内。
还有，如这里所用的，可以将计算机程序存储在计算机可读存储介质中，例如计算机可读存储介质可以包括磁存储介质，如磁盘(如硬盘或软盘)或磁带；光存储介质，如光盘、光带、或机器可读条形码；或者固态电子存储器件，如随机存储存储器(RAM)、或只读存储器(ROM)；或者用来存储计算机程序的任何其它的物理器件或介质。
有这样一些位置因为它们的天然的美丽、独一无二性或历史含义而鼓励着人们，这些位置在这里称之为画面场景或吸引人的场所。这种鼓励的结果通常包括在这个位置拍一张照片。有关这个位置的含义的细节通常以某种形式的标注(signage)或信息台kiosk)进行记录。人们有时对这个场景进行拍照以帮助他们记住这些细节。然而，有关这种场景的大部分信息都将丢失(或者根本不知道，因为大部分细节都没有表示出来和/或很少更新)。
这里描述的本发明公开了一种方法和系统，用于自动地在这些场景获取必要的信息，然后使这些信息去驱动附加的介质(电影、画面、音响等)，从而可以自动地进行旅游/时机的数字评估，或者增强像片簿或甚至于各个照片。这种信息还可以由个人使用，按个人的意愿增强他们的记忆(剪贴簿、网站、传统像片簿等)。
这里所示的实施例利用了各种技术来收集有关场景的信息。一种技术基于利用全球定位系统(GPS)来收集场景信息，或许还要与电子罗盘一起使用。还可以使用射频(RF)、红外(IR)和图像识别方法来收集位置信息。如果使用GPS设备，在图像获取时可以确定个人的位置(如果利用罗盘，还可以确定照像机所指的方向)。如果照片洗印社例如根据获取图像的时间借助于图像与位置信息的关系已经访问了这个信息，则可以将与位置对应的内容附加到为客户产生的输出上。类似地，如果RF或IR发送器定位在画面场景，并且客户具有的照像机或其它设备能够获取发送的数据，那么，从这个数据就可以确定位置。
图像识别方法的一个优点是在照像机内不需要任何附加的硬件或软件。然而，如以上所述，如果不使用图像识别，GPS、RF、IR、或类似技术就可以提供完成所要求的任务所需的附加信息。然而，大部分照像机没有配备这些技术中的任何一项。因此，本发明还要提供一种装置，以便允许标准的35mm照像机或一次性照像机能够配备确定所说的位置并使这个位置与胶片的特定帧发生关联所必须的这种装置。
即使没有能够直接确定获取的图像的位置的机构，也可以将客户获得的图像交给照片洗印社进行图像分析和相关性操作(correlation)。例如，照片洗印社或者它的代理商，原来获得过或访问过与同一个画面场景对应的一组专业的图像。这组专业的图像可以用作比较的基础，从而可以确定客户图像的获取位置。可以分析客户图像的许多方面来确定与专业组的“相似程度”。检测相似性的一种技术是使用一种算法，首先从专业图像中减去客户图像以形成一个差值图像。如果两个图像类似，则差值图像的一个直方图将在0附近展示出数值的一个大的群聚。当这个算法确定有很大的相似程度时，则获取的位置被认为是匹配相符的，并且可以将附加的内容加到输出上，从而增加了客户图像的数值和成像经历(experience)。另一方面，经过训练的操作人员可以比较客户图像与专业组图像，由此可以确定客户图像的位置。这种处理方法的特征在于可以利用这种匹配来识别存储的关于特别画面场景的位置的内容(包括图像)的一个子集。这有利于减小要考察或处理的内容的数量。
首先参照附图1，表示一种用于从照像机获取的画面产生增强的摄影制品的摄影系统，其中的照像机能够附加地获取位置数据，从位置数据可识别一个或多个已知的画面场景。每个画面场景位于代表摄影人员感兴趣的内容的一个预定位置。摄影系统包括一个获取子系统10，获取子系统10用于获取画面场景的图像并且用于获取有关画面场景的图像的位置数据，由此可识别图像的位置。摄影系统进一步包括一个处理子系统12，处理子系统12包括一个数据库14，数据库14包含关于画面场景的内容，处理子系统12还包括一个数字处理器16，数字处理器16使用图像的位置在数据库14内访问关于画面场景的所选的内容。处理子系统16然后利用有关画面场景的所选内容从图像中产生增强的摄影制品。
获取子系统10在已知的画面场景或吸引人的场所20a、20b和20c获取图像，在这些地方可能要拍照，此外在这些地方可能还要确定和获得它的位置数据。这样的吸引人的场所可能是要变化的并且相距很远，例如包括在主题公园、娱乐公园、体育公园、国家公园系统景点等内的用户可访问的观察点。在一个实施例中，每个吸引人的场所包括一个无线通信站22a、22b、22c，将位置数据交换到获取子系统10。这个位置数据与记录档案23中的图像数据组合，例如在一个存储卡21上传送到数字处理器16。位置数据与内容数据库14中对于这个位置的内容描述应该是一致的。数字处理器16向制品合成器(productcomposer)15传送所选的内容描述，数字处理器16还可以访问来自于客户/摄影人员的与制品有关的选择。这个制品的内容描述还可以加到监视器17上，供客户和/或处理子系统12的操作人员评论。例如，因为用户随后输入了修改和/或改变图像的信号，所以在监视器17上的这个制品图像可以起到任选的最终输出的制品的一个电子证据的作用。如果在这个阶段进行场景识别，可以向适合于那种特定场景的用户提供可能变化的选择菜单。所选的制品加到完成处理器19，产生增强的摄影制品18。这些制品可以取多种形式，如将要描述的，包括封装的照片18a、像片簿18b、CD或DVD18c、或在线制品18d，每一种制品均表示来自于数据库14的内容和获取的图像。
获取子系统包括一个照像机24。优选地，照像机24是如图2的方块图所示的数字照像机24a或者是如图3的方块图所示的AdvantixTM胶片照像机24b，当然这里还可包括其它的获取装置不受限制，如加入网络电话(cell phone)或个人数据助理(PDA)中的数字照像机，如此等等。如图2和3所示，两种类型的照像机通过一个镜头部分28获取吸引人的场所的图像，镜头部分28的视野28a如图1所示包括这个吸引人的场所。如图2所示，在每个吸引人的场所中的无线通信站22包括一个与天线26交换信号的无线收发器25。位置存储器27向无线收发器25提供位置数据。此外，无线通信站可以包括一个射频识别(RFID)标记(未示出)，这个标记用识别吸引人的场所的数据编码。这个照像机还可包括一个位于RFID标记附近的可被激励的RFID询问单元。如果指定了这个无线通信站2有这种传输能力，这个吸引人的场所20就起一个“通信场景”的作用，具体来说通过向特定的用户发送场景位置ID。
两个照像机24a和24b都包括一个收发器部分30，用于与无线通信站22通信。两个照像机还包括一个用户接口31，用于向照像机传递用户命令(如期望获取图像)和某种类型处理模式(如微处理器42或逻辑控制单元38)。如图3中一个实施例中详细描述的，收发器部分30可以包括红外发射器32和红外检测器34，它们通过一个常规的IrDA接口36连接到逻辑控制单元38。在数字照像机24a中的收发器部分30还可以包括一个如图3所示的IR发射器-检测器系统；此外，两个照像机可以包括另外一些类型的收发器，如射频(RF)收发器系统，或基于RFID标记的系统。对于如图2所示的数字照像机，收发器信号在远距离通信处理器40和微处理器42之间相互交换。
现在参照附图2，在一个电荷耦合器件(CCD)图像传感器44上通过镜头部分28聚焦一个图像，从获取的图像产生一个图像信号。这个图像信号由A/D转换器46转换成数字信号，由微处理器42进行处理，并将其存储在存储器48内。存储器48可以采取任何的常规形式，其中包括可拆除存储器，如存储卡或小型硬盘驱动器卡。在液晶显示器(LCD)50上可以观察到图像信号以及关于图像的内容数据。作为另一个特征，在个人文件52中可存储用户的个人数据描述，在上述的美国专利NO.6396537中对此作了详细描述，这里参考引用了这项美国专利。个人数据使用户的一项或多项兴趣与内容数据库14中的至少一部分内容数据发生关联。
对于如图3所示的胶片照像机，镜头部分28在光敏胶片54上形成图像。优选地，胶片54是一种AdvantixTM胶片，包括一个可以存储个人数据以及收发器部分30接收的附加数据的磁性部分56。在磁性部分56上的记录与移动控制接口58要协同动作，使记录发生在胶片54的移动过程中，例如在两次曝光之间的胶片前进期间。对于如图3所示的胶片照像机，处理子系统12可以包括照片洗印能力，用于显影和扫描胶片，或者可以在某些附件中提供这种显影和扫描。
当数字照像机24a和胶片照像机24b进入吸引人的场所的通信范围并且在这个位置拍照的时候，经过无线链路60在照像机和对应的无线通信站之间就要发生数据交换。具体来说，场景数据向上加载到照像机24a或24b，最终对这些场景数据进行处理以建立这个场景的识别。对于两种类型的照像机，将获取的图像存储在图像记录存储器里(数字照像机24a中的存储器48，或者胶片照像机24b中的AdvantixTM胶片54)，并且将选择的内容数据存储在存储器48中或者存储在胶片54的磁性部分56内，于是，附加到图象上或与图象相关联。按照这个系统的典型用法，用户激励用户接口31中的一个获取释放，相应的照像机获取所选的图像，照像机获得位置数据。具体来说，直到用户真的获得一个图像，通常照像机才获取位置数据。这就允许用户指示照像机构成一个图像而不用启动照像机和吸引人的场所之间的任何数据传输。因此，虽然不一定是这种情况，但图像获取和数据传输通常是在同一时期发生的，并且基本上是同时发生的。对于胶片照像机24b，将所选的数据附加到图像数据上的时间有点晚，例如是在胶片前进时。对于数字照像机，数据传输导致关联的数据的附加与图像的获取同时期进行。(虽然没有具体公开，但应该理解，照像机可以包括一个方式开关或类似物，这样一来，就可以禁止本发明特征的操作，并且照像机可以按常规方式操作来获取图像，而不会触发照像机和吸引人的场所之间的任何通信。)在第二实施例中，参照图1的一部分，可以从全球定位系统(GPS)源如一个或多个GPS卫星62获得位置数据。在这个实施例中，提供一个GPS接收器，GPS接收器或者作为照像机的一部分，或者作为一个与照像机主体分开但可通过触点(未示出)连接到照像机主体上的附件64(GPS接收器与照像机主体分开可保持照像机主体很小，这样做可能是有益的)。附件64还包括一个天线66，用于从GPS卫星62接收GPS信号；和一个角位置检测器68(如罗盘，如果必要，还有倾斜检测器)，用于导出照像机24a和24b的视野轴的角度取向。从GPS处理器70获得的纬度、经度数据以及照像机的视野轴的角度取向完全确定了照像机相对于吸引人的场所的视线。这样的位置数据可能是一组特定的GPS坐标和一组特定的角度坐标。尽管进一步的细节通常是不必要的，但还可以使用一个范围取景器，来确定图像中主要对象距照像机的距离，这样就完全限定了吸引人的场所的位置。
在一个附加的实施例中，在可提供许多可能的吸引人的场所(如在主题公园或国家公园内)的特定位置的范围内，可以使用本地GPS系统。本地GPS系统可能包括至少两个射频源，两个射频源例如按照照像机用户的视线定位，两个射频源可能与来自于收发器的无线电信号组合，收发器与照像机相关联，可以形成3个信号三角形，这3个信号三角形用于定位在已知传输空间内的任何对象。另一方面，对于三角形方法，可以使用蜂窝电话传输。例如，配有数字照像机的蜂窝电话可以提供拍摄照片时的时间和日期信息。此外，可以通过三角形方法按照用户接近蜂窝电话塔的程度来确定用户位置。
在如图16所示的下一个实施例中，将这个GPS系统配置成一个单独的记录设备200，记录设备200在摄影人员在画面场景参观时由摄影人员携带。记录设备200包含与天线203相连的GPS接收器202，用于从GPS卫星接收位置坐标；时钟204，用于产生与接收的坐标对应的日期/时间信息；和记录器206，用于记录它们接收的GPS坐标和日期/时间。这样的记录设备200可以是一个小型的包装，例如将它固定到背带上、装在袋内、如此等等。记录设备200可以连续运行，提供日期/时间和GPS信息的连续流，或者，记录设备200在启动按钮208的控制下间断地运行。GPS和日期/时间信息可以记录在记录器206的内部存储器上，和/或记录在可拆下并且可传递到处理子系统12的的存储卡210中。照像机24，无论是胶片的还是数字的，还要包括一个日期/时钟发生器，用于提供对应于每个获取图像的日期/时间信息。获取的图像和它们对应的日期/时间信息在存储卡21上传递到处理子系统12，或者，如果照像机是胶片照像机，则记录在胶片上(如记录在APS胶片的磁记录区上)。作为下一种替换方案，照像机24可能是一种一次性照像机，它具有一个时钟附件，用于产生记录在胶片上或记录在照像机内的一个记录装置上的日期/时间信息。然后，把这整个一次性照像机传递到处理子系统12。
对于如图16所示的实施例，使用来自于照像机24和记录设备200的日期/时间信息校正来自于GPS接收器202的位置信息，同时通过照像机24获取图像。更加具体地说，内容描述数据库14包含许多关于吸引人的画面的存储内容，其中还包括图像。照像机24在一个特定的画面场景获取图像并且记录关于这些图像的日期/时间信息，由摄影人员携带的记录设备200记录日期/时间和位置信息。数字处理器16然后确定照像机24记录的日期/时间信息与记录设备200记录的日期/时间信息的相互关系，从而建立获取的图像的位置信息和存储在数据库14中的内容的关系。这种处理方法的一个具体的特征是，可以使用这种相互关系来识别在关于特定的画面场景的数据库中存储的内容的一个子集，其中包括图像。这在减小必须考察和处理的内容数量方面是有用的。数字处理器16然后处理包括图像在内的存储内容的这个子集以及获取的图像，从而可以识别表示在获取的图像中示出的画面场景的存储内容。处理数据的一种方法是使用一种图像处理算法，如上述的图像识别方法，建立在获取的图像中的对象与存储的图像的子集中发现的对象的相互关系，从而可以识别在获取的图像中表示的画面场景的内容。最后，制品合成器15(见图1)通过使已识别画面场景的画面的存储内容与获取的图像相关联，来产生新的图像制品，可以产生一个增强的摄影制品在如图16所示的实施例的下一种变型中，可以由摄影人员经过键盘(代替GPS接收器202)手动输入位置信息，并将这个位置信息与上述的来自于时钟204的日期/时间信息一起存储起来。进而，如果数据库包含有关定位在画面场景之间的对象的内容，则数字处理器16可以建立照像机24记录的日期/时间信息与记录设备200的日期/时间信息相互关系，从而可以建立所说的位置信息与获取的图像的关系，以及所说的位置信息与获取的图像对应的数据库中的多个画面场景的关系。然后，数字处理器16使用多个画面场景中的位置例如在多个画面场景之间内插一个估算的相关位置，由此识别出数据库中存储的与估算位置有关的内容。然后，制品合成器15通过使已识别的估算位置的存储内容与获取的图像有关来产生新的图像制品，可以产生出一个增强的摄影制品。这种方法不仅适用于与任何画面场景无关的内容，而且也适用于在摄影人员旅行期间碰到的画面场景，否则没有获得任何一个图像。还要注意的是，对于刚刚提到的这个时间信息可以进行相关操作，这个相关操作的时间应被理解为对于日期/时间信息产生基准的时间。
图4说明了向客户/摄影人员获得的图像附加内容的方法步骤。第一个步骤S100是要产生一个画面场景的数据库，这通常是在一定的地理区域内进行，或者例如与公园或域市内或旅行期间的某种活动有关。内容是从各种源头收集到的，并且在步骤S102，在数据库14内装入有关特定画面场景的有效内容。某些内容对于某些个人可能比其它内容具有更多的相关性；这反映在照像机内的个人文件52中(图2)。例如，某些个人可能比其它个人对于吸引人的场所的历史方面有更多的兴趣，个人文件就要反映这种兴趣。因此，在步骤S104，可以使用一个自动过滤器来根据个人轮廓确定感兴趣的内容。处理子系统12在步骤S106利用照像机24a或24b获取的位置数据确定参观的画面场景。
处理子系统12可以利用各种技术确定参观的画面场景，这依赖于位置数据的性质。如果位置数据是从通信部分22发送到照像机的一个实际的吸引人的场所的ID码，数字处理器16将要访问一个参照表，它由可能的吸引人的场所和它们的场所ID组成，(参照表可能是内容数据库14的一个部分)，然后使发送的位置ID与参照表匹配，以确定参观的画面场景。如果位置数据是一组GPS坐标，或许还由角坐标增强，或者是通过本地三角形方法获得的坐标，则数字处理器16将要比较这些坐标与指定的吸引人的场所在数据库中的坐标，以确定参观的画面场景。当在同一组GPS坐标中可参观的吸引人的场所不止一个，角度坐标可能就是必要的了。
数字处理器16从所知道的参观的画面场景访问内容数据库14，并确定可能加到已经获取的图像上的可能的内容(步骤S108)。(可以使用一个任选的步骤S110，例如利用从使用监视器17得到的一个最佳的输入，从要加到照片上的数据库14的内容中确定特定的一些部分)。最后，在步骤S112，通过制品合成器15，把这个内容加到客户制品上，不管这个制品是照片、图象(Picture)CD、像片簿、定制的CD或DVD、还是类似的制品，都将构成增强的摄影制品18。例如，按照共同转让的美国专利NO.6288719和6362900中公开的方法，可以自动地产生照片像片簿，这两个专利有相同的名称“构成照片像片簿的系统和方法”，并在这里参照引用。
如图1所示，还要提供在线登记80，用于增强的摄影系统。此外，还有一个本地登记站82，用于提供本地登记和照像机租赁84。通过一个数据终端86可以完成本地登记，通过本地登记可以输入个人信息。例如，这时可以输入个人轮廓数据88。还有，在线登记还可以参观本地登记站82，以提取租用的照像机(这里，可将租赁安排成在线的)。
图5表示的是所公开的摄影系统从在线登记开始的过程。在步骤S120，一个客户例如通过因特网登记这种在线服务，并输入个人信息，如姓名、地址、电子邮件地址、如此等等。然后，客户来到中央站(步骤S122)，如本地登记站82，并且在照像机租赁站台4提取一台照像机。然后，在步骤S124，客户在吸引人的场所20以及其它可能没有任何通信站22的位置拍摄照片。在参观吸引人的场所结束的时候，在步骤S126，客户返回到中央站，例如本地登记站82，在这里可以定位一个处理子系统12。这里，客户返回照像机24a和24b，以便进行处理，并且选择期望的增强的图像制品18。(此外，在步骤S128，客户可以在参观之前或者在参观期间通过动态的在线连接来选择期望的在线制品)。在步骤130，将图像和位置信息(记录档案23)提供给处理子系统12。所说的制品通过制品合成器15合成、通过处理器19产生、然后提供给客户(步骤S132)，或者当场提供客户或者通过电子邮件或者邮寄服务提供、如此等等。
图6表示公开的摄影系统从现场登记开始的过程。在步骤S140，客户到达本地登记站82，登记这个事件并租赁一台照像机。除了现场登记以外，这个过程类似于图5的过程。在步骤S142表示出这一个差别，而这一差别也可以应用到在线登记。在步骤S142登记时输入的信息包括个人信息，所说的个人信息允许从中滤除附加的内容，即，滤除某些个人信息例如有家庭成员的年龄、个人的兴趣、家庭地址、等等，所说的个人信息可以用来从内容数据库14中选择特定的内容。其余的步骤基本上与结合图5描述的步骤相同。
按照本发明，可以产生各种类型的增强的摄影制品18。如图1所示，可以用两种(或多种)照片产生一个像片簿18b一种是由客户/摄影人员拍照的，另一种是从内容数据库14中选择的存储的照片。图7表示从内容数据库14中选择与客户拍照的图像有关的一个存储的照片的过程。在这个特定的应用中，在内容数据库14中已经装入与特定的吸引人的场所有关的存储图像。这些图像例如可以表示不同的历史观点、特殊的或不同的时间、一种艺术的再现、或只是同一吸引人的场所的现代的专业拍摄。在步骤S150，客户拍摄出吸引人的场所20中的一个场所的照片，这个照片与内容数据库14中的存储的参照画面相对应。当在处理子系统12处理客户获取的图像时，在步骤S152中，针对来自于内容数据库14的内容参照照片的尺寸进行自动地选取剪裁(crop)。在步骤S154，可以附加特殊的效果以增强图像之间的差别或变化，如颜色淡变、前后推移、调整大小、等。然后，在步骤S156，产生一个像片簿，这样，可以将获取的图像和参照图像相互并排放置(如图1中像片簿18b所示)，对应的信息任选地与图像固定或包括在一起，如日期、含义、鲜为人知的事实、等。
应该理解，对于如图7所示的过程的唯一要求是，客户对于具有参照图像的一个位置进行拍照(步骤S150)并且以吸引人的方式将获取的图像和参照图像展现在增强的摄影制品18中(步骤S156)。选取剪裁画面(步骤S154)和特殊效果(步骤S156)的中间阶段是需要的，但是任选的。在图8中表示出这种技术的一个特例，其中表示出在一个历史公园(如战场)中的训练兵站(train depot)的一个现在获取的图像90和一个多世纪之前同一个场景的一个存档的库存照片92。现在的获取的图像经过自动画面选取剪裁(步骤S152)以匹配存档的库存照片，相应的信息94已经附加到照片之上(步骤S156)。虽然不是本发明的必要特征，但从美学观点出发，期望在一个像片簿的一个共用页96上展现出两个照片(当时的和现在的)。
图9描述的技术用于从客户的照片产生一个像片簿，其中使用了关于吸引人的场所的内容数据。开始，在步骤S150，向处理子系统12提供客户照片。在步骤S161，通过包含在由处理子系统12接收的记录档案23中的日期/时间和位置分选图像。然后，在步骤S162，使用在上述的自动构成像片簿的专利(美国专利NO.6288719和6362900)中描述的技术，将来自于特定区域的图像存入逻辑页。在步骤S163，考察客户轮廓数据88，客户轮廓数据88可能已包括在记录档案23中或者通过在线登记80或者本地登记82获得，从而可以确定哪些内容最适合于这些照片。例如，客户的年纪可以规定年青/成人信息。在步骤S164，客户图像与来自于数据库14的内容进行组合，然后对于客户图像进行优化和安排在一个特定的页内(步骤S165)。最后，打印这些页，产生像片簿，并传递给客户(步骤S166)。
图10描述从客户照片产生CD或DVD制品18c的技术，其中使用了与吸引人的场所有关的内容数据。前边的几个步骤S170-S174与针对图9描述的步骤S160-164类似，只是在步骤S172中将来自于特定区域的图像分选到文件夹内(而不是在所说的页内)，因为产生程序的CD(或DVD)产生的是数据文件夹，而不是所说的页。由于CD(或DVD)程序可以访问各种提供的表示(presentationofferings)，所以在步骤S175将所说的图像和内容与程序的菜单系统组合起来，以表示出客户可利用的所说的表示的选项。然后，在步骤S176，从当前获取的个人照片和从内容数据库14提取的图像内容产生一个CD或DVD。还要注意的是，CD或DVD可以产生一系列逻辑表示选项，然后通过在适当的菜单项目上进行点击对它们进行选择，从这个意义上看，CD或DVD是可以互动的。
在CD或DVD应用的一个自动化的产生系统中，客户可能不希望包括客户自已拍摄的某些照片，即使这些图像就质量或某些其它指标措施而论还是可以接受的。如图15所示的方法就允许客户选择他们不希望包括在来自于互动的CD或DVD的显示当中的图像。更加具体地说，在图15的步骤190，客户接收一个专用于他或她的计算机的互动的CD或DVD。在步骤192，客户选择播放时不希望包括在CD或DVD中的个人图像。在步骤194，将不希望的图像标记为不可播放，并且将这个信息存储在一个特殊的文件内(例如包含指向这些图像的指针的文件)，还要将其存储在客户计算机的硬盘驱动器中。当在步骤196将互动CD或DVD插入计算机中时，显示程序要检查这个文件中的不应包括的图像以及应该规划在内(blocked out)的图像。
图11A描述用于产生增强的拍摄照片的技术，拍摄照片的背面包括粘结板，粘结板上印有内容信息。开头的步骤S177与如图9所示的步骤S160-164相同。然而，并不是安排用对应的吸引人的场所的图像表示和打印的内容，而是在处理步骤S178将内容印在粘结板上，并且在步骤S179由照片洗印社将所说的粘结板自动固定到照片的背面。如图11B所示，粘结板98可以从照片99的背面自一个角落98A手工剥离。这在客户自已设计的应用中(如剪贴板)在客户正使用所说的照片情况下和描述用的粘结板在特定的应用中只要需要就可由客户贴紧的情况下是很有用的。
图12A和12B描述可与数字照像机24a或胶片照像机24b一起用作记录设备(代替将这种功能加入照像机24内，如图1中建议的)以收集与吸引人的场所有关的元数据的附件100。在图12A中，图中所示的附件100是一个细长的设备，用螺丝102与照像机24上的三角架连接器104连接(图12C是附件100的底视图，其中揭示了三角架连接器螺丝102)。使用指轮106将三角架连接器螺丝102固定到照像机上。附件100包括一个RF收发器108，用于与吸引人的场所20处的站22通信(收发器108还可以用作一个无线连接器，以便与计算机/信息台(kiosk)通信并向处理子系统12下载位置档案)。
收发器108收集来自于吸引人的场所20的位置数据并将其存储在附件100的存储器中(图中没有表示出这个存储器，但这个存储器与如图2所示的照像机存储器类似)。照像机24获取的图像数据或者存储在胶片卷110中，或者存储在存储卡112中(取决于照像机是胶片照像机还是数字照像机)。不论在哪种情况下，都必须保持图像和由附件100收集的位置数据之间的关联性。在本实施例中，这种关联性由固定到胶片卷110和存储卡112上的短程射频发送器114提供。短程射频发送器114包含并发送胶片卷或存储卡的ID号。附件包括一个接收器116，用于接收来自发送器114的短程射频。
另一个要求是，附件要知道记录位置数据的时间以及这个位置数据与哪一帧相关联。对于胶片照像机24b，在附件100上提供一个微型电子机械系统(MEMS)的移动检测设备118，用于检测照像机内胶片前进机构的移动，因而可以指示准备与特定帧的前进同步地接收位置数据。对于数字照像机24a，附件100包括一个用户接口，用户接口包括LCD信息显示器120、菜单按钮122、以及按钮124，用于通过信息循环以及按另外的方式校正或规定信息。利用这些特征来同步数字获取图像的帧顺序与从吸引人的场所20提供的位置数据。
最后，必须通过一个输出接口向处理子系统12提供附件100产生的数据，其中包括位置数据、胶片卷或存储卡ID、每个图像与位置数据的同步数据。例如，这样的信息可通过射频收发器或通过计算机连接器如USB连接器下载。此外，如果处理子系统12包括一个对接(docking)单元，数据可通过对接连接器128下载，如在图12C中照像机附件的底视图中所示的。
图13表示使用附件100的一种技术，所说的附件具体来说用于胶片照像机。一开始，在步骤S180，例如在本地登记站82购买胶片，在胶片盒上已经固定了一个短程射频发送器114。然后，在步骤S181。将胶片插入照像机，并在照像机上固定一个收集装置100。可以期望，利用LCD显示器120来同步在照像机上的胶片计数器/计时器与附件100的计数器/计时器。然后，客户带着照像机和附件去到一个吸引人的场所(步骤S182)并拍摄一些照片(步骤S183)。在拍摄照片时，由收发器108从无线通信站22接收RF信号，这与用户的任何互动无关。同时，MEMS设备118检测胶片的前进，并在附件100的存储器上记录位置数据，其中包括帧号或图像号的基准。当记录了所有的图像的时候，照像机返回到本地登记站82或到处理子系统12，并且下载位置数据(步骤S185)，下载或者通过收发器108、计算机连接器120进行，或者通过对接(dock)连接器128进行。产生期望的制品并将其交给客户(步骤S186)。对于数字照像机，遵循使用附件100的类似过程。
对于如图14所示的一次性照像机，可以将如图12A所示的附件100构成为可以装入柔性外套130的底部，柔性外套130的一侧有一个开口132，用于接纳一次性照像机134。外套130固定附件100使之与照像机134紧密相连，外套130还包括孔135、138、140、和142，分别用于照像机130的取景器、闪光镜头/快门、和快门按钮。(如果外套的柔性固定，则可以省去用于快门按钮的孔142，只要按压快门按钮的位置对于客户来说是清楚的就行，例如，外套是透明的，或者有按钮位置的标记。)短程射频发送器114固定到一次性照像机134上。操作中，将照像机134插入外套130中，关上门144，按照结合图13描述的步骤进行操作。
上述的数据收集技术能够适合于使用相同装置的视频照像机，只要同步收集装置与胶片上曝光号对面上的导带的时间即可。
总之，按照本发明的各个实施例提供的增强的摄影制品可以不加限制地包括以下所述的全部或一部分●附加的相关图像(如在较好的天气拍摄的画面、相关场所的历史照片、所说的场所的艺术再现、所说场所的专业摄影制品)。
●附加的信息(有关场所的描述文本、所说场所的地图、与所说场所有关的标识和图形、拍摄条件)。
●全景和360度拍摄(例如，将客户图像置入从前的全景中)。
●虚拟的真实制品，例如，使用这样的平台作为苹果计算机的QuickTime VRTM。
●电影(来源于这个场所，由第3方供给，电影的全部为第3方拥有)。
●在所说的场所对于历史事件的重复增强(照片和电影)。
●对于个人照片的增强(自动画面选取、自动变焦、不同区域变模糊/变清晰、特技效果、对于历史上感兴趣的区域加大亮度)。
●“当时的和现在的”画面/动画，从相似的有利位置，表示当前客户获取的图像和历史上从前的图像之间的差别。
●CD或DVD上的特征，允许在重放时删除不希望出现的画面。
利用与获取的图像有关的位置信息和其它的(库存的)照片，有可能从客户照片自动地产生360°的全景，并且用存储的图像填充客户获取的(部分的)全景照片的遗失部分。进一步还可能自动识别照片内的对象，并可识别照片的关键部分，或者在如Picture CD的数字表示中附加其它的内容。这种对象的识别还允许进行如以下所述的通用的图像增强清晰度、特殊对象的反差、颜色的增强、和从同一个照片产生多个视图的能力(例如，焦点不同的区域)。还可能允许自动比较今天拍摄的照片与先前的时间帧的照片，其中包括古代的照片和艺术的再现照片。
虽然所示的处理子系统12在照像机外部并与照像机系统工程10分开，但在本发明的某些实施例中，处理过程与照像机24共同完成，或者整个处理就在照像机24当中进行。例如，分析和识别画面场景的活动不是由处理子系统16完成，而是由照像机24中的处理器完成，例如由数字照像机24a中的微处理器42完成。为此目的，照像机需要访问数据库14。为此，要利用任何常规的装置，例如网络连接(如因特网)或连接到处理子系统12的有线连接，将照像机上行链接到数据库14。另一方面，数据库可以保留在或可以下载到照像机24里(如在存储器48内)，或者将数据库存储在可拆卸的存储器内(如图1所示的可拆卸的存储器21)，这个可拆卸的存储器可以连到照像机24上。进而，可以在照像机24的内部通过微处理器42产生增强的摄影制品，然后再将其交换到一个外部接收器，例如通过无线收发器30或类似类型的连接进行这种交换。在期望制品用于因特网分配的情况下，这尤其是实用的。此外，可以将制品合成器15的功能包括在微处理器42中，并且使制品的代码可由照像机24通过与外部打印机、CD或DVD写入器等的适当连接来提供。由于在这些实施例中，画面场景的识别是在照像机24中进行的，并且有关画面场景的内容在照像机内部是可以访问的并且是由照像机访问的，因此，在照像机内的微处理器42能够识别来自于数据库的地点特定制品并且向摄影人员提供制品的选择，例如在LCD50上显示的适当的选择菜单。
权利要求
1.一种摄影系统，用于从一个或多个已知的画面场景的画面产生增强的制品，所说的一个或多个已知的画面场景的画面位于预定位置并且代表摄影人员感兴趣的内容，所说的系统包括包含关于画面场景的内容的数据库，所说的内容包括关于画面场景的图像内容；用于获取画面场景的图像的照像机；用于建立获取的图像与画面场景的位置的关系并因此可以识别图像的位置的处理器，所说处理器使用图像的位置访问所选择的数据库中关于画面场景的内容；制品产生器，用于通过组合关于画面场景的图像内容和获取的画面场景的图像以产生新的图像制品从而产生增强的图像制品。
2.根据权利要求1所述的摄影系统，其中照像机记录用于识别画面场景的位置数据，处理器建立与获取的图像一起记录的位置数据和画面场景的关系以识别图像位置。
3.根据权利要求1所述的摄影系统，其中数据库包含画面场景的参照图像，处理器建立获取的图像和参照图像的关系以识别图像的位置。
4.根据权利要求1所述的摄影系统，其中制品合成器通过组合代表画面场景的历史图像与画面场景的获取图像以产生新的图像制品，从获取的图像产生增强的图像制品。
5.一种摄影系统，用于从一个或多个已知的画面场景的画面产生增强的制品，所说的一个或多个已知的画面场景的画面位于预定位置并且代表摄影人员感兴趣的内容，所说的系统包括包含关于画面场景的内容的数据库；用于获取画面场景的图像的照像机；用于建立获取的图像与画面场景的位置的关系并因此可以识别图像的位置的处理器，所说处理器使用图像位置访问所选择的数据库中关于画面场景的内容；制品产生器，用于通过利用所选择的关于画面场景的内容自动调节图像从图像产生增强的图像制品，借此修改画面内容或图像的表示。
6.根据权利要求5所述的摄影系统，其中通过自动重新确定图像的大小来修改画面内容或图像的表示。
7.根据权利要求5所述的摄影系统，其中通过自动选取剪裁图像来修改画面内容或图像的表示。
8.根据权利要求5所述的摄影系统，其中通过自动放大图像来修改画面内容或图像的表示。
9.根据权利要求5所述的摄影系统，其中通过自动增强图像来修改画面内容或图像的表示。
10.一种摄影系统，用于从一个或多个已知的画面场景的画面产生增强的制品，所说的一个或多个已知的画面场景的画面位于预定位置并且代表摄影人员感兴趣的内容，所说的系统包括包含关于画面场景的内容的数据库，所说的内容包括关于画面场景的画面内容的参照图像；用于获取画面场景的图像的照像机；用于包括建立获取的图像与一个或多个参照图像的画面内容的关系的图像分析算法并因此可以识别获取的图像的位置的处理器；所说的处理器使用获取的图像的位置访问所选择的数据库中关于画面场景的内容；制品产生器，用于通过使用所选择的关于画面场景的内容从获取的图像产生增强的图像制品。
11.一种记录设备，用于收集与照像机获取的图像有关的元数据，所说的元数据由位于预定位置并代表摄影人员感兴趣的内容的一个或多个已知的画面场景提供，所说的记录设备包括用于向照像机附加记录设备的装置；用于与画面场景通信并从画面场景接收元数据的通信设备；用于存储元数据的存储器；和用于使元数据的存储和照像机获取的图像同步的装置。
12.根据权利要求11所述的记录设备，所述的记录设备用于胶片照像机，其中同步装置包括用于检测表示胶片前进的移动的装置。
13.根据权利要求11所述的记录设备，所述的记录设备用于数字照像机，其中同步装置包括一个用户接口，用于同步数字图像获取的帧顺序与元数据的接收。
14.根据权利要求11所述的记录设备，其中的元数据包括规定代表画面场景的信息的位置数据。
15.根据权利要求11所述的记录设备，进一步还包括一个输出接口，用于从接收装置向外部处理器下载元数据。
16.根据权利要求11所述的记录设备，其中照像机包括位于记录介质上的短程射频发送器，记录设备进一步包括一个接收器，用于从识别记录介质的发送器接收元数据。
17.根据权利要求11所述的记录设备，记录设备是与具有镜头和取景器的一次性照像机一起使用的记录设备，其中记录设备还包括供一次性照像机插入其中的一个柔性外套，所说的外套包括用于镜头和取景器的开口。
18.一种摄影系统，用于从一个或多个已知的画面场景的画面产生增强的制品，所说的一个或多个已知的画面场景的画面位于预定位置并且代表摄影人员感兴趣的内容，所说的系统包括包含多种存储内容的数据库，所说的内容包括关于画面场景的图像；用于在特定的画面场景位置获取图像的照像机，用于记录关于图象的日期/时间信息；由摄影人员携带的用于记录日期/时间和位置信息的记录设备；处理器，用于确定由照像机记录的日期/时间信息和由记录设备记录的日期/时间信息的相互关系，以便建立位置信息与获取的图像关系以及位置信息与在数据库内存储的关于特定画面场景位置的包括图象在内的内容的子集的关系，所说的处理器处理包括图像在内的存储内容的子集和获取的图像，以识别在获取的图像中示出的画面场景的存储内容；和制品产生器，用于通过使已识别的画面场景的存储内容和获取的图像相关联以产生新的图像制品从而产生增强的图像制品。
全文摘要
一种摄影系统，用于从一个或多个已知的画面场景的画面产生增强的制品，所说的一个或多个已知的画面场景的画面位于预定位置并且代表摄影人员感兴趣的内容，所说的系统包括(a)包含关于画面场景的内容的数据库；(b)用于获得画面场景的图像的照像机；(c)用于建立获取的图像与画面场景的位置的关系并因此可以识别图像的位置的处理器，处理器使用图像位置访问数据库中关于画面场景的所选的内容；和(d)制品产生器，用于产生增强的图像制品。在一个实施例中，数据库包含关于画面场景的存储图像，制品产生器组合关于画面场景的内容的存储图像和画面场景的获取的图像以产生新的图像制品。
文档编号H04N5/907GK1532621SQ20041003999
公开日2004年9月29日 申请日期2004年3月22日 优先权日2003年3月20日
发明者J·R·斯奎拉, J·R·弗雷伦德, J·A·马尼科, J R 斯奎拉, 弗雷伦德, 马尼科 申请人:伊斯曼柯达公司