增强移动电话中涉及多媒体数据的服务的方法

专利名称：增强移动电话中涉及多媒体数据的服务的方法
技术领域：
本发明涉及改善使用至少一个类型的多媒体数据的质量的方法，这样的服务由服务提供者和/或电信运营者通过移动电话终端提出。
本发明还涉及实现这样方法的移动电话终端。
这里所谓的“多媒体数据”指的是照片、图画、文本、视频、音频、视听、或程序。
本发明来源于当必须要求这样的服务时，移动电话终端的使用缺乏设计的观察。例如，当使用配有拍照设备的移动电话终端和用户想通过MMS发送拍摄的照片时，必须一步接一步地执行几个操作或功能。
因此，为了改善与至少一个类型的多媒体数据有关的至少一种服务的用户设计，这样的服务由服务提供者和/或电信运营者通过移动电话终端提出，根据本发明的方法包含在获取多媒体数据之前和/或期间和/或之后，自动实现服务所需的几种终端功能，这样终端功能的自动实现包括如下步骤-从终端内的可用功能当中选择服务所需的功能，-自动和/或由用户人工地准备适用于服务的至少一个情景，这样的情景包括所选功能的逻辑链序列，该方法进一步包括用户从先前准备的情景当中选择确定的情景的步骤。
所谓的“功能”指的是包括在包含如下的组中的元素-选择服务，-引导用户，尤其帮助获取一种类型的多媒体数据，-获取多媒体数据，-检验多媒体数据的质量，-搜索多媒体数据，-修描或修改多媒体数据，-处理多媒体数据，-改善多媒体数据的质量，尤其，图像的质量，
-将多媒体数据，即，文本和图像组合成明信片，-压缩多媒体数据，尤其按照网络规范，-选择模板，-给出多媒体数据页面布局，-键入地址或在接收者库中选择-跨网络发送和/或传送和/或引导多媒体数据，-接收多媒体数据。
所谓的“模板”指的是基于已提供、或正在提供、或用户接收或保存在他/她的终端内所谓的“偏好”文件中的服务的过去用法的数据。例如，对于利用移动电话终端发送明信片或发送电子邮件的服务，模板构成已经创建、发送和接收或保存的电子邮件或明信片的全部或一部分。
在一个实施例中，通过终端界面引导用户，终端界面示出用户可通过这样的终端访问的服务。
根据一个实施例，例如在以前使用服务期间，预记录至少一部分情景。
根据一个实施例，根据所选服务自动确定多媒体数据的规范。
当多媒体数据是图像时，根据所选服务自动确定的这样图像的特征是拍照参数。例如，预定用于移动电话的图像将比预定用于打印设备或要显示在计算机屏幕上的图像从更长的曝光时间中受益，因为小尺寸屏幕上的图像，例如，移动电话终端的图像要比大尺度的图像对运动模糊不敏感得多。
根据多媒体数据也是图像的一个实施例，获取图像，以便提供至少两种服务，和这个图像的特征是根据两种服务的至少一种和拍照期间的光量自动确定的拍照参数，使得，尤其在低照明时，可以将图像用于两种服务的至少一种。
在一个实施例中，获取至少两个类型的多媒体数据，以便提供至少两种服务，每种多媒体数据的规范与相应服务相适应。
例如，可以生成其特征随图像使用或图像最终使用而不同的同一对象的两个图像。
这样的设施可以以一般方式用在可以选择图像的使用或图像的最终使用的图像获取设备内，以及根据图像的使用或最终使用自动选择拍照参数。
例如，这样的图像获取设备包含同时利用预定格式，例如，10×15cm拍摄预定要打印的一个对象的相片，和利用全分辨率拍摄同一对象的图像的可能性。
在这样的状况下，如果图像获取设备允许，例如，6兆像素的分辨率，全分辨率的图像当然用6兆像素拍摄，而10×15cm格式的预定要打印的图像可以利用2兆像素的分辨率拍摄。降低分辨率有利于改善其它特征。例如，可以缩短曝光时间，从而降低任何可能运动的影响。例如，由于处理时间一般与像素数量成正比，降低分辨率使得能够释放更大量的IT性能，用于降低低照明下的噪声和延长低照明下的使用时间。一般说来，使拍照参数与最终使用相适应使得能够选择可以使缺陷看不见或几乎看不见的参数以及选择能够改善图像的参数作为补偿。
这样的设施可以独立于供移动电话终端使用的、与改善使用服务提供者和/或电信运营者提出的服务的质量有关的、上面定义的那些而使用。
根据一个实施例，为了实现服务，该方法包括搜索预记录在终端内的一个类型的多媒体数据的步骤。
根据一个实施例，该方法包括，例如，通过使用模板和/或表现参数，为多媒体数据选择表现方式，或页面布局的步骤。
在一个实施例中，该方法包括将自动帮助功能提供给终端用户，以便进行多媒体数据的获取的步骤，即，通过借助于图像取景和/或检验这样图像的质量，通过提供用于获取和/或调整的教导或指令，或通过显示最终获取结果。
根据一个实施例，该方法包括修改多媒体数据的步骤。
根据一个实施例，该方法包括本地地，即在终端内，或远程地，即，在终端外，也就是说，在服务器内处理多媒体数据的步骤。
根据一个实施例，该方法包括，例如利用与地址簿的链接和/或自动输入，选择接收者的步骤。
根据一个实施例，该方法包括依赖于与多媒体数据的传输输出有关的网络的至少一种规范，压缩多媒体数据的步骤。
根据一个实施例，该方法包括将与文本有关的一个类型多媒体数据插入与图像有关的一个类型的多媒体数据内，称为“明信片”，的步骤。
根据一个实施例，该方法包括利用如下通信装置的至少一种发送与图像有关的一个类型的多媒体数据的步骤传真机、电话、电子邮件。
根据一个实施例，该方法包括用于管理多媒体数据的用户个人相册的步骤，这样的相册存储在终端可通过电信网络访问的服务器中。
根据一个实施例，该方法包括向打印服务，例如，打印机发送多媒体数据的步骤。
本发明还涉及移动电话终端，其中，为了改善与至少一个类型的多媒体数据有关，即，与照片、视频、音频和/或文本有关的至少一种服务的使用质量，这样的服务由服务提供者和/或电信运营者提出，该移动电话终端包括在获取多媒体数据之前、期间和/或之后，自动实现服务所需的几种终端功能的装置，这样的装置包括-从在终端内可用的功能当中选择服务所需的功能的装置，-自动和/或人工地准备适用于服务的至少一个情景的装置，这样的情景由所选功能的所述逻辑链序列组成，和使用户能够从先前准备的情景当中选择确定的情景的装置。
在一个实施例中，引导界面表现用户可访问的服务。
根据一个实施例，该终端包括记录一部分情景的装置。
在一个实施例中，该终端包括依赖于所选的服务，自动确定多媒体数据的规范的装置。在这样的情况下，当多媒体数据是图像时，用于自动确定图像特征的装置包括依赖于服务自动确定拍照参数的装置，使得，例如，预定用于移动电话的图像可以从比预定用于打印服务或要显示在计算机屏幕上的图像更长的曝光时间中受益。
根据一个实施例，该终端包括用于获取图像以便提供至少两种服务的装置，和使得这个图像的特征是根据两种服务的至少一种和拍照期间的光量自动确定的拍照参数的装置，使得，尤其在低照明时，可以将图像用于两种服务的至少一种。
根据一个实施例，该终端包括获取至少两个类型的多媒体数据，以便提供至少两种服务，和使每种多媒体数据的规范与相应服务相适应的装置。
根据一个实施例，该终端包括搜索预记录在终端内的一个类型的多媒体数据以便实现服务的装置。
根据一个实施例，该终端包括，例如，通过使用模板和/或表现参数，为多媒体数据选择表现方式，或页面布局的装置。
根据一个实施例，该终端包括将自动帮助功能提供给终端用户，以便进行多媒体数据的获取的装置，即，通过借助于图像取景和/或检验图像质量，通过为获取和/或调整提供教导或指令，或通过显示最终获取结果。
根据一个实施例，该终端包括用于修改多媒体数据的装置。
根据一个实施例，该终端包括本地地，即在终端内，或远程地，即，在终端外，处理多媒体数据的装置。
根据一个实施例，该终端包括，例如，利用与地址簿的链接和/或自动输入选择接收者的装置。
根据一个实施例，该终端包括根据与多媒体数据的传输输出有关的至少一种网络规范压缩多媒体数据的装置。
根据一个实施例，该终端包括将与文本有关的一个类型的多媒体数据插入与图像有关的一个类型的多媒体数据内，称为“明信片”，的装置。
根据一个实施例，该终端包括利用如下通信装置的至少一种发送与图像有关的一个类型的多媒体数据的装置传真机、电话、电子邮件。
根据一个实施例，该终端包括管理多媒体数据的用户个人相册的装置，这样的相册存储在这样的终端可通过电信网络访问的服务器中。
根据一个实施例，该终端包括向打印服务，例如打印机，发送多媒体数据的装置。
通过参照附图对本发明的实施例进行如下描述，本发明的这些和其它特征和优点将更加清楚，在附图中

图1和1a例示了根据本发明的方法的步骤；图1b、2a、2b、2c、3、4、5、6、7、和8例示了应用于明信片发送的根据本发明的方法，图9、10、9a和10a中的曲线是使得能够按照本发明选择压缩比和抽样率的曲线图；和图11是例示遵照本发明的方法的其它步骤的草图。
本文所述的例子主要涉及常常称为“照相机电话(photophone)”或“摄像机电话(cameraphone)”的配有拍照设备的移动电话终端。
使用服务使用这样的终端是令人乏味的，尤其当它涉及如下时-将电话配置成发送图像(通过MMS、WAP等)，
-为提供者将将服务参数化；例如，用于为在线打印服务进行记录，有必要提供某人的个人详细资料，选择摄取点等，-键入伴随着照片的文本或地址输入文本是相当费时的，邮政地址很少包含在地址簿中等，-使用服务常常有必要一个接一个地使用几种功能，例如，拍摄相片，修描和发送；应用的设计更多是面向功能(摄像机，MMS)，而不是适用于图像服务的；因此，一些操作花费一些时间，-使用终端来取代摄像机。
图像质量由于尺度缩小，耗电和移动电话成本，图像质量受到限制。
质量随终端类型而变并且需要专门图像处理。图像质量依赖于如何观看图像。尤其，在微小屏幕上，许多缺陷看不出，而在大尺寸屏幕上或在打印出来之后，这样的缺陷就变得可见了。
为了存储在授权的通带内，图像被高度压缩，这在显示或打印图像所需的解压缩期间会产生假像。
因此，存在妨碍利用移动电话终端使用照片服务的发展的特别棘手的缺点，因为这样的服务比与专用摄像机相联系的那些服务低效得多。
架构改善图像的计算时间通常与图像大小，即，与像素数量成正比。
改善图像质量要消耗相当多的计算时间，因此，消耗相当多的电力。集成在终端中的处理器的容量的增加没有来自检测器的像素的数量的增加那么快。
IT性能受终端类型限制和随终端类型而变。
实现IT性能的途径随终端类型而变某些终端接受用C++写成的代码，一些只接受Java代码(对于图像处理比C++慢得多)，其它不对编码开放。
本地存储容量是有限的。
传输管道的大小是有限的。在法国，它对应于每个消息50ko(kilooctet，千字节)，逐渐达到100ko。
对于各种服务，通过服务器系统地发送图像。
为了解决这些问题，本发明改善图像质量和/或改善使用设计。
根据本发明的方法在拍摄相片之前和/或在拍照期间和/或在拍摄相片之后介入。
因此，如图1所示，从图像100开始，或者，更一般地说，从一个类型的多媒体数据开始，确定这样必须在移动电话110内处理的数据的第一部分102、和必须在远程服务器112中处理的图像100的第二部分104。
作为一种变体，和如下文结合图1b到8所述的那样，分解所有多媒体数据(或它的一部分)的处理，以便在终端110内执行处理的第一部分，在服务器112内执行处理的第二部分。
在如图1a所示的例子中，无附加压缩或附加低压缩地将多媒体数据120存储在远程服务器112中。对多媒体数据进行压缩是为了将它发送到移动电话110。多媒体数据还经受依赖于提供给这样的电话110的服务的处理或由这样的电话110请求的服务。此外，将与这样的数据有关的标记122分配给数据120。这样的标记与服务器的数据一起发送到终端110，以便以后当该移动终端或另一个移动终端请求时可以使用同一非压缩原始数据120。换句话说，当移动终端接收图像并想要将它发送到另一个移动电话终端时，为了防止由于压缩和随后的解压缩而变差，多媒体数据可以通过标记在服务器112中检索它的原始质量。
1.服务1.1.考虑使用图像的各种服务是-从终端发送传真，-向另一个终端发送，-向电子邮件发送，-向在线相册发送，-向个人网站(英文的“moblog”)发送，-发送明信片，-发送打印请求，-发送护照照片请求，-请求反馈到发送终端。
1.2.对于每个服务
拍摄相片和/或搜索相册和/或进行修描以改善拍摄的相片(教学、取景帮助、检验等)，-改善用户设计，-如下所述，通过进行本地处理和/或向服务器传送的处理，改善图像质量，在必要时，使用文本照片功能(有时称为“FotoText+”)。
1.3.为了从终端发送传真(fax)，执行如下过程拍摄包含文本和/或图画的文档的相片，-本地地(在终端上)或-在向传真机发送的服务器上远程地进行背景清除，-可以键入文本，-可以进行传真布局，-可以通过MMS、WAP、http等发送，或如果是本地处理，可以直接从终端向传真机发送。
为了从终端发送传真，也可以执行如下过程-拍摄包含文本和/或图画的文档的相片，-在终端内进行背景清除处理，-可能的文本输入，-传真布局，-通过MMS、WAP、http等发送到服务器，或直接从终端发送到传真机。
为了从终端发送传真，也可以使用另一种过程-拍摄包含文本和/或图画的文档的相片，-可能的文本输入，-通过MMS、WAP、http等发送到服务器，-在终端内进行背景清除处理，-传真布局，
-向传真机发送。
1.4.在本实施例中，护照照片服务包括如下步骤-利用取景帮助功能拍摄相片。
这样的取景帮助以适用于国家公文标准。
取景帮助功能使得能够将图像分段，以更容易地实现如下的检验点。
-检验是否遵从规则可以检验的规则是，例如检验均匀背景，检验背景颜色，检验足够的背景亮度，检验背景阴影，检验脸部亮度(不应该太暗)，确保没有帽子或面纱，确保没有附加物，检验脸部比例，确保照片是整脸拍摄的，而不是轮廓。
检验可以是自动的和/或人工的。
如果未遵守规则，则优选地自动纠正，和/或由操作人员进行人工纠正，例如，进行背景清除，否则，将消息发回给用户，优选地迅速地发送，以便他/她可以重新拍摄照片。
这样的消息指示，例如，如何重新拍摄没有缺陷的照片。
-可能的文本输入以写在照片背面上的，例如姓名，对于学校用照片，姓名和班级。
-输入接收者邮政地址或照片摄取点。
-可以选择服务器提供者。
-可以修描图像(背景清除、对比度等)。修描可以通过自动将照片发送到操作人员人工完成，和/或自动完成。
-发送。
该服务可以适用于国家公文规则。
1.5.利用摄像机电话(或照相机电话)的其它可能服务-人物识别。
-脸部识别。
-条形码读取。
-管理权限和数字签名(“水印”)。
-个人移动网站(“blog”)。
-文本模板和照片，例如，用于母亲节或情人节，或甚至用于诗歌摘录。
-医疗呼救(SOS)，用于紧急状况，例如，出海或爬山。
-在出车祸情况下的约定陈述。这种应用提问题并指示拍摄的照片以用于草拟报告。
-远程诊断，例如，用于病房。
-实际服务测量例如，测量一件家具或其它物件，其上放置了例如信用卡的具有预定尺度的物品。
颜色计算两种物品之间的颜色组合。例如，匹配一条裤子和一双鞋之间，或领带与衬衣之间的颜色。
-杂项服务形态占星术(morpho astrologie)利用一个的生日和面相计算的每天个性化天宫图。
“形态匹配”评估两个人之间的友谊水平，这样的水平基于他们脸部的照片。
光环将彩色“光环”加在照片上的人(或物品)上。
-保密和识别或验证签名可以将书面签名(例如，加入由服务器生成的数字中)用于验证。
也可以将照片用于验证。
-专业服务评估随时准备评估的零售商常常需要与专家商量。摄像机电话提供了当打算评估时与装配工/供应商商量的装置。例如，滚筒防护罩的电机装配工可以与滚筒防护罩的装配工接触，以确定拆除的难度。
对于出现在后面阶段的选择，为避免评价延迟或者错误，也可以接收来自客户的批准，例如，为了授权比原计划更严重的的伐木，用摄像机电话示出妨碍挖出深沟的树根。
2.改善图像和页面布局的质量在拍摄了相片之后，几种技术可以用于改善图像质量和用户设计-进行处理以改善图像。
-依赖于终端的IT性能、它的存储容量、检测器大小、服务类型和将功能加入终端中的难易程度，可以在终端上或在服务器上进行处理。在这样的情况下，应该定义数据传输格式。
-使处理与检测设备的缺陷相适应。在这样的情况下，应该识别图像的来源，即，通过分析设备的签名。
-使处理与复原装置的缺陷相适应。因此，有必要识别服务类型和，有可能，使用的复原装置的类型，然后发送这样的信息。
在服务器上进行处理的情况下，该处理由如下组成-从发送的消息中提取图像，-改善图像质量，-用如此改善的图像取代发送的消息图像。
为了不使图像纠正两次，例如，可以通过加上或修改Exif或类似元数据来标记它们。
这里应该注意到，所谓的元数据指的是与多媒体数据有关并对应于与包含多媒体数据的文件的格式有关的信息、和/或对应于与压缩有关的信息、和/或对应于数据的来源、和/或对应于获取规范的数据。例如，在照片的情况下，获取参数(例如，焦距、光圈和曝光时间)、和/或利用多媒体数据，例如，像素的数量，获得的计算结果。
处理图像可以以各种各样的方式进行a)不在本地(即，在终端中)进行计算并且在远程计算(在服务器中)之后将图像发回给用户(即，终端)。
根据终端屏幕分辨率进行本地计算，并且对于通过服务发送的图像进行远程计算。
进行终端屏幕分辨率的本地计算，并对于通过服务发送的图像，除了在发送之前清除压缩假像之外，还在服务器内进行解压缩，针对该服务的发送的图像处理可以本地地和/或远程地完成。
在任何情况下，如下所述，远程图像发送必须通过使大小和压缩与服务相适应，以及与授权的消息大小相适应来完成。
类似地，可以本地地或远程地进行页面布局a)不在本地进行计算，这样的对通过服务发送的图像的计算远程地完成，然后返回给用户。
b)根据终端屏幕分辨率进行本地计算，并对于通过服务发送的图像进行远程计算。
c)进行终端屏幕分辨率的本地计算，并且对于通过服务发送的图像，除了在发送之前的清除压缩假像之外，还在服务器内进行解压缩。
当然，上述的方法可以应用于其它类型的多媒体数据，即，与视频、和/或音频、和/或文本有关的多媒体数据。
因此，可以获得改善使用服务的质量的方法和系统，该服务实现与至少一个类型的多媒体数据有关，即，与照片、和/或视频、和/或音频、和/或文本有关的至少一种处理，这样的服务由服务提供者和/或电信运营者通过网络在用户移动电话内提出。
让我们回忆一下，这种处理适合克服影响使用质量的至少一种因素引起的局限性，例如-多媒体数据的大小，和/或-移动电话的IT资源，和/或-多媒体数据的获取设备和/或复原设备的质量；
-所述网络的传输规范，-服务类型。
因此，该方法包括如下步骤-根据所述因素，预先或实时地确定必须在移动电话内和/或在可与移动电话连接的至少一个远程服务器内处理和/或执行的多媒体数据的一部分和/或处理的一部分，-无论什么情况，都在移动电话内或在远程服务器内执行如此确定的处理的每个部分和/或处理如此确定的多媒体数据的每个部分；使得为用户提高服务质量，即-服务可以与任何类型的多媒体数据，例如，大小增大了的照片一起使用，-为每种终端类型改善服务的使用，-与网络的通带结合在一起改善服务的结果，-简化对服务的访问，-缩短获取服务所需的时间，-改善服务的结果(更好的照片、视频、音频感觉)，-可以访问新的服务，-提高用户满意度。
对于服务提供者和/或电信运营者，可以提供新的服务。
这种方法可以进一步包括如下步骤-借助于格式定义与远程处理有关的指令，-对于移动电话，将如此格式化的指令发送到远程服务器，-对于服务器，执行这些指令。
这样的指令可以包括-多媒体数据的一部分和/或使服务器能够获取这样的多媒体数据的一部分的标识符，-必须在服务器上执行的处理的一部分，下文称之为“远程处理”，即-改善多媒体数据的质量处理，和/或多媒体数据的修描处理，和域多媒体数据的编辑处理，和域-分派服务的处理，和/或-提供服务的处理，和/或-服务受益者的地址，和/或使服务器能够获得受益者地址的代码。
该方法进一步包含对于服务器，将执行指令的结果发送给服务受益者的步骤。
所谓的“服务”具体指的是-任何服务，即，在本专利请求内所述的服务，-更复杂服务的一部分，例如，服务要求的远程计算，所谓的“照片”具体指的是-照片文本和域图形和/或自然图像。
所谓的“处理”，也称为“纠正”，具体指的是-在本专利请求内描述的所有类型的处理，-改善质量的处理，-适用于电话的改善质量的处理，-插入相册中，-页面布局，-发送。
所谓的“IT资源”具体指的是-IT性能，-存储容量，-编程语言。
所谓的“传输规范”具体指的是-通带，-负载，-消息的最大大小。
所谓的“标识符”具体指的是-使服务器能够找到用户选择的图像的图像代码(通过SMS或其它装置发送给服务器)。
所谓的“代码”具体指的是-用于找出邮政地址的电话号码。
所谓的“受益者”具体指的是-用户，-第三方。
所谓的“指令”具体指的是在本专利请求中描述的数据。
2.1.图像处理的类型在终端内或/或在服务器上对图像进行的处理可以是如下处理-消除或减少拍照设备和/或来自拍摄的相片的所有或一部分缺陷曝光、照明、几何失真、色差、光晕、模糊、象散、白平衡、饱和、去马赛克(demosaicing)、噪声、运动模糊、聚焦模糊、压缩假像、非模糊假像、其它处理的假像、混淆假像。
消除来自复原装置的所有或一部分缺陷，所述复原装置为终端屏幕、计算机屏幕、打印装置。
-改变大小(像素的数量)。
-压缩。
-消除或不消除假像地解压缩。
-在文本和/或图画的情况下，背景清除。
-修描转换成黑白，旋转，从图像区提取，应用效果，加上框架。
-镶嵌在背景或另一幅照片上。
-加上文本。
-分析图像质量，以便向用户提出建议。
2.2.远程处理的指令依赖于终端容量、存储容量、图像大小、用C++而不是用不怎么适用于处理多媒体数据的Java来编程终端的可能性以及所需的服务类型，可以转移一部分处理。对于用户来说，对于要求反馈给这样的用户的操作，保持实时处理。
必须发送能够描述转移的处理的信息(对于每个图像，或一次和对于所有图像)a)要在服务器上执行的改善处理的类型。这涉及到，例如-显现在计算机屏幕上的数据类型的终端检测缺陷的纠正。
-显现在计算机屏幕上的具有自动识别的拍照类型的终端检测缺陷的纠正。
-打印机输出的具有自动识别的拍照类型的终端检测缺陷的纠正。
-文本照片和手画草图的背景清除。
-数据类型的显现在终端屏幕上的具有自动识别的拍照终端检测缺陷的纠正。
-拍照质量分析。
即使不进行这样的处理，也必须发送的这样的指令，有可能是默认地。
b)对图像进行修描(旋转，修整，加上框架等)，这使得在终端内对缩小成屏幕大小的图像进行修描，随后，当处在最终大小上时，进行修描。
c)服务的类型和它们的接收者-MMS数字。
-电子邮件地址。
-明信片服务提供者。
-传真号码。
-相册服务提供者。
-打印服务提供者。
-反馈到发出终端。
d)输出编辑指示-对于明信片或其它东西，页面布局(具体地说，颜色和字体)，-插入照片、文本、或清除了照片的文本，编辑数据必须与物理格式分开，以便能够以几种格式打印。文本和像元的大小和位置在下游确定。
e)内容
-接收者(邮政或其它东西)的地址，-消息，-照片，-文本照片这样的内容可以作为地址和/或元数据来发送。
这些内容可以通过一种格式来描述。这样的格式可以是开放的(标准的和/或可扩充)；它可以是MMS“SMIL”格式的扩充。它必须与所有类型的发送协议(MMS、http、WAP、电子邮件等)兼容，因此，与现有网络兼容。
2.3.图像的转移处理优选地，为了编码图像以便发送它们，使用在所有电话中实现的JPEG标准压缩程序；但是，也可以使用另一种格式。其图像处理步骤如下-可能的预处理；-依赖于服务类型和传输“管道”的大小，可能的图像大小、压缩率、图像格式(这样的格式还包括颜色选择和黑白)的优化如下所述，通过根据服务和管道大小考虑最佳压缩曲线/图像大小，如果图像已经压缩，优选地在频域内进行压缩和大小改变，以便限制计算时间，否则，在改变大小之后进行压缩。
在服务器内通过消除压缩假像解压缩所有东西；然后消除或减少所有或一部分拍照设备缺陷，或者，在文本照片和/或图画(FotoText+)的情况下，清除背景，消除复原装置的所有或一部分缺陷，应用所有其它处理修描、页面布局等，标记图像以防止应用几次处理。
通过MMS、过载MMS、电子邮件、http、WAP或其它手段进行传送。
消息可以发送到第三方和/或用在发出终端上，例如，显现结果或接收建议。
2.4.服务的本地处理优选地，为了编码图像以便发送它们，使用安装在所有终端的JPEG标准压缩程序；但是，也可以使用另一种格式。其图像处理步骤如下a)可能的预处理；b)然后消除或减少所有或一部分拍照设备缺陷，或者，在文本照片和/或图画(FotoText+)的情况下，进行背景清除，消除复原装置的所有或一部分缺陷，应用其它处理例如，修描、页面布局。
c)标记图像以避免应用同一处理几次；依赖于服务类型和管道大小，可能的图像大小、压缩率、和图像格式的优化通过根据服务和管道大小考虑最佳压缩曲线/图像大小，如果图像已经压缩，优选地在频域内进行压缩和大小改变，以便限制计算时间，否则，在改变大小之后进行压缩。
d)对于使用大尺寸图像的服务在服务器内，进行解压缩，消除压缩假像，接着，如有必要，放大到使用大小。
可以直接向最终用户(除了明信片的情况之外)或通过服务提供者进行传送。
2.5.系统远程服务器，也称为“纠正服务器”，可以位于-MMS-C(运营者托管的MMS处理系统)内，-MMS-C的入口处，-MMS-C的出口处，-WAP网关内，-MM9内，-MM7内。
如下的终端和服务器组合是可能的-标准终端和服务器，
-具有图像处理应用程序的终端，没有服务器，-具有图像处理应用程序的终端，具有服务器，-具有应用程序，但不是用于处理的终端，具有服务器，-具有预处理应用程序以便通过缩小图像为用户给出预览图的终端，具有服务器。
可以通过以下方式实现向用户提供反馈的处理-本地地(在终端内)，或-通过http或另一种协议远程地。
2.6.使图像与管道的大小相适应电信运营者限制通过，例如，MMS发送的消息的大小。
图像文件的大小取决于图像的内容。对于给定的像素数量和给定的质量感觉水平，包含较多细节的图像将生成比包含较少细节的图像大得多的文件。
因此，有必要自动地适配质量水平以使得能够在所有情况下都使用服务以及不超过运营者分配的通带。
有几种适配该质量水平的方式，主要点取决于使用以及从而取决于服务类型。
当使用服务时，图像采用如下模式a)拍摄相片和可能的压缩。
b)预处理，以便优化多媒体数据的大小、它的应用的压缩率和它的格式通过缩小发送的文件的大小，适配运营者分配的通带，这样的缩小通过可能的像素数量的减少，和/或压缩率的增加来完成。
c)优选地减少假像的解压缩。
d)改变像素数量，以便适配用于服务的屏幕或打印机(最终像素数量)。
为了减小文件大小，在使用的像素数量和压缩之间存在折衷。
-这样的折衷取决于最终像素数量，从而，取决于所需的服务类型和解压缩处理，尤其，是否减少假像；-超过某个压缩水平，减少像素数量是合理的。
文件大小减小操作可以这样进行-优选地，不在频域内解压缩图像，或
-在图像解压缩之后，或-在图像解压缩和假像减少之后。
2.7.应用例子下面给出处理-分配的例子与3G网络一起使用这样的网络使得能够进行快速终端-服务器交换。因此，可以在服务器内进行处理，并和迅速地将结果显示在电话上。
因此，在终端上可以以任何IT性能工作和可以处理大量像素。
b)与2.5G和顶级电话(英文“smartphone”)一起应用该网络不能进行快速终端-服务器交换。但是，该终端具有高IT性能。
因此，有可能根据屏幕大小，在终端内进行图像处理，以便向用户示出预览图和将结果显示在电话上。
因此，可以在服务器上进行全分辨率处理而无需反馈给用户。
c)与2.5G网络和中级电话(英文“Featurephone”)一起应用该网络不能进行快速终端-服务器交换。
该终端具有有限的IT性能，并且交换很慢。尽管保持了其它优点(设计，对服务的可访问性等)，但预览对用户的可用性更加有限。
因此，通过限制对用户的反馈，在服务器内进行处理。
3.照片-文本解决方案(FotoText+部件)-背景清除本发明为使用称为“FotoText+”的部件创造了条件，FotoText+部件是能够转换，例如，对由清楚背景上的笔画，尤其，手写文本、略图、绘图或草图、打印文本组成的“二进制类型”的任何文档的拍摄照片的文本扫描仪。
这个部件纠正纸面缺陷(背景清除)纸面阴影、方格或线条、折痕、污点、皱纹，当然，还有摄像机和照明缺陷。这可以通过提取超过阈值的信息来完成。
它优化对比度。
例如，通过应用非模糊掩码，对聚焦“特写模糊”进行自动纠正。的确，可以针对80cm锐度到无穷远编程摄像机电话，一般说来，摄像机电话不会自动聚焦。但是，可以在大约15cm的距离上，即，在摄像机电话的模糊范围内拍摄文本的照片。
如果这种缺陷几乎对非常低分辨率(例如，在屏幕上的分辨率160×120，或CIF)不敏感，它就对300,000的像素(VGA)特别敏感。
它还纠正色度缺陷。
它与非常高的压缩兼容。因此，代表大约25ko的文本照片在压缩后最多只代表5ko，以便优化传送。
在解压缩，然后处理之后，将图像还原成打印格式，以便改善背景上的叠加放大到每英寸300点或根据最终文档的格式。
该部件在均匀背景上生成灰色笔画。
可以以各种方式使用它单独在拍照之后，显示在终端屏幕上，因为经过处理的图像比原始图像更可读，发送给另一个接收者(通过MMS或其它手段)在明信片(消息和/或地址)的背面；例示图像使用修描软件，该修描软件使得能够在将清洁图像用作掩码的同时，通过照片与均匀颜色或纹理之间的混合操作使背景色变成透明的，将清洁图像叠加在照片上。对于每个像素，如果清洁图像的灰度具有IN值，照片具有PH值，和均匀颜色或纹理CO值，我们获取CO*(1-IN)/MAXIN+PH*IN/MAXIN，其中，MAXIN是清洁图像中所有像素的最大值。
例如，对于明信片，用户拍摄了两幅照片明信片正面的照片，和写/画在一张纸上的文本/图形的照片。
用户界面使得能够将文本/图形定位在照片的正面上；本地或远程终端屏幕分辨率处理使得能够显示预览，从而方便用户工作。
处理文本/图形的照片，通过消除不均匀照明区进行清除以提高可读性，在其背景上进行清除，并且打印在照片的正面上。
在照片，尤其，护照照片的情况下，背景清除包括，例如，通过检测脸部的轮廓和将均匀颜色填在周围，使除了拍摄的真人之外的照片所有其它部分变均匀。
4.服务的例子下面利用图1b到8所述的是明信片制作服务，也称为“照片卡”。
这些图例示了代表对用户的服务和用户指南的终端界面的各种屏幕。
这些图还代表服务所需的几种终端功能的自动实现，这样终端功能的自动实现包括如下步骤-从可用在终端内的功能当中选择服务所需的功能，-自动和/或由用户人工地准备适用于服务的至少一个情景，这样的情景由所选功能的逻辑链序列组成，该方法进一步包括用户从先前准备的情景当中选择确定的情景的步骤。
例示在图1b中的屏幕10对应于选择了利用代表用户可通过终端访问的服务的终端界面引导的明信片服务之后的欢迎。它涉及当被激活时，提供也称为动作的适用于服务的几种情景之间的选择的欢迎屏幕，正如所表示的那样，这些情景是“新照片卡”、“草稿”、“已发送的卡”、“正在发送的卡”、“模板”。选择是利用终端“操纵杆”选择这些动作之一作出的。每个情景由拍照功能、在相册内搜索、键入文本、搜索地址、页面布局的逻辑链序列组成。用于偏好和模板的者使得能够记录至少一部分情景。
也可以激活“选项”菜单，然后，显示出使用户可以选择动作、偏好、帮助、或甚至退出服务的屏幕12。
当选择偏好时，在本例中如图2a、2b和2c所示，用户可以利用左右操纵杆在三种偏好，即，“一般”(图2a)、“照片”(图2b)和“服务器”(图2c)之间作出选择。
在与“一般”属性页相对应的图2a中的屏幕14上，询问用户他/她是否想自动装载他/她的最后草稿。
在与偏好部分的“照片”属性页相对应的屏幕16(图2b)上，询问用户他/她是否想自动显示最后使用的图像和他/她是否想自动使用最后的页面布局。
在与偏好菜单的“服务器”属性页相对应的图2c的屏幕18上，询问用户他/她想要连接的服务器，例如，MMS或http服务器。
在图3上示出了如用户选择具有图1b的屏幕12的“选择”选项菜单的动作时所显示的屏幕20。因此，示出了显示草稿、模板、待发送的卡、和正在发送的卡之间的可用选项的屏幕20。在屏幕20上，示出了包含照片22和文本24的最新草稿。屏幕20的菜单选项使得能够利用“打开”命令访问屏幕26。
当选择这样的“打开”命令时，或当在图1b上选择创建和发送新明信片时，如图4所示，可以选择“正面”的图像(页面布局)、“背面”的文本(页面布局)和地址。
例示在图4中的屏幕30对应于图像选择，如图所示，这表示它涉及创建在正面上具有图像的新明信片的服务，从而有可能拍摄新照片，选择最后拍摄的照片，从存储在终端存储器中的相册中选择照片，选择最近用于同一服务的照片，或最后选择来自远程服务器的照片。在这样的情况下，可以管理用户个人相册，这样的相册存储在用户移动电话终端可通过电信网络访问的服务器中。
为了拍摄新照片，优选地向用户提供自动帮助功能，以便借助于取景获取图像。这样的取景帮助包括将轮廓叠加在图像，指示用户如何在可以在水平屏幕(宽比高长的图像)上或在垂直屏幕上选择的不同情况下取景，从而能够获得正确取景的图像、和比如果进行以前的重新取景获得的分辨率更好的分辨率。这样的取景帮助优选地尊重认为大约三三制的摄影“黄金定则”。用户可以通过激活操纵杆，在与，例如，如下状况相对应的使用情况之间作出选择特写、半身、成群、景色、利用水平或垂直屏幕的文本照片。
当选择“正面”属性页时(图5)，提供有关正面页面布局的帮助。如果用户先前选择了优选页面布局，那么，直接显示这样的布局。如果不是，如图所示，屏幕显示一系列选项，即，允许在终端内选择页面布局，或从远程服务器中选择，或创建新页面布局。
当选择“选择页面布局”时，接着在几种页面布局之间提供选择，这样的页面布局在颜色、式样、大小等方面都是不同的。
如果用户选择选项“创建新页面布局”，提出一系列选项，在本例中，它们是框架颜色的选择、框架厚度的选择和具有曲率半径的选择的圆角卡片的选择。
当用户点击如图4所示的屏幕30的“文本”属性页时，接着出现如图6所示的屏幕36，提供了在“智能文本”型的新文本(半自动输入的文本)、新“照片-文本”或现有照片-文本之间的选择。
当选择“新文本”选项时，人机界面切换到标准输入或半自动输入的文本创建，文本创建包括为文本准备了几个段落和允许在每个段落中重新使用已经记住的文本。第一段是涉及接收者的开头段“亲爱的朋友”、“亲爱的妈妈”等。第二字段涉及文本正文“今天好极了”、“多美好的假日！”等。第三段涉及包括正式结束语的文本结尾，和第四段包括签名。
当选择“照片-文本”选项时，接着显示通知用户他/她必须拍摄文本，例如，手写文本的照片的屏幕(未示出)，以及正确拍摄文本照片的指令，例如，保证你是相当平行的”和“设法让照明均匀”。
在一个实施例中，长方形取景框显示在屏幕上，它能够使得取决于它是否变形而确定是否在正确的角度拍摄照片。
一旦编写或拍摄了文本，用户可以继续前进到下一个步骤，该步骤与图4的“背面”属性页相对应，该属性页涉及背面的页面布局，即，针对文本的。在这样的情况下，显示出图7中的屏幕36，屏幕36提供了如下选项-选择最后页面布局，-选择优选页面布局，-选择页面布局，-在远程服务器上选择页面布局，和-创建新页面布局。
在一个实施例中，可以在，例如，终端存储器中找到的页面布局的选择包括选择要使用的与，例如，拍摄照片的地方相对应的邮票的类型。它还可以包括选择背景颜色。
为了创建新页面布局，字体的选择、字体大小、所有颜色和邮票都要提出。
图8示出了当用户在图4中的屏幕上选择“地址”属性页时出现的屏幕38。如果终端已经包含联系人列表，那么，利用“选项”框(屏幕40)从联系人列表中选择接收者。如果涉及到新的联系人，那么，屏幕将显示几个区域名(然后，可以通过与选项T9接触而选择所述名)、姓、街号、街名、城市的邮政编码和国家。
优选地，当指示邮政编码时，自动出现相应城市，相反，当指示城市时，自动示出邮政编码。
还有可能为同一个明信片选择几个接收者。
如果明信片不完整，屏幕将提示这样的明信片不完整，并请求选择图像、接收者和文本；它还指示已经使用了默认正面页面布局，和类似地，已经使用了默认背面页面布局(文本)。
如果明信片是完整的，那么，发送屏幕指示准备发送明信片和建议用户将它保存成模板。
最后，在用户选择了“发送”选项之后，通过优化通过如下所述的协议发送的图像的质量，根据与照片传输输出有关的网络的至少一种规范(例如，MMS消息的最大大小)压缩照片，该协议使得能够为了这样的优化，选择二次抽样率和压缩参数，即，JPEG类型的。然后，通过电话，例如，通过MMS发送如此压缩的照片、和明信片。屏幕示出明信片已经发送和建议用户将同一卡片发送给另一个接收者。
5.使要发送的数据与网络传输容量相适应摄像机电话中检测器的容量不断增大，大大地超过包含传输协议的通带。例如，VGA检测器提供300,000个像素和每个像素使用一个八位位组，以便编码每个颜色通道，这提供了大约900ko的毛图。但是，大多数终端只能发送经过压缩的30-50ko的文件，即，在VGA检测器的情况下，初始数据的大约3-5％。
根据这样的观察，本发明提出了能够优化按照协议发送的图像的质量的方法，所述协议能够根据这样的优化，选择二次采样的比率和压缩参数，即，JPEG类型的。
事实上，众所周知，为了缩小图像文件大小，一方面可以进行二次采样，而另一方面可以利用压缩算法，例如，JPEG算法进行压缩。
随后的二次采样和再采样降低了分辨率和引起细节的损失，以及混淆。
此外，JPEG压缩导致信息损失和使假像(缺陷)出现，随着压缩率越来越高，所有这些都越来越重要。
已经提出，再采样引起的分辨率损失可能永远不能得到纠正。另一方面，JPEG压缩引起的假像存在使它们能够在某种限度内得到纠正的有组织的已知的分布。这样的纠正通过，例如，平滑如JPEG标准所述的单元边缘，或甚至通过能够解压缩和纠正这样的缺陷的称为“JPEG CLEANER”的算法来完成。
为了确定压缩率和采样率，使用如图9所示的曲线图，其中，横坐标表示压缩率，纵坐标表示采样率。
这样的曲线图包含与三个不同图像相对应的三条曲线。
以如下的方式获得曲线图选择三个测试图像，它们以1兆像素的清晰度起始而表现。
使用这样的图像，生成用不同比率压缩的副本，从而使得能够获得先前再采样的、给定大小200ko、150ko、100ko、80ko、60ko、55ko、50ko、45ko、40ko、35ko等的文件，采样率按90％、80％、60％等，无论处在水平方向还是处在垂直方向，采样率都是相同的。
然后，按文件大小将图像分类，因此，每组图像由大小相同，但清晰度可变的图像组成。
为了能够比较如此获得的不同图像，通过双三次型的内插计算将这样的图像还原成原来的清晰度。
接着，对于每个系列的图像，有经验的观众观察计算机屏幕上的各种图像，并且与大小相似的文件相比较，确定他/她判断最满意的图像，当然同时考虑到二次采样率和相应压缩因子。
应该注意到，将JPEG压缩与图像再采样相联系使得能够获得比分开使用的任一个方法更好的结果。
因此，应该注意到，对于给定压缩率，图9中的曲线图允许选择提供最佳图像质量的采样率的值。
在如图10所示的曲线图中，横坐标表示ko图像文件大小，而纵坐标表示采样率。例示在这个图10中的曲线示出了基于文件大小和采样率的最满意图像。
根据没有压缩的代表大约3Mo(mégaoctet，兆字节)大小的1兆像素的图像，为了获得30ko的文件，优选地在图像压缩之前，按50％(对应于将像素数量减少到四分之一)二次采样图像。为了获得50ko文件，在图像压缩之前，按70％(即，将像素数量减少到二分之一)二次采样图像是合理的。最后，对于超过130ko的文件，优选地不使用二次采样，只使用JPEG压缩。
实际上，移动电话终端在存储器中包含如图9a和10a所示的曲线图，在本发明的含义内，也称为根据多媒体数据大小的最佳压缩曲线。图9a代表具有构成图9中的所有曲线的平均的曲线50的曲线图，而图10a中的曲线图包含与图10中的所有曲线的平均值相对应的曲线52。
因此，为了确定应该在网络上发送的文件，在移动电话终端内编程与文件大小有关的算法，移动电话终端可以在网络上发送它。图10a中横坐标的文件大小相对应同一图中纵坐标的采样率。这样的采样率使得能够利用来自图9a的曲线50确定来自图9a的横坐标的压缩率。这个算法用离开图10a中横坐标的A点到达图9a中横坐标的B点的箭头表示。
但是，对于给定压缩率，由于最终文件大小将取决于包含在图像中的细节数量，所以获得的压缩率可以提供超过网络支持的文件大小的文件大小。这就是为什么在这样的情况下，该算法选择较高压缩率B′，该较高压缩率B′使得能够由于图9a的曲线50，选择相应采样率，以及利用图10a中的曲线图，检验文件大小A′是否小于网络允许的最大值。如果文件大小A′仍然太大，继续执行这样的重复过程，即，选择比A′小的文件大小A″，直到达到满意的文件大小。
当然，依赖于多媒体数据大小的最佳压缩曲线不仅可以在终端存储器中以来自图9a和10a的曲线图的形式表示，而且也可以表示成值表或算法。
并且，当然，依赖于多媒体数据的大小，在终端存储器中也可以只表示最佳压缩曲线的必要部分。必要部分是，例如，与能够通过各种电话运营者的网络发送的最大文件大小相对应的节选部分。
使用图像的方法现在，我们打算描述可以与应用于移动电话服务一样应用于图像获取设备，例如，摄影设备或摄像机的实施方法。
在继续进行这种描述之前，让我们首先指出使用的各种术语的含义所谓的“数字图像”指的是具有数字形式的图像。该图像可以来自也称为“图像检测设备”的数字图像获取设备。该图像可以是预定要发送或保存的静止或运动图像。
数字图像可以用下文称为“灰度级别”的一组数字值表示，每个数字值与色彩灵敏度和表面上或体积内的相对几何位置相联系。在本发明的含义内“颜色”指的是与同一颜色灵敏度相联系的一组数字值。
数字图像优选地是在去矩阵化(或英文“demosaicing”)之前的检测器原始图像。数字图像也可以经受处理，例如，去马赛克化、白平衡或二次抽样。
-当数字图像来自图像检测设备时，后者包括配有敏感部件的检测器。所谓的“敏感部件”指的是使得能够将能量流转换成电信号的检测器部件。能量流可以采取光流、X射线、磁场、电场或声波的形式。视情况而定，敏感部件可以排列在表面上和/或叠加在体积内。敏感部件可以根据长方形矩阵、六角形矩阵或其它几何形状放置。
-本发明应用于由一种或几种类型的敏感部件组成的检测器，每个类型对颜色敏感，每种色彩灵敏度对应于检测器的敏感部件转换成电信号的那一部分能量流。在可视图像检测器的情况下，检测器一般对3种颜色敏感，和数字图像对应于3种颜色红色、绿色和蓝色。一些检测器具有4色灵敏度红色、绿色、翠绿色和蓝色。
-所谓的“颜色”指的是检测器传送的信号的组合，尤其线性组合。
-本发明与各种各样已知临界锐度一起应用。例如，颜色的锐度可以对应于称为“BXU”的值的测量，BXU是像描述在Jérme BUZZI和Frédéric GUICHARD发表在Proceeding of IEEE，International Conference of Image Processing，singapore 2004上的“Uniqueness of Blur Measure”中那样的对模糊点表面的测量。
简单地说，光学系统的模糊根据来自位于锐度范围的无限小点的、称为“脉冲响应”的图像来测量。BXU参数是脉冲响应(即，它的平均表面积)的变量。处理性能可以受BXU最大值限制。
这样的锐度的各种测量方法描述在像，例如，Al Bovik编辑和Academic学术出版社出版的“Handbook of Image & Video Processing”第415-430页那样的手册和出版物中。
在一个实施例中，锐度是通过计算梯度取得的。例如，通过从相邻几何位置获得的9个灰度等级的梯度计算可以获得锐度。
在一种实现中图像检测设备是，例如，一次性照相机、数字照相机、反射式照相机(数字或非数字)、扫描仪、传真机、内诊镜、电影摄影机、便携式摄像机、监视摄像机、玩具、与电话、个人数字助理或主机合并在一起或相连的电影摄影机或摄像机、热敏照相机、和超声波、磁共振成像、X射线设备。
-所谓的“光学图像检测设备”指的是使得能够再现检测器上的图像的光学装置。
-所谓的“图像检测器”指的是能够检测和/或记录图像的机械、化学和电子装置。
-所谓的“伺服控制系统”或“伺服控制”指的是将指令施加在部件或设备参数上的机械、化学、电子或IT装置。尤其，它涉及自动聚焦系统(自动聚焦)，涉及自动白平衡控制，涉及自动曝光控制，涉及光学部件控制，以便，例如，保持均匀图像质量，涉及图像稳定系统，涉及光学和/或数字变焦因子控制，涉及饱和控制系统，或涉及对比度控制系统。
-数字处理图像的装置可以随应用而改变。
像如下的例子那样，数字处理图像的装置可以全部或部分合并在一起-生成修正图像的图像检测设备，例如，集成了图像处理装置的数字照相机。
-显示或打印修正图像的图像复原设备，例如，包括图像处理装置的视频投影机或打印机。
-纠正其部件的缺陷的多功能设备，例如，包括图像处理装置的扫描仪/打印机/传真机。
-生成修正图像的专业图像检测设备，例如，包括图像处理装置的内诊镜。可以将图像处理装置全部或部分转移到服务器上。
调整设备、拍照参数所谓的“设备调整”或“拍照设备”指的是显式调整，例如，在照相机电话的情况下，将图像发送到另一个移动电话或发送到打印服务时的调整，或隐式调整，例如，仍然在照相机电话的情况下，用户为发送消息输入的接收者电话号码，或甚至自动调整，例如，根据照明自动调整曝光。
拍照设备或参数的调整包含一个或几个如下元素，即-使用模式，例如自动、光圈优先、速度优先、肖像、景色、体育活动、暗。使用模式尤其影响ISO灵敏度、曝光时间、噪声、模糊。
-人工曝光纠正，这尤其影响噪声和对比度。
-ISO灵敏度调整，这尤其影响噪声和运动模糊。
-曝光时间调整，这尤其影响运动模糊。
-光圈调整，这尤其影响模糊。
-聚焦调整，这尤其影响模糊。
-微距(macro)模式，这尤其影响模糊。
-白平衡调整，例如，自动、钨(tungsten)、荧光(fluorescent)、卤素(halogen)、晴天、多云、阴天，这尤其影响颜色。
-对比度调整，例如，强、正常、弱，这尤其影响对比度。
-锐度调整，例如，强、正常、弱，这尤其影响模糊。
-分辨率调整，这尤其影响细节和锐度。
-数字变焦调整，这尤其影响细节。
-着色调整，例如，彩色、黑白、褐色、饱和，这尤其影响颜色。
-输出色度区，这尤其影响颜色。
-数字变焦因子的最大值。为了使变焦失效，赋予1的值。
-各种伺服控制的参数。
-图像处理参数，即各种滤波器和产生颜色、锐度、对比度、细节和噪声降低所需的处理使用的系数和表格，去马赛克化参数，用于“色调曲线”(它是用于修改，例如8比特的，检测器信号的运动的状态图)，用于噪声降低，用于白平衡，用于内插。
-其它参数，固定的或随图像而变并且影响图像或通过服务传送的图像。
-图像最终使用的指示，具有一种或几种服务的形式，和/或具有使用所需的像素数量的形式，和/或具有复原设备的类型(即，设备屏幕、打印、放大等)的形式，和/或具有如下所述的形式之一。
可以以几种方式指示图像最终使用当为特定服务创建消息，所述服务例如为请求创建明信片之后移动电话上的明信片服务，选择接收者之后移动电话上的MMS服务，该服务使得时为选择了如果涉及明信片序号或地址，能够知道打算打印图像，如果涉及电子邮件地址，能够知道打算将图像用在计算机屏幕上或用于打印，和如果涉及电话号码，能够知道打算将图像用在移动电话屏幕上，通过用户进行的调整，通过服务运营者进行的调整，为了有利于某些类型的服务，通过电话制造商或销售商进行的调整，通过图像使用的历史。
使用图像在多媒体数据是图像的情况下，所谓的“服务”尤其指的是像上述那样的服务，以及与确定图像使用相对应的服务、未必由服务提供者提出，而是也能够由用户本身或由第三方执行的服务；使用确定图像可以具体对应于图像共享(在小尺寸屏幕上，在计算机屏幕上，用于打印，在电子或物理媒体上)和存储器(通过打印或保存图像文件归档供以便查阅用)使用，例如-显示在小尺寸屏幕上，通常至少100,000个像素，即获取设备的屏幕、另一个设备的屏幕或多媒体数据存储设备的屏幕，-显示在大尺寸屏幕上，通常通过1-2兆个像素，尤其，计算机、电视或投影机屏幕，
-以标准格式(大约10cm×15cm)打印，通常2兆个像素，-放大几兆像素，-修描，-在电子媒体(硬盘、CD、DVD等)上归档。
可以根据使用所需的像素数量将服务分组在一起-用在小尺寸中，例如，100,000像素，-用在标准尺寸中，例如，通过1-2兆像素，-用在最大可能尺寸中。
在一个实施例中，利用图像使用信息提高使用服务的质量。这样的信息可以-通过指明要使用的服务，通过指明要使用的最大图像大小由用户直接指明-利用图像质量调整，利用其它调整计算。
现有技术现在，我们打算描述如何操作例如当前不用如下所述的本发明实现的设备。
该设备一般具有图像调整分辨率。
图像获取包括所有或一部分如下步骤-拍摄相片之前的曝光伺服控制，-拍摄相片之前的聚焦伺服控制，-拍摄相片之前的白平衡伺服控制，-在拍摄相片之前显示缩小视频，根据数字变焦(只使用中心)和可能根据分辨率，利用所有或一部分检测器获取“原始”图像，-通过内插每个像素中的损失颜色使图像去马赛克化，-应用对比度曲线(英文“tone cure”)，-白平衡纠正，
-噪声降低，-锐度提高，-传送到输出彩色区，-利用可用像素内插，以便获得所需分辨率，-压缩，-图像标记，以便通过电子邮件发送，打开。
实施例的例子现在，我们打算描述多媒体数据是图像的本发明实施例，这样图像的特征是根据服务自动确定的拍照参数，从而，具体地说，预定用于移动电话的图像可以从比预定打印服务或要显示在计算机屏幕上的图像更长的曝光时间中受益。
因此，这样的实施例尤其适用于如下情况-多媒体数据是图像，-改善使用质量对应于图像质量的改善，-设备可以是终端，以及摄像机或如上所述的与图像有关的任何其它设备，-已知图像的使用是像上述那样，尤其根据服务确定或计算的。
在这样的实施例中，该方法包括根据所选服务自动确定多媒体数据的规范的步骤，这样图像的特征是拍照参数。
在这样的例子中，确定拍照参数，以便将要使用的图像优化成-小尺寸图像，和/或-标准尺寸图像，和/或-最大尺寸图像。
该方法包括如下步骤的至少一步-根据使用适配数字变焦，-根据使用适配曝光伺服控制，-根据使用适配获得的像素数量，-根据使用适配去马赛克化，-根据使用适配锐度提高，-根据使用适配噪声降低。
如下的例子对应于4兆像素检测器。
数字变焦不只包括使用检测器的中心区。因此，对于×2数字变焦，只保持检测器像素的中间四分之一。
为使数字变焦适合使用，可以计算最大变焦因子，以便使获得的像素数量接近使用图像的像素数量，例如-对于小尺寸使用，数字变焦局限于(4,000,000/100,000)的平方根，即，大约6，-对于标准尺寸使用，数字变焦局限于(4,000,000/1,000,000)的平方根，即，大约2，-对于最大尺寸使用，不允许数字变焦。
曝光伺服控制测量检测器上的光量，和根据设备调整，调整曝光时间、光圈和检测器增益(与ISO灵敏度有关)，以便达到目标曝光。
为了根据使用适配曝光伺服控制，可以-为使用的最小尺寸增加曝光时间，因为运动模糊在小图像上较不容易看见；因此，可以实现噪声降低，-考虑减少获得的像素数量的和降低噪声，以便选定较高的增益。
为了根据使用适配获得的像素数量对于使用的小尺寸和/或标准尺寸，可以获得4倍的使用像素数量(例如，对于100,000像素的小尺寸下的使用，获得400,000个像素的图像)，从而能够简化每个像素的计算可以通过叠加4个相邻像素的已知方法简化去马赛克化来取代使用内插，以便重建每个像素中的损失颜色。因此，可以获得使颜色、对比度、锐度和细节尽可能快地得到重建(这样的计算与像素数量成正比)，使每个像素的锐度计算更容易的较小图像，因为可以减小锐度滤波器的尺寸，分辨率越低，这样的滤波器就越不复杂，最终便IT性能更高，从而降低噪声。
-当光量小时，还可以获得原始图像，进行快速去马赛克化，以便获得小4倍的图像，对这个缩小图像继续进行可视图像转换处理，和使用如此提升的IT性能，以便进行更不复杂得多的噪声降低处理。
例如
-如果检测器原始图像到可视图像的转换处理对应于每个可视像素150个操作，其中的25个用于降低噪声；-如果具有简化去马赛克化的检测器原始图像到可视图像的转换处理对应于每个可视像素100个操作，其中的25个用于降低噪声；-那么，为了降低噪声，每个可视像素可以加上500个操作，从而使计算比25个噪声降低操作复杂20倍。实际上，减少4倍的像素数量当中每个像素的100+500个操作对应于与对所有像素的125+25个操作相同的IT性能。
因此，根据服务和拍照时的光量确定拍照参数，由于没有提供不能用于服务的图像，所以供应了细节减少4倍的图像，但噪声电平提高了许多，例如，从6dB到9dB，从而使图像不能用。
为了根据使用适配去马赛克化可以获取4倍的待使用像素数量，和可以通过叠加4个相邻像素的已知方法简化去马赛克化。
为了根据使用适配噪声降低，如上所述，可以释放IT性能，从而能够通过使用大跨度的像素，例如，通过使用像Carlo Tomasi和Boberto Manduchi发表在1998年计算机视觉国际会议会刊第839-846页上的“Bilateral Filtering forGray and Color Images”中所述的算法降低噪声。
与生成所需大小的图像的现有设备不同，本发明通过适配获取、大小和处理，能够获得与使周相容的最大质量图像，尤其在低照明时。
本发明的这样实施方法也可以用于在低照明下从同一场景中获取两幅图像，图像大小调整成“小”和“大”，或就所选的服务而论是等效的。
对于本发明，存在小图像具有比大的缩小图像好的质量的光量跨度。
当曝光时间和增益(ISO灵敏度)可从图像的Exif格式的数据中获得时，这些参数在2个图像之间差异很大。
小尺寸下的使用现在，我们打算描述尤其适用于小尺寸下的图像使用的本发明实施例。为了例示这样的实施例，将考虑4,000,000像素的检测器，但是，本发明可应用于所有检测器大小。
可以确定一个或几个拍照参数，即-数字变焦的最大值对于小尺寸下的使用，数字变焦局限于(4,000,000/100,000)的平方根，即，大约6，-为了使灵敏度从100变化到3200 ISO，然后增加到3200 ISO以上，可以将曝光时间固定在1/15上，-灵敏度可以在100与3200 ISO之间变化，-将原始图像的大小固定在使用像素数量的4倍，在本例中，400,000个像素上，-去马赛克化方法去马赛克化可以通过叠加4个相邻像素的已知方法简化，-噪声降低参数使用更宽的跨度，例如，256个像素，-锐度参数使用较小的滤波器，例如，3×3。
标准尺寸下的使用现在，我们打算描述尤其适用于标准尺寸下的图像使用的本发明实施例。为了例示这样的实施例，将考虑4,000,000像素的检测器，但是，本发明可应用于所有检测器大小。
可以确定一个或几个拍照参数，即-为了使灵敏度从100变化到800 ISO，然后增加到800 ISO以上，可以将曝光时间固定在1/60上，-灵敏度可以在100与800 ISO之间变化，-将原始图像的大小固定在使用像素数量的4倍，在本例中，400,000个像素上，-去马赛克化方法去马赛克化可以通过叠加4个相邻像素的已知方法简化，-噪声降低参数使用平均跨度，例如，64个像素，-锐度参数使用较大的滤波器，例如，5×5。
最大尺寸下的使用现在，我们打算描述尤其适用于最大尺寸下的图像使用的本发明实施例。为了例示这样的实施例，将考虑4,000,000像素的检测器，但是，本发明可应用于所有检测器大小。
可以确定一个或几个拍照参数，即-为了使灵敏度从100变化到400 ISO，然后增加到400 ISO以上，可以将曝光时间固定在1/60上，-灵敏度可以在100与400 ISO之间变化，-将原始图像的大小固定在使用像素数量的4倍，在本例中，400,000个像素上，-去马赛克化方法将内插用于计算每个像素中的损失颜色，-噪声降低参数使用较小的跨度，例如，16个像素，-锐度参数使用较大的滤波器，例如，5×5。
考虑了照明之后最大尺寸下的使用现在，我们打算描述多媒体数据是图像的本发明一种变体实施例，获取图像，以便提供至少两种服务，这样图像的特征是根据两种服务的至少一种和拍照时的光量自动确定的拍照参数，从而，尤其在低照明时，可以将图像用于两种服务的至少一种。这样的实施例尤其适用于最大尺寸下和考虑了照明的图像使用。为了例示这样的实施例，将考虑4,000,000像素的检测器，但是，本发明可应用于所有检测器大小。
在这种情况下-存在足够的照明，可以获得全分辨率的优质图像。
-在某个照明阈值以下，不可能获得全分辨率的优质图像。因此，优选地降低图像分辨率，从而能够优化标准尺寸下的图像质量。然后，可以放大如此获得的图像，以便获得即使细节不是非常好，但颜色好、对比度好、锐度好和噪声低的全分辨率图像。
-在低于第一照明阈值的第二照明阈值以下，不可能获得标准尺寸下的优质图像。因此，优选地降低图像分辨率，从而能够优化小尺寸下的图像质量。然后，可以放大如此获得的图像，以便获得即使细节不是非常好，但颜色好、对比度好、锐度好和噪声低的标准分辨率图像。
因此，可以根据至少两种类型的图像使用和拍照时的光量自动确定拍照参数，以便改善至少一种使用的图像质量。
光量是通过基于已知方法的曝光伺服控制确定的。
可以确定一个或几个拍照参数，即-在第一照明阈值以上，期待4,000,000个像素的图像为了使灵敏度从100变化到400 ISO，然后增加到400 ISO以上，可以将曝光时间固定在1/60上，灵敏度可以在100与400 ISO之间变化，在本例中，将原始图像的大小固定在4,000,000个像素上，去马赛克化方法使用内插来计算每个像素中的损失颜色，因此，获得4,000,000个像素的可视图像，噪声降低参数使用较小的跨度，例如，4个像素，锐度参数使用较大的滤波器，例如，5×5。
-在第一照明阈值与第二照明阈值之间，期待1,000,000个像素的图像为了使灵敏度从100变化到800 ISO，然后增加到800 ISO以上，可以将曝光时间固定在1/60上，灵敏度可以在100与800 ISO之间变化，将原始图像的大小固定在使用像素数量的4倍，在本例中，4,000,000个像素上，去马赛克化方法去马赛克化可以通过叠加4个相邻像素的已知方法简化，噪声降低参数使用平均跨度，例如，64个像素，-在第二照明阈值以下，期待100,000个像素的图像数字变焦的最大值对于小尺寸下的使用，数字变焦局限于(4,000,000/100,000)的平方根，即，大约6，为了使灵敏度从100变化到3200 ISO，然后增加到3200 ISO以上，可以将曝光时间固定在1/15上，灵敏度可以在100与3200 ISO之间变化，将原始图像的大小固定在使用像素数量的4倍，在本例中，400,000个像素上，
去马赛克化方法去马赛克化可以通过叠加4个相邻像素的已知方法简化，噪声降低参数使用更大的跨度，例如，256个像素，锐度参数使用较小的滤波器，例如，3×3。
同样，对于标准尺寸下的使用，可以考虑照明，以便如果照明在第二阈值以下，使用与小尺寸下的使用相对应的参数。
在利用本发明的设备中，当照明降低到某个阈值以下时，自动降低图像分辨率。
至少两种服务的使用在一个实施例，获取至少两个类型的多媒体数据，以便提供至少两种服务，每种多媒体数据的规范适用于相应服务。
这样的实施例尤其适用于人们想实现两种分立尺寸下的使用，例如小尺寸和标准尺寸这样的情况对应于，例如，用于移动终端、用于发送到移动电话和用于发送到电子邮件/打印机/明信片的服务。
标准尺寸和最大尺寸对于摄像机，这样的情况对应于，例如，另一方面，用于标准打印或用在计算机上的服务，和另一方面，用于放大的服务。
通常，按最大尺寸获取图像，然后，缩小图像尺寸。在这样的实施例中，获取两个图像，使每个图像的拍照参数适用于每种使用，以后在每种使用期间优化图像质量。因此，在低照明下，使用最小尺寸将具有与更常用方法有关的改善质量。
例如，如果要求标准尺寸和小尺寸两者，每个相片的拍照参数可以按如下方式确定-在标准尺寸下使用图像为了使灵敏度从100变化到800 ISO，然后增加到800 ISO以上，可以将曝光时间固定在1/60上，灵敏度可以在100与800 ISO之间变化，将原始图像的大小固定在使用像素数量的4倍，在本例中，4,000,000个像素上，去马赛克化方法去马赛克化可以通过叠加4个相邻像素的已知方法简化，
噪声降低参数使用平均跨度，例如，64个像素，-在小尺寸下使用图像数字变焦的最大值对于小尺寸下的使用，数字变焦局限于(4,000,000/100,000)的平方根，即，大约6，为了使灵敏度从100变化到3200 ISO，然后增加到3200 ISO以上，可以将曝光时间固定在1/15上，灵敏度可以在100与3200 ISO之间变化，将原始图像的大小固定在使用像素数量的4倍，在本例中，400,000个像素上，去马赛克化方法去马赛克化可以通过叠加4个相邻像素的已知方法简化，噪声降低参数使用更宽的跨度，例如，256个像素，锐度参数使用较小的滤波器，例如，3×3。
图11例示了在非常简单方式下本发明的这些特征。当照相机电话200的摄影设备如用户通过相应菜单所指，拍摄预定到打印服务202的照片时，曝光时间被自动确定在第1/60秒上，以便将运动模糊的风险降到最小。当照相机电话200的用户指出要拍摄的照片204预定要显示在照相机电话200的屏幕上时，最大曝光时间被限制在第1/15秒上，因为在小尺寸屏幕上，对运动模糊较不敏感。最后，当场景的光量低于第一阈值时，摄影202的特征被适配为小4倍的像素和更多的噪声降低，以便即使细节减少了，也使摄影可用。
此外，如果用户在相应菜单中指出他想将照片用于两种服务，即，发送到打印服务202和显示在屏幕206，如果对于这两种服务，最佳拍照参照是不同的，摄影设备将拍摄两个相继相片，每一个对于相应服务来说是最佳的。
应该注意到，如上所指，这些特征可应用于所有拍照设备，即，照片类型的或视频类型的。因此，拍照参数可以适配于最终使用-为在显示在屏幕上的设备上观看而优化的参数与，例如，为放大而优化的参数不同，-为在打印机上观看在低照明下拍摄的图像而优化的参数与为在打印机上观看在亮照明下拍摄的图像而优化的参数不同。
权利要求
1.一种改善使用至少一个服务的质量的方法，所述服务与至少一个类型的多媒体数据有关，即，与照片、视频、音频和/或文本有关，这样的服务由服务提供者和/或电信运营者通过用户的移动电话终端提出；这样的方法包含在获取多媒体数据之前和/或期间和/或之后，自动实现服务所需的几种终端功能，这样的终端功能的自动实现包括如下步骤-从终端内的可用功能当中选择服务所需的功能，-自动和/或由用户人工地准备适用于服务的至少一个情景，这样的情景包括所选功能的逻辑链序列，该方法进一步包括用户从先前准备的情景当中选择确定的情景的步骤。
2.根据权利要求1所述的方法，其中，通过终端界面引导用户，终端界面表现用户可通过终端访问的服务。
3.根据权利要求1或2所述的方法，其中，在例如先前使用服务期间，预记录至少一部分情景。
4.根据权利要求1到3的方法，包括根据所选服务自动确定多媒体数据的规范的步骤。
5.根据权利要求4所述的方法，其中，多媒体数据是图像，这样的图像的特征是根据所选服务自动确定的拍照参数，使得，例如，预定用于移动电话的图像可以从比预定用于打印设备或要显示在计算机屏幕上的图像更长的曝光时间中受益。
6.根据权利要求5所述的方法，其中，多媒体数据是为提供至少两种服务而获取的图像，这样图像的特征是根据两种服务的至少一种和拍照期间的光量自动确定的拍照参数，使得，尤其在低照明时，可以将图像用于两种服务的至少一种。
7.根据权利要求4到6之一所述的方法，其中，获取至少两个类型的多媒体数据，用于提供至少两种服务，每种多媒体数据的规范与相应服务相适应。
8.根据前面权利要求之一所述的方法，包括搜索预记录在终端内的一个类型的多媒体数据以便实现服务的步骤。
9.根据前面权利要求之一所述的方法，包括，例如通过使用模板和/或表现参数，为多媒体数据选择表现方式或页面布局的步骤。
10.根据前面权利要求之一所述的方法，包括将自动帮助功能提供给终端用户，以便进行多媒体数据的获取的步骤，该步骤尤其是通过借助于图像取景和/或检验这样图像的质量，通过为获取和/或调整提供教导或指令，或通过显示最终获取结果实现的。
11.根据前面权利要求之一所述的方法，包括修改多媒体数据的步骤。
12.根据前面权利要求之一所述的方法，包括本地地，即在终端内，或远程地，即在终端外，处理多媒体数据的步骤。
13.根据前面权利要求之一所述的方法，包括，例如利用与地址簿的链接和/或半自动输入，选择接收者的步骤。
14.根据前面权利要求之一所述的方法，包括根据与多媒体数据的传输输出有关的网络的至少一种规范压缩多媒体数据的步骤。
15.根据前面权利要求之一所述的方法，包括将与文本有关的一个类型的多媒体数据插入与图像有关的一个类型的多媒体数据内，称为“明信片”，的步骤。
16.根据前面权利要求之一所述的方法，包括通过如下通信方法的至少一种发送与图像有关的一个类型的多媒体数据的步骤传真机、电话、电子邮件。
17.根据前面权利要求之一所述的方法，包括管理用户个人多媒体数据相册的步骤，这样的相册存储在用户移动电话终端可通过电信网络访问的服务器中。
18.根据前面权利要求之一所述的方法，包括向打印服务，例如，打印机，发送多媒体数据的步骤。
19.一种移动电话终端，其中，为了改善使用与至少一个类型的多媒体数据有关，即，与照片、视频、音频和/或文本有关的至少一种服务的质量，这样的服务由服务提供者和/或电信运营者提出，该移动电话终端包括在获取多媒体数据之前和/或期间和/或之后，自动实现服务所需的几种终端功能的装置，这样的装置包括-从可用在终端内的功能当中选择服务所需的功能的装置，-自动和/或人工地准备适用于服务的至少一个情景的装置，这样的情景由所选功能的所述逻辑链序列组成，和使用户能够从先前准备的情景当中选择确定的情景的装置。
20.根据权利要求19所述的终端，包括表现用户可访问的服务引导界面。
21.根据权利要求19或20所述的终端，包括记录一部分情景的装置。
22.根据权利要求19到21之一所述的终端，包括根据所选的服务自动确定多媒体数据的规范的装置。
23.根据权利要求22所述的终端，其中，多媒体数据是图像，自动确定图像特征的装置包括根据服务自动确定拍照参数的装置，使得，例如，预定用于移动电话的图像可以从比预定用于打印服务或要显示在计算机屏幕上的图像更长的曝光时间中受益。
24.根据权利要求23所述的终端，包括用于获取图像以便提供至少两种服务的装置，和使得图像的特征是根据两种服务的至少一种和拍照期间的光量自动确定的拍照参数的装置，使得，尤其在低照明时，可以将图像用于两种服务的至少一种。
25.根据权利要求22到24之一所述的终端，包括用于获取至少两个类型的多媒体数据，以便提供至少两种服务，以及使得使每种多媒体数据的规范与相应服务相适应的装置。
26.根据权利要求19到25之一所述的终端，包括搜索预记录在终端内的一个类型的多媒体数据以便实现服务的装置。
27.根据权利要求19到26之一所述的终端，包括，例如，通过使用模板和/或表现参数，为多媒体数据选择表现方式，或页面布局的装置。
28.根据权利要求19到27之一所述的终端，包括将自动帮助功能提供给终端用户，以便进行多媒体数据的获取的装置，这尤其是通过借助于图像取景和/或检验这样图像的质量，通过为获取和/或调整提供教导或指令，或通过显示最终获取结果实现的。
29.根据权利要求19到28之一所述的终端，包括修改多媒体数据的装置。
30.根据权利要求19到20之一所述的终端，包括本地地，即在终端内，或远程地，即在终端外，处理多媒体数据的装置。
31.根据权利要求19到30之一所述的终端，包括，例如利用与地址簿的链接和/或半自动输入，选择接收者的装置。
32.根据权利要求19到31之一所述的终端，包括根据与多媒体数据的传输输出有关的网络的至少一种规范压缩多媒体数据的装置。
33.根据权利要求19到32之一所述的终端，包括将与文本有关的一个类型的多媒体数据插入与图像有关的一个类型的多媒体数据内，称为“明信片”，的装置。
34.根据权利要求19到33之一所述的终端，包括通过如下通信模式的至少一种发送与图像有关的一个类型的多媒体数据的装置传真机、电话、电子邮件。
35.根据权利要求19到34之一所述的终端，包括管理用户个人多媒体数据相册的装置，这样的相册存储在用户移动电话终端可通过电信网络访问的服务器中。
36.根据权利要求19到35之一所述的终端，包括向打印服务，例如，打印机发送多媒体数据的装置。
全文摘要
本发明设计一种改善使用至少一个服务的质量的方法，所述服务与至少一种多媒体数据，尤其是照片、视频、音频和/或文本有关。所述服务由服务提供者和/或电信运营者使用用户的移动电话终端提出。所述方法包含在获取多媒体数据之前和/或期间和/或之后，自动实现服务所需的几种终端功能，所述终端功能的自动实现包括如下步骤－从终端内的可用功能当中选择服务所需的功能，－自动和/或由用户人工地准备适用于服务的至少一个情景，所述情景包括所选功能的逻辑级联序列；该方法还包括用户从先前准备的情景当中选择确定的情景的步骤。
文档编号H04M1/725GK1985535SQ200580023095
公开日2007年6月20日 申请日期2005年6月8日 优先权日2004年6月8日
发明者弗雷德里克·吉夏尔, 布鲁诺·列日, 杰罗姆·梅尼埃 申请人:德克索实验室