用于测量移动文档图像质量的系统及方法与流程

本发明涉及数字成像领域，且更特定来说，涉及一种用于评估在移动装置或相机上捕获到的数字图像内的文档的质量的方法。

背景技术：

数码相机提供优于用于捕获文档图像及其它图像的扫描仪的显著优点。数码相机通常比扫描仪更加便于携带，从而允许用户无论身在何处都能根据需要对文档进行成像，而不必将文档带到扫描仪。另外，因为扫描仪要求待被数字化的文档被放置在扫描仪台板上，所以数码相机能够捕获比扫描仪更多种多样的文档类型(例如，更大文档或安装于框架中的文档)的图像。然而，使用数码相机产生在使用扫描仪时不存在的困难。举例来说，在使用数码相机时照明条件变化，而扫描仪的照明条件通常可受控制。另外，使用数码相机可引入取决于各种因素(例如数码相机相对于文档的角度及距离、由数码相机使用的透镜及文档是定位在平坦表面上还是弯曲表面上)的几何失真。因为扫描仪通常在距平坦地固持在台板上的文档一定固定距离处利用移动扫描头，所以这些失真通常不会发生于扫描仪中。使用数码相机捕获文档的图像的另一困难是多种多样的不同可能背景形状、图案及颜色。

数码相机(特定来说，包含于移动电话、智能电话、平板计算机及其它移动装置中的数码相机)通常具有相对较小的预览显示器作为装置的部分。此较小屏幕使用户难以通过使用预览显示器评估捕获到的文档的质量。尽管许多智能电话中的装置显示器也用作捕获到的图像的预览或显示器屏幕，但这些屏幕可能对用户来说仍然太小而不能通过视觉检查确定文档的图像是否足以供进行所期望的后处理。

应用到扫描得到的文档的典型应用是使用光学字符辨识(ocr)以提取ascii数据以供稍后使用，例如对文档编索引。模糊、噪声及不均匀照明将对ocr使用数码相机的文档捕获的能力具有负面影响。另一问题是：在使用数码相机捕获图像期间，闪光的使用可致使热点问题，其中捕获到的图像数据的部分归因于闪光而模糊不清。需要在捕获时测量及分析模糊、噪声、热点及不均匀照明使得可警示用户使用数码相机重新捕获文档的方法。

技术实现要素：

本发明涉及一种用于测量捕获到的文档的数字图像的质量的系统及方法，且特定来说，涉及测量使用数码相机捕获到的文档的质量及在其不足以供进行所期望的进一步处理(例如ocr辨识)时产生重新捕获文档的图像的警示或指示。数码相机可包含于智能电话、平板计算机或其它便携式装置中。当包含于数字智能电话、平板计算机或其它便携式装置中时，所述系统及方法可经实施作为由装置执行的应用程序的部分。所述应用程序可经编程以控制相机的功能性。接着，所述应用可分析捕获到的任何图像，如下文更详细描述，且在捕获到的文档的图像不足以供进行所期望的稍后处理时警示用户。此相同功能性可被提供于对常规数码相机的编程内作为标准特征或可选择选项。替代地，可在通过网络云计算环境或从相机到与装置相关联的存储器的直接转移来接收图像的单独计算装置上完成处理及分析。

除了分析文档之外，本文描述的系统及方法可用于检测使用数码相机拍摄的常规照片中的相同类型的缺陷。可提供类似警示以建议用户重新拍摄照片。

使用数码相机或其它数字成像系统，捕获在背景上描绘硬拷贝文档的数字图像。所述数字图像可为彩色、黑色及白色或灰度。当捕获到彩色图像时，彩色数字图像可包含多个颜色通道的图像数据，分析所述图像数据以确定表示从图像数据提取信息的能力的量度的质量度量。接着，将多个颜色通道的图像数据转换成灰度等效物。当捕获到的图像是灰度或黑色及白色时，转换可能是不必要的，尽管也分析这些图像来确定质量度量。数码相机或包含数码相机的移动装置内的处理器进一步分析图像数据的模糊、噪声、不均匀照明及热点的度量以检测所描绘的硬拷贝文档的质量。在已确定度量之后，处理器将文档质量度量的指示存储于处理器可存取的存储器中。

由处理器分析质量测量以确保在捕获时获得可接着用于使用光学字符辨识提取信息的可用文档图像。

如果处理确定了图像的质量不够高，那么可向操作者提供指示应重新捕获文档的警示。可重复此过程直到获得经确定具有足够高的质量以对图像执行所期望的后捕获处理(例如ocr辨识)的文档的图像。

附图说明

图1是展示用于处理捕获到的数字图像的系统的组件的高级图。

图2是展示处理捕获到的数字图像及确定文档图像质量的方法的流程图。

图3是展示处理捕获到的数字图像及将其转换成经重新设定大小的灰度图像的方法的流程图。

图4描绘以图2的方法确定热点的存在的处理步骤的细节。

图5描绘以图2的方法确定噪声的存在的处理步骤的细节。

图6描绘以图2的方法确定模糊的存在的处理的细节。

图7描绘以图2的方法确定不均匀照明的存在的处理的细节。

图8描绘使用度量(热点、模糊、噪声及不均匀照明)创建停止/警告/前进指示器的额外处理步骤。

图9描绘以图2的方法用于计算热点度量的处理步骤。

图10描绘以图2的方法用于计算噪声度量的处理步骤。

图11描绘以图2的方法用于计算模糊度量的处理步骤。

图12描绘具有不均匀照明的图像的实例，且展示以图2的方法用于计算不均匀度量的处理步骤。

图13说明不均匀照明及通过将平均模糊图像平面的分数加到存储的灰度图像平面来创建剩余图像的实例。

具体实施方式

图1是展示用于捕获及处理图像的数码相机系统的组件的高级图。所述系统包含数据处理系统110、外围系统120、用户接口系统130及数据存储系统140。外围系统120、用户接口系统130及数据存储系统140以通信方式连接到数据处理系统110。这些系统可包含于数码相机或含有数码相机的移动装置(例如智能电话、平板计算机或pda)内。替代地，可将来自数码相机的图像传输到单独系统以供处理。举例来说，数码相机可将图像传输到云计算网络上的服务器。所述服务器可处理所述图像，且将图像质量的确定传输回到数码相机。

数据处理系统110包含实施本发明的各种实施例的过程(其包含本文描述的实例过程)的一或多个数据处理装置。数据处理装置可为(例如)中央处理单元(“cpu”)、桌上型计算机、膝上型计算机、主机计算机、个人数字助理、智能电话、平板计算机、数码相机、蜂窝电话或用于处理数据、管理数据或处置数据的任何其它装置。处理器系统110还可包含用于将捕获到的文档的图像转换成文本的ocr引擎。

数据存储系统140包含经配置以存储信息(其包含由处理器执行的软件指令及捕获到的图像数据)的一或多个处理器可存取存储器。数据存储系统140可为分布式处理器可存取存储器系统，其包含经由多个计算机或装置以通信方式连接到数据处理系统110的多个处理器可存取存储器。另一方面，数据存储系统140无需是分布式处理器可存取存储器系统，且因此，其可包含定位于单个数据处理器或装置内的一或多个处理器可存取存储器。

处理器可存取存储器可为任何处理器可存取数据存储装置，无论是易失性的还是非易失性的、电子的、磁性的、光学的或其它，其包含但不限于寄存器、软盘、硬盘、光盘、dvd、快闪存储器、rom及ram。

系统组件可以实现数据在组件之间的传输(其包含可在其中传达数据的装置、数据处理器或程序之间的有线或无线传输)的任何方式以通信方式连接。此连接可包含单个数据处理器内装置或程序之间的连接、定位于不同数据处理器中的装置或程序之间的连接及根本未定位于数据处理器中的装置之间的连接。就此而言，尽管将数据存储系统140展示为与数据处理系统110分离，但数据存储系统140可完全或部分存储于数据处理系统110内。此外，就此而言，尽管将外围系统120及用户接口系统130展示为与数据处理系统110分离，但此类系统中的一者或两者可完全或部分存储于数据处理系统110内。

外围系统120可包含经配置以将数字内容记录提供到数据处理系统110的一或多个装置。举例来说，外围系统120可包含静态数码相机、数字摄像机、蜂窝电话或其它数据处理器。数据处理系统110在从外围系统120中的装置接收到数字内容记录之后可将此类数字内容记录存储于数据存储系统140中。外围系统120无需在包含数据处理系统110、用户接口系统130及数据存储系统140的数码相机装置外部。举例来说，外围系统可为智能电话内的相机组件或常规数码相机中的数字视频捕获组件。

用户接口系统130可包含触摸屏幕、触摸垫、按键、鼠标、键盘、另一计算机或任何装置或数据从其输入到数据处理系统110的装置的组合。就此而言，且如上所述，尽管将外围系统120展示为与用户接口系统130分离，但可包含外围系统120作为用户接口系统130的部分。用户接口系统130还可包含显示器装置、处理器可存取存储器或数据由数据处理系统110输出到其的任何装置或装置的组合。就此而言，如果用户接口系统130包含处理器可存取存储器，那么此存储器可为数据存储系统140的部分，尽管在图1中单独地展示了用户接口系统130及数据存储系统140。

如图2中所展示，使用数字成像系统(例如数码相机或照相电话)捕获200描绘包含文档的场景的数字图像。捕获到的文档的图像可为软拷贝媒体的适当硬拷贝上描绘的任何图像。举例来说，文档可为报告、信件、收据、发票、杂志、书籍、报纸、照片印制品、插图(例如，绘画)或电视或计算机显示器上显示的内容。文档可包含各种类型的内容，其包含文本、图形及摄影图像。多数文档将通常具有矩形边界，尽管所述边界可根据在捕获图像时数字成像系统的视角及文档的平整性而在几何结构上变形。

捕获到的数字图像200包含具有像素值的图像像素阵列。可由系统处理器分析205捕获到的数字图像200以确定其是否是具有多个颜色通道(例如，红色(r)、绿色(g)及蓝色(b)通道)的彩色图像。

将包含将彩色图像转换成灰度图像表示的数个预处理操作210应用到捕获到的数字图像200，以提供经处理的数字图像准备用于进一步处理。图3展示在图2中的分析步骤205的应用之后对接收到的捕获到的数字图像200(在rgb颜色空间中)执行的预处理操作210的实例，其描绘从rgb颜色空间转换成单个通道灰度的文档。预处理操作210可包含将数字图像重新设定大小成1024的最长边步骤305、高斯模糊步骤310、从颜色空间转换成灰度空间图像步骤315。当捕获到的图像已为灰度或黑色及白色时，此转换过程可能是不必要的。重新设定数字图像大小步骤305用于减小捕获到的数字图像200的大小以便减小存储器需求且提高剩余步骤的计算效率。在具有先进的处理器的系统中，如果处理及存储器组件足以处置完整大小的图像，那么此减小步骤可能是不必要的。经减小大小应足够大以实现文档边界的准确检测。举例来说，重新设定数字图像大小步骤305可减小捕获到的数字图像的大小，使得图像的最大尺寸是约1000像素(例如，1024像素)。替代地，图像可简单地按固定重新设定大小因数(例如，25％)重新设定大小。重新设定图像大小的方法通常涉及应用插值过程，例如双线性、双三次或最近邻插值。捕获到的数字图像200可任选地在应用插值过程之前使用适当抗混叠滤波器进行卷积以在重新设定大小过程期间减小混叠伪影(例如，“锯齿”)的形成。

颜色空间转换步骤315执行颜色空间转换以将图像数据转换成适当灰度空间315。举例来说，这可通过将图像数据转换成gray颜色空间(其是具有单个灰色(g)通道的颜色空间)来完成。“灰”色通道与图像的照度(或亮度)有关。使用gray颜色空间具有所期望的特性，即，通道与总体照度相关且不依赖于颜色信息。在完成rgb到灰度的转换315之后，拍摄317用于后续分析的所关注区域。所关注区域可为所关注中心区域、整个图像或待分析的图像的任何其它所期望部分。特定来说，可通过切掉图像的特定百分比的边缘获得所关注中心区域，借此减小将被处理的图像的高度及宽度。接着，在320处将所关注区域存储为灰度图像以供进一步处理。因为捕获到的文档很有可能接近捕获到的数字图像200的中心，所以接近图像的边缘的信息可能是不必要的，且通过丢弃此信息，处理将会更快。在丢弃来自文档的边缘的信息之前，处理器可能首先会执行检查以确定图像的边缘是否好像含有在如下文描述的后续处理中所关注的文本或其它特征。所存储的灰度图像320可为组成图像的二维像素的平面，其中每一像素具有与照度(或亮度)有关的值。

返回图2，在已将所关注区域存储为供步骤210中(如图3中详细描述)的后续处理使用的灰度图像320之后，接着，所述方法实施步骤以检查捕获到的图像中的某些缺陷。这些步骤包含热点确定220、噪声确定225、不均匀照明确定230及模糊确定235。

可执行热点确定220以检测图像中热点的存在。热点是图像中通常导致区域中的信息丢失的高级像素分组。如果在捕获到的文档中存在信息的丢失，那么对于ocr引擎，信息的提取变得不可能，且捕获到的图像可能不能用于提取文档的文本。

使用热点确定步骤220测量来自预处理210的存储的灰度图像320中是否存在热点。图4说明图2中的热点处理220中所涉及的步骤的详细表示。计算图像信息的若干统计数字以用于机器学习分类器中，其包含最小值、最大值、平均值及标准偏差。通过迭代地比较平面内每一像素的值，计算在组成灰度图像的像素405的平面中具有最小值的像素。首先，将所检查的第一像素的值存储为最小值。接着，系统迭代地检查系统内每个其它像素的值。如果所检查像素值小于当前存储的最小值，那么使用所述像素值取代存储的最小值。如下文所展示，确定图像中的最小像素值的过程可通过设置存储的无穷大的最小值开始。接着，将检查灰度图像中的第一像素，且因为其值可能一定小于无穷大，所以其值取代“无穷大”作为当前存储的最小值。接着，系统接着迭代地检查图像中每一像素的值，且比较其与当前存储的最小值。如果像素的值小于当前存储的最小值，那么其变成新的当前存储的最小值，在迭代过程中所有剩余像素都要与其作比较。在已检查过所有像素的值后，确定最后存储的最小值像素为图像的最小值。

最小值识别过程：

类似地，通过迭代地比较图像中每一像素的值计算平面410的最大值。如同最小值的确定，系统检查第一像素且将其值设置为当前存储的最大值。接着，检查第二像素，且比较第二像素与第一像素的值，且如果第二像素的值较大，那么第二像素值变成当前存储的最大值。如果第二像素值小于当前存储的最大值，那么存储的值不变，且再次比较所检查的下一像素与存储的第一像素的值。迭代地分析图像中的像素，且每当所检查的像素具有比存储的值更大的值时，就更新当前存储的最大值。如果像素的值大于当前存储的最大值，那么其变成新的当前存储的最大值，在迭代过程中所有剩余像素都要与其作比较。在已检查过所有像素的值后，确定最后存储的最大值像素为图像的最大值。

最大值识别过程：

通过对每一像素值进行求和计算平面415的平均值，且当已对所有像素值进行了求和时，将所得和除以整个图像中像素值的数目。所述结果是平面415的平均值。

平均值识别过程：

通过首先针对图像平面中的每一像素确定平面415的像素值与平均值之间的差值及对每一结果求平方计算平面420的标准偏差值。接着，确定计算出的差值的平均值的平方根，从而提供平面420的标准偏差值。

标准偏差识别过程：

返回参考图4，使用最小值、最大值、平均值及标准偏差通过应用机器学习树计算热点值。所述树是决策树，其是输入值与经由训练方法确定的预设值的一系列对比。训练程序可实施于程序中，例如matlab、r统计程序或任何其它商业上开发的程序或开源程序。训练过程通过捕获已知含有模糊、热点、噪声及/或不均匀照明的一组图像开始。捕获不含有任何模糊、热点、噪声或不均匀照明的另一组图像。第一组被认为是失败组，且第二组被认为是成功组。然后，测量所有图像的模糊值、热点值、噪声值及/或不均匀照明值，且经由标注标记图像或在单独文件(例如不含有缺陷、模糊、热点、噪声及/或不均匀照明的电子表格)中标记图像。还基于缺陷的程度是否使图像不可用于进一步处理而使用通过值或失败值标记所有图像。

可使用分类及回归树(通常简称为cart)完成机器学习树的训练。除了通过/失败值外，通过呈现含有模糊值、热点值、噪声值或不均匀照明值的一系列图像及还呈现不含有任何问题的一系列图像，机器学习适当模式且产生用于对未知图像值进行分类的树。

图9含有具有热点900的图像的实例。已使用r统计建模程序确定了决策树，且以910表示所述树。如上文所指示，可使用其它程序(例如神经网络、支持向量机、splus或matlab)建立决策树来检测热点。在决策树910中，首先做出关于图像中的最大像素值是否大于或等于经预先确定的阈值的确定。

如果图像中的最大值大于所述阈值，那么做出关于平均像素值是否大于或等于经预先确定的平均阈值的确定。如果平均像素值不大于或等于所述阈值，那么确定存在热点，且指示图像为“失败”。如果平均像素值大于或等于所述阈值，那么做出关于标准偏差是否大于或等于经预先确定的阈值的进一步确定。如果标准偏差大于或等于所述阈值，那么确定图像不含有热点，且指示“通过”。如果标准偏差不大于或等于所述阈值，那么确定存在热点，且指示“失败”。

当图像中的最大像素值小于阈值时，做出关于图像中的最小像素值是否大于或等于经预先确定的最小阈值的确定。如果最小像素值大于或等于所述阈值，那么确定图像不含有热点，且指示“通过”。如果最小像素值不大于或等于所述阈值，那么确定存在热点，且指示“失败”。当决策树910的输出是“通过”时，图像的热点条件被认为是真。当决策树910的输出是“失败”时，图像的热点条件被认为是假。如图4中所展示，如果热点决策树返回假430，那么热点旗标被存储为假440。如果热点决策树返回真435，那么热点旗标被存储为真440。

返回参考图2，可对存储的灰度图像320执行的另一处理步骤是确定噪声的存在225。图5说明在图2中确定噪声的存在225的处理步骤中的细节。如图5中所见，在505处将中值模糊应用到灰度图像平面，从而创建信号平面。可使用中值滤波器(例如3x3中值滤波器)应用此中值模糊。在步骤510处，从灰度图像平面减去信号平面，从而创建残余噪声平面。接着，在515处计算残余噪声平面中的噪声的百分位，例如90％。在步骤520处，确定灰度图像中信号的阈值百分位，且在525处，确定图像的信号值及噪声值。在526处，应用机器学习噪声树确定在图像中是否存在额外噪声。如果噪声值大于经预先确定的噪声阈值且信号值大于经预先确定的信号阈值，那么图像含有额外噪声。在527处，执行检查以确定图像是否含有噪声。如果确定存在噪声，那么在535处将噪声旗标设置为真。如果确定不存在模糊，那么在530处将噪声旗标设置为假。接着，在540处，存储被设置为真或假的噪声旗标。

图10说明含有噪声的文档的图像的实例，以及确定图像中的文档的区域是否具有噪声时涉及的决策树及处理。如图10中所见，文档1000的图像含有可被噪声遮蔽的部分。决策树可经实施以确定图像的区域是否包括了太多噪声。如1010中所见，决策树可包括噪声值及信号值的阈值电平，其中基于信号是高于还是低于阈值中的一者或两者而指定通过及失败区域。举例来说，可将噪声阈值设置为6.5且将信号阈值设置为132.5。具有低于132.5的阈值的信号值的文档图像可被认为是可接受的，无论噪声值为何。类似地，具有小于6.5的噪声值的文档图像可被认为是可接受的，无论信号值为何。然而，如1010中所展示，当文档图像具有高于信号阈值的信号值及高于噪声阈值的噪声级两者时，其落于决策树的“失败”区域内，且将文档图像指示为具有不可接受的噪声。

再次返回参考图2，还可对存储的灰度图像320执行模糊确定235。图6说明在图2中确定模糊的存在235的处理步骤中的细节。如图6中所见，在605处对存储的灰度图像320执行拉普拉斯滤波器。接着，在607处，系统计算灰度图像平面的特定阈值百分位直方图值。为了计算直方图，在组成图像的像素的所有列及行内迭代图像中的值。对于每一值，保留计数。当已检查过所有值且对其进行计数之后，生成直方图。特定阈值百分位是其中已对元素的总数目的百分比进行过计数的直方图值。举例来说，第90个百分位直方图值将是对90％像素进行计数的值。在步骤609及610处，计算灰度图像平面的最小值及最大值，如上文关于图4详细论述。在615及620处，使用与上文关于图4详细描述的相同的技术计算灰度图像平面的平均值及标准偏差值。在步骤625处，应用模糊学习树，其进行检查以观察计算得到的标准偏差是高于还是低于经预先确定的值。在图11中展示此学习树的细节，图11说明含有模糊1100的文档的图像的实例。在1110处应用学习树，系统进行检查以观察计算得到的标准偏差是高于还是低于经预先确定的值。如果标准偏差高于所述值，那么推测灰度图像清晰，且由决策树指示“通过”。然而，如果标准偏差低于经预先确定的值，那么推测图像为模糊，且由决策树指示“失败”。图11中的图形1120说明计算得到的高于及低于经预先确定的值的标准偏差的决策树的结果。返回参考图6，在步骤627处，系统确定灰度图像是否含有不可接受的模糊。此确定是基于来自决策树的用于将模糊旗标设置为“真”或“假”的“通过”或“失败”结果。如图2中所见，如果确定存在不可接受的模糊，那么在635处将模糊旗标设置为“真”。如果确定不存在不可接受的模糊，那么在630处将模糊旗标设置为“假”。接着，在640处存储被设置为“真”或“假”的模糊旗标。再次返回参考图2，还可对存储的灰度图像320执行不均匀照明确定230。图7说明在图2中确定不均匀照明的存在230的处理步骤中的细节。如图7中所见，在705处，将高斯模糊滤波器应用到灰度图像以创建模糊图像平面。在707及709处，使用上文在图4中描述的方法确定模糊图像平面的平均值及标准偏差。接着，在710处，将模糊平均图像平面的分数添加到存储的灰度图像平面320。为此，从平均值减去模糊图像，且获得结果的特定部分。接着，将此部分添加回到存储的灰度图像平面以形成所得图像平面。所述部分可为固定的(例如，0.75或75％)，或可取决于被分析的特定图像的特性而变化。图13说明此过程的实例。接着，在715处存储从此加法所得的图像平面。在步骤720、725、730及735处使用上文关于图4描述的过程确定所得图像平面的最小值及最大值、平均值及标准偏差。在740处应用机器学习树。机器学习树进行检查以确定所得图像平面715的最大值是否大于经预先确定的值。如果最大值大于所述值，那么捕获到的图像被认为是具有不均匀照明。在图12中的1210处说明此机器学习树的实例。

图12还说明具有不均匀照明的文档1200的图像的实例。基于来自图7的学习树740的结果，在745处系统进行检查以观察在文档的图像中是否存在不均匀照明。如果确定不存在不均匀照明，那么在750处将不均匀照明旗标设置为“假”。然而，如果确定存在不均匀照明，那么在755处将不均匀照明旗标设置为“真”。接着，在760处存储所设置的不均匀照明旗标。

图8说明可在热点确定220、噪声确定225、不均匀照明确定230及模糊确定235之后执行的处理。如图8中所见，可将信号提供到符合标准交通灯表示的处理系统。如果模糊旗标被设置为真800，那么处理系统可将输出设置为失败805，且数码相机系统可向用户显示红色或停止指示器，从而建议用户应在离开之前重新拍摄图像。这是因为模糊被认为是光学字符辨识的失败模式操作。如果不均匀照明旗标是真810，那么输出被设置为警告，数码相机系统可将警告向用户显示为黄色指示器815。黄色指示器向用户提供其应检查捕获到的图像以确保其质量足以供进行所期望的后处理的信号，从而向用户给出重新拍摄图像可能是必要的通知。接下来，如果热点旗标被设置为真820，那么数码相机系统可向用户显示为黄色指示器815。接下来，如果噪声旗标被设置为真830，那么客户端应用可向用户显示为黄色指示器815。如果旗标(模糊、噪声、不均匀照明或热点)全都不是真，那么客户端应用可向用户显示绿色指示器840以向用户给出捕获到的图像对后处理来说是可接受的反馈。通过提供此反馈，系统允许使用数码相机或包含相机的移动装置作为常规便携式文档扫描仪。关于图像是否对后处理来说是可接受的、对后处理来说是不可接受的、或对后处理来说潜在地是不可接受的反馈可由视觉或听觉通知提供。举例来说，数码相机装置上的显示器可展示彩色编码通知(例如上文描述的红色、绿色及黄色，尽管可使用任何颜色)，指示通过、失败或警告的图标或指示通过、失败或警告的文本。通知也可由可听音调或警示提供。举例来说，可使用不同音调或不同音调序列指示通过、失败或警告。

可使用计算机程序产品实施本文描述的方法。所述计算机程序产品可包含一或多个非暂时性、有形计算机可读存储媒体，例如：磁性存储媒体(例如磁盘(例如软盘)或磁带)；光学存储媒体(例如光盘、光学磁带或机器可读条形码)；固态电子存储装置(例如随机存取存储器(ram)或只读存储器(rom))；或用于存储具有用于控制一或多个计算机实践根据本发明的方法的指令的计算机程序的任何其它物理装置或媒体。