基于ISP的图像处理方法及装置、存储介质和摄像设备与流程

基于isp的图像处理方法及装置、存储介质和摄像设备
技术领域
1.本发明涉及图像处理技术领域，尤其是涉及一种基于isp的图像处理方法及装置、存储介质和摄像设备。


背景技术：

2.目前，相机传感器硬件上的缺陷，导致从相机传感器输出的原始数字图像存在很多缺陷，因此isp(image signal processing，图像信号处理)技术应运而生，由于不断的优化和扩充，isp模块的中的图像处理算法种类也随之增加，例如黑电平矫正、坏点矫正、白平衡矫正、镜头阴影矫正等。然而随着相机的发展，以及拍摄需求的不断提升，在不同的场景下，可能需要新的算法去处理图像来适应不同的场景需求，例如适应夜景模式、人像美颜、背景虚化模式等。
3.以夜景模式为例，普通的拍照模式在夜晚拍照的图像质量并不客观，无论是从高光处的清晰度，还是暗光的亮度，或者动态物体的对齐方向上都存在较大缺陷。针对这一问题，一般是在isp流程的raw域植入第三方的夜景模式算法来对图像进行处理。但是，要解决这个问题避免不了对算法参数的调试，通常这种大型算法的参数多达数千个，若想调试出一个完美的参数搭配，是非常困难的。通常需要在不同的环境中，使用集成算法的设备和对比设备对同一物体进行拍照，在对得到的图像进行对比，根据对比结果对算法进行调试。
4.然而，采用上述方式需要不断拍摄图像，从而浪费大量时间，同时，由于拍摄环境、拍摄角度及抖动等因素的影响，会使图像对比的难度增大，既浪费时间，也使得算法调试难度较大，调试效率及准确性不高。


技术实现要素：

5.本发明旨在至少解决现有技术中存在的技术问题之一。
6.为此，本发明的第一个目的在于提出一种基于isp的图像处理方法，该方法通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
7.为此，本发明的第二个目的在于提出一种基于isp的图像处理装置。
8.为此，本发明的第三个目的在于提出一种计算机可读存储介质。
9.为此，本发明的第四个目的在于提出一种摄像设备。
10.为了达到上述目的，本发明的第一方面的实施例提出了一种基于isp的图像处理方法，该方法包括：确定当前拍摄场景模式；获取对应于所述当前拍摄场景模式的标定图像文件；基于isp模块中对应于所述当前拍摄场景模式的图像处理算法对所述标定图像文件进行处理，得到仿真图像；根据所述仿真图像对所述图像处理算法的参数配置文件进行优化，根据优化后的图像处理算法对所述标定图像文件进行处理，得到目标图像。。
11.根据本发明实施例的基于isp的图像处理方法，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
12.在一些实施例中，获取对应于所述当前拍摄场景模式的标定图像文件，包括：获取当前拍摄场景下拍摄的初始图像；将所述初始图像对应的数字图像文件替换为预设数字图像文件，将所述初始图像对应的数据信息替换为预设数据信息，以得到所述标定图像文件。
13.在一些实施例中，根据所述仿真图像对所述图像处理算法的参数配置文件进行优化，包括：将所述仿真图像与预设图像进行对比，根据对比结果对所述图像处理算法的参数配置文件进行优化。
14.在一些实施例中，根据对比结果对所述图像处理算法的参数配置文件进行优化，包括：若所述仿真图像相对于所述预设图像存在缺陷，则对所述图像处理算法的参数配置文件进行调试，直至根据调试后的图像处理算法处理得到的仿真图像相对于所述预存图像不存在缺陷。
15.在一些实施例中，所述当前拍摄场景模式包括夜景模式、人像模式、背景虚化模式及广角镜头模式中的任意一种。
16.为了达到上述目的，本发明的第二方面实施例提出的一种基于isp的图像处理装置，该装置包括：确定模块，用于确定当前拍摄场景模式；获取模块，用于获取对应于所述当前拍摄场景模式的标定图像文件；第一处理模块，用于基于isp模块中对应于所述当前拍摄场景模式的图像处理算法对所述标定图像文件进行处理，得到仿真图像；第二处理模块，用于根据所述仿真图像对所述图像处理算法的参数配置文件进行优化，根据优化后的图像处理算法对所述标定图像文件进行处理，得到目标图像。
17.根据本发明实施例的基于isp的图像处理装置，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
18.在一些实施例中，所述获取模块，具体用于：获取当前拍摄场景下拍摄的初始图像；将所述初始图像对应的数字图像文件替换为预设数字图像文件，将所述初始图像对应的数据信息替换为预设数据信息，以得到所述标定图像文件。
19.在一些实施例中，所述第二处理模块，具体用于：将所述仿真图像与预设图像进行对比，根据对比结果对所述图像处理算法的参数配置文件进行优化。
20.为了达到上述目的，本发明的第三方面实施例提出的一种非临时性计算机可读存储介质，所述计算机可读存储介质上存储有基于isp的图像处理程序，所述基于isp的图像处理程序被处理器执行时实现如上述实施例所述的基于isp的图像处理方法。
21.根据本发明实施例的非临时性计算机可读存储介质，其上存储的基于isp的图像处理程序被处理器执行时，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
22.为了达到上述目的，本发明的第四方面实施例提出的一种摄像设备，该摄像设备包括：上述实施例所述的基于isp的图像处理装置；或者，该摄像设备包括：处理器、存储器和存储在所述存储器上并可在所述处理器上运行的基于isp的图像处理程序，所述基于isp的图像处理程序被所述处理器执行时实现如上述实施例所述的基于isp的图像处理方法。
23.根据本发明实施例的摄像设备，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
24.本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
25.本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：
26.图1是根据本发明一个实施例的基于isp的图像处理方法的流程图；
27.图2是根据本发明一个具体实施例的基于isp的图像处理方法的流程图；
28.图3是根据本发明一个实施例的基于isp的图像处理装置的框图；
29.图4是根据本发明一个实施例的摄像设备的框图。
具体实施方式
30.为了能够更加详尽地了解本发明实施例的特点与技术内容，下面结合附图对本发明实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本发明实施例。在以下的技术描述中，为方便解释起见，通过多个细节以提供对所披露实施例的充分理解。然而，在没有这些细节的情况下，一个或多个实施例仍然可以实施。在其它情况下，为简化附图，熟知的结构和装置可以简化展示。
31.下面参考图1和图2描述根据本发明实施例的基于isp的图像处理方法，如图1所示，本发明实施例的基于isp的图像处理方法至少包括步骤s1-步骤s4。
32.步骤s1，确定当前拍摄场景模式。
33.在实施例中，当前拍摄场景模式包括夜景模式、人像美颜模式、背景虚化模式及广角镜头模式等，根据拍摄需求不同，用户可选择不同的拍摄场景模式，相应的，不同拍摄场景模式对应的图像处理算法也不同，对拍摄图像的处理方式也不同。通过确定当前拍摄场景模式，便于在当前拍摄场景模式下进行图像的拍摄，以便调取相应的图像处理算法来对拍摄图像进行处理，最终输出用户需求的图像。
34.步骤s2，获取对应于当前拍摄场景模式的标定图像文件。
35.在实施例中，标定图像文件是提前存储至文件系统指定目录下的图像文件，通过对某一物体进行多次拍摄，得到多组离线图像文件，将图像质量相对较好的离线图像文件作为标定图像文件，并存储至摄像设备例如手机的文件系统指定目录下，以便后续的调取使用。
36.可以理解的是，标定图像文件包括数字图像buffer(缓冲寄存器)和metadata(元数据)，数字图像buffer指的是从摄像头传感器采集的原始数字图像文件，例如通过图像传感器采集的原始图像。metadata数据指的是拍照时图像的各种属性，例如iso(international standards organization，感光度)、曝光时间、白平衡增益及颜色校正矩阵等属性数据。通过获取对应于当前拍摄场景模式的标定图像文件，便于使用标定图像文件替代实时拍摄的图像文件进行图像处理，由于标定图像文件是预存的，因此，使用标定图像文件，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等的不可控因素导致的调试障碍，从而，在提高调试效率的同时，提高了调试的准确性。其中，不同拍摄场景模式下，由于图像处理需求不同，预存的标定图像文件对应不同。
37.步骤s3，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像。
38.在实施例中，获取当前拍摄场景模式的标定图像文件后，根据当前拍摄场景模式调用isp模块中对应于该当前拍摄场景模式的图像处理算法，例如当前拍摄场景模式为夜景模式，则调用对应于夜间模式的图像处理算法，又例如当前拍摄场景模式为人像美颜模式，则调用对应于人像美颜模式的图像处理算法。进而，基于isp模块中的调取的相应图像处理算法对标定图像文件进行处理，即可得到文件系统中预先存放的标定图像文件经处理后的仿真图像。
39.可以理解的是，通过将不同拍摄场景模式的图像处理算法写入isp模块中的特定节点，以在不同场景模式下对标定图像文件的处理，从而达到在不同场景下对图像处理的不同需求。
40.步骤s4，根据仿真图像对图像处理算法的参数配置文件进行优化，根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像。
41.在实施例中，目标图像是当前拍摄场景模式下的质量最优的图像或者可以满足用户需求的图像。得到仿真图像后，检测仿真图像是否存在缺陷，若仿真图像存在缺陷，则根据仿真图像对图像处理算法的参数配置文件进行优化，例如通过修改图像处理算法中的参数配置文件，在修改完成后，再次触发拍照流程，对标定图像文件再次进行仿真，再次输出仿真图像，直至得到目标图像。
42.可以理解的是，在不同参数配置文件下输出的仿真图像，该仿真图像除了参数配
置文件不同，其余不可控因素均相同，例如拍摄角度及抖动情况等不可控因素均相同，因此，仅通过对图像处理算法中的参数配置文件进行优化，即可得到质量最优的目标图像。
43.根据本发明实施例的基于isp的图像处理方法，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
44.在一些实施例中，获取对应于当前拍摄场景模式的标定图像文件，包括：获取当前拍摄场景下拍摄的初始图像；将初始图像对应的数字图像文件替换为预设数字图像文件，将初始图像对应的数据信息替换为预设数据信息，以得到标定图像文件。
45.在实施例中，获取当前拍摄场景下拍摄的初始图像的过程中，例如触发拍照流程时，使用预设的数字图像文件代替初始图像对应的数字图像文件，使用预设数据信息代替初始图像对应的数据信息，因此，在触发拍照流程时，得到的图像文件为标定图像文件。通过使用当前拍摄场景模式的标定图像文件代替初始图像，并在使用图像处理算法进行图像处理时，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等的不可控因素导致的调试障碍，从而，在提高调试效率的同时，提高了调试的准确性。
46.在一些实施例中，根据仿真图像对图像处理算法的参数配置文件进行优化，包括：将仿真图像与预设图像进行对比，根据对比结果对图像处理算法的参数配置文件进行优化。
47.在实施例中，预设图像可以理解为至少需要达到的图像质量，得到仿真图像后，通过将仿真图像与预设图像进行对比，例如可以进行图像的各项参数对比，根据比较结果对图像处理算法的参数配置文件进行调整优化，以对图像处理算法进行调试优化，在对图像处理算法进行调试优化后，根据优化后的图像处理算法再次对标定图像进行处理，再根据处理结果优化图像处理算法，从而实现对图像处理算法的不断调整。
48.在一些实施例中，根据对比结果对图像处理算法的参数配置文件进行优化，包括：若仿真图像相对于预设图像存在缺陷，则对图像处理算法的参数配置文件进行调试，直至根据调试后的图像处理算法处理得到的仿真图像相对于预存图像不存在缺陷。
49.在实施例中，若仿真图像与预设图像相比，仿真图像存在缺陷，例如仿真图像的清晰度较低，此时，通过对图像处理算法的参数配置文件进行调试，并在调试完成后继续对标定图像文件进行处理，得到仿真图像，通过不断调整图像处理算法的配置文件参数，并在参数调整完成后，再次触发拍照流程，对标定图像文件再次进行处理，直至得到在当前拍摄场景下的仿真图像相对于预设图像不存在缺陷，如清晰度高于或等于预设图像时，停止对参数配置文件进行调试，输出此时对应的图像，即目标图像。
50.在另一些实施例中，在对标定图像文件进行处理时，可将获取标定图像文件、调试算法配置文件、拍摄动作及仿真过程进行整合，实现一键调试，从而提升图像处理算法的调试效率。
51.下面结合图2对本发明实施例的基于isp的图像处理方法进行说明，如图2所示，为本发明一个实施例的基于isp的图像处理方法的流程图。
52.步骤s11，在夜景场景模式下拍照。
53.步骤s12，获取当前拍摄场景下拍摄的初始图像。
54.步骤s13，将初始图像对应的数字图像文件替换为预设数字图像文件，将初始图像对应的数据信息替换为预设数据信息，以得到标定图像文件。
55.步骤s14，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像。
56.步骤s15，将仿真图像与预设图像进行对比。
57.步骤s16，判断仿真图像相对于预设图像是否存在缺陷，若是，执行步骤s17；若否，执行步骤s18。
58.步骤s17，对图像处理算法的参数配置文件进行调试。
59.步骤s18，结束。
60.根据本发明实施例的基于isp的图像处理方法，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
61.下面描述本发明实施例的基于isp的图像处理装置。
62.如图3所示，本发明实施例的基于isp的图像处理装置2，该装置包括：确定模块20、获取模块21、第一处理模块22和第二处理模块23，确定模块20用于确定当前拍摄场景模式；获取模块21用于获取对应于当前拍摄场景模式的标定图像文件；第一处理模块22用于基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像；第二处理模块23用于根据仿真图像对图像处理算法的参数配置文件进行优化，根据优化后的图像处理算法对所述标定图像文件进行处理，得到目标图像。
63.根据本发明实施例的基于isp的图像处理装置2，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
64.在一些实施例中，获取模块21，具体用于：获取当前拍摄场景下拍摄的初始图像；将初始图像对应的数字图像文件替换为预设数字图像文件，将初始图像对应的数据信息替换为预设数据信息，以得到标定图像文件。
65.在一些实施例中，所述第二处理模块23，具体用于：将仿真图像与预设图像进行对比，根据对比结果对图像处理算法的参数配置文件进行优化。
66.在一些实施例中，所述第二处理模块23，具体用于：当仿真图像相对于预设图像存在缺陷时，对图像处理算法的参数配置文件进行调试，直至根据调试后的图像处理算法处理得到的仿真图像相对于预存图像不存在缺陷。
67.为了达到上述目的，本发明的第三方面实施例提出的一种非临时性计算机可读存储介质，所述计算机可读存储介质上存储有基于isp的图像处理程序，所述基于isp的图像处理程序被处理器执行时实现如上述实施例所述的基于isp的图像处理方法。
68.下面描述本发明实施例的摄像设备。
69.在具体实施例中，该摄像设备例如为但不限于具有拍照功能的相机、手机、平板电脑、可穿戴设备等电子设备。
70.在一些实施例中，摄像设备包括：上述实施例的基于isp的图像处理装置2，即该电子设备可包括：用于确定当前拍摄场景模式的确定模块20；以及用于获取对应于当前拍摄场景模式的标定图像文件的获取模块21；以及用于基于isp模块中对应于所述当前拍摄场景模式的图像处理算法对所述标定图像文件进行处理，得到仿真图像的第一处理模块22；以及用于根据所述仿真图像对所述图像处理算法的参数配置文件进行优化，根据优化后的图像处理算法对所述标定图像文件进行处理，得到目标图像的第二处理模块23。由此，在一些实施例中，当该摄像设备在进行图像处理时，其具体实现方式与本发明上述任意一个实施例所描述的基于isp的图像处理装置2类似，具体可参见前述关于该基于isp的图像处理装置2部分的描述，为减少冗余，此处不再赘述。
71.在另一些实施例中，如图4所示，该摄像设备包括至少一个处理器(processor)1000，图4中以一个处理器1000为例；和存储器(memory)2000，还可以包括通信接口(communication interface)3000和总线4000。其中，处理器1000、存储器2000、通信接口3000可以通过总线4000完成相互间的通信。通信接口3000可以用于信息传输。处理器1000可以调用存储器2000中的逻辑指令，以执行上述实施例的基于isp的图像处理方法。
72.此外，上述的存储器2000中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。
73.存储器2000作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序，如本发明实施例中的方法对应的程序指令/模块。处理器1000通过运行存储在存储器2000中的软件程序、指令以及模块，从而执行功能应用以及数据处理，即实现上述方法实施例中的基于isp的图像处理方法。
74.存储器2000可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端设备的使用所创建的数据等。此外，存储器2000可以包括高速随机存取存储器，还可以包括非易失性存储器。
75.本发明实施例的技术方案可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括一个或多个指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明实施例所述方法的全部或部分步骤。而前述的存储介质可以是非暂态存储介质，包括：u盘、移动硬盘、只读存储器(rom，read-only memory)、随机存取存储器(ram，random access memory)、磁碟或者光盘等多种可以存储程序代码的介
质，也可以是暂态存储介质。
76.需要说明的是，本发明实施例的摄像设备在进行拍照时，其具体实现方式与本发明实施例的基于isp的图像处理方法的具体实现方式类似，具体请参见方法部分的描述，为了减少冗余，此处不再赘述。
77.根据本发明实施例的摄像设备，通过获取对应于当前拍摄场景模式的标定图像文件，基于isp模块中对应于当前拍摄场景模式的图像处理算法对标定图像文件进行处理，得到仿真图像，根据仿真图像对图像处理算法的参数配置文件进行优化，并根据优化后的图像处理算法对标定图像文件进行处理，得到目标图像，由此，通过图像处理算法对标定图像文件进行处理，根据处理结果对图像处理算法进行调试优化，由于标定图像文件是预存的，通过对预存的标定图像文件进行处理，无需不断拍摄，可以避免拍摄环境及拍摄角度变化等不可控因素导致的算法调试障碍，从而，在提高算法调试效率的同时，提高了算法调试的准确性。
78.当用于本发明中时，虽然术语“第一”、“第二”等可能会在本发明中使用以描述各元件，但这些元件不应受到这些术语的限制。这些术语仅用于将一个元件与另一个元件区别开。比如，在不改变描述的含义的情况下，第一元件可以叫做第二元件，并且同样第，第二元件可以叫做第一元件，只要所有出现的“第一元件”一致重命名并且所有出现的“第二元件”一致重命名即可。第一元件和第二元件都是元件，但可以不是相同的元件。
79.本发明中使用的用词仅用于描述实施例并且不用于限制权利要求。如在实施例以及权利要求的描述中使用的，除非上下文清楚地表明，否则单数形式的“一个”(a)、“一个”(an)和“所述”(the)旨在同样包括复数形式。类似地，如在本发明中所使用的术语“和/或”是指包含一个或一个以上相关联的列出的任何以及所有可能的组合。另外，当用于本发明中时，术语“包括”(comprise)及其变型“包括”(comprises)和/或包括(comprising)等指陈述的特征、整体、步骤、操作、元素，和/或组件的存在，但不排除一个或一个以上其它特征、整体、步骤、操作、元素、组件和/或这些的分组的存在或添加。
80.所描述的实施例中的各方面、实施方式、实现或特征能够单独使用或以任意组合的方式使用。所描述的实施例中的各方面可由软件、硬件或软硬件的结合实现。所描述的实施例也可以由存储有计算机可读代码的计算机可读介质体现，该计算机可读代码包括可由至少一个计算装置执行的指令。所述计算机可读介质可与任何能够存储数据的数据存储装置相关联，该数据可由计算机系统读取。用于举例的计算机可读介质可以包括只读存储器、随机存取存储器、cd-rom、hdd、dvd、磁带以及光数据存储装置等。所述计算机可读介质还可以分布于通过网络联接的计算机系统中，这样计算机可读代码就可以分布式存储并执行。
81.上述技术描述可参照附图，这些附图形成了本发明的一部分，并且通过描述在附图中示出了依照所描述的实施例的实施方式。虽然这些实施例描述的足够详细以使本领域技术人员能够实现这些实施例，但这些实施例是非限制性的；这样就可以使用其它的实施例，并且在不脱离所描述的实施例的范围的情况下还可以做出变化。比如，流程图中所描述的操作顺序是非限制性的，因此在流程图中阐释并且根据流程图描述的两个或两个以上操作的顺序可以根据若干实施例进行改变。作为另一个例子，在若干实施例中，在流程图中阐释并且根据流程图描述的一个或一个以上操作是可选的，或是可删除的。另外，某些步骤或功能可以添加到所公开的实施例中，或两个以上的步骤顺序被置换。所有这些变化被认为
包含在所公开的实施例以及权利要求中。
82.另外，上述技术描述中使用术语以提供所描述的实施例的透彻理解。然而，并不需要过于详细的细节以实现所描述的实施例。因此，实施例的上述描述是为了阐释和描述而呈现的。上述描述中所呈现的实施例以及根据这些实施例所公开的例子是单独提供的，以添加上下文并有助于理解所描述的实施例。上述说明书不用于做到无遗漏或将所描述的实施例限制到本发明的精确形式。根据上述教导，若干修改、选择适用以及变化是可行的。在某些情况下，没有详细描述为人所熟知的处理步骤以避免不必要地影响所描述的实施例。