实时图像处理方法及装置、电子设备、存储介质与流程

本公开涉及计算机技术领域，尤其涉及一种实时图像处理方法、实时图像处理装置、电子设备及计算机可读存储介质。

背景技术：

随着计算机技术的发展，图像处理得到了越来越广泛的应用，终端上也出现了越来越多易操作的图像处理软件，例如图片美化软件、图片拼接软件等，方便了人们的日常生活。

在图像处理中，经常需要将原始图像的部分区域替换为其他图像，以实现多样化的图像效果。现有技术在对原始图像进行区域替换处理时，一般需要通过光标或套索等工具人为地选定需要替换的区域，再与其他图像进行合成，得到处理后的图像。然而，该方法需要用户进行选定区域的操作，通常只能对图像进行后处理，对于实时图像，用户可能需要对其中不同帧的图像分别选定区域，则无法通过该方法实现实时处理。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

技术实现要素：

本公开提供了一种实时图像处理方法、实时图像处理装置、电子设备及计算机可读存储介质，进而至少在一定程度上克服现有技术无法对实时图像进行实时处理的问题。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

根据本公开的一个方面，提供一种实时图像处理方法，包括：获取实时原始图像和背景图像；确定所述实时原始图像中满足预设色值条件的待处理区域；将所述实时原始图像中的待处理区域替换为所述背景图像中的预设区域。

在本公开的一种示例性实施例中，所述将所述实时原始图像中的待处理区域替换为所述背景图像中的预设区域包括：将所述背景图像的尺寸调整为所述实时原始图像的尺寸；根据所述待处理区域在所述实时原始图像中的位置，确定所述背景图像中的预设区域的位置；将所述待处理区域替换为所述背景图像中的所述预设区域。

在本公开的一种示例性实施例中，所述预设色值条件包括多个预设色值条件。

在本公开的一种示例性实施例中，所述确定所述原始图像中满足预设色值条件的待处理区域包括：分别确定所述实时原始图像中满足每个预设色值条件的待处理区域。

在本公开的一种示例性实施例中，所述实时图像处理方法还包括：接收外部输入的待确认色值条件；将所述待确认色值条件所对应的颜色区间展示于预览区域；响应于外部输入的确认指令，将所述待确认色值条件确定为所述预设色值条件。

在本公开的一种示例性实施例中，所述将所述实时原始图像中的待处理区域替换为所述背景图像中的预设区域包括：增加所述实时原始图像的待处理区域的透明度；将增加透明度后的所述待处理区域与所述背景图像中的所述预设区域进行图层叠加。

在本公开的一种示例性实施例中，所述背景图像包括动态背景图像。

根据本公开的一个方面，提供一种实时图像处理装置，包括：图像获取模块，用于获取实时原始图像和背景图像；区域确定模块，用于确定所述实时原始图像中满足预设色值条件的待处理区域；图像替换模块，用于将所述实时原始图像中的待处理区域替换为所述背景图像中的预设区域。

根据本公开的一个方面，提供一种电子设备，包括：处理器；以及存储器，用于存储所述处理器的可执行指令；其中，所述处理器配置为经由执行所述可执行指令来执行上述任意一项所述的方法。

根据本公开的一个方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任意一项所述的方法。

本公开的示例性实施例具有以下有益效果：

获取实时原始图像和背景图像，确定实时原始图像中满足预设色值条件的待处理区域，利用背景图像的预设区域对实时原始图像的待处理区域进行替换处理。一方面，在确定预设色值条件后，可以始终按照预设色值条件对实时原始图像进行待处理区域的选择与替换处理，无需用户针对于每一帧图像手动选定区域，从而能够即时地确定待处理区域，实现对于实时原始图像的实时处理，并且简化用户的操作过程。另一方面，预设色值条件可以灵活而精确地确定待处理区域的颜色范围，当实时原始图像中某一区域的颜色发生微小变化时，例如上一帧图像中的绿色区域在下一帧图像中由于光线、拍摄角度等的变化显示为更深的绿色，如果上一帧图像中手动选定了该区域，则在下一帧中可能无法继续识别该区域，而本示例性实施例可以设置关于绿色的范围性条件，从而可以降低实时原始图像中颜色变化对区域识别造成的影响，提高图像处理过程的灵活性与精确性。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示意性示出本示例性实施例中一种实时图像处理方法的应用场景示意图；

图2示意性示出本示例性实施例中一种实时图像处理方法的流程图；

图3示意性示出本示例性实施例中一种实时图像处理方法的子流程图；

图4示意性示出本示例性实施例中一种实时图像处理方法的交互流程图；

图5示意性示出本示例性实施例中一种实时图像处理装置的结构框图；

图6示意性示出本示例性实施例中一种用于实现上述方法的电子设备；

图7示意性示出本示例性实施例中一种用于实现上述方法的计算机可读存储介质。

具体实施方式

现在将参考附图更全面地描述示例实施方式。然而，示例实施方式能够以多种形式实施，且不应被理解为限于在此阐述的范例；相反，提供这些实施方式使得本公开将更加全面和完整，并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。

本公开的示例性实施例首先提供了一种实时图像处理方法，可以将一组实时图像中的部分区域动态地替换为其他图像。本示例性实施例的应用场景可以是：在拍照时对摄像头采集的实时图像进行背景更换，将视频图像中的某一元素替换为其他元素(如将人脸替换为宠物脸或明星脸)，在实时图像中的特定区域叠加其他图像(如在黑色区域添加文字)等等。图1示出了本示例性实施例的一种应用场景，指定图中固体胶的中间标签区域，将该区域替换为二维码图片，则在摄像头采集的实时图像中，无论固体胶如何移动，中间区域都将显示为该二维码图片。

下面结合附图2对本示例性实施例做进一步说明，如图2所示，实时图像处理方法可以包括以下步骤s210～s230：

步骤s210，获取实时原始图像和背景图像。

其中，实时原始图像是指需要进行处理的初始图像，可以通过手机、相机、dv(digitalvideo，数码摄像机)等终端的摄像头实时获取图像流，采集图像帧数据，例如通过相机即时捕获相片或视频，或者通过手机摄像头获取正在进行视讯通话的图像等等。在本实施例中，终端在采集实时原始图像后，可以在程序后台将其即时的转换像素点色值阵列，以便于后续处理。

在一示例性实施例中，针对于android系统的移动终端，可以通过surfacetexture(一种android平台的视频展示控件)获取实时原始图像，然后将其同步到opengl(开放图形库，用于渲染矢量图形的应用程序编程接口)中，结合openglvertexshader(顶点着色器)与openglfragmentshader(片段着色器)处理实时原始图像，将其转换为像素点阵列，并确定每个像素点的色值。

背景图像即上述用于替换实时原始图像的部分区域的其他图像，可以是指定的图像，例如用户可以从终端的个人相册或网络图片库中选择背景图像，背景图像也可以是根据用户提供的关键词在线搜索并选取的图像，例如用户可以输入关键词“天空”，终端可以自动在线搜索关于“天空”的图像，并从中随机选择背景图像等等，本实施例对此不做特别限定。

需要说明的是，获取实时原始图像与获取背景图像可视为两个相互独立的过程，本实施例对于其先后顺序不做特别限定，例如可以先获取背景图像，然后在获取实时原始图像的过程中动态展示用背景图像进行区域替换的效果，也可以在获取实时原始图像的过程中设置选择背景图像的界面，使用户可以实时地选择对比不同背景图像替换的效果。

步骤s220，确定实时原始图像中满足预设色值条件的待处理区域。

其中，待处理区域是指实时原始图像中需要进行替换处理的区域。在本实施例中，待处理区域是通过预设色值条件来具体确定的，预设色值条件是指用户预先设定的关于待处理区域的色值特征，可以是色值的数值范围，也可以是确定的色值数值等，例如对于rgb颜色模式的实时原始图像，预设色值条件可以设置为g-b＞25&&g-r＞25(&&表示“且”)，以表示待处理区域为具有一定绿色倾向的区域，或者也可以设置为rgb＝(0,0,0)，以表示待处理区域为黑色区域等。需要说明的是，待处理区域可以是一个，也可以是多个，只要是实时原始图像中满足预设色值条件的区域，都可以将其确定为待处理区域，以进行后续的替换处理。

用户可以通过多种方式确定预设色值条件，例如直接编辑数值条件、在可视的颜色板上选定色值区域等。在一示例性实施例中，参考图3所示，实时图像处理方法可以包括以下用于确定预设色值条件的步骤s310～s330：

步骤s310，接收外部输入的待确认色值条件；

步骤s320，将待确认色值条件所对应的颜色区间展示于预览区域；

步骤s330，响应于外部输入的确认指令，将待确认色值条件确定为预设色值条件。

其中，待确认色值条件即用户输入的数值条件，颜色区间可以是待确认色值条件对应的可视化的颜色范围，预览区域用于展示该颜色区间，通常为小窗口或子界面的形式。举例而言，当用户输入g-b＞25&&g-r＞25的待确认色值条件时，预览区域可以展示出其对应的具有一定绿色倾向的连续变化的颜色区间；当用户调整待确认色值条件的数值时，预览区域可以同步变化，实时显示当前的待确认色值条件对应的颜色区间，直到用户获得理想的颜色区间，可以通过点击确认键或双击预览区域等确认指令将待确认条件确定为预设色值条件。该方法将抽象的预设色值条件转换为可视化的颜色区间并加以展示，使用户可以直观的确定预设色值条件，且便于对其数值进行精细化调整，从而得到理想的预设色值条件。

在一示例性实施例中，也可以通过以下步骤确定预设色值条件：

响应于外部输入的在全部颜色区域中选定样本区域的操作，根据样本区域的颜色区间确定预设色值条件。

其中，全部颜色区域是指包含了所有颜色连续变化的区域，用户可以在其中通过套索或方框等工具选定样本区域，样本区域的颜色即用户需要在实时原始图像中进行替换处理的区域的颜色，通常不是单一颜色，而是颜色区间，程序可以将该颜色区间转换为数值形式的色值条件，即预设色值条件。用户也可以在初步选定样本区域后，调整样本区域的位置或大小，程序同步调整样本区域对应的预设色值条件，直到用户通过点击确认键等方式最终确定预设色值条件。该方法可以使用户可以在不具备色值理论基础的情况下可视化地选区预设色值条件，降低了用户的学习成本。

步骤s230，将实时原始图像中的待处理区域替换为背景图像中的预设区域。

其中，预设区域是指背景图像中的部分或整体用来替换待处理区域的区域，可以是用户在选择背景图像时选定的区域，也可以是程序通过自适应实时原始图像的待处理区域而确定的区域等。替换可以包括完全替换与不完全替换，完全替换是指将实时原始图像中的待处理区域进行抠除，然后将背景图像中的预设区域在抠除的部分进行填补，不完全替换是指对实时原始图像的待处理区域进行透明化处理，然后将待处理区域与背景图像中的预设区域进行叠加等。

图4示意性示出本实施例中一种实时图像处理方法的交互流程图。如图4所示，执行该方法的终端可以包括摄像模块410、图像处理模块420、输入模块430和显示模块440。其中，摄像模块410可以执行s210中采集实时原始图像的步骤，输入模块430可以根据用户的选择操作执行s210中选择背景图像的步骤，实时原始图像与背景图像可以发送至图像处理模块420以进行后续的处理步骤。输入模块430可以执行步骤s310，接收用户输入的待确认色值条件，并将其发送到显示模块440，显示模块440执行步骤s320，将待确认色值条件对应的颜色区域显示于预览区域，使得用户可以确认是否选择当前的条件，输入模块430在接收到用户的确认操作后，执行步骤s330以确定预设色值条件。输入模块430将确认的预设色值条件发送到图像处理模块420，使得图像处理模块420基于该预设色值条件，执行步骤s220以确定与实时原始图像中的待处理区域，再执行步骤s230以完全待处理区域的替换处理。图像处理模块420将处理后的实时图像发送至显示模块440，最后由显示模块440执行步骤s240将其加以显示。

基于上述说明，在本示例性实施例中，获取实时原始图像和背景图像，确定实时原始图像中满足预设色值条件的待处理区域，利用背景图像的预设区域对实时原始图像的待处理区域进行替换处理。一方面，在确定预设色值条件后，可以始终按照预设色值条件对实时原始图像进行待处理区域的选择与替换处理，无需用户针对于每一帧图像手动选定区域，从而能够即时地确定待处理区域，实现对于实时原始图像的实时处理，并且简化用户的操作过程。另一方面，预设色值条件可以灵活而精确地确定待处理区域的颜色范围，当实时原始图像中某一区域的颜色发生微小变化时，例如上一帧图像中的绿色区域在下一帧图像中由于光线、拍摄角度等的变化显示为更深的绿色，如果上一帧图像中手动选定了该区域，则在下一帧中可能无法继续识别该区域，而本示例性实施例可以设置关于绿色的范围性条件，从而可以降低实时原始图像中颜色变化对区域识别造成的影响，提高图像处理过程的灵活性与精确性。

在一示例性实施例中，步骤s230可以包括以下步骤：

将背景图像的尺寸调整为实时原始图像的尺寸；

根据待处理区域在实时原始图像中的位置，确定背景图像中的预设区域的位置；

将待处理区域替换为背景图像中的预设区域。

通常在用户选定背景图像时，可以不限定背景图像的尺寸，则背景图像很可能与实时原始图像的尺寸不同，为了便于利用背景图像对实时原始图像进行替换处理，可以先将背景图像进行缩放处理以调整其尺寸，使其与实时原始图像的尺寸相同。在匹配尺寸一致后，可以将实时原始图像的待处理区域替换为背景图像中相同位置的区域，即预设区域。在本示例性实施例中，可以将实时原始图像完全地置于1:1的背景图像之上，将待处理区域抠除，暴露出背景图像的对应区域，从而叠加得到处理后的图像。例如，实时原始图像为树加蓝天的风景图像，待处理区域可以为其中蓝天部分的背景区域，而背景图像为黄昏的天空；在处理时，可以将背景图像调整到实时原始图像的大小，然后将实时原始图像中的蓝天背景区域整个替换为背景图像中的黄昏天空。可见，该方法特别适用于背景图像的重复性较强的场景，且将待处理区域进行等位置的1:1替换，可以提高处理后图像的匹配度。

在一示例性实施例中，也可以将背景图像的尺寸调整为实时原始图像中待处理区域的尺寸，替换时，直接将调整完成的背景图像填充进待处理区域内。例如图1所示的场景中，可以设置实时原始图像的待处理区域为固体胶中间偏绿色的标签区域，背景图像为二维码图片，则在采集实时原始图像的过程中，当固体胶在图像中移动，特别是靠近或远离相机的镜头时，待处理区域在图像中的相对大小发生变化；将作为背景图像的二维码图片实时的调整尺寸，以适应待处理区域的大小，使得无论待处理区域如何变化，始终可以将其替换为完整的二维码图片。从而保证了背景图像的完整性，特别适用于背景图像整体作为一个元素填充实时原始图像的场景。

在一示例性实施例中，预设色值条件可以包括多个预设色值条件。

即可以提供多个输入预设色值条件的区域或控件，是用户可以编辑多个预设色值条件，例如用户可以同时设置具有红色倾向的预设色值条件与具有绿色倾向的预设色值条件，或者同时设置关于r色值范围的预设色值条件与关于g色值范围的预设色值条件等，从而实现对于待处理区域更加精细的划分与确定。

需要说明的是，多个预设色值条件可以共同确定待处理区域，即待处理区域需要同时满足用户设置的全部预设色值条件；多个预设色值条件也可以用于确定不同的待处理区域。具体而言，预设色值条件与待处理区域之间可以是“一对一”、“一对多”、“多对一”或“多对多”的形式，本实施例对此不做特别限定。

在一示例性实施例中，步骤s220可以通过以下步骤实现：

分别确定实时原始图像中满足每个预设色值条件的待处理区域。

即可以提供多个输入预设色值条件的区域，每个区域用于确定一类待处理区域，每一类待处理区域可以是一个区域，也可以是多个区域，即上述预设色值条件与待处理区域之间“一对一”及“一对多”的形式。例如可以设置具有红色倾向的预设色值条件以确定第一类待处理区域，同时设置具有绿色倾向的预设色值条件以确定第二类待处理区域。

进一步的，可以在每个预设色值条件的输入区域后设置选择背景图像的选项，使用户可以针对于每个预设色值条件确定的每一类待处理区域，分别选择不同的背景图像，从而在实时原始图像中将不同的区域替换为不同的背景图像，例如图1中可以将绿色标签区域替换为二维码图片，还可以将背景区域替换为纯色、天空、景深图等，以实现对实时原始图像更加多样化的处理。

在一示例性实施例中，步骤s230也可以通过以下步骤实现：

增加实时原始图像的待处理区域的透明度；

将增加透明度后的待处理区域与背景图像中的预设区域进行图层叠加。

上述步骤即不完全替换的过程。通常透明度越高，待处理区域越“透明”，透明度100％即完全透明的状态，在rgba颜色模式的图像中，可以调节待处理区域的a通道数值以调节其透明度。在增加待处理区域的透明度后，可以将其与背景图像中的预设区域进行图层叠加，图层叠加可以为不混合颜色的情况下，将背景图像置于待处理区域的下层，使得待处理区域同时显示实时原始图像与背景图像，例如可以增加图1中绿色标签区域的透明度，并将背景图像的二维码图片叠加在其下层，显示出底色为绿色的二维码图片。应当理解，也可以在不改变待处理区域的透明度的情况下直接叠加背景图像的预设区域，例如背景图像为文字图像时，可以将其中的文字叠加到实时原始图像中的待处理区域，这种情况中，背景图像通常具有一定透明度，以避免将待处理区域完全遮挡。通过该方法可以进一步实现对于实时原始图像的多样化处理，得到更加复杂的处理效果。

在一示例性实施例中，背景图像也可以是动态背景图像。则实时原始图像与背景图像均为动态图像，可以设置实时原始图像与背景图像的帧对应，实现动态的替换处理。

其中，动态背景图像可以是实时获取的动态图像，也可以预先选取的一段视频，还可以是预先选取的多张静态图片进行动态切换所形成的动态图片等等。以下对实时原始图像与动态背景图像的替换处理进行举例说明：可以同时开启手机的前摄像头与后摄像头，实时捕获动态图像，设定前置摄像头捕获的图像为实时原始图像，后置摄像头捕获的图像为背景图像时，手机可以同时处理实时原始图像和背景图像，将背景图像实时替换至实时原始图像中的待处理区域；当然也可以设置前置摄像头捕获的图像为背景图像，后置摄像头捕获的图像为实时原始图像。考虑到不同的动态图像帧率的差别，在替换时，可以将实时原始图像与背景图像的帧率调整为同一标准，也可以根据应用场景及环境的不同进行适应性调整，例如实时原始图像为一个正在奔跑的人，背景图像为一艘正在缓慢漂流的船的视频，当将背景图像替换至实时原始图像的部分区域时，可以使实时原始图像与背景图像的帧率相同，使得奔跑的人与漂流的船形成同步效果；当然也可以保持两种图像各自的帧率。对于背景图像为动态图片的情况，可以设置一定的切换频率，例如每秒切换一次等，在采集实时原始图像时可以根据设定的频率展示背景图像的动态切换效果。

通过设置动态背景图像的功能，对实时原始图像进行实时的动态替换处理，可以突破静态图像替换的限制，实现更加优质的处理效果，进一步提高用户体验。

本公开的示例性实施例还提供了一种实时图像处理装置。参照图5，该装置500可以包括，图像获取模块510，区域确定模块520及图像替换模块530。其中，图像获取模块510用于获取实时原始图像和背景图像；区域确定模块520用于确定所述实时原始图像中满足预设色值条件的待处理区域；图像替换模块530用于将实时原始图像中的待处理区域替换为背景图像中的预设区域。

在一示例性实施例中，图像替换模块可以包括：尺寸调整单元，用于将背景图像的尺寸调整为实时原始图像的尺寸；位置确定单元，用于根据待处理区域在实时原始图像中的位置，确定背景图像中的预设区域的位置；图像替换单元，用于将待处理区域替换为背景图像中的预设区域。

在一示例性实施例中，预设色值条件可以包括多个预设色值条件。

在一示例性实施例中，区域确定模块可以用于分别确定实时原始图像中满足每个预设色值条件的待处理区域。

在一示例性实施例中，实时图像处理装置还可以包括：预设色值条件确定模块，用于接收外部输入的待确认色值条件，将待确认色值条件所对应的颜色区间展示于预览区域，以及响应于外部输入的确认指令，将待确认色值条件确定为预设色值条件。

在一示例性实施例中，图像替换模块可以包括：透明度处理单元，用于增加实时原始图像的待处理区域的透明度增加实时原始图像的待处理区域的透明度；图层叠加单元，用于将增加透明度后的待处理区域与背景图像中的预设区域进行图层叠加。

在一示例性实施例中，背景图像可以包括动态背景图像。

上述各模块/单元的具体细节已经在对应的方法部分实施例中进行了详细的描述，因此此处不再赘述。

本公开的示例性实施例还提供了一种能够实现上述方法的电子设备。

所属技术领域的技术人员能够理解，本公开的各个方面可以实现为系统、方法或程序产品。因此，本公开的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。

下面参照图6来描述根据本公开的这种示例性实施例的电子设备600。图6显示的电子设备600仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图6所示，电子设备600以通用计算设备的形式表现。电子设备600的组件可以包括但不限于：上述至少一个处理单元610、上述至少一个存储单元620、连接不同系统组件(包括存储单元620和处理单元610)的总线630、显示单元640。

其中，存储单元存储有程序代码，程序代码可以被处理单元610执行，使得处理单元610执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。例如，处理单元610可以执行图2所示的步骤s210～s230，也可以执行图3所示的步骤s310～s330等。

存储单元620可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(ram)621和/或高速缓存存储单元622，还可以进一步包括只读存储单元(rom)623。

存储单元620还可以包括具有一组(至少一个)程序模块625的程序/实用工具624，这样的程序模块625包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线630可以为表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备600也可以与一个或多个外部设备800(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备600交互的设备通信，和/或与使得该电子设备600能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(i/o)接口650进行。并且，电子设备600还可以通过网络适配器660与一个或者多个网络(例如局域网(lan)，广域网(wan)和/或公共网络，例如因特网)通信。如图所示，网络适配器660通过总线630与电子设备600的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备600使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、raid系统、磁带驱动器以及数据备份存储系统等。

通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施方式的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是cd-rom，u盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开示例性实施例的方法。

本公开的示例性实施例还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中，本公开的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在终端设备上运行时，程序代码用于使终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。

参考图7所示，描述了根据本公开的示例性实施例的用于实现上述方法的程序产品700，其可以采用便携式紧凑盘只读存储器(cd-rom)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本公开的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(ram)、只读存储器(rom)、可擦式可编程只读存储器(eprom或闪存)、光纤、便携式紧凑盘只读存储器(cd-rom)、光存储器件、磁存储器件、或者上述的任意合适的组合。

计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、rf等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本公开操作的程序代码，程序设计语言包括面向对象的程序设计语言—诸如java、c++等，还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(lan)或广域网(wan)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

此外，上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的示例性实施例，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。