一种图像数据处理方法及装置与流程

本发明实施例涉及图形处理技术领域，具体涉及一种图像数据处理方法及装置。

背景技术：

随着计算机图像技术和网络技术的发展，通过网络进行在线直播授课成为一种新的趋势。在现有技术中，通常是通过截屏的方式，抓取教师授课电脑屏幕的图像，将所述图像通过网络传输给学生客户端，由学生客户端的播放器播放所述图像便于学生观看。现有技术中，在截屏时，通常会预先设置截屏区域，抓取截屏区域内的图像，所述截屏区域可以是整个电脑屏幕桌面的一部分或者全部。由于电脑屏幕显示尺寸的限制，若教师打开的其他窗口覆盖在截屏区域，其他窗口的内容也将会被抓取，与授课内容一起发送到学生客户端。这样，学生客户端播放的内容就是被其他窗口遮挡的授课内容，影响了视频播放的效果。

技术实现要素：

本发明实施例提供了一种图像数据处理方法及装置，可以避免将遮挡待传输图像的其他窗口或内容传输到用户端，改善图像播放效果。

为此，本发明实施例提供如下技术方案：

第一方面，本发明实施例提供了一种图像数据处理方法，应用于第一电子设备上，第一电子设备的显示单元显示图像数据处理装置的第一显示区域，所述方法包括：

从内存直接获取所述第一显示区域内当前内容显示页面的各图层的显示数据；其中，每个图层单独承载各自显示数据；

合并已获取的所述当前内容显示页面的各图层的显示数据，生成第一图像。

第二方面，本发明实施例提供了一种图像数据处理装置，所述图像处理装置包括第一显示区域、第一获取单元、第一合并单元，其中：

所述第一获取单元，用于从内存直接获取所述第一显示区域内当前内容显示页面的各图层对应的显示数据；其中，每个图层单独承载各自显示数据；

所述第一合并单元，用于合并已获取的所述第一显示区域内当前内容显示页面的各图层的显示数据，生成第一图像。

第三方面，本发明实施例提供了一种播放装置，所述播放装置包括：

显示单元，用于在第一显示区域当前内容显示页面内以图层叠加的方式显示数据；其中，每个图层单独承载各自显示数据；

第一获取单元，用于从内存直接获取所述第一显示区域内当前内容显示页面的各图层对应的显示数据；其中，每个图层单独承载各自显示数据；

第一合并单元，用于合并已获取的所述第一显示区域内当前内容显示页面的各图层的显示数据，生成第一图像。

本发明实施例提供的图像数据处理方法及装置，可以从内存中直接获取图像处理装置的第一显示区域内当前内容显示页面的各图层的显示数据，合并已获取的所述当前内容显示页面的各图层的显示数据，生成第一图像。不同于现有技术抓取截屏区域图像的方式，本发明实施例直接从内存中获取当前内容显示页面各图层的显示数据，利用所述显示数据合并图层以生成待传输的图像，避免了其他窗口或组件的影响，改善了用户端的图像播放效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明一实施例提供的图像数据处理方法流程图；

图2为本发明一实施例提供的一具体应用场景示意图；

图3为本发明另一实施例提供的图像数据处理装置示意图；

图4为本发明再一实施例提供的播放装置示意图。

具体实施方式

本发明实施例提供了一种图像数据处理方法及装置，可以避免将遮挡待传输图像的其他窗口或内容传输到用户端，改善图像播放效果。

为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

参见图1，为图1为本发明一实施例提供的图像数据处理方法流程图。本发明实施例提供的方法可以应用于第一电子设备，所述第一电子设备可以是现有的、正在研发的或将来研发的任何电子设备，包括但不限于：现有的、正在研发的或将来研发的、台式计算机、膝上型计算机、移动终端(包括智能手机、非智能手机、各种平板电脑)等。所述第一电子设备具有显示单元，所述显示单元上显示图像数据处理装置的第一显示区域。所述第一电子设备可以与第二电子设备通过网络数据连接。其中，第二电子设备可以是客户端，也可以是服务器。举例说明，第一电子设备是第一用户(例如教师)授课所使用的设备，第二电子设备可以是服务器；又如，第一电子设备是第一用户(例如教师)授课所使用的设备，第二电子设备可以是第二用户(例如学生)所使用的客户端。当然，以上仅为示例性说明，不视为对本发明的限制。

如图1所示，所述方法可以包括：

s101，从内存直接获取所述第一显示区域内当前内容显示页面的各图层的显示数据；其中，每个图层单独承载各自显示数据。

在本发明实施例中，第一电子设备具有显示单元，所述显示单元上显示图像数据处理装置的第一显示区域。在所述第一显示区域当前内容显示页面中，可以包括一个或多个图层，每个图层单独承载与其对应的显示数据。其中，所述显示数据包括但不限于图形、文本、动画或者视频等。

在本发明具体实现时，第一电子设备可以响应于用户导入文件的操作，创建一个或多个内容显示页面，所述内容显示页面的数量与所述文件的页面数量相对应。举例说明，响应于用户导入演示文稿powerpoint(以下简称ppt)的 操作，创建一个或者多个内容显示页面。例如，所述ppt有10页，则创建10个内容显示页面，为每一个内容显示页面设置一个唯一的页面标识用于标识所述内容显示页面。在内存中，每一个内容显示页面对应一个数据块，用于存储所述内容显示页面的显示数据。每一个内容显示页面可以包括一个或者多个图层，所述一个或者多个图层对应的显示数据均按照图层创建的先后顺序保存在所述内容显示页面对应的数据块中。较佳地，所述图层也具有唯一的图层标识。当用户创建显示数据时，响应于用户创建显示数据的操作，创建图层，用于承载所述显示数据，其中，所述图层与当前内容显示页面具有对应关系。所述创建显示数据的操作可以包括但不限于打开动画、视频文件的操作，创建显示元素的操作，所述显示元素包括图形、文本等。举例说明，用户使用画笔工具创建了一个图形，这时相当于创建了一个显示数据，这时会创建一个图层承载所述显示数据，在内存中也会保存所述图层对应的显示数据。又如，用户打开一个视频，也会触发创建图层的操作，所述视频使用单独的图层承载。需要说明的是，所述图层与当前内容显示页面具有对应关系。在内存中也会在当前内容显示页面对应的存储位置中保存在当前内容显示页面创建的各图层对应的数据。进一步地，所述各图层可以按照创建的先后顺序进行保存。举例说明，可以使用图层的序号来表明图层的创建顺序。例如，图层1代表第1个创建的图层，图层2代表第2个创建的图层……依此类推。

以图2为例进行说明。假设用户导入文件为ppt文件，则响应于用户导入所述ppt文件的操作，创建一个或多个内容显示页面，所述内容显示页面的数量与所述ppt文件的页面数量相对应。假设ppt文件有10页，则对应创建10个内容显示页面。默认地，当前内容显示页面为第1页，其显示属性为显示；其他内容显示页面的显示属性为隐藏。在内容显示页面上，ppt的内容将由一个图层单独承载。例如，在所述第一显示区域内(对应图2中的内容显示区)，可以显示第一用户授课所用的ppt，所述ppt以一个图层单独承载。较佳地，设置所述ppt所在的图层为所有图层的最底层，作为背景层呈现。可以理解的是，由于除了当前内容显示页面外的其他内容显示页面的显示属性为隐藏，则在其他内容显示页面中创建的图层对应的显示数据，将不予显示。在所述第一显示区域内，还可以显示多媒体元素，例如动画、视频、图片等。 当所述显示数据包括视频时，可以设置所述视频所在的图层为所有图层的最顶层。这时，视频所在的图层以浮层的方式显示。再如，在所述第一显示区域内，还可以显示各种图形，例如物理图形、数学图形。举例说明，第一用户可以在ppt上添加注释、标记、图画等，上述任意显示数据均可以由一个单独的图层承载。其中，第一显示区域内的各图层以叠加的方式显示。

前面提到，可以响应于用户导入文件的操作，创建一个或多个内容显示页面。进一步地，在所述第一显示区域内显示的内容显示页面被称之为当前内容显示页面，当前内容显示页面的显示属性为显示，其他内容显示页面的显示属性为隐藏。当用户想要翻页或者跳转页面时，响应于用户切换页面的操作，将当前内容显示页面的显示属性从显示设置为隐藏，将目标内容显示页面的显示属性从隐藏设置为显示，以使得目标内容显示页面显示在所述第一显示区域上。举例说明，当前显示页面是第一页，用户想跳转到第二页，这时，把当前显示页面即第一页的显示属性从显示设置为隐藏，将目标页面第二页的显示属性从隐藏设置为显示，这样，第二页就显示在所述第一显示区域上，这时，第二页就作为了当前内容显示页面。这时，会将当前内容显示页面的标识更新为目标显示页面即第二页对应的页面标识。可以理解的是，在将原有的内容显示页面例如第一页的显示属性从显示设置为隐藏时，所述内容显示页面的各图层的显示属性也从显示变为隐藏。若所述图层承载的是视频数据，所述视频数据可以继续播放，但不会被显示。当然，也可以设置切换页面后，视频数据则停止播放，同时不会被显示。具体可以根据需要灵活设置。可以理解的是，在从内存直接获取第一显示区域的当前内容显示页面的各图层的显示数据时，仅会获取显示属性为显示的数据，不会获取显示属性为隐藏的数据。

在本发明实施例具体实现时，所述从内存直接获取所述第一显示区域内当前内容显示页面的各图层的显示数据包括：获取所述当前内容显示页面的标识，从内存中读取与所述标识对应的各图层的显示数据。较佳地，图像处理装置定时从内存中获取第一显示区域内当前内容显示页面的各图层的显示数据。具体实现时，可以设置定时器，以固定的速率或者频率去内存中读取数据。读取数据时，首先获取第一显示区域内当前内容显示页面的标识，从内存中读取与所述当前内容显示页面的标识对应的各图层的显示数据。前面提到，在内存中， 每一内容显示页面均有专门的存储位置用于存储显示数据，内容显示页面、内容显示页面的页面标识与显示数据具有一一对应关系。进一步地，在创建图层时，可以使用一个标识用于表示图层的创建顺序，例如图层的标号。当前内容显示页面的标识、图层标识、图层的标号以及各图层的显示数据均可以保存在内存中。根据内容页面的页面标识即可以从内存中获取相应的显示数据。具体实现时，可以定时获取所述显示数据，例如50ms取一次数据，每秒取12帧图像。当然，此处仅为示例性说明，还可以设置其他数值。在一些实施方式中，从内存直接获取所述第一显示区域内当前内容显示页面的各图层的显示数据包括：从内存直接获取显示属性为显示的内容显示页面的各图层的显示数据。

由于本发明实施例是直接从内存中获取显示数据，因此不会将其他窗口或者其他组件的数据抓取出来，因此即便其他窗口或者组件在第一显示区域内打开且呈现，即便显示的内容部分覆盖所述第一显示区域，本发明在获取第一显示区域的显示数据时，也不会获取该其他窗口或者组件在显示区域内的显示数据。被传输或存储的显示数据，再现播放显示时将不会体现遮挡显示效果，也就是避免了因遮挡带来的显示效果不好的问题。

s102，合并已获取的所述当前内容显示页面的各图层的显示数据，生成第一图像。

具体实现时，获取与各图层对应的显示数据后，即可以将各图层合并成一张图像。所述合并已获取的所述当前内容显示页面的各图层的显示数据，生成第一图像包括：根据所述各图层的显示数据的创建顺序，合并所述各图层对应的显示数据，生成第一图像。例如，按照图层的显示数据的创建顺序，把第一显示区域内的各图层对应的显示数据渲染成一幅图像。这是因为，在合并图层时，需要根据图层间的上下位置关系，例如哪一图层位于底层，哪一图层位于顶层，来合并各图层。举例说明，可以按照图层的标号表明的各图层的创建顺序，依次合并各图层的显示数据。在合并各图层的显示数据时，若当前图层如果是透明部分，就透明叠加；若当前图层不是透明的，就覆盖叠加。

需要说明的是，在本发明实施例中，使用图层来承载各显示数据。每一内容显示页面可以包括一个或多个图层，每个显示数据例如图形均由一个图层单独承载。使用图层承载图形的方式，可以方便地将图层合并起来生成一幅图像， 从而将各种显示数据合并成一幅图像显示。若不使用图层的方式，很难把各个显示数据均融合到一幅画面中，不利于用户观看。因此，本发明实施例使用图层承载显示数据并通过合并图层的方式生成一幅图像，可以方便地将各种显示元素融合到一个图像中，方便操作，并提升了显示效果。由于将各图层对应的显示数据合并成一幅图像进行压缩传输，也方便了传输。

进一步地，可以为第一显示区域设置大小，当图层的显示区域大于第一显示区域时，超出的部分将不予显示。相应地，在合并各图层时，超出的部分也不参与合并。具体实现时，所述合并已获取的所述当前内容显示页面各图层的显示数据，生成第一图像包括：获取所述第一显示区域的坐标信息，根据所述第一显示区域的坐标信息获取与所述坐标信息匹配的各图层的显示数据，生成第一图像；其中，所述第一图像仅由在第一内容显示区域内显示的数据构成。具体地，每个图层的显示数据具有位置信息，例如坐标位置，可以根据第一显示区域的位置信息以及图层的显示数据的位置信息决定如何选取图层的显示数据。举例说明，可以根据图层显示数据的坐标信息、第一显示区域的坐标信息，获取与第一显示区域的坐标信息匹配的图层显示数据来参与显示或者合并图层的操作。举例说明，第一显示区域的横向显示区域的坐标范围为(x1,,x2)，纵向显示区域的坐标范围为(y1,,y2)，则可以对应的选取横坐标范围(x1,,x2)、纵坐标范围为(y1,,y2)的各图层的显示数据。

进一步的，在一些实施方式中，在s102之后，还可以包括：

s103(图中未示出)，利用所述第一图像以及音频数据生成流媒体数据；向所述第二电子设备发送所述流媒体数据。具体实现时，将第一图像以及相应的音频数据一起输入编码器进行编码处理，生成流媒体数据。具体编码处理的方式可以采用现有技术提供的方法。

需要说明的是，在一些实现方式中所述第一电子设备的显示单元显示图像数据处理装置的第二显示区域和第三显示区域，所述方法还包括：获取所述第二显示区域内的图像以及所述第三显示区域内的图像；合并所述第二显示区域内的图像、所述第三显示区域内的图像以及所述第一图像，生成第二图像；利用所述第二图像与音频数据生成流媒体数据，向所述第二电子设备发送所述流媒体数据。如图2为例进行说明，所述第一电子设备的显示单元显示图像数据 处理装置的第一显示区域、第二显示区域、第三显示区域。如图2所示，第一显示区域为内容显示区，用于呈现ppt、多媒体课件等，第二显示区域为老师视频录制头像显示区域，第三显示区域为师生聊天文字显示区域。本发明实施例还可以进一步将两个或多个不同显示区域的显示数据进行合并，生成一幅图像即第二图像。具体实现时，先获取第一显示区域内当前内容显示页面的各图层的显示数据，利用所述显示数据，合并所述第一显示区域内的各图层，获取第一图像。采集第一用户的视频头像以及文字互动部分的图像。生成一副空图(大小例如可以是1056*600像素)，所述空图包括第一显示区域、第二显示区域、第三显示区域，将合并后的第一图像配置在所述第一显示区域内、采集的第一用户的视频图像配置在第二显示区域内、将采集的文字互动部分的图像配置在第三显示区域内，由此即可以拼接成一幅完整的图像。效果图如图2所示。举例说明，第一显示区域可以是内容显示区，大小为800*600像素；第二显示区域为老师视频录制头像，大小为256*192像素；第三显示区域为文字互动部分，大小为256*408像素。需要说明的是，以上仅为示例性的说明，不视为对本发明的限制。

在另外一些实施方式中，所述音频数据包括第一音频数据和第二音频数据，所述第一音频数据和所述第二音频数据的音频源不同，所述方法还包括：对所述第一音频数据和所述第二音频数据进行混音处理。举例说明，第一音频数据可以是第一用户(例如教师)授课时的声音，其音频源为麦克风。第二音频数据可以是播放的其他视频文件。本发明实施例可以通过解码其他视频文件，并截获所述视频文件的声音，获得所述声音的原始数据。这样，将第一音频数据和第二音频数据进行混音处理，形成新的音频数据。更进一步的，在解码其他视频文件的音频后，一路音频通过扬声器播放出来，一路音频则发送到混音设备中，与通过麦克风采集的老师音频一起通过混音器进行混音处理，然后编码、压缩，发送至第二电子设备。混音处理的具体流程为：对第一音频数据a和所述第二音频数据b进行重采样处理，然后对第一音频数据的采样数据、第二音频数据的采样数据进行加权处理，得到混合后的音频数据c。

其中，c＝a*x1+b*x2。x1，x2是加权系数，大小可以根据需要设置。通过调整加权系数x1，x2的大小，可以获得不同的播放效果。

对获取的第一图像与音频数据或者第二图像与音频数据进行编码、压缩处理，即可以发送给第二电子设备。

在获取所述流媒体数据后，即可以向所述第二电子设备发送所述流媒体数据。这里，第二电子设备可以是服务器，例如流媒体服务器，第二用户(例如学生)可以从服务器中下载所述流媒体数据，也可以是服务器向第二用户发送所述流媒体数据。第二电子设备也可以是客户端，第一电子设备可以与多个第二电子设备数据连接。

在本发明实施例中，可以从内存中直接获取图像处理装置的第一显示区域内当前内容显示页面的各图层的显示数据，合并已获取的所述当前内容显示页面的各图层的显示数据，生成第一图像。不同于现有技术抓取截屏区域图像的方式，本发明实施例直接从内存中获取当前内容显示页面各图层的显示数据，利用所述显示数据合并图层以生成待传输的图像，避免了其他窗口或组件的影响，改善了用户端的图像播放效果。

参见图3为本发明另一实施例提供的图像数据处理装置示意图。

一种图像数据处理装置300，所述图像处理装置包括第一显示区域、第一获取单元301、第一合并单元302，其中：

所述第一获取单元301，用于从内存直接获取所述第一显示区域内当前内容显示页面的各图层对应的显示数据；其中，每个图层单独承载各自显示数据；

所述第一合并单元302，用于合并已获取的所述第一显示区域内当前内容显示页面的各图层的显示数据，生成第一图像。

进一步地，所述第一获取单元具体用于：

获取所述当前内容显示页面的标识，从内存中读取与所述标识对应的各图层的显示数据。

进一步地，所述合并单元具体用于：

根据所述各图层的显示数据的创建顺序，依次合并所述各图层对应的显示数据，生成第一图像。

进一步地，所述合并单元具体还用于：获取所述第一显示区域的坐标信息，根据所述第一显示区域的坐标信息获取与所述坐标信息匹配的各图层的显示数据，生成第一图像；其中，所述第一图像仅由显示在第一内容显示区域内的 显示数据构成。

进一步地，所述装置还包括：

页面创建单元，用于响应于用户导入文件的操作，创建一个或多个内容显示页面，所述内容显示页面的数量与所述文件的页面数量相对应。

进一步地，所述装置还包括：

切换单元，用于响应于用户切换页面的操作，将当前内容显示页面的显示属性从显示设置为隐藏，将目标内容显示页面的显示属性从隐藏设置为显示，以使得目标内容显示页面显示在所述第一显示区域上。

进一步地，所述第一获取单元具体用于：

从内存直接获取显示属性为显示的内容显示页面的各图层的显示数据。

进一步地，所述装置还包括：

图层创建单元，用于响应于用户创建显示数据的操作，创建图层，用于承载所述显示数据；其中，所述图层与当前内容显示页面具有对应关系。

进一步地，所述显示单元的第一显示区域内的各图层以叠加的方式显示。

进一步地，所述显示单元显示的显示数据包括下述中的任意一种或多种：图形、文本、动画或者视频。

进一步地，所述装置还包括第二显示区域和第三显示区域，所述装置还包括：

第二获取单元，用于获取所述第二显示区域内的图像以及所述第三显示区域内的图像；

第二合并单元，用于合并所述第二显示区域内的图像、所述第三显示区域内的图像以及所述第一图像，生成第二图像。

进一步地，所述装置还包括：

流媒体数据生成单元，用于利用所述第一图像或者第二图像与音频数据生成流媒体数据；

发送单元，用于向所述第二电子设备发送所述流媒体数据。

混音单元，用于当所述音频数据包括第一音频数据和第二音频数据，所述第一音频数据和所述第二音频数据的音频源不同时，对所述第一音频数据和所述第二音频数据进行混音处理。

参见图4，为本发明再一实施例提供的播放装置示意图。

一种播放装置400，所述播放装置包括：

显示单元401，用于在第一显示区域当前内容显示页面内以图层叠加的方式显示数据；其中，每个图层单独承载各自显示数据；

第一获取单元402，用于从内存直接获取所述第一显示区域内当前内容显示页面的各图层对应的显示数据；其中，每个图层单独承载各自显示数据；

第一合并单元403，用于合并已获取的所述第一显示区域内当前内容显示页面的各图层的显示数据，生成第一图像。

进一步地，所述第一获取单元具体用于：

获取所述当前内容显示页面的标识，从内存中读取与所述标识对应的各图层的显示数据。

进一步地，所述第一合并单元具体用于：

根据所述各图层的显示数据的创建顺序，依次合并所述各图层对应的显示数据，生成第一图像。

进一步地，所述第一合并单元具体用于：

获取所述第一显示区域的坐标信息，根据所述第一显示区域的坐标信息获取与所述坐标信息匹配的各图层的显示数据，生成第一图像；其中，所述第一图像仅由显示在第一内容显示区域内的显示数据构成。

进一步地，所述装置还包括：

页面创建单元，用于响应于用户导入文件的操作，创建一个或多个内容显示页面，所述内容显示页面的数量与所述文件的页面数量相对应。

进一步地，所述装置还包括：

切换单元，用于响应于用户切换页面的操作，将当前内容显示页面的显示属性从显示设置为隐藏，将目标内容显示页面的显示属性从隐藏设置为显示，以使得目标内容显示页面显示在所述第一显示区域上。

进一步地，所述第一获取单元具体用于：

从内存直接获取显示属性为显示的内容显示页面的各图层的显示数据。

进一步地，所述装置还包括：

图层创建单元，用于响应于用户创建显示数据的操作，创建图层，用于承载所述显示数据；其中，所述图层与当前内容显示页面具有对应关系。

进一步地，所述装置还包括第二显示区域和第三显示区域，所述装置还包括：

第二获取单元，用于获取所述第二显示区域内的图像以及所述第三显示区域内的图像；

第二合并单元，用于合并所述第二显示区域内的图像、所述第三显示区域内的图像以及所述第一图像，生成第二图像。

进一步地，所述装置还包括：

流媒体数据生成单元，用于利用所述第一图像或者第二图像与音频数据生成流媒体数据；

发送单元，用于向所述第二电子设备发送所述流媒体数据。

其中，本发明装置各单元或模块的设置可以参照图1对应实施例中的方法而实现，在此不赘述。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素 的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。本发明可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本发明，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。以上所述仅是本发明的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。