指定区域的人流状况估算方法和装置与流程

本说明书涉及数据处理技术领域，尤其涉及一种指定区域的人流状况估算方法和装置。

背景技术：

在现实场景的广告投放对人们具有不同于网络广告的影响力，因而即使在互联网时代，各种户外广告、室内广告仍然受到广告主的青睐。广告点位的选择对现实场景中广告的效果具有很大的影响，广告点位附近区域的人群流量越大，意味着可能见到广告的人越多，广告波及的范围越广。

但是，人群流量并不是广告效果唯一的决定因素。即使在同一个的区域，广告屏幕的具体位置和朝向、经过该区域的人流状况，也会影响某个特定广告的投放效果。如果能够估算出经过某个区域人流状况，如人群的年龄、性别等属性的统计数据，将会使广告点位的确定更加准确，或者使得在某个广告点位投放的广告与受众更为匹配。

技术实现要素：

有鉴于此，本说明书提供一种指定区域的人流状况估算方法，包括：

从拍摄所述指定区域的实时视频流中提取当前有效帧；所述视频流由安置在指定区域上方的摄像头拍摄，其拍摄范围覆盖整个指定区域；

检测当前有效帧中的每个行人，生成每个行人的特征信息，根据特征信息辨识每个行人的n个单帧属性；n为自然数；

采用行人重识别算法，根据特征信息识别当前有效帧中与之前的至少一个有效帧中相同的行人；

基于行人重识别算法的结果确定经过指定区域的行人，由经过指定区域的行人的单帧属性统计得到经过指定区域的人流的n个个人属性的统计值。

本说明书还提供了一种指定区域的人流状况估算装置，包括：

有效帧提取单元，用于从拍摄所述指定区域的实时视频流中提取当前有效帧；所述视频流由安置在指定区域上方的摄像头拍摄，其拍摄范围覆盖整个指定区域；

行人检测及特征单元，用于检测当前有效帧中的每个行人，生成每个行人的特征信息，根据特征信息辨识每个行人的n个单帧属性；n为自然数；

行人重识别单元，用于采用行人重识别算法，根据特征信息识别当前有效帧中与之前的至少一个有效帧中相同的行人；

属性统计单元，用于基于行人重识别算法的结果确定经过指定区域的行人，由经过指定区域的行人的单帧属性统计得到经过指定区域的人流的n个个人属性的统计值。

本说明书提供的一种计算机设备，包括：存储器和处理器；所述存储器上存储有可由处理器运行的计算机程序；所述处理器运行所述计算机程序时，执行上述指定区域的人流状况估算方法所述的步骤。

本说明书还提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时，执行上述指定区域的人流状况估算方法所述的步骤。

由以上技术方案可见，本说明书的实施例中，基于摄像头在指定区域上方拍摄的视频流，通过检测当前有效帧中的行人，生成每个行人的特征信息和单帧属性，采用行人重识别算法识别出当前有效帧中的行人与之前有效帧中相同的行人，得出经过指定区域的行人，并按照行人的单帧属性统计经过指定区域的人流的个人属性统计值，从而实现了以较低的运算代价，准确的估算出经过指定区域的人流状况，为指定区域附近的各种服务项目的实施提供了数据基础。

附图说明

图1是本说明书实施例中一种广告屏的指定区域与摄像头安装位置的示例图；

图2是本说明书实施例中一种指定区域的人流状况估算方法的流程图；

图3是本说明书应用示例中嵌入式开发板上运行的人流状况估算软件的结构示意图；

图4是运行本说明书实施例的设备的一种硬件结构图；

图5是本说明书实施例中一种指定区域的人流状况估算装置的逻辑结构图。

具体实施方式

本说明书的实施例提出一种新的指定区域的人流状况估算，从安置在指定区域上方的摄像头拍摄的实时视频流中提取当前有效帧，检测当前有效帧中的行人、生成行人的单帧属性并识别与之前有效帧中的行人是否相同，以确定经过指定区域的行人并统计经过指定区域的人流的个人属性统计值。本说明书的实施例以较低的运算负荷，准确的估算出经过指定区域的人流状况，对指定区域附近服务项目的设置和实施能够起到重要的指导作用。

本说明书的实施例可以运行在任何具有计算和存储能力的设备上，如手机、平板电脑、pc(personalcomputer，个人电脑)、笔记本、服务器等设备；还可以由运行在两个或两个以上设备的逻辑节点来实现本说明书实施例中的各项功能。

本说明书的实施例采用摄像头拍摄的视频流来进行人流状况估算。摄像头安置在指定区域的上方，以斜向下的角度对指定区域内的人群进行拍摄，生成实时视频流，摄像头的拍摄范围能够完全覆盖指定区域。以图1中的广告屏为例，指定区域(实线框内部)位于该广告屏的前方，摄像头可以安置在广告屏幕的上方，以倾斜向下的角度持续拍摄整个指定区域。

本说明书的实施例中，指定区域的人流状况估算方法的流程如图2所示。

步骤210，从拍摄指定区域的实时视频流中提取当前有效帧。

安装在指定区域上方的摄像头将持续输出以斜向下视角拍摄的视频流，视频流由连续的一帧帧图像构成。可以基于一定的条件，持续不断的从视频流中将符合该条件的各帧图像提取出来作为有效帧，通过连续的辨识有效帧中的行人来进行人流状况的估计。将最后一个从视频流中提取的有效帧作为当前有效帧。

提取有效帧的条件可以根据实际应用场景对统计时间精度的要求、运行本实施例的设备的处理能力等因素来设置，例如，可以将与上一个有效帧间隔k(k为自然数)帧的一帧图像作为下一个有效帧，也可以从每m(m为大于1的自然数)个连续帧中提取一帧作为有效帧。

步骤220，检测当前有效帧中的每个行人，生成每个行人的特征信息，根据特征信息辨识每个行人的n(n为自然数)个单帧属性。

在提取当前有效帧后，通过深度学习的目标检测算法判断当前有效帧中是否存在人体，如果存在则定位每个行人的位置、以及该行人所占据的部分图像区域。

本说明书实施例中对采用的目标检测算法不做限定，如可以采用fasterr-cnn(fasterregionswithconvolutionalneuralnetworkfeatures，采用卷积神经网络特征的快速目标区域识别)、ssd(singleshotmultiboxdetector，单次目标多框预测)等。

在既要求较低计算量，又要求检测准确率的应用场景中，可以采用yolo(youonlyliveonce)目标检测算法，从当前有效帧中提取每个行人的图像范围和位置信息，往往可以达到更好的效果。

对目标检测算法输出的每个行人的位置、以及该行人所占据的部分图像区域，可以由每个行人的位置生成该行人的位置特征(如该行人占据的部分区域在图片坐标系中的坐标)，由该行人所占据的部分区域的图像生成该行人的外观特征(如衣服颜色、衣服纹理、手提包、背包、帽子等)，将外观特征、或者将位置特征和外观特征作为该行人的特征信息。

本说明书实施例中，属性用来描述行人的某个特定方面，例如，属性可以是性别、年龄段、身体朝向、衣着等等中的一个到多个。可以根据实际应用场景的需求、摄像头分辨率等因素，来确定将哪些属性作为辨识和统计的对象。根据某一个有效帧中某个行人的图像所辨识出的该行人的属性，称为该行人的单帧属性。

依据当前有效帧中每个行人的特征信息，可以辨识出每个行人的n个单帧属性的具体值，例如性别属性(是男是女)、年龄段属性(如处于20岁以下、20到30岁、30到40岁、40岁以上的哪个年龄段)、身体朝向属性(如正面、侧面还是背面朝向摄像头)。

可以采用机器学习分类模型来进行各个单帧属性的辨识。具体而言，以行人的特征信息为输入，以属性各个具体值的概率为输出构建机器学习分类模型，采用有标记的样本进行训练后，即可使用该分类模型得出对行人的各个单帧属性的估计值。本说明书实施例对机器学习分类模型的种类不做限定，例如可以是二分类模型、多分类模型等；对分类模型所采取的机器学习算法也不做限定，例如可以是线性回归、决策树、随机森林等。

步骤230，采用行人重识别算法，根据特征信息识别当前有效帧中与之前的至少一个有效帧中相同的行人。

当某个行人从指定区域经过时，会被拍摄到多个有效帧中。在进行人流状况估算时，需要在各个有效帧中找出相同的行人，避免对同一个行人多次计数，才能得到准确的数据。

行人重识别(personreid，personre-identification)能够利用计算机视觉技术来判断图像中是否存在特定行人，可以用来进行同一个摄像头或跨摄像头的人物追踪。本说明书的实施例中，采用行人重识别算法来判断在当前有效帧中检测到的所有行人中，哪些是已经出现在之前有效帧中的行人，哪些是在当前有效帧中新出现的行人。

可以通过查找当前有效帧中的某个行人是否出现在当前有效帧之前的k(k为自然数)个有效帧里，来判断该行人是否是新出现的行人。由于本说明书实施例中摄像头以倾斜向下的角度拍摄指定区域，行人较为密集时，可能会出现某个行人在某个有效帧或某几个连续的有效帧中被他人遮挡而没有被检测到的情形，选取较大的k值可以避免在这种情况下错误的将该行人重复计数，但较大的k值也会带来更大的运算负荷。实际应用场景中，可以根据指定区域的行人密集程度、相邻有效帧的间隔时间、运行本实施例的设备的处理能力等因素，来选择适当的k值。

在一种实现方式中，可以根据行人的外观特征和位置特征，判定当前有效帧中的每个行人是否是之前的k个有效帧中已存在的行人，如果不是则生成新的人物标识标记该行人，如果是则以已有的人物标识标记该行人。

具体而言，采用当前有效帧中某个行人的位置特征和外观特征，在之前的k个有效帧中查找是否已经存在该行人，如果不存在，为该行人生成新的人物标识并用生成的人物标识标记该行人，人物标识用来唯一的代表一个行人，可以是索引号、字符串等，不做限定。如果已经存在该行人，则该行人已经具有自己的人物标识，沿用之前已有的人物标识标记当前有效帧中的该行人即可。对当前有效帧中检测出的所有行人逐个执行上述查找过程，直到检测出的每个行人都标记有人物标识。

可以根据实际应用场景的需要，来选择识别不同有效帧中的行人是否是同一个人时采用的算法，不做限定。例如，可以采用匈牙利算法，来根据行人的外观特征和位置特征进行当前有效帧与之前有效帧中的行人匹配。

步骤240，基于行人重识别算法的结果确定经过指定区域的行人，由经过指定区域的行人的单帧属性统计得到经过指定区域的人流的n个个人属性的统计值。

可以根据实际应用的需要，来确定将哪些行人作为经过指定区域的行人，不做限定。以下举例说明：

第一个例子：可以将在各个有效帧中进入指定区域的行人作为经过指定区域的行人。如果在某个有效帧中某个行人出现在指定区域内、并且在该有效帧之前的k个有效帧中未出现在指定区域内，则认为该行人在该有效帧进入指定区域。

第二个例子：可以将在各个有效帧中离开指定区域的行人作为经过指定区域的行人。如果某个行人在某个有效帧之前的k个有效帧中曾经出现在指定区域内、并且在该有效帧以及该有效帧之后的1个到k个有效帧中未出现在指定区域内，则认为该行人在该有效帧离开指定区域。

在确定经过指定区域的行人后，经过指定区域的人流即是这些行人的集合。由这些行人在各个有效帧中的n个单帧属性，可以统计出经过指定区域的人流的n个个人属性的统计值。其中，个人属性的统计值是对某个行人集合中各个行人的个人属性具体值的统计结果，例如性别属性(男性总数和女性人数)、年龄段属性(如20岁以下的人数、20到30岁的人数、30到40岁的人数、40岁以上的人数)、身体朝向属性(如正面朝向摄像头的人数、侧面朝向摄像头的人数、背面朝向摄像头的人数)。

在由经过指定区域的行人的单帧属性生成个人属性的统计值时，可以根据同一个行人在若干个有效帧中的n个单帧属性确定该行人的n个个人属性，由统计时间段内经过指定区域的所有行人的n个个人属性，统计得到该统计时间段经过指定区域的人流的n个个人属性的统计值。其中，统计时间段是对个人属性的统计值进行累计的时间段。

在行人经过指定区域时，通常会出现在多个有效帧中，以这些有效帧中该行人的图像为依据所估计的该行人的属性，称为该行人的个人属性。在该行人出现的每个有效帧中，该行人都会有n个单帧属性的具体值，可以由这些各个单帧属性的具体值，生成对应的个人属性的具体值。

举例说明，在第一种实现方式中，可以将某个单帧属性在该行人出现的所有有效帧中具有最大可能性的具体值，作为该行人对应的个人属性的具体值；在第二种实现方式中，可以将该行人出现的所有有效帧中某个单帧属性具体值的可能性进行累加，将累加结果最大的一个具体值作为该行人对应的个人属性的具体值。如，某行人在3个有效帧中出现，其单帧属性中性别属性的具体值分别是：第一个有效帧中男性0.33、女性0.67，第二个有效帧中男性0.52、女性0.48，第二个有效帧中男性0.42、女性0.58，则在第一种实现方式中，具有最大可能性的具体值为女性0.67，则该行人个人属性中性别属性为女性；在第二种实现方式中，男性的可能性总和为1.27，女性的可能性总和为1.73，则该行人个人属性中性别属性为女性。

对统计时间段内经过指定区域的所有行人的n个个人属性分别进行累计，即可得到统计时间段经过指定区域的人流的n个个人属性的统计值。

在以人物标识对每个行人进行标记的实现方式中，可以将每个行人进入指定区域的有效帧、与该行人离开指定区域的有效帧之间的时长，作为该行人在指定区域的停留时长。在统计经过指定区域的人流的个人属性的统计值时，还可以统计这些行人的停留时长，如停留时长总和或平均停留时长。

需要说明的是，在统计经过指定区域的人流的个人属性统计值时，累加每个个人属性每个具体值的统计值，即可得到经过指定区域的人流数量，因而可以不必单独对人群流量做累计。

可见，本说明书的实施例中，从安置在指定区域上方的摄像头拍摄的实时视频流中提取当前有效帧，通过检测当前有效帧中的行人，生成每个行人的特征信息和单帧属性，采用行人重识别算法识别出当前有效帧中的行人与之前有效帧中相同的行人，确定经过指定区域的行人并统计经过指定区域的人流的个人属性的统计值，能够以较低的运算代价，准确的估算出经过指定区域的人流状况，从而对指定区域附近服务项目的设置和实施起到指导作用。

由于运算负荷较低，本说明书实施例的方法适于运行在嵌入式开发板上，并且对嵌入式开发板的硬件环境没有特别要求。运行本说明书实施例的嵌入式开发板可以安装在摄像机附近，将以一定周期统计出的人流状况数据通过自身的通信模块发送给负责采集人流状况数据的服务器，而无需上传摄像机拍摄的视频或者图像，能够在不侵犯行人的隐私的条件下得到精确的统计数据。

上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外，在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中，多任务处理和并行处理也是可以的或者可能是有利的。

在本说明书的一个应用示例中，需要对一块广告屏所在的广告点位质量进行评估。将该广告点位前行人可以停留或通过、并且能够了解该广告屏幕上播放内容的的区域作为指定区域，在广告屏幕的顶部中间位置安装rgb(redgreenblue，红绿蓝)摄像头，以斜向下的视角对指定区域进行拍摄，指定区域位于拍摄范围的中央部分，与拍摄范围的边界相隔一定距离。

人流状况统计由运行在nvidia(英伟达)嵌入式开发板上的程序进行，嵌入式开发板安装在摄像头附近，其上包括通信单元，可以与摄像头通过近距离无线方式连接，从摄像头获取其拍摄的视频数据。嵌入式开发板还可以通过通信单元将估算得出的人流状况数据上传给预定的服务器。

嵌入式开发板上预先保存有采用有标记样本训练完毕的机器学习分类模型，该分类模型以行人在一帧图像中的外观特征作为输入，以性别、年龄段、身体朝向、衣着这4个属性的具体值的概率为输出。

嵌入式开发板上运行的人流状况统计软件的结构如图3所示。

rgb摄像头以25帧/秒的速度持续拍摄开放场景的图像，形成视频流。嵌入式开发板从拍摄的视频流中每隔固定数量的帧提取一帧rgb图像，作为当前有效帧。

人流状况统计软件采用yolo目标检测算法，识别出当前有效帧中的每个行人，确定每个行人在图像坐标系中的位置坐标(一种位置特征)，以及每个行人所占据的部分区域的图像。

针对当前有效帧中的每个行人，从该行人占据区域的图像中提取该行人的外观特征。将外观特征输入到机器学习分类模型，可以得到该行人的4个单帧属性的每个具体值的概率。

分别以当前有效帧中的每个行人的外观特征和位置坐标为依据，行人重识别算法采用匈牙利算法判断该行人是否与当前有效帧之前的3个有效帧中的各个行人是否匹配，鉴别出该行人是否在之前的3个有效帧中出现过，如果未曾出现过，则为该行人生成新的人物标识来唯一代表该行人，并用新的人物标识标记该行人；如果曾经出现过，则采用该行人已有的人物标识来标记该行人。

基于行人重识别算法给当前有效帧中每个行人标记的人物标识，以及yolo目标检测算法输出的每个行人的位置坐标，判断在各个有效帧中进入和离开指定区域的行人。如果在某个有效帧中某个行人出现在指定区域内、并且在该有效帧之前的3个有效帧中未出现在指定区域内，则认为该行人在该有效帧进入指定区域；如果某个行人在某个有效帧之前的3个有效帧中曾经出现在指定区域内、并且在该有效帧以及该有效帧之后的2个有效帧中未出现在指定区域内，则认为该行人在该有效帧离开指定区域。

以预定的统计时间段为周期，对在该统计时间段的所有有效帧离开指定区域的每个行人，累加该行人出现的各个有效帧的各个单帧属性的各个具体值，将某个属性的累加和最高的具体值作为该行人对应的个人属性的具体值；将该行人离开指定区域的有效帧和该行人进入指定区域的有效帧之间的时间间隔作为该行人在指定区域的停留时长。

分属性分具体值累计在一个周期内所有有效帧中离开指定区域的行人的数量，将各个个人属性的各个具体值累计结果作为该统计时间段内的人流状况统计结果；累加在一个周期内所有有效帧中离开指定区域的行人的停留时长，计算这些行人的平均停留时长。

在一个周期结束后，嵌入式开发板向预定的服务器发送该周期的人流状况统计结果和人流的平均停留时长。

服务器在收到嵌入式开发板上传的信息后，可以根据经过指定区域的人流的个人属性统计值来对广告点位的质量进行评估。服务器可以获得点位附近在各个统计时间段的人流数量、人流在广告点位前停留的时间、人流是正向、侧向还是背向屏幕等的详细信息，不仅可以向广告主提出准确的广告投放建议，同时也能为广告运营商提供精细的报价依据。

与上述流程实现对应，本说明书的实施例还提供了一种指定区域的人流状况估算装置。该装置可以通过软件实现，也可以通过硬件或者软硬件结合的方式实现。以软件实现为例，作为逻辑意义上的装置，是通过所在设备的cpu(centralprocessunit，中央处理器)将对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言，除了图4所示的cpu、内存以及存储器之外，指定区域的人流状况估算装置所在的设备通常还包括用于进行无线信号收发的芯片等其他硬件，和/或用于实现网络通信功能的板卡等其他硬件。

图5所示为本说明书实施例提供的一种指定区域的人流状况估算装置，包括有效帧提取单元、行人检测及特征单元、行人重识别单元和属性统计单元，其中：有效帧提取单元用于从拍摄所述指定区域的实时视频流中提取当前有效帧；所述视频流由安置在指定区域上方的摄像头拍摄，其拍摄范围覆盖整个指定区域；行人检测及特征单元用于检测当前有效帧中的每个行人，生成每个行人的特征信息，根据特征信息辨识每个行人的n个单帧属性；n为自然数；行人重识别单元用于采用行人重识别算法，根据特征信息识别当前有效帧中与之前的至少一个有效帧中相同的行人；属性统计单元用于基于行人重识别算法的结果确定经过指定区域的行人，由经过指定区域的行人的单帧属性统计得到经过指定区域的人流的n个个人属性的统计值。

可选的，所述行人检测及特征单元根据特征信息辨识每个行人的单帧属性，包括：采用机器学习分类模型辨识每个行人的若干个单帧属性；所述机器学习分类模型以行人的特征信息为输入，采用有标记的样本进行训练。

可选的，所述属性统计单元由经过指定区域的行人的单帧属性统计得到经过指定区域的人流的n个个人属性的统计值，包括：根据同一个行人在若干个有效帧中的n个单帧属性确定所述行人的n个个人属性，由统计时间段内经过指定区域的所有行人的n个个人属性，统计得到所述统计时间段经过指定区域的人流的n个个人属性的统计值。

可选的，所述单帧属性和个人属性分别包括以下一项到多项：性别、年龄段、身体朝向、衣着。

一个例子中，所述特征信息包括：外观特征和位置特征；所述行人重识别单元具体用于：根据行人的外观特征和位置特征，判定当前有效帧中的每个行人是否是之前的至少一个有效帧中已存在的行人，如果不是则生成新的人物标识标记所述行人，如果是则以已有的人物标识标记所述行人。

上述例子中，所述行人重识别单元根据行人的外观特征和位置特征，判定当前有效帧中的某个行人是否是之前有效帧中已存在的行人，包括：采用匈牙利算法，根据行人的外观特征和位置特征进行当前有效帧与之前有效帧中的行人匹配。

一种实现方式中，所述经过指定区域的行人包括：进入指定区域的行人、或离开指定区域的行人；所述进入指定区域的行人包括：在某个有效帧中出现在指定区域内、并且在所述有效帧之前的至少一个有效帧中未出现在指定区域内的行人；所述离开指定区域的行人包括：在某个有效帧之前的相邻有效帧中出现在指定区域内、并且在所述有效帧及其后的至少一个有效帧中未出现在指定区域内的行人。

上述实现方式中，所述装置还包括：停留时长统计单元，用于统计经过指定区域的人流在指定区域的停留时长，其中经过指定区域的每个行人的停留时长由所述行人进入指定区域的有效帧与离开指定区域的有效帧之间的时长确定。

可选的，所述装置运行在嵌入式开发板上。

可选的，所述指定区域包括：广告点位前的指定区域；所述装置还包括：点位评估单元，用于根据经过指定区域的人流的个人属性统计值属性对广告点位的质量进行评估。

本说明书的实施例提供了一种计算机设备，该计算机设备包括存储器和处理器。其中，存储器上存储有能够由处理器运行的计算机程序；处理器在运行存储的计算机程序时，执行本说明书实施例中指定区域的人流状况估算方法的各个步骤。对指定区域的人流状况估算方法的各个步骤的详细描述请参见之前的内容，不再重复。

本说明书的实施例提供了一种计算机可读存储介质，该存储介质上存储有计算机程序，这些计算机程序在被处理器运行时，执行本说明书实施例中指定区域的人流状况估算方法的各个步骤。对指定区域的人流状况估算方法的各个步骤的详细描述请参见之前的内容，不再重复。

以上所述仅为本说明书的较佳实施例而已，并不用以限制本申请，凡在本申请的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。

在一个典型的配置中，计算设备包括一个或多个处理器(cpu)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(ram)和/或非易失性内存等形式，如只读存储器(rom)或闪存(flashram)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(pram)、静态随机存取存储器(sram)、动态随机存取存储器(dram)、其他类型的随机存取存储器(ram)、只读存储器(rom)、电可擦除可编程只读存储器(eeprom)、快闪记忆体或其他内存技术、只读光盘只读存储器(cd-rom)、数字多功能光盘(dvd)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitorymedia)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

本领域技术人员应明白，本说明书的实施例可提供为方法、系统或计算机程序产品。因此，本说明书的实施例可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本说明书的实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、cd-rom、光学存储器等)上实施的计算机程序产品的形式。