图像分析处理方法、装置、电子设备及存储介质与流程

1.本发明实施例涉及安防技术领域，尤其涉及一种图像分析处理方法、装置、电子设备及存储介质。


背景技术：

2.智能视频监控是现代安防的主要手段之一，但是智能视频监控系统还处于发展阶段，在普通视频监控系统基础上开发智能分析功能往往存在智能芯片运算能力不足的问题，并且监控设备无法进行多路智能分析。通常的做法是在监控设备上增加智能芯片个数以提高智能分析的通道路数，但固定智能芯片数只能配置有限通道的智能分析，且增加了智能分析成本。


技术实现要素：

3.本发明实施例中提供了一种图像分析处理方法、装置、电子设备及存储介质，以实现在设备智能分析能力不足情况下的多路视频智能分析功能。
4.第一方面，本发明实施例中提供了一种图像分析处理方法，应用于监控设备，所述方法包括：
5.对监控设备配置的至少两路监控画面通道进行实时图像告警检测；
6.若检测到任一路目标监控画面通道触发图像告警事件，则确定所述目标监控画面通道对应的目标图像分析算力资源和目标图像数据；
7.采用所述目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
8.第二方面，本发明实施例中还提供了一种图像分析处理装置，配置于监控设备，所述装置包括：
9.图像告警检测模块，用于对监控设备配置的至少两路监控画面通道进行实时图像告警检测；
10.算力资源控制模块，用于若检测到任一路目标监控画面通道触发图像告警事件，则确定所述目标监控画面通道对应的目标图像分析算力资源和目标图像数据；
11.图像智能分析模块，用于采用所述目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
12.第三方面，本发明实施例中还提供了一种电子设备，包括：
13.一个或多个处理器；
14.存储装置，用于存储一个或多个程序；
15.所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例中所述的图像分析处理方法。
16.第四方面，本发明实施例中还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例中所述的图像分析处理方法。
17.本发明实施例中提供了一种图像分析处理方法，对监控设备配置的至少两路监控画面通道进行实时图像告警检测，当与监控设备配置连接的任一路监控画面通道触发图像告警事件时，会确定引起图像告警事件的目标监控画面通道的目标图像分析算力资源和目标图像数据，进而采用目标图像分析算力资源对触发图像告警事件的目标图像数据进行分析。
18.采用本技术方案，在原有智能监控系统上，考虑到图像分析算力资源有限的情况，不再使用实时分析的方式，而是通过图像告警方式触发采用对应的图像分析算力资源来对目标图像数据进行分析，提高智能分析利用率；同时，由于不是实时分析而是通过图像告警来选择对合适图像数据分析，因此在有限算力资源的基础上可以支持对多路通道图像实现智能分析的功能。
19.上述发明内容仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
20.通过阅读参照以下附图所作的对非限制性实施例的详细描述，本发明的其它特征、目的和优点将会变得更明显。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
21.图1是本发明实施例中提供的一种图像分析处理方法的流程图；
22.图2是本发明实施例中提供的一种对图像进行智能分析的时序图；
23.图3是本发明实施例中提供的另一种图像分析处理方法的流程图；
24.图4是本发明实施例中提供的一种图像分析处理装置的结构框图；
25.图5是本发明实施例中提供的一种电子设备的结构示意图。
具体实施方式
26.下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
27.在更加详细地讨论示例性实施例之前，应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作(或步骤)可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
28.图1是本发明实施例中提供的一种图像分析处理方法的流程图。本发明实施例可适用于支持对多路通道的图像数据进行智能分析的情况。该方法可以由图像分析处理装置执行，该图像分析处理装置可以采用软件和/或硬件的方式实现，并集成在具有网络通信功能的电子设备上，该电子设备可为应用于监控系统的监控设备。
29.如图1所示，本发明实施例中的图像分析处理方法，可以包括以下步骤：
30.s110、对监控设备配置的至少两路监控画面通道进行实时图像告警检测。
31.在本实施例中，监控设备可为网络视频录像机(network video recorder，nvr)，网络视频录像机nvr是网络视频监控系统的存储转发部分，其中网络视频录像机nvr可与视频编码器或网络摄像机协同工作，完成视频的录像、存储及转发功能。本方案中的监控设备可与至少两路监控画面通道配置连接，来支持实现对两路监控画面通道下图像数据的智能分析。
32.在本实施例中，一个图像智能分析芯片只能增加少量通道的图像智能分析功能，固定数量的智能分析芯片也只能配置有限通道的图像智能分析，因此不会一味地增加图像智能分析芯片的数量来支持实现多路通道实现智能分析功能时，即监控设备中不会一味地增加图像分析算力资源数量。基于上述情况，本技术方案选择对各个两路监控画面通道下图像数据的处理逻辑进行改进，不再对各个监控画面通道下图像数据进行实时智能分析。
33.s120、若检测到监控设备配置的任一路目标监控画面通道触发图像告警事件，则确定目标监控画面通道对应的目标图像分析算力资源和目标图像数据。
34.在本实施例中，本方案通过对各个监控画面通道进行图像告警检测，确定对哪个监控画面通道分配合适的图像分析算力资源，以及确定监控画面通道下的图像数据。这样一来，只需要在触发图像告警的情况下且只对触发图像告警的目标监控画面通道分配合适的目标图像分析算力资源即可，而未触发图像告警的其他监控画面通道暂时不分配图像分析算力资源，避免有限的图像分析算力资源被长期占用，导致算力资源不足，进而无法支持多路通道的图像分析。
35.在本实施例的一种可选方案中，可以与上述一个或者多个实施例中各个可选方案结合。其中，针对监控设备配置连接的至少两个监控画面通道中的每一个监控画面通道，对每一个监控画面通道下的监控区域进行运动目标检测。若检测到该监控区域的画面出现幅度变化，则确定该监控画面通道下的监控区域中出现运动目标，继而对该监控画面通道进行图像告警。若检测到该监控区域的画面未出现幅度变化，则确定该监控画面通道下的监控区域中未出现运动目标，继而不对该监控画面通道进行图像告警。
36.s130、采用目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
37.在本实施例的一种可选方案中，可以与上述一个或者多个实施例中各个可选方案结合。其中，确定目标监控画面通道对应的目标图像分析算力资源和目标图像数据，可包括以下步骤a1-a2：
38.步骤a1、若在目标监控画面通道触发图像告警事件的情况下，监控设备存在空闲的图像分析算力资源，则从空闲的图像分析算力资源中确定目标图像分析算力资源，并分配给目标监控画面通道。
39.步骤a2、从目标监控画面通道下获取触发图像告警事件的目标图像数据。
40.在本实施例中，图2是本发明实施例中提供的一种对图像进行智能分析的时序图。参见图2，监控设备可与至少两个监控画面通道进行配置连接，且配置连接的任一路监控画面通道均可以触发图像告警事件，并占用有限的图像分析算力资源。因此，在目标监控画面通道触发图像告警事件的情况下，可检测监控设备中是否存在空闲的图像分析算力资源。如果检测到监控设备存在空闲的图像分析算力资源，那么就直接从空闲的图像分析算力资源中获取合适的目标图像分析算力资源分配给目标监控画面通道使用。
41.在本实施例中，可选地，参见图2，在监控设备中的图像分析算力资源的分析能力有限的情况下，例如，图像分析算力资源仅可供一个监控画面通道使用时，只有其他监控设备释放占用的图像分析算力资源，那么监控设备才会存在空闲的图像分析算力资源。又一可选地，在监控设备中的图像分析算力资源的分析能力较大的情况下，例如，图像分析算力资源仅可供多个监控画面通道使用时，只要其他监控设备仅占用图像分析算力资源中的部分，那么监控设备就会存在空闲的图像分析算力资源。
42.在本实施例中，参见图1和图2，在向目标监控画面通道分配合适的目标图像分析算力资源之后，会从目标监控画面通道下的图像数据中截取触发图像告警事件的目标图像数据，而不是将目标监控画面通道下的全部图像数据进行分析。这样就可通过图像告警检测方式提取有效录像时间段的图像数据来进行智能分析，避免无用的图像数据占用有限的目标图像分析算力资源，而影响有效图像数据的图像分析以及影响其他监控画面通道下有效图像数据的图像分析，提高有限图像分析算力资源的智能分析利用率。
43.在本实施例的一种可选方案中，可以与上述一个或者多个实施例中各个可选方案结合。其中，采用目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，可包括以下操作：
44.将触发图像告警事件的目标图像数据传入监控设备中的图像智能分析器，通过图像智能分析器输出对目标图像数据的图像分析结果。
45.在本实施例中，监控设备中集成有图像智能分析器，每一个图像智能分析器均均属于一个图像分析算力资源，具有对图像数据进行智能分析能力，例如对图像数据进行人脸识别、车牌识别以及人脸抓拍等分析能力。可选地，图像智能分析器集成的图像分析算力资源通过图像智能分析芯片hi3531dv200芯片来实现。其中，hi3531dv200芯片的配置性能参数包括：arm cortex a53四核@1.15ghz-512kb l2 cache，1.2tops。
46.在本实施例中，根据图像智能分析器集成的图像分析算力资源的分析运算功能，在将触发图像告警事件的目标图像数据传入到图像智能分析器后，可以输出与对应分析运算功能相关的针对目标图像数据的图像分析结果。
47.根据本技术方案提供的图像分析处理方法，在原有智能监控系统上，考虑到图像分析算力资源有限，因此不再使用实时分析的方式，而是通过图像告警方式触发采用对应的图像分析算力资源来对目标图像数据进行分析，提高智能分析利用率；同时，由于不是实时分析而是通过图像告警来选择对合适图像数据分析，因此在有限算力资源的基础上可以支持对多路通道图像实现智能分析的功能。
48.图3是本发明实施例中提供的另一种图像分析处理方法的流程图，本发明实施例在上述实施例的基础上进行进一步优化，本发明实施例可以与上述一个或者多个实施例中各个可选方案结合。如图3所示，本发明实施例中提供的图像分析处理方法，可包括以下步骤：
49.s310、对监控设备配置的至少两路监控画面通道进行实时图像告警检测。
50.s320、若检测到监控设备配置的任一路目标监控画面通道触发图像告警事件，则检测监控设备空闲的图像分析算力资源是否被其他监控画面通道占用。
51.在本实施例中，监控设备中的图像分析算力资源是有限的，与监控设备配置连接的其他监控画面通道一旦占用监控设备有限的图像分析算力资源，会导致监控设备中没有
空闲的图像分析算力资源。因此，在任一路目标监控画面通道触发图像告警事件需要检测监控设备空闲的图像分析算力资源是否被其他监控画面通道占用。
52.s330、若在目标监控画面通道触发图像告警事件的情况下，监控设备不存在空闲的图像分析算力资源，则将目标监控画面通道下触发图像告警事件的目标图像数据进行缓存。
53.在本实施例中，在与监控设备配置连接的其他监控画面通道占用监控设备的图像分析算力资源，导致监控设备不存在空闲的图像分析算力资源下，一旦目标监控画面通道触发图像告警事件，由于暂时没有图像分析算力资源，因此需要对目标监控画面通道下触发图像告警事件的目标图像数据进行缓存，避免由于图像分析算力资源不足，而遗漏对目标图像数据的分析。
54.在本实施例中，参见图2，可判断与监控设备配置连接的各个监控画面通道是否有定时缓存图像数据的计划。若确定有对各个监控画面通道进行定时缓存图像数据的计划，则对与监控设备配置连接的各个监控画面通道进行图像告警检测。若确定没有对各个监控画面通道进行定时缓存图像数据的计划，则获取一块缓存区并启动缓存区对符合条件的监控画面通道下的图像数据进行缓存的计划，继而对与监控设备配置连接的各个监控画面通道进行图像告警检测。例如，计划在监控设备不存在空闲的图像分析算力资源，则将目标监控画面通道下触发图像告警事件的目标图像数据进行缓存。
55.s340、若在缓存目标图像数据后，重新检测到监控设备存在空闲的图像分析算力资源时，则从缓存中提取目标监控画面通道下触发图像告警事件的目标图像数据。
56.在本实施例中，在缓存目标图像数据后，会按照预设时间间隔继续检测监控设备是否存在空闲的图像分析算力资源，若存在则从缓存中提取目标监控画面通道下触发图像告警事件的目标图像数据。
57.在本实施例的一种可选方案中，可以与上述一个或者多个实施例中各个可选方案结合。其中，在将目标监控画面通道下触发图像告警事件的目标图像数据进行缓存之后，还可包括以下操作：
58.将目标图像数据的图像索引加入预设图像分析任务队列；以及，对预设图像分析任务队列中各个图像索引进行排序，以调整对各个图像索引所属图像数据的图像分析顺序。
59.在本实施例中，参见图2，通过缓存区可保存这段目标监控画面通道下触发图像告警事件的目标图像数据，并将这段目标图像数据的图像索引放入到预设的图像分析任务队列，并每隔预设时间间隔(例如3分钟)，对预设的图像分析任务队列中的图像索引顺序重新排列。可选地，对预设图像分析任务队列中各个图像索引进行排序，可包括：依据目标监控画面通道下触发图像告警事件的目标图像数据的图像告警次数、图像告警持续时间以及图像告警触发时间，对预设图像分析任务队列中各个图像索引进行排序更新。例如，根据每段目标图像数据的告警次数、告警持续时间(例如，当前时间-告警触发时间)，作为图像索引排序的影响因子，当影响因子一样时，告警触发时间越早图像索引排序越靠前。
60.在本实施例的一种可选方案中，可以与上述一个或者多个实施例中各个可选方案结合。其中，从缓存中提取目标监控画面通道下触发图像告警事件时的目标图像数据，可包括以下操作：
61.在按照预设图像分析任务队列中各个图像索引的排序结果，读取到触发图像告警事件的目标图像数据的图像索引时，依据目标图像数据的图像索引从缓存中调取预先缓存的目标图像数据。
62.在本实施例中，参见图2，图像分析任务队列中各个图像索引的排序结果在一定程度上能够反映各个图像索引对应的图像数据的重要程度，因此在进行图像智能分析时，可按照图像索引的排序结果依次来读取对应的图像数据进行分析，在读取到触发图像告警事件的目标图像数据的图像索引时，可以根据图像索引从缓存中调取预先缓存的目标图像数据，实现以队列形式对图像数据逐步智能分析。
63.s350、从空闲的图像分析算力资源中确定目标图像分析算力资源，并分配给所述目标监控画面通道。
64.s360、采用目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
65.在本实施例中，采用目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，可包括：将触发图像告警事件的目标图像数据传入所述监控设备中的图像智能分析器，通过图像智能分析器输出对所述目标图像数据的图像分析结果。
66.根据本技术方案提供的图像分析处理方法，在原有智能监控系统上，考虑到图像分析算力资源有限，因此不再使用实时分析的方式，而是通过图像告警方式触发采用对应的图像分析算力资源来对目标图像数据进行分析，提高智能分析利用率；同时，由于不是实时分析而是通过图像告警来非实时的选择有效录像段的合适图像数据进行图像分析，因此在有限算力资源的基础上可以支持对多路通道图像实现智能分析的功能，同时还能节约分析成本，在低成本的视频监控上实现多路智能分析以及充分利用设备运算性能，增加设备使用寿命。
67.图4是本发明实施例中提供的一种图像分析处理装置的结构框图。本发明实施例可适用于支持对多路通道的图像数据进行智能分析的情况。该图像分析处理装置可以采用软件和/或硬件的方式实现，并集成在具有网络通信功能的电子设备上，该电子设备可为应用于监控系统的监控设备。如图4所示，本发明实施例中的图像分析处理装置，可包括以下：图像告警检测模块410、算力资源控制模块420和图像智能分析模块430。其中：
68.图像告警检测模块410，用于对监控设备配置的至少两路监控画面通道进行实时图像告警检测；
69.算力资源控制模块420，用于若监控设备配置的任一路目标监控画面通道触发图像告警事件，则确定所述目标监控画面通道对应的目标图像分析算力资源和目标图像数据；
70.图像智能分析模块430，用于采用所述目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
71.在上述实施例的基础上，可选地，算力资源控制模块420包括：
72.若在目标监控画面通道触发图像告警事件的情况下，所述监控设备存在空闲的图像分析算力资源，则从空闲的图像分析算力资源中确定目标图像分析算力资源，并分配给所述目标监控画面通道；
73.从所述目标监控画面通道下获取触发图像告警事件的目标图像数据。
74.在上述实施例的基础上，可选地，算力资源控制模块420包括：
75.若在目标监控画面通道触发图像告警事件的情况下，所述监控设备不存在空闲的图像分析算力资源，则将所述目标监控画面通道下触发图像告警事件的目标图像数据进行缓存；
76.若在缓存目标图像数据后，重新检测到监控设备存在空闲的图像分析算力资源时，则从缓存中提取所述目标监控画面通道下触发图像告警事件的目标图像数据；
77.从空闲的图像分析算力资源中确定目标图像分析算力资源，并分配给所述目标监控画面通道。
78.在上述实施例的基础上，可选地，在将所述目标监控画面通道下触发图像告警事件的目标图像数据进行缓存之后，还包括：
79.将所述目标图像数据的图像索引加入预设图像分析任务队列；以及，对预设图像分析任务队列中各个图像索引进行排序，以调整对各个图像索引所属图像数据的图像分析顺序；
80.相应地，从缓存中提取目标监控画面通道下触发图像告警事件时的目标图像数据，包括：
81.在按照预设图像分析任务队列中各个图像索引的排序结果，读取到触发图像告警事件的目标图像数据的图像索引时，依据目标图像数据的图像索引从缓存中调取预先缓存的目标图像数据。
82.在上述实施例的基础上，可选地，对预设图像分析任务队列中各个图像索引进行排序，包括：
83.依据所述目标监控画面通道下触发图像告警事件的目标图像数据的图像告警次数、图像告警持续时间以及图像告警触发时间，对预设图像分析任务队列中各个图像索引进行排序更新。
84.在上述实施例的基础上，可选地，采用所述目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，包括：
85.将触发图像告警事件的目标图像数据传入所述监控设备中的图像智能分析器，通过图像智能分析器输出对所述目标图像数据的图像分析结果。
86.本发明实施例中所提供的图像分析处理装置可执行上述本发明任意实施例中所提供的图像分析处理方法，具备执行该图像分析处理方法相应的功能和有益效果，具体过程可参见前述图像分析处理方法的实施例。
87.图5是本发明实施例中提供的一种电子设备的结构示意图。如图5所示结构，本发明实施例中提供的电子设备包括：一个或多个处理器510和存储装置520；该电子设备中的处理器510可以是一个或多个，图5中以一个处理器510为例；存储装置520用于存储一个或多个程序；所述一个或多个程序被所述一个或多个处理器510执行，使得所述一个或多个处理器510实现如本发明实施例中任一项所述的图像分析处理方法。
88.该电子设备还可以包括：输入装置530和输出装置540。
89.该电子设备中的处理器510、存储装置520、输入装置530和输出装置540可以通过总线或其他方式连接，图5中以通过总线连接为例。
90.该电子设备中的存储装置520作为一种计算机可读存储介质，可用于存储一个或
多个程序，所述程序可以是软件程序、计算机可执行程序以及模块，如本发明实施例中所提供的图像分析处理方法对应的程序指令/模块。处理器510通过运行存储在存储装置520中的软件程序、指令以及模块，从而执行电子设备的各种功能应用以及数据处理，即实现上述方法实施例中图像分析处理方法。
91.存储装置520可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据电子设备的使用所创建的数据等。此外，存储装置520可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储装置520可进一步包括相对于处理器510远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
92.输入装置530可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置540可包括显示屏等显示设备。
93.并且，当上述电子设备所包括一个或者多个程序被所述一个或者多个处理器510执行时，程序进行如下操作：
94.对监控设备配置的至少两路监控画面通道进行实时图像告警检测；
95.若检测到监控设备配置的任一路目标监控画面通道触发图像告警事件，则确定所述目标监控画面通道对应的目标图像分析算力资源和目标图像数据；
96.采用所述目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
97.当然，本领域技术人员可以理解，当上述电子设备所包括一个或者多个程序被所述一个或者多个处理器510执行时，程序还可以进行本发明任意实施例中所提供的图像分析处理方法中的相关操作。
98.本发明实施例中提供了一种计算机可读介质，其上存储有计算机程序，该程序被处理器执行时用于执行图像分析处理方法，该方法包括：
99.对监控设备配置的至少两路监控画面通道进行实时图像告警检测；
100.若检测到监控设备配置的任一路目标监控画面通道触发图像告警事件，则确定所述目标监控画面通道对应的目标图像分析算力资源和目标图像数据；
101.采用所述目标图像分析算力资源，对触发图像告警事件的目标图像数据进行分析，得到目标图像分析结果。
102.可选的，该程序被处理器执行时还可以用于执行本发明任意实施例中所提供的图像分析处理方法。
103.本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(random access memory，ram)、只读存储器(read only memory，rom)、可擦式可编程只读存储器(erasable programmable read only memory，eprom)、闪存、光纤、便携式cd-rom、光存储器件、磁存储器件、或者上述的任意合适的组合。计算机可读存储介质可以是任何包括或存储程序的有
形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
104.计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于：电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
105.计算机可读介质上包括的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、无线电频率(radiofrequency，rf)等等，或者上述的任意合适的组合。
106.可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如java、smalltalk、c++，还包括常规的过程式程序设计语言—诸如“c”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(lan)或广域网(wan)——连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
107.在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
108.注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。