手势求救的识别方法、装置及存储介质与流程

[0001]
本发明涉及图像识别技术领域，具体涉及一种手势求救的识别方法、装置及存储介质。


背景技术：

[0002]
电梯是我们日常生活中必不可少的垂直领域的交通工具，给我们带来了很多的便利。电梯安全问题也与我们息息相关，我们经常会看到一些电梯事故和故障而导致乘客长时间被困在电梯内的情形。
[0003]
目前，为了对被困电梯的乘客进行紧急救援，大多数是通过电梯轿厢内的紧急求救装置外呼至物业监控系统，以寻求救援。然而，由于电梯故障类型很多，在电梯发生故障情况下，很难保证电梯各部件功能的正常使用，从而导致无法通过电梯轿厢内的紧急求救装置及时获得救援。


技术实现要素：

[0004]
为了解决现有技术中存在的电梯故障时可能无法通过电梯轿厢内的紧急求救装置及时获得救援的问题，本发明的目的在于提供一种手势求救的识别方法、装置及存储介质，以识别求救手势并发出报警，确保在电梯故障时能及时采取救援。
[0005]
第一方面，本发明提供了一种手势求救的识别方法，包括：
[0006]
获取电梯内包含乘客的至少一张图像；
[0007]
通过预先建立的人体姿态分析模型提取出所述至少一张图像中的人体关键点位置；
[0008]
将所述至少一张图像中前臂与上臂之间夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于目标关键点位置的图像，确定为包含挥手动作的目标图像；
[0009]
基于所述至少一张图像中包含挥手动作的目标图像识别出所述至少一张图像中是否包含求救手势；
[0010]
如果所述至少一张图像中包含求救手势，则触发报警操作；
[0011]
其中，所述人体关键点位置包括手腕位置、手肘位置、肩部位置和所述目标关键点位置，所述前臂为所述手腕位置与所述手肘位置之间的连线，所述上臂为所述手肘位置与所述肩部位置之间的连线，所述目标关键点位置包括颈部位置、鼻子位置、眼睛位置以及耳朵位置中的至少一种。
[0012]
通过上述设计，本发明通过人体姿态分析模型提取出至少一张图像中的人体关键点位置，将至少一张图像中前臂与上臂之间夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于所述目标关键点位置的图像，确定为包含挥手动作的目标图像，根据目标图像识别出至少一张图像中是否包含求救手势，并在包含求救手势时触发报警操作，以便在电梯故障时能够及时采取救援，提高被困电梯人员的救援效率。
[0013]
在一个可能的设计中，所述所述基于所述至少一张图像中包含挥手动作的目标图
像识别出所述至少一张图像中是否包含求救手势，包括：
[0014]
基于所述至少一张图像中包含挥手动作的目标图像，确定出所述至少一张图像中挥手动作的频率；
[0015]
若所述至少一张图像中挥手动作的频率超过预设频率，则判定所述至少一张图像中包含求救手势。
[0016]
基于上述公开的内容，可根据挥手动作的频率识别至少一张图像中是否包含求救手势，避免求救手势的误判断。
[0017]
在一个可能的设计中，所述所述基于所述至少一张图像中包含挥手动作的目标图像，确定出所述至少一张图像中挥手动作的频率，包括：
[0018]
统计预定时间段内与非目标图像相邻的上一张或下一张目标图像的数量，得到所述至少一张图像中挥手动作的频率；
[0019]
其中，所述非目标图像为未包含挥手动作的图像。
[0020]
基于上述公开的内容，可根据与非目标图像和相邻的目标图像的数量准确识别出至少一张图像中挥手动作的频率。
[0021]
在一个可能的设计中，所述方法还包括：
[0022]
如果所述至少一张图像中包含求救手势，则向电梯控制系统发出控制信号以使所述电梯控制系统控制电梯停止运行。
[0023]
基于上述公开的内容，可通过求救手势控制电梯停止运行，以便在电梯故障时能够及时提出电梯运行，保障乘客安全。
[0024]
在一个可能的设计中，如果所述至少一张图像中包含求救手势，则触发报警操作，包括：
[0025]
如果所述至少一张图像中包含求救手势，则向继电器输出一高电平信号，以使与所述继电器连接的报警设备发出报警信号；或
[0026]
如果所述至少一张图像中包含求救手势，则向报警设备发送报警信息。
[0027]
基于上述公开的内容，可直接向报警设备发送报警信息，也可间接通过继电器控制报警设备报警。
[0028]
在一个可能的设计中，所述预设夹角范围为90-180
°
。
[0029]
第二方面，本发明提供了一种手势求救的识别装置，包括：
[0030]
获取单元，用于获取电梯内包含乘客图像的至少一张图像；
[0031]
提取单元，用于通过预先建立的人体姿态分析模型提取出所述至少一张图像中的人体关键点位置；
[0032]
确定单元，用于将所述至少一张图像中前臂与上臂之间夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于目标关键点位置的图像，确定为包含挥手动作的目标图像；
[0033]
识别单元，用于基于所述至少一张图像中包含挥手动作的目标图像识别出所述至少一张图像中是否包含求救手势；
[0034]
报警单元，用于如果所述至少一张图像中包含求救手势，则触发报警操作；
[0035]
其中，所述人体关键点位置包括手腕位置、手肘位置、肩部位置和所述目标关键点位置，所述前臂为所述手腕位置与所述手肘位置之间的连线，所述上臂为所述手肘位置与
所述肩部位置之间的连线，所述目标关键点位置包括颈部位置、鼻子位置、眼睛位置以及耳朵位置中的至少一种。
[0036]
在一个可能的设计中，识别单元在用于基于所述至少一张图像中包含挥手动作的目标图像识别出所述至少一张图像中是否包含求救手势时，具体用于：
[0037]
基于所述至少一张图像中包含挥手动作的目标图像，确定出所述至少一张图像中挥手动作的频率；
[0038]
若所述至少一张图像中挥手动作的频率超过预设频率，则判定所述至少一张图像中包含求救手势。
[0039]
在一个可能的设计中，识别单元在用于基于所述至少一张图像中包含挥手动作的目标图像，确定出所述至少一张图像中挥手动作的频率时，具体用于：
[0040]
统计预定时间段内与非目标图像相邻的上一张或下一张目标图像的数量，得到所述至少一张图像中挥手动作的频率；
[0041]
其中，所述非目标图像为未包含挥手动作的图像。
[0042]
在一个可能的设计中，手势求救的识别装置还包括：
[0043]
控制单元，用于如果所述至少一张图像中包含求救手势，则向电梯控制系统发出控制信号以使所述电梯控制系统控制电梯停止运行。
[0044]
在一个可能的设计中，报警单元在用于如果所述至少一张图像中包含求救手势，则触发报警操作时，具体用于：
[0045]
如果所述至少一张图像中包含求救手势，则向继电器输出一高电平信号，以使与所述继电器连接的报警设备发出报警信号；或
[0046]
如果所述至少一张图像中包含求救手势，则向报警设备发送报警信息。
[0047]
第三方面，本发明提供了一种手势求救的识别装置，包括包括依次通信相连的存储器、处理器和收发器，其中，所述存储器用于存储计算机程序，所述收发器用于收发消息，所述处理器用于读取所述计算机程序，执行如上述第一方面所述的手势求救的识别方法。
[0048]
第四方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有指令，当所述指令在计算机上运行时，执行第一方面所述的手势求救的识别方法。
[0049]
第五方面，本发明提供了一种包含指令的计算机程序产品，当所述指令在计算机上运行时，使所述计算机执行如第一方面所述的手势求救的识别方法。
附图说明
[0050]
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
[0051]
图1是本发明提供的手势求救的识别方法的流程图。
[0052]
图2是本发明提供的手势求救的识别装置的结构示意图。
[0053]
图3是本发明提供的另一手势求救的识别装置的结构示意图。
具体实施方式
[0054]
下面结合附图及具体实施例来对本发明作进一步阐述。在此需要说明的是，对于这些实施例方式的说明虽然是用于帮助理解本发明，但并不构成对本发明的限定。本文公开的特定结构和功能细节仅用于描述本发明的示例实施例。然而，可用很多备选的形式来体现本发明，并且不应当理解为本发明限制在本文阐述的实施例中。
[0055]
应当理解，尽管本文可能使用术语第一、第二等等来描述各种单元，但是这些单元不应当受到这些术语的限制。这些术语仅用于区分一个单元和另一个单元。例如可以将第一单元称作第二单元,并且类似地可以将第二单元称作第一单元，同时不脱离本发明的示例实施例的范围。
[0056]
应当理解，对于本文中可能出现的术语“和/或”，其仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示：单独存在a，单独存在b，同时存在a和b三种情况；对于本文中可能出现的术语“/和”，其是描述另一种关联对象关系，表示可以存在两种关系，例如，a/和b，可以表示：单独存在a，单独存在a和b两种情况；另外，对于本文中可能出现的字符“/”，一般表示前后关联对象是一种“或”关系。
[0057]
应当理解，在本文中若将单元称作与另一个单元“连接”、“相连”或“耦合”时，它可以与另一个单元直相连接或耦合，或中间单元可以存在。相対地，在本文中若将单元称作与另一个单元“直接相连”或“直接耦合”时，表示不存在中间单元。另外，应当以类似方式来解释用于描述单元之间的关系的其他单词(例如，“在
……
之间”对“直接在
……
之间”,“相邻”对“直接相邻”等等)。
[0058]
应当理解，本文使用的术语仅用于描述特定实施例，并不意在限制本发明的示例实施例。若本文所使用的，单数形式“一”、“一个”以及“该”意在包括复数形式，除非上下文明确指示相反意思。还应当理解，若术语“包括”、“包括了”、“包含”和/或“包含了”在本文中被使用时,指定所声明的特征、整数、步骤、操作、单元和/或组件的存在性,并且不排除一个或多个其他特征、数量、步骤、操作、单元、组件和/或他们的组合存在性或增加。
[0059]
应当理解，还应当注意到在一些备选实施例中，所出现的功能/动作可能与附图出现的顺序不同。例如,取决于所涉及的功能/动作,实际上可以实质上并发地执行,或者有时可以以相反的顺序来执行连续示出的两个图。
[0060]
应当理解，在下面的描述中提供了特定的细节,以便于对示例实施例的完全理解。然而,本领域普通技术人员应当理解可以在没有这些特定细节的情况下实现示例实施例。例如可以在框图中示出系统，以避免用不必要的细节来使得示例不清楚。在其他实例中，可以不以不必要的细节来示出众所周知的过程、结构和技术，以避免使得示例实施例不清。
[0061]
实施例
[0062]
为了在电梯故障时能够及时救援，本申请实施例提供了一种手势求救的识别方法、装置及存储介质，该手势求救的识别方法、装置及存储介质可识别出求救手势并发出报警，确保在电梯故障时能够及时采取救援。
[0063]
本申请实施例提供的手势求救的识别方法可应用于服务器，也可以应用于具有图像分析识别功能的智能摄像机。其中，若本申请实施例提供的手势求救的识别方法应用于服务器，则可在电梯内设置一摄像机，由摄像机获取电梯内的视频或图像并上传给服务器，然后再由服务器进行手势识别及报警控制。若本申请实施例提供的手势求救的识别方法应
用于具有图像分析识别功能的智能摄像机，则可通过该智能摄像机获取电梯内的视频或图像并直接由该智能摄像机进行手势识别及报警控制。
[0064]
为便于描述，本申请实施例以手势求救的识别方法应用于服务器为例进行说明。可以理解，所述执行主体并不构成对本申请实施例的限定。
[0065]
下面将对本申请实施例提供的手势求救的识别方法进行详细说明。
[0066]
如图1所示，是本申请实施例提供的应用于服务器的手势求救的识别方法的流程图，所述手势求救的识别方法可以包括如下步骤：
[0067]
步骤s101.获取电梯内包含乘客的至少一张图像。
[0068]
本申请实施例中，安装于电梯内的摄像机可获取电梯内的包含乘客的至少一张图像并实时上传给服务器。所述至少一张图像可以摄像机拍摄到的图像，也可以是从摄像机采集到的视频中提取出的。
[0069]
步骤s102.通过预先建立的人体姿态分析模型提取出至少一张图像中的人体关键点位置。
[0070]
服务器端预先通过openpose神经网络建立有一人体姿态分析模型，在获取到包含乘客的至少一张图像后，服务器可将该至少一张图像中的每一张图像作为人体姿态分析模型的输入进行运算，得到至少一张图像的每张图像中的人体关键点位置。
[0071]
本申请实施例中，通过openpose神经网络建立人体姿态分析模型的过程可以是如下过程：
[0072]
首先收集电梯场景下的包含人体图像的多张图片，将每张图片上的人体图像上标注上关键点位置。然后构建openpose神经网络模型，并将包含人体图像的图片作为模型的样本输入，标注关键点位置的图片作为对应的样本输出进行训练，得到人体姿态分析模型。
[0073]
其中，图片上标注的关键点位置可以是，但不限于人体的颈部、鼻子、左眼、右眼、左耳、右耳、左肩、右肩、左手肘、右手肘、左手腕以及右手腕等位置。
[0074]
本申请实施例中，如果至少一张图像中图像过多，若对至少一张图像的每张图像中的人体关键点位置进行识别，需要进行大量的运算。因此，在其他的一些实施例中，为了减少运算量，也可以每间隔一定数量的图像对至少一张图像的图像中的人体关键点位置进行识别。例如，每间隔1张或2张图像对至少一张图像的图像中的人体关键点位置进行识别。
[0075]
步骤s103.将至少一张图像中前臂与上臂之间夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于所述目标关键点位置的图像，确定为包含挥手动作的目标图像。
[0076]
正常情况下，电梯内的乘客进行挥手求救时会抬高并摆动手臂，从而使得手臂位置达到一定的高度，且挥手过程中会前臂与上臂之间会形成一定的夹角。
[0077]
因此，在确定至少一张图像中包含挥手动作的目标图像时，可预先定义一目标关键点位置，并判断至少一张图像中是否存在前臂与上臂之间的夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于目标关键点位置的图像。如果至少一张图像中存在前臂与上臂之间的夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于目标关键点位置的图像，则判定该图像为包含挥手动作的目标图像。
[0078]
其中，前臂是指手腕位置与手肘位置之间的连线，上臂是指手肘位置与肩部位置之间的连线。
[0079]
正常情况下挥手求救时，扬起的手臂的整体高度一般会高于人体的颈部位置、鼻
子位置、眼睛位置以及耳朵位置等。因此，本申请实施例中，目标关键点位置可以包括颈部位置、鼻子位置、眼睛位置以及耳朵位置中的至少一种。若目标关键点位置包括颈部位置、鼻子位置、眼睛位置以及耳朵位置中的两种及其以上，则前臂与上臂所构成的整体高于目标关键点位置的图像是指，前臂与上臂所构成的整体的中心坐标高于目标关键点的中心坐标。
[0080]
例如，当标关键点位置包括颈部位置和鼻子位置时，前臂与上臂所构成的整体高于目标关键点位置的图像是指，前臂与上臂所构成的整体的中心坐标高于颈部位置与鼻子位置所构成的整体的中心坐标。
[0081]
本申请实施例中，所述预设夹角范围可参考正常情况下挥手时前臂与上臂之间的夹角范围来确定，例如可以是90-180
°
、80-170
°
、100-170
°
等，本申请实施例中不做具体限定。
[0082]
本申请实施例中，所述手腕位置可以是左手手腕位置或右手手腕位置，也可以同时包括左手手腕位置与右手手腕位置。所述手肘位置可以是左手手肘位置或右手手肘位置，也可以同时包括左手手肘位置与右手手肘位置。肩部位置可以是左肩肩部位置或右肩肩部位置，也可以同时包括左肩肩部位置与右肩肩部位置。所述眼睛位置可以是左眼眼睛位置或右眼眼睛位置，也可以同时包括左眼眼睛位置与右眼眼睛位置。所述耳朵位置可以是左耳耳朵位置或右耳耳朵位置，也可以同时包括左耳耳朵位置与右耳耳朵位置。
[0083]
需要说明的是，在判定图像中是否包含挥手动作的过程中，上述所述的前臂与上臂必须相对应，即在确定每张图像中前臂与上臂之间夹角时，该前臂与上臂必须是同一侧的前臂与后壁，也即手腕位置、手肘位置以及肩部位置必须是同一侧的。
[0084]
步骤s104.基于至少一张图像中包含挥手动作的目标图像识别出至少一张图像中是否包含求救手势。
[0085]
本申请实施例中，识别至少一张图像中是否包含求救手势可以包括如下步骤：
[0086]
步骤s201.基于至少一张图像中包含挥手动作的目标图像，确定出至少一张图像中挥手动作的频率。
[0087]
具体的，统计预定时间内与非目标图像相邻的上一张或下一张目标图像的数量，所述非目标图像为未包含挥手动作的图像，所述预定时间段可根据实际情况设定。
[0088]
例如，该预定时间段为2秒，在某2秒内的包含乘客的图像为50张，其中第1-5张图像、第11-15张、第21-25张、第31-35张以及第41-45张均为包含挥手动作的目标图像，其余图像为不包含挥手动作的图像。此时可以统计该时间段内的非目标图像相邻的上一张(也可以是下一张)目标图像的数量，由于第6张的非目标图像的上一张图像为目标图像，第16张的非目标图像的上一张图像为目标图像，第26张的非目标图像的上一张图像为目标图像，第36张的非目标图像的上一张图像为目标图像，第46张的非目标图像的上一张图像为目标图像。因此，可得到该预定时间段内与非目标图像相邻的上一张目标图像的数量为5，除以时间可得至少一张图像中挥手动作的频率为2.5次/秒。
[0089]
步骤s202.若至少一张图像中挥手动作的频率超过预设频率，则判定至少一张图像中包含求救手势。
[0090]
正常情况下挥手求救时，手臂会有规律的来回摆动，因此在判定至少一张图像中是否包含求救手势时，可判断在一定时间段内的挥手动作的频率是否超过一预设频率，如
map)直接取groundtruth和openpose模型预测的关键点中得分较大的，paf由于得分有正负之分，因此取绝对值较大的。经过以上的改进，检测人体手势的速度大幅度提升，且检测精度也基本保持不变。
[0100]
由此通过前述步骤s101～s105所述的手势求救的识别方法，可通过人体姿态分析模型提取出至少一张图像中的人体关键点位置，基于每张图像中前臂与上臂之间夹角，以及前臂与上臂所构成的整体与目标关键点位置的相对高度，确定出至少一张图像中包含挥手动作的目标图像，根据目标图像识别出至少一张图像中是否包含求救手势，并在包含求救手势时发出报警，以便在电梯故障时能够及时采取救援，提高被困电梯人员的救援效率。同时，可通过求救手势控制电梯停止运行，以便在电梯故障时能够及时提出电梯运行，保障乘客安全。
[0101]
第二方面，本申请实施例提供了一种手势求救的识别装置。请参阅图2，手势求救的识别装置包括：
[0102]
获取单元，用于获取电梯内包含乘客图像的至少一张图像；
[0103]
提取单元，用于通过预先建立的人体姿态分析模型提取出所述至少一张图像中的人体关键点位置；
[0104]
确定单元，用于将所述至少一张图像中前臂与上臂之间夹角处于预设夹角范围内，且前臂与上臂所构成的整体高于所述目标关键点位置的图像，确定为包含挥手动作的目标图像；
[0105]
识别单元，用于基于所述至少一张图像中包含挥手动作的目标图像识别出所述至少一张图像中是否包含求救手势；
[0106]
报警单元，用于如果所述至少一张图像中包含求救手势，则触发报警操作；
[0107]
其中，所述人体关键点位置包括手腕位置、手肘位置、肩部位置和所述目标关键点位置，所述前臂为所述手腕位置与所述手肘位置之间的连线，所述上臂为所述手肘位置与所述肩部位置之间的连线，所述目标关键点位置包括颈部位置、鼻子位置、眼睛位置以及耳朵位置中的至少一种。
[0108]
在一个可能的设计中，识别单元在用于基于所述至少一张图像中包含挥手动作的目标图像识别出所述至少一张图像中是否包含求救手势时，具体用于：
[0109]
基于所述至少一张图像中包含挥手动作的目标图像，确定出所述至少一张图像中挥手动作的频率；
[0110]
若所述至少一张图像中挥手动作的频率超过预设频率，则判定所述至少一张图像中包含求救手势。
[0111]
在一个可能的设计中，识别单元在用于基于所述至少一张图像中包含挥手动作的目标图像，确定出所述至少一张图像中挥手动作的频率时，具体用于：
[0112]
统计预定时间段内与非目标图像相邻的上一张或下一张目标图像的数量，得到所述至少一张图像中挥手动作的频率；
[0113]
其中，所述非目标图像为未包含挥手动作的图像。
[0114]
在一个可能的设计中，手势求救的识别装置还包括：
[0115]
控制单元，用于如果所述至少一张图像中包含求救手势，则向电梯控制系统发出控制信号以使所述电梯控制系统控制电梯停止运行。
[0116]
在一个可能的设计中，报警单元在用于如果所述至少一张图像中包含求救手势，则触发报警操作时，具体用于：
[0117]
如果所述至少一张图像中包含求救手势，则向继电器输出一高电平信号，以使与所述继电器连接的报警设备发出报警信号；或
[0118]
如果所述至少一张图像中包含求救手势，则向报警设备发送报警信息。
[0119]
在一个可能的设计中，所述预设夹角范围为90-180
°
。
[0120]
本实施例第二方面提供的装置的工作过程、工作细节和技术效果，可以参见实施例第一方面，于此不再赘述。
[0121]
如图3所示，本申请实施例第三方面提供了一种手势求救的识别装置，包括依次通信相连的存储器、处理器和收发器，其中，所述存储器用于存储计算机程序，所述收发器用于收发消息，所述处理器用于读取所述计算机程序，执行如实施例第一方面所述的手势求救的识别方法。
[0122]
具体举例的，所述存储器可以但不限于包括随机存取存储器(ram)、只读存储器(rom)、闪存(flash memory)、先进先出存储器(fifo)和/或先进后出存储器(filo)等等；所述处理器可以不限于采用型号为stm32f105系列的微处理器、arm(advanced risc machines)、x86等架构处理器或集成npu(neural-network processing units)的处理器；所述收发器可以但不限于为wifi(无线保真)无线收发器、蓝牙无线收发器、通用分组无线服务技术(general packet radio service，gprs)无线收发器、紫蜂协议(基于ieee802.15.4标准的低功耗局域网协议，zigbee)无线收发器、3g收发器、4g收发器和/或5g收发器等。
[0123]
本实施例第三方面提供的装置的工作过程、工作细节和技术效果，可以参见实施例第一方面，于此不再赘述。
[0124]
本实施例第四方面提供了一种存储包含有实施例第一方面所述的手势求救的识别方法的指令的计算机可读存储介质，即所述计算机可读存储介质上存储有指令，当所述指令在计算机上运行时，执行如第一方面所述的手势求救的识别方法。其中，所述计算机可读存储介质是指存储数据的载体，可以但不限于包括软盘、光盘、硬盘、闪存、优盘和/或记忆棒(memory stick)等，所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。
[0125]
本实施例第四方面提供的计算机可读存储介质的工作过程、工作细节和技术效果，可以参见实施例第一方面，于此不再赘述。
[0126]
本实施例第五方面提供了一种包含指令的计算机程序产品，当所述指令在计算机上运行时，使所述计算机执行如实施例第一方面所述的手势求救的识别方法，其中，所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。
[0127]
以上所描述的多个实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
[0128]
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可
借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如rom/ram、磁碟、光盘等，包括若干指令用以使得一台仓库代码的合并装置执行各个实施例或者实施例的某些部分所述的方法。
[0129]
本发明不局限于上述可选实施方式，任何人在本发明的启示下都可得出其他各种形式的产品，但不论在其形状或结构上作任何变化，凡是落入本发明权利要求界定范围内的技术方案，均落在本发明的保护范围之内。