6D位姿识别的方法、装置及计算机存储介质与流程

本发明涉及人工智能领域，特别涉及一种6d位姿识别的方法、装置及计算机存储介质。

背景技术：

随着深度相机的普及以及3d视觉研究的发展，机械臂开始承担如智能分拣、柔性上下料等复杂的任务。以工业产线的零部件抓取为例，精确测量目标零部件的6d位姿是引导机器人完成抓取操作的基础，其中，位姿是一个相对的概念，指的是两个坐标系之间的位移和旋转变换，而两个坐标系分别表示以物体上初始位置以及旋转、平移后的位置建立的坐标系,6d指6个自由度，包括3个自由度的平移和3个自由度的旋转。但是工业零部件具有结构复杂、表面纹理单一、反光性强等特点，且相互之间遮挡严重；通过基于点云信息的6d位姿识别的方法，由于点云数据固有的稀疏性、冗余性和无序性，需要大量的数据计算才能保证位姿识别的准确度；而基于rgb图进行识别的方法，在低纹理物体的测量场景，准确度低。

技术实现要素：

本发明旨在至少解决现有技术中存在的技术问题之一。为此，本发明提供了一种6d位姿识别的方法、装置和计算机存储介质，可以提高位姿识别的准确度。

第一方面，本发明提供一种6d位姿识别的方法，包括如下步骤：

获取待测物体的第一目标深度图、第一目标rgb图以及第一分割信息；其中，所述第一分割信息包括第一分割掩码；

获取所述第一目标深度图对应的第一点云信息；

将所述第一点云信息、所述第一目标rgb图以及所述第一分割信息输入到已训练好的位姿识别网络中；

根据所述位姿识别网络的输出结果，获取所述待测物体的6d位姿信息。

根据本发明第一方面的上述实施例，至少具有如下有益效果：通过已训练好的位姿识别网络提取待测物体的第一目标深度图、第一目标rgb图以及第一分割信息的特征获得6d位姿信息，可以充分利用待测物体的特征，在强反光、弱纹理和遮挡严重等复杂环境下也能准确测量6d位姿，从而提高位姿识别的准确度。

根据本发明第一方面的一些实施例，所述获取待测物体的第一目标深度图、第一目标rgb图以及第一分割信息；其中，所述第一分割信息包括第一分割掩码，包括如下步骤：

获取原始深度图以及原始rgb图；

通过图像分割算法对所述原始rgb图进行分割处理，得到所述第一目标rgb图以及所述第一分割信息，所述第一分割信息包括第一分割掩码；

根据所述第一分割信息的第一分割掩码对所述原始深度图进行裁剪处理，得到所述第一目标深度图。

通过采用第一分割掩码对原始深度图进行裁剪，可以去除冗余的数据对目标图像的影响，以提高位姿识别的准确度。

根据本发明第一方面的一些实施例，所述获取所述第一目标深度图对应的第一点云信息，包括如下步骤：

获取所述第一目标深度图在相机坐标系下的第二点云信息；

将所述第二点云信息进行点云去噪处理，得到所述第一点云信息。

通过进行点云去噪处理，可以去除环境噪音、相机噪音等因素影响，避免大量无用特征的提取，从而提高位姿识别的效率。

根据本发明第一方面的一些实施例，所述获取所述第一目标深度图对应的第一点云信息，还包括如下步骤：

将去噪处理得到的所述第一点云信息中点的个数与预设的个数进行比较；

根据比较结果，选择将所述第一点云信息进行上采样或下采样处理。

根据本发明第一方面的一些实施例，所述根据所述位姿识别网络的输出结果，获取所述待测物体的6d位姿信息，包括如下步骤：

获取所述位姿识别网络输出的所述待测物体的若干预测位姿信息，其中，所述预测位姿信息包括第一旋转信息、旋转置信度、第一平移信息以及平移置信度，所述旋转置信度与所述第一旋转信息一一对应，所述平移置信度与所述第一平移信息一一对应；

获取第二旋转信息，所述第二旋转信息为所有预测位姿信息中值最大的旋转置信度对应的所述第一旋转信息；

获取第二平移信息，所述第二平移信息为所有预测位姿信息中值最大的所述平移置信度对应的所述第一平移信息；

根据所述第二旋转信息以及所述第二平移信息得到所述6d位姿信息。

通过分别获取最大的旋转置信度对应的第二旋转信息以及最大的平移置信度对应的第二平移信息，可以获取到与真实情况最接近的6d位姿信息。

根据本发明第一方面的一些实施例，所述位姿识别网络通过损失函数进行优化，所述损失函数设置为待训练物体的预测点云与真实点云之间的平均平方距离。通过平均平方距离进行位姿识别网络优化评估，可以使得预测位姿信息与真实位姿信息更加接近，从而提高6d位姿识别的准确率。

根据本发明第一方面的一些实施例，所述位姿识别网络用于对待测物体进行颜色特征图、几何特征图、目标点云特征图、第一融合特征图以及第二融合特征图的提取；

所述第一融合特征图通过maxpooling层提取第三融合特征图的骨干特征得到，所述第三融合特征图通过将所述颜色特征图与所述目标点云特征图进行像素级图像融合处理得到；

所述第二融合特征图通过将所述第一融合特征与所述几何特征图进行密集融合得到。

通过解耦待测物体的第一目标rgb图、第一分割掩码和第一点云信息处理过程，有效提取第一目标rgb图对应的颜色特征、第一分割掩码对应的几何特征和第一点云信息对应的点云特征，并进一步基于颜色特征与点云特征的内在映射关系实现像素级特征密集融合，得到囊括颜色、几何、局部、全局的有效特征，提高特征利用效率。

根据本发明第一方面的一些实施例，所述6d位姿识别的方法还包括如下步骤：

获取所述6d位姿信息的位姿精度；

将所述位姿精度与预设的参考位姿精度进行比较；

根据比较结果，通过icp算法对所述6d位姿信息进行迭代处理，得到与所述参考位姿精度匹配的6d位姿信息。

通过icp算法进一步获得距离真实位姿更为接近的点，从而可以提高6d位姿识别的准确度。

第二方面，本发明提供一种6d位姿识别的装置，包括：

图像分割模块，用于得到待测物体的第一点云信息、第一目标rgb图以及第一分割信息；

位姿识别网络训练模块，用于获取训练好的位姿识别网络；

位姿处理模块，用于将所述第一点云信息、第一目标rgb图以及第一分割信息输入所述位姿识别网络获得6d位姿信息。

由于第二方面的6d位姿识别的装置应用第一方面任一项的6d位姿识别的方法，因此具有本发明第一方面的所有有益效果。

第三方面，本发明提供一种计算机存储介质，包括存储有计算机可执行指令，所述计算机可执行指令用于第一方面任一项的6d位姿识别的方法。

由于第三方面的计算机存储介质可执行第一方面任一项的6d位姿识别的方法，因此具有本发明第一方面的所有有益效果。

本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。

附图说明

本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：

图1是本发明实施例的6d位姿识别的方法的主要步骤图；

图2是本发明实施例的6d位姿识别的方法的第一点云信息获取的步骤图；

图3是本发明实施例的6d位姿识别的方法的位姿信息获取的步骤图；

图4是本发明实施例的6d位姿识别的方法的位姿识别网络的特征图组成示意图；

图5是本发明实施例的6d位姿识别的装置的结构示意图。

附图标记：

图像采集模块100、图像分割模块200、位姿识别网络训练模块300、位姿处理模块400。

具体实施方式

本发明的描述中，除非另有明确的限定，设置、安装、连接等词语应做广义理解，所属技术领域技术人员可以结合技术方案的具体内容合理确定上述词语在本发明中的具体含义。在本发明的描述中，若干的含义是一个或者多个，多个的含义是两个以上，大于、小于、超过等理解为不包括本数，以上、以下、以内等理解为包括本数。此外，限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明的描述中，除非另有说明，“多个”的含义是两个或两个以上。

下面参照图1至图5描述本发明的6d位姿识别的方法、装置、系统及计算机存储介质。

第一方面，如图1所示，本发明提供一种6d位姿识别的方法，包括如下步骤：

步骤s100、获取待测物体的第一目标深度图、第一目标rgb图以及第一分割信息；其中，第一分割信息包括第一分割掩码。

步骤s200、获取第一目标深度图对应的第一点云信息。

步骤s300、将第一点云信息、第一目标rgb图以及第一分割信息输入到已训练好的位姿识别网络中。

步骤s400、根据所述位姿识别网络的输出结果，获取待测物体的6d位姿信息。

应理解的是，在一些实施例中，第一分割信息还包括待测物体的类别，以使位姿识别网络可以根据第一分割信息加载不同的模型进行学习，以获得与待测物体匹配的6d位姿信息。

因此，通过已训练好的位姿识别网络提取待测物体的第一目标深度图、第一目标rgb图以及第一分割信息的特征获得6d位姿信息，可以充分利用待测物体的特征，在强反光、弱纹理和遮挡严重等复杂环境下也能准确测量6d位姿，从而提高位姿识别的准确度。

在本发明第一方面的一些实施例中，步骤s100包括如下步骤：

获取原始深度图以及原始rgb图。

应理解的是，原始深度图和原始rgb图可以通过3d相机获取。

通过图像分割算法对原始rgb图进行分割处理，得到第一目标rgb图以及第一分割信息，第一分割信息包括第一分割掩码。

根据第一分割信息的第一分割掩码对原始深度图进行裁剪处理，得到第一目标深度图。

通过采用第一分割掩码对原始深度图进行裁剪，可以去除冗余的数据对目标图像的影响，以提高位姿识别的准确度。

应理解的是，存在多个物体在同一原始深度图中以及同一原始rgb图中，因此，可以通过重复执行获取第一目标rgb图、第一目标深度图、第一分割信息的方式依次获得下一待测物体的第一目标rgb图、第一目标深度图、第一分割信息，从而可以进行下一待测物体的位姿识别。

在本发明第一方面的一些实施例中，如图2所示，步骤s200包括如下步骤：

步骤s210、获取第一目标深度图在相机坐标系下的第二点云信息。

应理解的是，通过3d相机内参，可以将深度图信息转化为相机坐标系下的n*3的第二点云信息。假设裁剪后的rgb区域中的一个点p的坐标为(u,v)，3d相机的内参矩阵为k，p点到相机平面的距离d,点p在相机坐标系下的点为(x,y,z)，则：

其中，fx,fy,cx,cy均为相机的内参，此时，根据上述公式以及z的值等同于d可以获得x，y，z的值分别如下：

z＝d

步骤s220、将第二点云信息进行点云去噪处理，得到第一点云信息。

应理解的是，由于环境噪音、相机噪音等因素影响，转换后的点云存在噪声，且冗余性较高，因此需要对第二点云信息进行点云去噪处理。在一些实施例中，通过dbscan算法对第二点云信息进行去噪处理。在另一些实施例中，会通过双边滤波算法进行去噪处理。

通过进行点云去噪处理，可以去除环境噪音、相机噪音等因素影响，避免大量无用特征的提取，从而提高位姿识别的效率。

根据本发明第一方面的一些实施例，如图2所示，步骤s220之后还包括如下步骤：

步骤s230、将去噪处理得到的第一点云信息中点的个数与预设的个数进行比较。

应理解的是，当进行去噪后，存在第一点云信息的点个数过多或者过少从而影响位姿识别网络的判断准确度和效率，因此可以通过减少第一点云信息中点的个数或者增加第一点云信息中的个数，从而做到提升待测物体识别的准确度和效率。

步骤s240、根据比较结果，选择将第一点云信息进行上采样或下采样处理。

应理解的是，当第一点云信息中点的个数大于预设的个数时，进行下采样处理。当去第一点云信息中点的个数小于预设的个数时，进行上采样处理。当第一点云信息中点的个数等于预设的个数时，保持现状。

应理解的是，在一些实施例中，下采样可以通过fps算法处理。

在本发明第一方面的一些实施例中，如图3所示，步骤s400包括如下步骤：

步骤s410、获取位姿识别网络输出的待测物体的若干预测位姿信息，其中，预测位姿信息包括第一旋转信息、旋转置信度、第一平移信息以及平移置信度，旋转置信度与第一旋转信息一一对应，平移置信度与第一平移信息一一对应。

应理解的是，对于第一点云信息中的每个点均有一个对应的预测位姿信息。

步骤s420、获取第二旋转信息，第二旋转信息为所有预测位姿信息中值最大的旋转置信度对应的第一旋转信息。

应理解的是，当旋转置信度的值越大时，表示第一旋转信息与真实的待测物体的旋转角度越接近。

步骤s430、获取第二平移信息，第二平移信息为所有预测位姿信息中值最大的平移置信度对应的第一平移信息。

应理解的是，当平移置信度的值越大时，表示第一平移信息与真实的待测物体的平移距离越接近。

步骤s440、根据第二旋转信息以及第二平移信息得到6d位姿信息。

通过分别获取最大的旋转置信度对应的第二旋转信息以及最大的平移置信度对应的第二平移信息，可以获取到与真实情况最接近的6d位姿信息。

在本发明第一方面的一些实施例中，位姿识别网络通过损失函数进行优化，损失函数设置为待训练物体的预测点云与真实点云之间的平均平方距离。通过平均平方距离进行位姿识别网络优化评估，可以使得预测位姿信息与真实位姿信息更加接近，从而提高6d位姿识别的准确率。

应理解的是，在位姿识别网络训练过程中，由于被训练的物体的真实位姿信息是可知的，则待训练物体的每个点的坐标信息可通过真实位姿信息获得，即获得真实点云的信息。因此，当通过位姿识别网络得到6d位姿信息后，根据6d位姿信息转换得到每个待训练物体的预测点云后，可以获得预测点云与真实点云之间平均平方距离，以评估优化当前的位姿识别网络。此时，假设平均平方距离为则

其中，m表示训练物体的点云信息，m表示训练物体的点云信息的点的个数，q和分别表示预测6d位姿和训练物体的真实6d位姿。其中r,t,分别表示预测6d位姿中的旋转信息和平移信息，以及真实6d位姿的旋转信息和平移信息；rx+t表示经6d位姿信息转换得到的预测点云中的一个点。

应理解的是，在另一些实施例中，由于三维空间中对称物体可能具有多个正确的旋转矩阵，即多个真实位姿信息，这会导致网络训练时产生误差。因此，对于对称的待训练物体需要对损失函数进行修正。此时，为：

在本发明第一方面的一些实施例中，如图4所示，位姿识别网络用于对待测物体进行颜色特征图、几何特征图、目标点云特征图、第一融合特征图以及第二融合特征图的提取；第一融合特征图通过maxpooling层提取第三融合特征图的骨干特征得到，第三融合特征图通过将颜色特征图与目标点云特征图进行像素级图像融合处理得到；第二融合特征图通过将第一融合特征与几何特征图进行密集融合得到。

应理解的是，在一些实施例中，通过fcnn网络分别对待测物体的第一目标rgb图以及第一分割掩码进行特征提取，从而得到对应的颜色特征图、几何特征图。通过cnn网络提取待测物体的第一目标深度图的目标点云特征得到目标点云特征图。

通过解耦待测物体的第一目标rgb图、第一分割掩码和第一点云信息处理过程，有效提取第一目标rgb图对应的颜色特征、第一分割掩码对应的几何特征和第一点云信息对应的点云特征，并进一步基于颜色特征与点云特征的内在映射关系实现像素级特征密集融合，得到囊括颜色、几何、局部、全局的有效特征，提高特征利用效率。

在本发明第一方面的一些实施例中，6d位姿识别的方法还包括如下步骤：

获取6d位姿信息的位姿精度。

应理解的是，位姿精度用于判断通过6d位姿信息获得的点云信息与待测物体的第一点云信息的误差。

将位姿精度与预设的参考位姿精度进行比较。

根据比较结果，通过icp算法对6d位姿信息进行迭代处理，得到与参考位姿精度匹配的6d位姿信息。

通过icp算法进一步获得距离真实位姿更为接近的点，从而可以提高6d位姿识别的准确度。

如图5所示，第二方面，本发明提供一种6d位姿识别的装置，包括：

图像分割模块200，用于得到待测物体的第一点云信息、第一目标rgb图以及第一分割信息；

位姿识别网络训练模块300，用于获取训练好的位姿识别网络；

位姿处理模块400，用于将第一点云信息、第一目标rgb图以及第一分割信息输入位姿识别网络获得6d位姿信息。

由于第二方面的6d位姿识别的装置应用第一方面任一项的6d位姿识别的方法，因此具有本发明第一方面的所有有益效果。

应理解的是，在一些实施例中，6d位姿识别的装置还包括图像采集模块100，用于采集原始图像；此时，图像分割模块200可以根据原始图像得到待测物体的第一点云信息、第一目标rgb图以及第一分割信息。

应理解的是，上文中装置可以被实施为软件、固件、硬件及其适当的组合。某些物理组件或所有物理组件可以被实施为由处理器，如中央处理器、数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。

第三方面，本发明提供一种计算机存储介质，包括存储有计算机可执行指令，计算机可执行指令用于第一方面任一项的6d位姿识别的方法。

由于第三方面的计算机存储介质可执行第一方面任一项的6d位姿识别的方法，因此具有本发明第一方面的所有有益效果。

应理解的是，术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于ram、rom、eeprom、闪存或其他存储器技术、cd-rom、数字多功能盘(dvd)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。

下面参考图1至图5以一个具体的实施例详细描述应用本发明第一方面的6d位姿信息的方法的6d位姿装置。值得理解的是，下述描述仅是示例性说明，而不是对发明的具体限制。

如图1步骤s100，图像分割模块200获取待测物体的第一目标深度图、第一目标rgb图以及第一分割信息，第一分割信息包括第一分割掩码。

具体的，图像采集模块100通过3d相机获取原始深度图以及原始rgb图。

进一步，图像采集模块100将原始深度图和原始rgb图发给图像分割模块200；

进一步，图像分割模块200通过图像分割算法对原始rgb图进行分割处理，得到第一目标rgb图以及第一分割信息，第一分割信息包括第一分割掩码、类别。

进一步，图像分割模块200根据第一分割掩码对原始深度图进行裁剪处理，得到第一目标深度图。

具体的，如图2步骤s210，图像分割模块200获取第一目标深度图在相机坐标系下的第二点云信息。

具体的，通过3d相机内参，可以将深度图信息转化为相机坐标系下的n*3的第二点云信息。假设裁剪后的rgb区域中的一个点p的坐标为(u,v)，3d相机的内参矩阵为k，p点到相机平面的距离d,点p在相机坐标系下的点为(x,y,z)，则：

其中，fx,fy,cx,cy均为相机的内参，此时，根据上述公式以及z的值等同于d可以获得x，y，z的值分别如下：

z＝d

进一步，如步骤s220，图像分割模块200将第二点云信息进行点云去噪处理，得到第一点云信息。

具体的，图像分割模块200通过dbscan算法对第二点云信息进行去噪处理。

进一步，如步骤s230，图像分割模块200将第一点云信息中点的个数与预设的个数进行比较。

进一步，如步骤s240，图像分割模块200根据比较结果，选择将第一点云信息进行上采样或下采样处理。

具体的，预设的个数设置为1000。当第一点云信息中点的个数大于1000时，进行下采样处理。当第一点云信息中点的个数小于1000时，进行上采样处理。当第一点云信息中点的个数等于1000时，保持现状。

具体的，图像分割模块200通过fps算法进行下采样处理。

进一步，如图1步骤s300，将第一点云信息、第一目标rgb图以及第一分割信息输入到位姿识别网络训练模块300中；

进一步，如图1步骤s400，根据所述位姿识别网络的输出结果，获取待测物体的6d位姿信息。

具体的，位姿识别网络训练模块300输出待测物体的若干预测位姿信息，其中，预测位姿信息包括第一旋转信息、旋转置信度、第一平移信息以及平移置信度，旋转置信度与第一旋转信息一一对应，平移置信度与第一平移信息一一对应。

具体的，位姿识别网络训练模块300输出若干四元数q和对应的旋转置信度c1，则四元数q的表达式为：

q＝w+xi+yj+zk

其中，||q||＝x²+y²+z²+w²＝1，此时，第一旋转信息r为：

具体的，第一平移信息用矩阵t表示如下：

此时，如步骤s410，位姿处理模块400获取位姿识别网络训练模块300输出的待测物体的若干预测位姿信息。

进一步，如步骤s420，位姿处理模块400获取第二旋转信息，第二旋转信息为所有预测位姿信息中值最大的旋转置信度对应的第一旋转信息。

假设第二旋转信息为r^*。

如步骤s430，位姿处理模块400获取第二平移信息，第二平移信息为所有预测位姿信息中值最大的平移置信度对应的第一平移信息。

假设第二平移信息为t^*。

此时，如步骤s440，待测物体的6d位姿信息如下：

进一步，位姿处理模块400获取6d位姿信息的位姿精度。

进一步，位姿处理模块400将位姿精度与预设的参考位姿精度进行比较。

进一步，位姿处理模块400根据比较结果，通过icp算法对6d位姿信息进行迭代处理，得到与参考位姿精度匹配的6d位姿信息。

具体的，当位姿精度不满足参考位姿精度时，继续对6d位姿信息进行迭代处理直至得到与参考位姿精度匹配的6d位姿信息。

此时，位姿处理模块400输出待测物体的6d位姿信息。同时，重复上述步骤，获取原始深度图和原始rgb图中下一待测物体的6d位置信息。

具体的，位姿识别网络训练模块300进行如下处理得到训练好的位姿识别网络。

位姿识别网络对待训练的物体进行颜色特征图、几何特征图、目标点云特征图、第一融合特征图以及第二融合特征图的提取；其中，第一融合特征图通过maxpooling层提取第三融合特征图的骨干特征得到，第三融合特征图通过将颜色特征图与目标点云特征图进行像素级图像融合处理得到；第二融合特征图通过将第一融合特征与几何特征图进行密集融合得到。

具体的，如图4所示，通过fcnn网络对待训练物体的第二目标rgb图片和第二分割掩码进行特征提取，二者分别被映射为维度为batch_size×32×h×w的颜色特征图、几何特征图，其中颜色特征图记为img_emb，几何特征图记为mask_emb，即每个像素点被映射为32维的特征向量，其中batch_size＝1，表示每次训练选取的样本数，3表示通道数，h和w表示第二目标rgb图的高和宽；然后依据索引choose从img_emb和mask_emb选取对应像素所提取的特征，记为img_choosed_emb和mask_choosed_emb，维度为batch_size×32×1000；再利用cnn网络提取待训练物体的第二深度图对应的第三点云信息的点云特征，得到目标点云特征图；并将目标点云特征图逐层与颜色特征图的img_choosed_emb进行像素级密集融合，构成“颜色+点云”的特征描述方法，得到第三融合特征图。此时，再利用maxpooling层提取像素级密集融合后的骨干特征，得到第一融合特征图，将第一融合特征图记为pointfeat，维度为batch_size×1408×1000；最后将mask_emb和pointfeat密集融合，构成最后的全局特征ap_x，维度为batch_size×1440×1000。此时，位姿识别网络建立完成。

进一步，位姿识别网络通过损失函数进行优化，损失函数设置为待训练物体的预测点云与真实点云之间的平均平方距离。

此时，假设平均平方距离为则

m表示训练物体的点云信息，m表示训练物体的点云信息的点的个数，q和分别表示预测6d位姿和训练物体的真实6d位姿。其中r,t,分别表示预测6d位姿中的旋转信息和平移信息，以及真实6d位姿的旋转信息和平移信息；rx+t表示经6d位姿信息转换得到的预测点云中的一个点。

进一步，对于对称的待训练物体进行损失函数修正。此时，为：

此时，如步骤s300中，位姿识别网络训练模块300会对待测的物体进行颜色特征图、几何特征图、目标点云特征图、第一融合特征图以及第二融合特征图的提取，从而输出待测的物体的若干预测位姿信息。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示意性实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。

尽管已经示出和描述了本发明的实施例，本领域的普通技术人员可以理解：在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由权利要求及其等同物限定。