一种基于图像检测的亮饰条检测方法及系统与流程

本发明属于图像处理，具体涉及一种基于图像检测的亮饰条检测方法及系统。

背景技术：

1、随着计算机应用技术的不断发展，获取装配线上的产品的图像，通过图像检测算法从产品的图像中检测出问题图形，从而发现质量不合格的产品的方法变得越来越普遍。

2、类似现有技术有公开号为cn113177924a的发明，给出一种工业流水线产品瑕疵检测方法，包括步骤：采集产品瑕疵图像，形成产品瑕疵图像数据集；把产品瑕疵图像数据集分为训练集、验证集和测试集；对vgg16网络模型进行训练、验证和测试，形成训练好的vgg16网络模型；对有瑕疵的产品图片采用ssd检测算法进行特征的提取，完成对产品瑕疵的分类。此外，类似现有技术还有公开号为cn115511769a的发明，公开一种流水线上包装字符图像的归一化检测方法，包括步骤：1)分析工业包装字符图像，找到合适的图标作为唯一特征区域；2)制作模板，旨在找到唯一特征区域的特定参数；3)基于模板对工业包装图像特征区域的矫正；4)模板字符区域的预处理；5)一次粗略定位；6)根据模板图像特征区域和目标区域四个顶点的相对位置关系进行二次仿射定位；7)进行三角关系精细定位操作；8)主要对三组四个顶点值坐标求平均值作为最后的输出。上述发明均没有考虑获取的图像的精度问题，以及提前形成图像数据集需要花费大量时间的问题。由此，本发明提供一种基于图像检测的亮饰条检测方法及系统。

技术实现思路

1、本发明在生产亮饰条的装配线的不同的装配节点分别设置不同的检查模块，不同的检查模块分别执行自身的训练完成的检测模型，针对自身获取的中间亮饰条的图像进行检测处理，不同的检查模块还分别使用相应的训练数据重复训练自身的检测模型，本发明旨在获取高精度的中间亮饰条的图像，同时自动的为检测模型积累训练数据。

2、为了达到上述的发明目的，本发明给出如下所述的一种基于图像检测的亮饰条检测方法，主要包括以下的步骤：

3、在生产亮饰条的装配线的不同的装配节点分别设置不同的检查模块，不同的装配节点包括第1装配节点，以及第2装配节点至第n装配节点，生产原材料通过第1装配节点，以及第2装配节点至第n装配节点的加工处理以产生最终的成品亮饰条；

4、不同的所述检查模块用于分别获取经过相应的装配节点的中间亮饰条的图像，同时在不同的所述检查模块之间能够进行图像数据的通信，并且在亮饰条的装配流程中，不同的所述检查模块分别执行自身的训练完成的检测模型，针对自身获取的所述中间亮饰条的图像进行检测处理，以确定自身获取的所述中间亮饰条的图像中的问题图形；

5、不同的所述检查模块分别使用在亮饰条的装配流程中积累下来的相应的训练数据重复训练自身的用于从自身获取的所述中间亮饰条的图像中检测出所述问题图形的所述检测模型。

6、作为本发明的一种优选技术方案，所述检查模块获取经过自身对应的装配节点的所述中间亮饰条的图像的过程，包括所述检查模块拍摄不包含中间亮饰条的第一拍摄图像，以及所述检查模块拍摄包含中间亮饰条的第二拍摄图像。

7、作为本发明的一种优选技术方案，所述检查模块获取经过自身对应的装配节点的所述中间亮饰条的图像的过程，还包括如下的步骤：

8、所述检查模块针对所述第一拍摄图像进行干扰图像元素的去除处理，以得到第一中间拍摄图像，并且所述检查模块分别计算所述第一中间拍摄图像中的图像块与预先确定的问题图像块之间的第一相似度，其中，图像块由若干个图像元素组成，所述检查模块将对应的所述第一相似度大于预先设定的第一相似度阈值的图像块判定为是第一问题图像块；

9、所述检查模块分别计算所述第一拍摄图像中的图像块与预先确定的问题图像块之间的第二相似度，其中，图像块由若干个图像元素组成，所述检查模块将对应的所述第二相似度大于预先设定的第二相似度阈值的图像块判定为是第二问题图像块；

10、所述检查模块将所述第一问题图像块与所述第二问题图像块的集合判定为是所述第一拍摄图像中的全部的问题图像块。

11、作为本发明的一种优选技术方案，所述第二相似度阈值大于所述第一相似度阈值。

12、作为本发明的一种优选技术方案，所述检查模块获取经过自身对应的装配节点的所述中间亮饰条的图像的过程，还包括如下的步骤：

13、所述检查模块在所述第二拍摄图像中，确定与判定的所述第一拍摄图像中的全部的问题图像块相对应的不同的特定图像块；

14、所述检查模块针对确定的所述第二拍摄图像中的不同的所述特定图像块，分别使用不同的所述特定图像块周围的预先设定图像范围之内的若干个图像元素更新相应的所述特定图像块，以从所述第二拍摄图像得到所述中间亮饰条的图像。

15、作为本发明的一种优选技术方案，不同的所述检查模块分别执行自身的训练完成的所述检测模型，针对自身获取的所述中间亮饰条的图像进行检测处理，包括不同的所述检查模块先将自身获取的所述中间亮饰条的图像划分成若干个中间亮饰条的部分图像，再依次将若干个中间亮饰条的部分图像输入自身的训练完成的所述检测模型，自身的训练完成的所述检测模型依次检测出若干个中间亮饰条的部分图像中的所述问题图形。

16、作为本发明的一种优选技术方案，不同的所述检查模块分别在亮饰条的装配流程中积累相应的训练数据，包括如下的步骤：

17、所述第n装配节点对应的所述检查模块将自身的所述检测模型检测出的不同的所述问题图形，以及与不同的所述问题图形相对应的若干个中间亮饰条的部分图像发送给其他装配节点对应的所述检查模块；

18、其他装配节点对应的所述检查模块判断在自身的所述检测模型检测出的不同的所述问题图形对应的若干个中间亮饰条的部分图像中，是否存在与所述第n装配节点对应的所述检查模块发来的若干个中间亮饰条的部分图像相对应的中间亮饰条的部分图像，在不存在相应的中间亮饰条的部分图像的情况下，其他装配节点对应的所述检查模块删除自身的所述检测模型检测出的不同的所述问题图形对应的若干个中间亮饰条的部分图像，在存在相应的中间亮饰条的部分图像的情况下，继续下个步骤；

19、其他装配节点对应的所述检查模块分别取得相应的中间亮饰条的部分图像对应的不同的所述问题图形的代表值，以及分别取得与相应的中间亮饰条的部分图像相对应的所述第n装配节点对应的所述检查模块发来的不同的所述问题图形的代表值，并且其他装配节点对应的所述检查模块根据取得的代表值，针对相应的中间亮饰条的部分图像对应的不同的所述问题图形，和与相应的中间亮饰条的部分图像相对应的所述第n装配节点对应的所述检查模块发来的不同的所述问题图形进行聚类处理；

20、其他装配节点对应的所述检查模块确定和与相应的中间亮饰条的部分图像相对应的所述第n装配节点对应的所述检查模块发来的不同的所述问题图形同属一个类别的特定问题图形，仅将所述特定问题图形对应的中间亮饰条的部分图像存储为训练数据。

21、本发明还提供一种基于图像检测的亮饰条检测系统，包括如下的模块：

22、检查模块，分别设置在生产亮饰条的装配线的不同的装配节点模块，用于分别获取经过相应的装配节点模块的中间亮饰条的图像，并且在亮饰条的装配流程中，用于分别执行自身的训练完成的检测模型，针对自身获取的中间亮饰条的图像进行检测处理，还用于分别使用在亮饰条的装配流程中积累下来的相应的训练数据重复训练自身的用来从自身获取的中间亮饰条的图像中检测出问题图形的检测模型；

23、装配节点模块，包括第1装配节点模块，以及第2装配节点模块至第n装配节点模块，第1装配节点模块，以及第2装配节点模块至第n装配节点模块用于对生产原材料进行加工处理以产生最终的成品亮饰条；

24、通信模块，用于在不同的检查模块之间进行图像数据的通信。

25、与现有技术相比，本发明的有益效果至少如下所述：

26、在本发明中，首先，在生产亮饰条的装配线的不同的装配节点分别设置不同的检查模块，生产原材料通过不同的装配节点的加工处理产生最终的成品亮饰条；其次，不同的检查模块分别获取经过相应的装配节点的中间亮饰条的图像，并且在亮饰条的装配流程中，分别执行自身的训练完成的检测模型，针对自身获取的中间亮饰条的图像进行检测处理；最后，不同的检查模块分别使用在亮饰条的装配流程中积累下来的相应的训练数据重复训练自身的用于从自身获取的中间亮饰条的图像中检测出问题图形的检测模型。通过本发明，不仅能够获取高精度的中间亮饰条的图像，而且还能够在亮饰条的装配流程中自动的为检测模型积累准确度高的训练数据，从而能够不断提升从中间亮饰条的图像中检测问题图形的准确率，进而保证最终能够取得高质量的成品亮饰条。