一种基于视觉识别的工器具出入库管理方法及系统与流程

本发明属于工器具出入库识别，尤其涉及一种基于视觉识别的工器具出入库管理方法及系统。

背景技术：

1、工器具出入库管理大部分依然采用传统手工登记方式，但手工登记方式对运维人员的自觉性要求较高，不同的个人有不同的记录习惯，登记工作基本上流于形式，且手工登记方式较为繁琐，用户每次领取或归还均需填写大量存储信息，占用较多工作时间，降低了班组人员工作效率，尤其是工作任务紧急时，没有时间填写太多的内容，容易因人为原因造成管理混乱，不能满足工器具管理制度要求，严重影响工作效率。

2、为解决上述技术问题，现有技术中国发明专利《 工器具出入库识别方法、装置、计算机设备和存储介质》，公开号cn110175800a，公开日20190827，公开方法包括：扫描工器具的识别码，获取所述工器具的识别码信息；根据所述识别码信息，得到对应的所述工器具的存储信息；解析所述存储信息获得所述工器具的出入库状态；检测所述出入库状态是否为出库；当所述出入库状态为出库时，将所述出入库状态切换为入库；当所述出入库状态不为出库时，将所述出入库状态切换为出库，需要对工器具进行出入库操作时，只需通过扫描工器具的识别码，就可以将工器具的出入库状态进行切换，即只需要扫码领用或者归还的工器具的识别码，即可实现工器具出入库的登记。

3、通过上述分析，现有技术存在的问题及缺陷为：现有技术不能对工器具出入库的状态以及库存信息不能进行有效管理记录，对后续的采购等不能提供准确的信息。

技术实现思路

1、为克服相关技术中存在的问题，本发明公开实施例提供了一种基于视觉识别的工器具出入库管理方法及系统。

2、所述技术方案如下：一种基于视觉识别的工器具出入库管理方法，包括以下步骤：

3、s1，检测工具存储库内工器具的存入信息和库存总量信息，在库存区域工器具的存入信息和库存总量信息变化时，拍摄工器具的变化图像并传送到差异识别终端；

4、s2，进行图像预处理，获取图像的灰度区域，对库存区域边界进行提取，计算出工器具的初始库存量信息和当前库存总量信息，将当前库存量信息传递给库存量识别模块；

5、s3，库存量识别模块调整工器具库存总量，根据工器具库存总量信息设定工器具库存总量集合，判断工器具是否有库存量存入信息，若有存入信息，则通过差异识别终端判定出入工器具取出量及取出频次；

6、s4，纠正工器具重复存入信息的库存量；

7、s5，判断工器具是否有种类变化，若存在种类变化，差异识别终端采用种类识别法判定出入工器具取出量信息，工器具初始库存量不变，只改变库存总量信息；

8、s6，工器具的初始库存量和当前库存总量信息差异识别结束后，将工器具送到前端服务器进行确认，获取工器具出入库过程中的工器具出入信息。

9、步骤s2中，工器具的初始库存量的表达式为：

10、；

11、式中，为四个库存区域边界的横坐标值的平均值，为四个库存区域边界的纵坐标值的平均值，为四个库存区域边界的交点值，为第一库存区域边界的横坐标值，为第二库存区域边界的横坐标值，为第三库存区域边界的横坐标值，为第四库存区域边界的横坐标值，为第一库存区域边界的纵坐标值，为第二库存区域边界的纵坐标值，为第三库存区域边界的纵坐标值，为第四库存区域边界的纵坐标值，为第一库存区域边界的交点值，为第二库存区域边界的交点值，为第三库存区域边界的交点值，为第四库存区域边界的交点值。

12、在步骤s2中，进行图像预处理，包括：采用灰度权重分割方法对工器具图像进行权重分割，根据整幅图像的灰度值，选取最佳的权重，权重分割的数学表达为：

13、；

14、式中，为当前最佳的整幅图像权重分割值，为整幅图像权重分割中当前分割的权重，为设定的标准权重。

15、在步骤s2中，获取图像的灰度区域，包括：

16、s2.1、确定取样核种类，对原图像边界作对应的拓展，用边界值作为拓展值，使边界处的方差值变小；

17、s2.2、用取样核遍历所有像素，得到所有像素的邻域方差；

18、s2.3、将所有方差值映射到0-255的灰度范围，得到方差灰度图，工器具边界位于灰度值最大的部分，表达式为：

19、；

20、；

21、式中，为方差灰度图像处的灰度值，为处的方差值，为方差最小值，为方差最大值，运算为向下取整，为方差最大值与方差最小值的偏差映射到255的灰度比值；

22、s2.4、设定方差权重，提取方差大于权重的部分像素点，将值设为1，其余像素点的值设为0，得到方差灰度化图像；

23、s2.5、提取面积最大的区域，得到工器具边界所在区域，对区域进行形态学闭运算，填充补丁；

24、s2.6、对所得区域之外的部分进行高斯灰度化，对边界区域不作处理。

25、在步骤s2中，对库存区域边界进行提取，包括：

26、步骤一、对图像进行边界检测，提取边界图像中的特征点，区域边界不为工器具边线，将区域边界特征点剔除，剩下的特征点组成节点网络空间；式中，为节点网络空间，为某特征点在节点网络中所处位置的横纵坐标值；

27、步骤二、按递增的顺序从中提取子集，，为图像高度，作为种子集；由于目标库存区域边界必过图像水平中线，这种种子点的提取方式减少了原算法中选取种子点的盲目性；式中，为在横向递增的某节点网络空间子集，为横向递增的某节点网络子集特征点所处位置的横坐标值，为横向递增的某节点网络子集特征点所处位置的纵坐标值；

28、步骤三、初始化参数累加器数组；

29、步骤四、从剩余特征点中随机选取一点，计算；其中，为某节点网络空间中剩余特征点的反向角度，为某特征点在节点网络中所处位置的横纵坐标值，为某剩余特征点在节点网络中所处位置的横纵坐标值；

30、步骤五、若点满足，则认为与在一条库存区域边界上，将参数的累加器加1；若不满足，则重新开辟的累加器；直到某一累加器的值达到权重，则认为检测到一条库存区域边界；其中，为节点网络空间中剩余的第个特征点网络空间，为剩余的第个特征点网络空间的反向角度，为某节点网络空间中剩余特征点的反向角度，为剩余特征点的反向角度允许偏差值，为累加器权重值；

31、步骤六、计算参数表示的库存区域边界：

32、；

33、式中，为库存区域边界，为剩余特征点j在节点网络中所处位置的横坐标值，为某节点i网络子集特征点所处位置的纵坐标值；

34、步骤七、遍历中的特征点，若，则删除该特征点，若删除的特征点数目大于权重，则确定图像中存在上式表示的库存区域边界；其中，为剩余特征点，为节点网络中横向，为节点网络中纵向，为剩余特征点的反向角度在库存区域边界约束下允许偏差值，为删除的特征点累加器累加权重；

35、步骤八、将删除第一条库存区域边界上的点后的点集记为，重复以上步骤在中提取第二条库存区域边界，将累加器数值最大的库存区域边界作为生产后区域的库存区域边界。

36、在步骤s3中，判断工器具是否有库存量存入信息，包括：搁置工器具的识别货架上层为有源识别标签工器具，下层为无源识别标签工器具，通过视觉识别仪器配合外部产品追溯终端识别不同工器具的详细信息，详细信息包括：制造地、型号、性能、种类以及等级。

37、在步骤s3中，通过差异识别终端判定出入工器具取出量及取出频次，包括：由视觉识别仪器检测工器具在工具存储库上的存入信息和库存总量信息，由库存量识别模块采用出入周期的差异识别方法先将工器具库存量差异识别到正常生产消耗标准值，再采用种类识别法将工器具库存总量信息差异识别到生产消耗种类变化库存标准值。

38、进一步，出入周期的差异识别方法，包括：

39、库存量差异识别包括：

40、；

41、式中，为工器具以取出量在库存量差异识别时间段内的偏差；为生产前工器具取出量，为工器具纠正库存量存入信息时生产后较生产前多消耗的数量；

42、库存量差异识别开始时，出入工器具同时开始统计出入频率，防止工器具生产前存入量为0，生产后取出量不为0而产生库存欠缺，库存量差异识别结束时，出入量同时降为0，然后开始种类差异识别；表示工器具纠正中种类，表示消耗标准值，表示时间段；为某取出量数值，为任意一取出量值；

43、所述种类识别法包括：出入工器具取出量种类相等，取出频次异常，均先判定正常生产消耗标准量后统计出入频率；工器具开始重复判定，查找工器具原始库存总量信息和当前库存量差异判定新增库存总量信息，即有：

44、；

45、其中，为种类差异识别过程中生产后工器具的偏差；为纠正库存总量信息时工器具正常生产消耗标准量的数量，为生产后工器具取出量；

46、纠正完库存量存入信息和库存总量信息后，工器具差异识别动作完成，此时出入工器具取出量均为0，最后判定正常生产消耗标准量。

47、在步骤s6中，获取工器具出入库过程中的工器具出入信息后，通过采集工器具的图像进行对比，获取工器具的自动化保养和维修周期，并对不合格的、超期未试验安全工器具进行报警提示。

48、本发明的另一目的在于提供一种基于视觉识别的工器具出入库管理系统，该系统实施所述的基于视觉识别的工器具出入库管理方法，该系统包括：

49、差异变化检测模块，用于检测工具存储库内工器具的存入信息和库存总量信息，在库存区域工器具的存入信息和库存总量信息变化时，拍摄工器具的变化图像并传送到差异识别终端；

50、工器具的初始库存量和当前库存总量信息计算模块，用于进行图像预处理，获取图像的灰度区域，对库存区域边界进行提取，计算出工器具的初始库存量信息和当前库存总量信息，将当前库存量信息传递给库存量识别模块；

51、出入工器具取出量及取出频次判定模块，用于库存量识别模块调整工器具库存总量，根据工器具库存总量信息设定工器具库存总量集合，判断工器具是否有库存量存入信息，若有存入信息，则通过差异识别终端判定出入工器具取出量及取出频次；

52、库存量纠正模块，用于纠正工器具重复存入信息的库存量；

53、工器具种类差异变化判定模块，用于判断工器具是否有种类变化，若存在种类变化，差异识别终端采用种类识别法判定出入工器具取出量信息，工器具初始库存量不变，只改变库存总量信息；

54、工器具出入库过程中工器具出入信息获取模块，用于工器具的初始库存量和当前库存总量信息差异识别结束后，将工器具送到前端服务器进行确认，获取工器具出入库过程中的工器具出入信息。

55、结合上述的所有技术方案，本发明所具备的有益效果为：本发明能对工器具出入库的过程进行有效监控与识别，对出入库的库存能获取准确信息，对后续的采购等提供准确的信息。本发明基于视觉识别仪器图像采集的智能货架对货架上物品图像采集并识别货架上物资名称、数量、检定周期，动态实时显示对应储位上物资名称、数量，并提示问题物资。