一种基于机器视觉的铁水智能扒渣方法与流程

本发明涉及冶金领域和图像处理、图像识别领域，尤其涉及一种基于机器视觉的铁水智能扒渣方法。

背景技术

在炼钢流程中，经过脱硫处理后的铁水才能兑入转炉进行炼钢。然而，仅仅是脱硫处理并不能完全去除铁水中的硫含量，因为脱硫处理后的铁水表面存在大量的脱硫渣，如果不及时扒渣，渣中的硫元素会被氧还原。对于钢水的硫含量要求越低，相应要求扒渣时扒净率越高，那么铁水的带渣量就要求尽量减少。

钢水的含硫量作为炼钢过程中的关键参数，如果在铁水注入转炉前扒渣不到位，则会造成钢水含硫量超出标准，从而影响炼钢的质量。目前，在工业中的铁水扒渣还是基于人工控制扒渣铲扒渣的传统方式，该方式并不能达到最有效扒渣的效果，且该工位的环境恶劣。

但是，目前还没有针对铁水包智能扒渣的行之有效的方法，亟需一种新的技术手段，能够识别出铁水包中表面脱硫渣的位置，以及脱硫渣最集中的位置，并控制扒渣铲对该区域进行扒渣处理，以保证自动化铁水扒渣设备的可靠性。

技术实现要素：

鉴于以上所述现有技术的缺点，本发明提供一种基于机器视觉的铁水智能扒渣方法，以解决上述技术问题。

本发明提供的基于机器视觉的铁水智能扒渣方法，包括：

实时采集目标区域的图像信息；

根据实时采集的图像信息设置第一感兴趣区域，用于判断是否正在进行扒渣工作；

当正在进行扒渣工作时，持续对所述第一感兴趣区域进行图像识别，直至检测到扒渣工作结束；

当未进行扒渣工作时，根据实时采集的图像信息设置第二感兴趣区域；

根据所述第二感兴趣区域确定待扒渣区域；

对所述待扒渣区域进行扒渣。

进一步，将所述第二感兴趣区域划分为若干子区域，计算每个子区域中渣的面积，将渣的面积最大的子区域作为待扒渣区域。

进一步，对所述第一感兴趣区域进行第一次预处理，获取第一感兴趣区域中的扒渣铲的图像信息，根据扒渣铲的尺寸对所述第二感兴趣区域进行划分，并对所述第二感兴趣区域进行第二次预处理，去除第二感兴趣区域中的无效图像信息，获取待扒渣区域的位置图像信息。

进一步，所述第一次预处理包括将采集的目标区域的图像信息转换为第一灰度图，并通过第一灰度矩阵表示所述第一灰度图，将所述第一灰度矩阵转换为第一布尔矩阵，通过所述第一布尔矩阵去除目标区域的图像信息中的无效图像信息，获取扒渣铲的图像信息。

进一步，所述第二次预处理包括将第二感兴趣区域中的图像信息转换为第二灰度图，并通过第二灰度矩阵表示所述第二灰度图，将所述第二灰度矩阵转换为第二布尔矩阵，通过所述第二布尔矩阵去除第二感兴趣区域中的无效图像信息，获取待扒渣区域。

进一步，预先设置第一灰度值阈值，通过将第一灰度矩阵中的灰度值与所述第一灰度值阈值进行比较，将所述比较结果中灰度值大于所述灰度阈值的结果的数值更新为1，反之则为0，根据比较结果获取所述第一布尔矩阵，其中，所述第一布尔矩阵中数值为0的部分作为扒渣铲的图像信息。

进一步，预先设置占比阈值，计算所述第一感兴趣区域内的扒渣铲的图像面积与整个第一感兴趣区域的图像面积的比值，并将该比值与预设的占比阈值进行比较，当该比值小于预设的占比阈值时，判定扒渣工作结束。

进一步，预先设置第二灰度值阈值，通过将第二灰度矩阵中的灰度值与所述第二灰度值阈值进行比较，将所述比较结果中灰度值大于所述灰度阈值的结果的数值更新为1，反之则为0，根据比较结果获取所述第二布尔矩阵，其中，所述第二布尔矩阵中数值为0的部分作为渣的位置图像信息。

进一步，计算所述第二感兴趣区域中每个子区域中渣的位置图像信息的面积与子区域的面积的比值，选取渣的面积占比最大的子区域作为待扒渣区域。

本发明还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一项所述方法。

本发明的有益效果：本发明中的基于机器视觉的铁水智能扒渣方法，可以有效、精确地测量出当前铁水表面渣含量最多的区域，并将信号返回给自动化设备进行后续扒渣工作；通过铁水智能扒渣方法，可实现自动化、智能化地铁水扒渣，并能够显著地提高扒渣效率和准确率，具有易于实现、计算量小、稳定性强的优点，同时可以满足实时性处理的要求，保证扒渣的准确性，降低了炼钢过程中钢水的含硫量，从而提高了炼钢的质量。

附图说明

图1是本发明实施例中基于机器视觉的铁水智能扒渣方法的原理示意图。

图2是本发明实施例中基于机器视觉的铁水智能扒渣方法的流程示意图。

图3是本发明实施例中基于机器视觉的铁水智能扒渣方法的图像处理识别结果示意图。

具体实施方式

以下通过特定的具体实例说明本发明的实施方式，本领域技术人员可由本说明书所揭露的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在没有背离本发明的精神下进行各种修饰或改变。需说明的是，在不冲突的情况下，以下实施例及实施例中的特征可以相互组合。

需要说明的是，以下实施例中所提供的图示仅以示意方式说明本发明的基本构想，遂图式中仅显示与本发明中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制，其实际实施时各组件的型态、数量及比例可为一种随意的改变，且其组件布局型态也可能更为复杂。

在下文描述中，探讨了大量细节，以提供对本发明实施例的更透彻的解释，然而，对本领域技术人员来说，可以在没有这些具体细节的情况下实时本发明的实施例是显而易见的，在其他实施例中，以方框图的形式而不是以细节的形式来示出公职的结构和设备，以避免使本发明的实施例难以理解。

在本实施例中，识别扒渣铲是否正在进行扒渣工作是实现智能化铁水扒渣的一个重点，故需要提取出roi区域(感兴趣区域)并对图像做出合适的图像处理操作，使扒渣铲的信息能被保留而其余信息被去除；而在检测出了扒渣铲停止工作之后，则需要通过提取roi区域并对图像做出合适的图像处理操作，使得铁水表面的渣的图像信息能够被提取出来。

如图1所示，本实施例中的基于机器视觉的铁水智能扒渣方法，包括：

实时采集目标区域的图像信息；

根据实时采集的图像信息设置第一感兴趣区域，用于判断是否正在进行扒渣工作；

当正在进行扒渣工作时，持续对所述第一感兴趣区域进行图像识别，直至检测到扒渣工作结束；

当未进行扒渣工作时，根据实时采集的图像信息设置第二感兴趣区域；

根据所述第二感兴趣区域确定待扒渣区域；

对所述待扒渣区域进行扒渣。

在本实施例中，将所述第二感兴趣区域划分为若干子区域，计算每个子区域中渣的面积，将渣的面积最大的子区域作为待扒渣区域。

在本实施例中在采集到的图像的下半部分的合适区域设置第一roi区域，用以识别扒渣铲的工作状态。将采集到的图像转换为灰度图，并通过m行n列的灰度矩阵表示该灰度图，再通过图像处理操作去除灰度图中没有用的信息而尽可能保留更多的有用信息。通过设置一个第一灰度值阈值threshold，将灰度矩阵中的灰度值与第一灰度值阈值threshold进行数值大小的比较，若灰度值大于第一灰度值阈值threshold则更新该灰度值为1，反之则为0；通过该处理后，获得一个m行n列的布尔矩阵，该布尔矩阵中数值为0的部分表示了图像中的有用信息，即扒渣铲的图像信息。针对第一roi区域，计算该区域内的扒渣铲的图像面积占整个第一roi区域的比值，通过设定一个占比阈值area_threshold来识别扒渣铲是否正在工作；若面积占比值大于area_threshold，则说明第一roi区域内存在扒渣铲，即扒渣铲正在工作；若面积占比值小于area_threshold，则说明第一roi区域内没有扒渣铲，即扒渣铲已经停止扒渣工作。如图3所示，图3中方框内为针对第一roi区域的图像处理与识别结果，图3a为扒渣铲正在扒渣示意图，图3b为扒渣铲扒渣完成的示意图。

在本实施例中，如果识别出来扒渣铲正在工作，则实时监测第一roi区域，直到扒渣铲停止工作为止。

如图2所示，在本实施例中，如果识别出来扒渣铲在当前时刻没有工作，则在图像上设置roi区域，并根据扒渣铲的尺寸大小分割第二roi区域。将采集到的图像转换为灰度图，并通过m行n列的灰度矩阵表示该灰度图。通过设置一个第二灰度值阈值threshold，将灰度矩阵中的灰度值与第二灰度值阈值threshold进行数值大小的比较，若灰度值大于第二灰度值阈值threshold则更新该灰度值为1，反之则为0；通过该处理后，获得一个m行n列的布尔矩阵，该布尔矩阵中数值为0的部分表示了图像中的有用信息，即渣的位置信息。计算第二roi区域的每个分块中的渣的面积占比，并比较这些比值，其中比值最大的分块，即渣的面积最多的分块即为当前时刻扒渣铲需要扒渣的位置。

优选地，在本实施例中，在采集铁水包口图像前还包括：调整图像采集装置的焦距，使图像能够拍摄出铁水包口的全部区域，且铁水包位于图像的中心区域。

本实施例还提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本实施例中的任一项方法。

本实施例还提供一种电子终端，包括：处理器及存储器；

所述存储器用于存储计算机程序，所述处理器用于执行所述存储器存储的计算机程序，以使所述终端执行本实施例中任一项方法。

本实施例中的计算机可读存储介质，本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过计算机程序相关的硬件来完成。前述的计算机程序可以存储于一计算机可读存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：rom、ram、磁碟或者光盘等各种可以存储程序代码的介质。

本实施例提供的电子终端，包括处理器、存储器、收发器和通信接口，存储器和通信接口与处理器和收发器连接并完成相互间的通信，存储器用于存储计算机程序，通信接口用于进行通信，处理器和收发器用于运行计算机程序，使电子终端执行如上方法的各个步骤。

在本实施例中，存储器可能包含随机存取存储器(randomaccessmemory，简称ram)，也可能还包括非易失性存储器(non-volatilememory)，例如至少一个磁盘存储器。

上述的处理器可以是通用处理器，包括中央处理器(centralprocessingunit，简称cpu)、网络处理器(networkprocessor，简称np)等；还可以是数字信号处理器(digitalsignalprocessing，简称dsp)、专用集成电路(applicationspecificintegratedcircuit，简称asic)、现场可编程门阵列(field－programmablegatearray，简称fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

除非另外规定，否则使用序数形容词“第一”、“第二”等来描述共同的对象，仅表示指代相同对象的不同实例，而并不是要暗示这样描述的对象必须采用给定的顺序，无论是时间地、空间地、排序地或任何其他方式。

说明书对“实施例”、“一个实施例”、“一些实施例”、或“其他实施例”的提及表示结合实施例说明的特定特征、结构或特性包括在至少一些实施例中，但不必是全部实施例。“实施例”、“一个实施例”、“一些实施例”的多次出现不一定全部都指代相同的实施例。如果说明书描述了部件、特征、结构或特性“可以”、“或许”或“能够”被包括，则该特定部件、特征、结构或特性“可以”、“或许”或“能够”被包括，则该特定部件、特征、结构或特性不是必须被包括的。如果说明书或权利要求提及“一”元件，并非表示仅有一个元件。如果说明书或权利要求提及“一另外的”元件，并不排除存在多于一个的另外的元件。

尽管已经结合了本发明的具体实施例对本发明进行了描述，但是根据前面的描述，这些实施例的很多替换、修改和变形对本领域普通技术人员来说将是显而易见的。例如，其他存储结构(例如，动态ram(dram))可以使用所讨论的实施例。本发明的实施例旨在涵盖落入所附权利要求的宽泛范围之内的所有这样的替换、修改和变型。

上述实施例仅例示性说明本发明的原理及其功效，而非用于限制本发明。任何熟悉此技术的人士皆可在不违背本发明的精神及范畴下，对上述实施例进行修饰或改变。因此，举凡所属技术领域中具有通常知识者在未脱离本发明所揭示的精神与技术思想下所完成的一切等效修饰或改变，仍应由本发明的权利要求所涵盖。