图像分割、图像分割模型处理方法、装置和计算机设备与流程

文档序号:35212808发布日期:2023-08-24 14:14阅读:26来源:国知局
图像分割、图像分割模型处理方法、装置和计算机设备与流程

本技术涉及计算机,特别是涉及一种图像分割方法、装置、计算机设备、存储介质和计算机程序产品,以及一种图像分割模型处理方法、装置、计算机设备、存储介质和计算机程序产品。


背景技术:

1、随着计算机技术的发展,出现了图像分割技术,通过图像分割技术可以从图像中提取目标对象区域,这里的目标对象可以是生物,也可以是非生物。例如,可以从针对小狗拍摄的图像中,提取小狗所在区域。

2、相关技术中,可以通过对图像进行编码和解码来实现图像分割,以获得图像分割结果,然而经常存在图像分割结果准确性较低的问题。


技术实现思路

1、基于此,有必要针对上述技术问题,提供一种能够提高图像分割结果的准确性的图像分割方法、装置、计算机设备、计算机可读存储介质和计算机程序产品,以及一种图像分割模型处理方法、装置、计算机设备、存储介质和计算机程序产品。

2、一方面,本技术提供了一种图像分割方法。所述方法包括:

3、获取目标图像和相应的目标交互信息图,分别基于所述目标图像和所述目标交互信息图提取初始特征图,并将提取的初始特征图融合;所述目标交互信息图记载有针对所述目标图像进行的交互所作用像素的位置;

4、基于融合获得的特征图进行至少一层级的编码处理,获得所述至少一层级的编码处理输出的编码特征图;其中,在每一层级的编码处理中,针对所处层级输入的特征图中的像素,从所述所处层级输入的特征图中确定所针对的像素所邻接的至少一个像素,基于所针对的像素与所邻接的各像素之间的位置偏差分别对各邻接的像素进行注意力特征提取,并根据提取得到的注意力特征更新所述所针对的像素,根据已更新像素的特征图确定所处层级输出的特征图;

5、对所述编码特征图进行解码,获得与所述目标图像相对应的图像分割结果。

6、另一方面,本技术还提供了一种图像分割装置。所述装置包括:

7、图像获取模块,用于获取目标图像和相应的目标交互信息图,分别基于所述目标图像和所述目标交互信息图提取初始特征图,并将提取的初始特征图融合;所述目标交互信息图记载有针对所述目标图像进行的交互所作用像素的位置;

8、编码模块,用于基于融合获得的特征图进行至少一层级的编码处理,获得所述至少一层级的编码处理输出的编码特征图;其中,在每一层级的编码处理中,所述编码模块,还用于针对所处层级输入的特征图中的像素,从所述所处层级输入的特征图中确定所针对的像素所邻接的至少一个像素,基于所针对的像素与所邻接的各像素之间的位置偏差分别对各邻接的像素进行注意力特征提取,并根据提取得到的注意力特征更新所述所针对的像素,根据已更新像素的特征图确定所处层级输出的特征图;

9、解码模块,用于对所述编码特征图进行解码,获得与所述目标图像相对应的图像分割结果。

10、另一方面,本技术还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述图像分割方法的步骤。

11、另一方面,本技术还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述图像分割方法的步骤。

12、另一方面,本技术还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述图像分割方法的步骤。

13、上述图像分割方法、装置、计算机设备、存储介质和计算机程序产品,通过获取目标图像和相应的目标交互信息图,分别基于目标图像和目标交互信息图提取初始特征图,并将提取的初始特征图融合,基于融合获得的特征图进行至少一层级的编码处理,获得至少一层级的编码处理输出的编码特征图,其中,在每一层级的编码处理中,针对所处层级输入的特征图中的像素,从所处层级输入的特征图中确定所针对的像素所邻接的至少一个像素,基于所针对的像素与所邻接的各像素之间的位置偏差分别对各邻接的像素进行注意力特征提取,并根据提取得到的注意力特征更新所针对的像素,根据已更新像素的特征图确定所处层级输出的特征图,由于在获得编码特征图的编码过程中,基于位置偏差进行注意力特征提取,并根据提取得到的注意力特征进行像素更新,可以利用像素间的关系来决定交互信息传播路径,感知像素间的长距离依赖关系,使得所得到的编码特征图具有更好的特征表达能力,从而对该编码特征图进行解码时,可以获得准确性更高的图像分割结果。

14、另一方面,本技术还提供了一种图像分割模型处理方法。所述方法包括:

15、通过图像分割模型,分别基于样本图像和相对应的样本交互信息图提取样本初始特征图,并将提取的样本初始特征图融合;所述样本交互信息图记载有针对所述样本图像进行的交互所作用像素的位置;

16、通过所述图像分割模型,基于融合获得的样本特征图进行至少一层级的编码处理,获得所述至少一层级的编码处理输出的样本编码特征图;其中,在每一层级的编码处理中,针对所处层级输入的样本特征图中的像素,从所述所处层级输入的样本特征图中确定所针对的像素所邻接的至少一个像素,基于所针对的像素所邻接的各像素之间的位置偏差对各邻接的像素进行注意力特征提取,并根据提取得到的注意力特征更新所述所针对的像素,根据已更新像素的特征图确定所处层级输出的样本特征图;

17、通过所述图像分割模型,对所述样本编码特征图进行解码,获得与所述样本图像相对应的样本图像分割结果;

18、基于所述样本图像分割结果更新所述图像分割模型,并继续训练,直至训练结束。

19、另一方面,本技术还提供了一种图像分割模型处理装置。所述装置包括:

20、图像获取模块,用于通过图像分割模型,分别基于样本图像和相对应的样本交互信息图提取样本初始特征图,并将提取的样本初始特征图融合;所述样本交互信息图记载有针对所述样本图像进行的交互所作用像素的位置;

21、编码模块,用于通过所述图像分割模型,基于融合获得的样本特征图进行至少一层级的编码处理,获得所述至少一层级的编码处理输出的样本编码特征图;其中,在每一层级的编码处理中,所述编码模块,还用于针对所处层级输入的样本特征图中的像素,从所述所处层级输入的样本特征图中确定所针对的像素所邻接的至少一个像素,基于所针对的像素所邻接的各像素之间的位置偏差对各邻接的像素进行注意力特征提取,并根据提取得到的注意力特征更新所述所针对的像素,根据已更新像素的特征图确定所处层级输出的样本特征图;

22、解码模块,用于通过所述图像分割模型,对所述样本编码特征图进行解码,获得与所述样本图像相对应的样本图像分割结果;

23、模型更新模块,用于基于所述样本图像分割结果更新所述图像分割模型,并继续训练,直至训练结束。

24、另一方面,本技术还提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述图像分割模型处理方法的步骤。

25、另一方面,本技术还提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述图像分割模型处理方法的步骤。

26、另一方面,本技术还提供了一种计算机程序产品。所述计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现上述图像分割模型处理方法的步骤。

27、上述图像分割模型处理方法、装置、计算机设备、存储介质和计算机程序产品,通过图像分割模型,分别基于样本图像和相对应的样本交互信息图提取样本初始特征图,并将提取的样本初始特征图融合,基于融合获得的样本特征图进行至少一层级的编码处理,获得至少一层级的编码处理输出的样本编码特征图,其中,在每一层级的编码处理中,针对所处层级输入的样本特征图中的像素,从所处层级输入的样本特征图中确定所针对的像素所邻接的至少一个像素,基于所针对的像素所邻接的各像素之间的位置偏差对各邻接的像素进行注意力特征提取,并根据提取得到的注意力特征更新所针对的像素,根据已更新像素的特征图确定所处层级输出的样本特征图,由于图像分割模型在获得样本编码特征图的编码过程中,基于位置偏差进行注意力特征提取,并根据提取得到的注意力特征进行像素更新,可以利用像素间的关系来决定交互信息传播路径,达到大感受野,使得所得到的样本编码特征图具有更好的特征表达能力,从而对该样本编码特征图进行解码时,可以获得准确性更高的图像分割结果,通过该图像分割结果对图像分割模型进行更新,可以获得性能更优的图像分割模型。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1