图像分割方法、装置及存储介质与流程

文档序号:16757747发布日期:2019-01-29 17:31阅读:149来源:国知局
图像分割方法、装置及存储介质与流程

本公开涉及图像处理领域,尤其涉及一种图像分割方法、装置及存储介质。



背景技术:

一幅图像通常包括前景区域和背景区域,而图像分割技术能够确定图像中的前景区域和背景区域,将前景区域与背景区域区分开来,以便对前景区域或背景区域进行单独地处理,目前已广泛应用于目标检测、物体追踪、视频监控、人脸识别等多种领域中。

图像中任一像素的显示颜色与该像素的前景色、背景色和前景色的非透明度具有以下关联关系:i=αf+(1-α)b,其中,i表示像素的显示颜色、f表示像素的前景色,b表示像素的背景色,α表示像素前景色的非透明度。当要对目标图像进行分割时,采用matting算法,可以根据该目标图像中多个像素的显示颜色以及上述关联关系,计算出每个像素的前景色的非透明度,根据每个像素的前景色的非透明度生成前景概率图(mask),该前景概率图用于指示该目标图像中的前景区域和背景区域所在的位置,后续过程中根据该前景概率图对该目标图像进行处理,可以从目标图像中提取出前景区域或背景区域。

上述方案需要进行大量的计算才能计算出每个像素的前景色的非透明度,计算量较大,耗时较长。



技术实现要素:

本公开提供了一种图像分割方法、装置及存储介质,可以克服相关技术中存在的问题。

根据本公开实施例的第一方面,提供一种图像分割方法,所述方法包括:

获取已训练的像素分类模型,所述像素分类模型用于确定任一图像中每个像素的分类标识,所述分类标识包括第一标识和第二标识,所述第一标识用于指示对应的像素属于前景区域,所述第二标识用于指示对应的像素属于背景区域;

将待处理的目标图像输入至所述像素分类模型中,基于所述像素分类模型,确定所述目标图像中每个像素的分类标识;

根据所述目标图像中每个像素的分类标识,确定所述目标图像的前景区域和背景区域。

在一种可能实现的方式中,所述方法还包括:

获取多个样本图像以及所述多个样本图像中每个像素的分类标识;

根据所述多个样本图像以及所述多个样本图像中每个像素的分类标识进行模型训练,得到所述像素分类模型。

在另一种可能实现的方式中,所述根据所述目标图像中每个像素的分类标识,确定所述目标图像的前景区域和背景区域,包括:

根据所述目标图像中每个像素的分类标识,生成前景概率图,所述前景概率图用于指示所述目标图像的前景区域和背景区域所在的位置。

在另一种可能实现的方式中,所述方法还包括:

根据所述前景概率图,对所述目标图像的前景区域进行增强处理;或者,

根据所述前景概率图,对所述目标图像的背景区域进行模糊化处理。

在另一种可能实现的方式中,所述根据所述前景概率图,对所述目标图像中的背景区域进行模糊化处理,包括:

根据所述前景概率图,提取所述目标图像的前景区域;

对所述目标图像进行模糊化处理,得到第一图像,并根据所述前景概率图,提取所述第一图像的背景区域;

将所述目标图像的前景区域和所述第一图像的背景区域进行组合,得到第二图像。

在另一种可能实现的方式中,所述前景概率图中,前景区域中像素的像素值为1,背景区域中像素的像素值为0,所述根据所述前景概率图,对所述目标图像的背景区域进行模糊化处理,包括:

根据所述前景概率图,采用以下公式,对所述目标图像的背景区域进行模糊化处理:

target=source*mask+gaussian*(255-mask);

其中,source表示所述目标图像,gaussian表示所述目标图像进行模糊化处理后得到的图像,mask表示所述前景概率图,target表示所述目标图像的背景区域进行模糊化处理后得到的图像。

根据本公开实施例的第二方面,提供一种图像分割装置,所述装置包括:

模型获取模块,被配置为获取已训练的像素分类模型,所述像素分类模型用于确定任一图像中每个像素的分类标识,所述分类标识包括第一标识和第二标识,所述第一标识用于指示对应的像素属于前景区域,所述第二标识用于指示对应的像素属于背景区域;

标识确定模块,被配置为将待处理的目标图像输入至所述像素分类模型中,基于所述像素分类模型,确定所述目标图像中每个像素的分类标识;

区域确定模块,被配置为根据所述目标图像中每个像素的分类标识,确定所述目标图像的前景区域和背景区域。

在一种可能实现的方式中,所述装置还包括:

样本获取模块,被配置为获取多个样本图像以及所述多个样本图像中每个像素的分类标识;

训练模块,被配置为根据所述多个样本图像以及所述多个样本图像中每个像素的分类标识进行模型训练,得到所述像素分类模型。

在另一种可能实现的方式中,所述区域确定模块包括:

生成单元,被配置为根据所述目标图像中每个像素的分类标识,生成前景概率图,所述前景概率图用于指示所述目标图像的前景区域和背景区域所在的位置。

在另一种可能实现的方式中,所述装置还包括:

处理模块,被配置为根据所述前景概率图,对所述目标图像的前景区域进行增强处理;或者,所述处理模块,还被配置为根据所述前景概率图,对所述目标图像的背景区域进行模糊化处理。

在另一种可能实现的方式中,所述处理模块包括:

提取单元,被配置为根据所述前景概率图,提取所述目标图像的前景区域;

所述提取单元,还被配置为对所述目标图像进行模糊化处理,得到第一图像,并根据所述前景概率图,提取所述第一图像的背景区域;

组合单元,被配置为将所述目标图像的前景区域和所述第一图像的背景区域进行组合,得到第二图像。

在另一种可能实现的方式中,所述前景概率图中,前景区域中像素的像素值为1,背景区域中像素的像素值为0,所述处理模块,还被配置为根据所述前景概率图,采用以下公式,对所述目标图像的背景区域进行模糊化处理:

target=source*mask+gaussian*(255-mask);

其中,source表示所述目标图像,gaussian表示所述目标图像进行模糊化处理后得到的图像,mask表示所述前景概率图,target表示所述目标图像的背景区域进行模糊化处理后得到的图像。

根据本公开实施例的第三方面,提供了一种图像分割装置,所述装置包括:

处理器;

用于存储处理器可执行命令的存储器;

其中,所述处理器被配置为:

获取已训练的像素分类模型,所述像素分类模型用于确定任一图像中每个像素的分类标识,所述分类标识包括第一标识和第二标识,所述第一标识用于指示对应的像素属于前景区域,所述第二标识用于指示对应的像素属于背景区域;

将待处理的目标图像输入至所述像素分类模型中,基于所述像素分类模型,确定所述目标图像中每个像素的分类标识;

根据所述目标图像中每个像素的分类标识,确定所述目标图像的前景区域和背景区域。

根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,当所述存储介质中的指令由处理装置的处理器执行时,使得处理装置能够执行一种图像分割方法,所述方法包括:

获取已训练的像素分类模型,所述像素分类模型用于确定任一图像中每个像素的分类标识,所述分类标识包括第一标识和第二标识,所述第一标识用于指示对应的像素属于前景区域,所述第二标识用于指示对应的像素属于背景区域;

将待处理的目标图像输入至所述像素分类模型中,基于所述像素分类模型,确定所述目标图像中每个像素的分类标识;

根据所述目标图像中每个像素的分类标识,确定所述目标图像的前景区域和背景区域。

根据本公开实施例的第五方面,提供一种计算机程序产品,当所述计算机程序产品中的指令由处理装置的处理器执行时,使得处理装置能够执行一种图像分割方法,所述方法包括:

获取已训练的像素分类模型,所述像素分类模型用于确定任一图像中每个像素的分类标识,所述分类标识包括第一标识和第二标识,所述第一标识用于指示对应的像素属于前景区域,所述第二标识用于指示对应的像素属于背景区域;

将待处理的目标图像输入至所述像素分类模型中,基于所述像素分类模型,确定所述目标图像中每个像素的分类标识;

根据所述目标图像中每个像素的分类标识,确定所述目标图像的前景区域和背景区域。

本公开的实施例提供的技术方案可以包括以下有益效果:

获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域,将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识,根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域,从而可以提取目标图像的前景区域或背景区域。通过训练像素分类模型的方式,可以直接基于像素分类模型,对目标图像进行图像分割,而无需进行大量计算,减少了计算量,节省了时间。

应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的一种图像分割方法的流程图。

图2是根据一示例性实施例示出的一种图像分割方法的流程图。

图3是根据一示例性实施例示出的一种处理装置的框图。

图4是根据一示例性实施例示出的一种用于图像分割的终端的框图。

图5是根据一示例性实施例示出的一种服务器的结构示意图。

具体实施方式

这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

图1是根据一示例性实施例示出的一种图像分割方法的流程图,如图1所示,该图像分割方法用于处理装置中,包括以下步骤:

在步骤101中,获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域。

在步骤102中,将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识。

在步骤103中,根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域。

本公开实施例提供的方法,获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域,将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识,根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域,从而可以提取目标图像的前景区域或背景区域。通过训练像素分类模型的方式,可以直接基于像素分类模型,对目标图像进行图像分割,而无需进行大量计算,减少了计算量,节省了时间。

在一种可能实现的方式中,方法还包括:

获取多个样本图像以及多个样本图像中每个像素的分类标识;

根据多个样本图像以及多个样本图像中每个像素的分类标识进行模型训练,得到像素分类模型。

在另一种可能实现的方式中,根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域,包括:

根据目标图像中每个像素的分类标识,生成前景概率图,前景概率图用于指示目标图像的前景区域和背景区域所在的位置。

在另一种可能实现的方式中,方法还包括:

根据前景概率图,对目标图像的前景区域进行增强处理;或者,

根据前景概率图,对目标图像的背景区域进行模糊化处理。

在另一种可能实现的方式中,根据前景概率图,对目标图像中的背景区域进行模糊化处理,包括:

根据前景概率图,提取目标图像的前景区域;

对目标图像进行模糊化处理,得到第一图像,并根据前景概率图,提取第一图像的背景区域;

将目标图像的前景区域和第一图像的背景区域进行组合,得到第二图像。

在另一种可能实现的方式中,前景概率图中,前景区域中像素的像素值为1,背景区域中像素的像素值为0,根据前景概率图,对目标图像的背景区域进行模糊化处理,包括:

根据前景概率图,采用以下公式,对目标图像的背景区域进行模糊化处理:

target=source*mask+gaussian*(255-mask);

其中,source表示目标图像,gaussian表示目标图像进行模糊化处理后得到的图像,mask表示前景概率图,target表示目标图像的背景区域进行模糊化处理后得到的图像。

图2是根据一示例性实施例示出的一种图像分割方法的流程图,如图2所示,该图像分割方法用于处理装置中,处理装置可以为手机、计算机、服务器、摄像头、监控设备等具有图像处理功能的装置,该方法包括以下步骤:

在步骤201中,处理装置获取待处理的目标图像,并获取已训练的像素分类模型。

其中,该目标图像可以由处理装置拍摄得到,或者从处理装置拍摄到的视频中提取得到,或者由处理装置从互联网中下载得到,或者由其他设备发送给处理装置。或者,在处理装置进行视频直播的过程中,可以获取视频流中的每张图像,将每张图片分别作为目标图像,以便对视频流中的每张图像进行处理。

该目标图像可以为多种类型的图像,如人物图像、风景图片、美食图片等,该目标图像包含前景区域和背景区域,前景区域与背景区域显示的颜色、物体的形状等均可以相同,或者不同,区别仅在于:前景区域是指拍摄该目标图像时靠近摄像头的物体所在的区域,相当于该目标图像的“兴趣中心”,而背景区域是除前景区域之外、用于陪衬前景区域的区域。

例如,拍摄的人物照片中既包括人物,还包括人物背后的环境,此时人物所在区域可以认为是前景区域,背后环境所在区域可以认为是背景区域,或者,美食图片中既包括桌子,还包括桌子上的美食,此时桌子所在区域可以认为是背景区域,美食所在区域可以认为是前景区域。

本公开实施例中,基于像素分类模型可以将该目标图像的前景区域和背景区域区分出来。其中,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域,也即是,当图像中的任一像素的分类标识为第一标识时,表示该像素属于前景区域,当图像中的任一像素的分类标识为第二标识,表示该像素属于背景区域。

第一标识与第二标识为不同的两个标识,例如,第一标识为1,而第二标识为0,或者,第一标识为0,而第二标识为1。

该像素分类模型可以由处理装置训练得到,并由该处理装置存储,或者,该像素分类模型可以由其他设备训练后发送给处理装置,并由该处理装置存储。

在训练像素分类模型时,可以先获取多个样本图像以及多个样本图像中每个像素的分类标识,根据多个样本图像以及多个样本图像中每个像素的分类标识进行模型训练,得到像素分类模型。

在一种可能实现的方式中,在训练像素分类模型时,可以构建初始的像素分类模型,获取训练数据集和测试数据集,训练数据集和测试数据集中均包括多个样本图像以及每个样本图像中每个像素的分类标识。

在训练过程中,将训练数据集中的多个样本图像作为像素分类模型的输入,将该多个样本图像中每个像素的分类标识作为像素分类模型的输出,对像素分类模型进行训练,使像素分类模型对前景区域与背景区域之间的区别进行学习,使像素分类模型具备划分前景区域和背景区域的能力。之后,将测试数据集中的每个样本图像输入到像素分类模型中,基于像素分类模型分别确定每个样本图像中每个像素的测试分类标识,将测试分类标识与标注的实际分类标识进行对比,根据对比结果对像素分类模型进行修正。

在一种可能实现方式中,在训练像素分类模型时可以采用预设训练算法,该预设训练算法可以为深度学习网络算法、决策树算法、人工神经网络算法等。

后续过程中,还可以获取新的样本图像以及该样本图像中每个像素的分类标识,继续训练该像素分类模型,从而可以提高该像素分类模型的分类准确率。

在步骤202中,处理装置将目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识。

处理装置通过将目标图像输入至像素分类模型中,对该目标图像进行处理,可以根据目标图像中的每个像素的分类标识对目标图像中的像素进行分类。

当像素的分类标识为第一标识时,表示该像素属于前景区域,当像素的分类标识为第二标识时,表示该像素属于背景区域,结合目标图像中每个像素的分类标识以及每个像素在目标图像中的位置,可以确定目标图像的前景区域和背景区域,因此该像素分类模型实际上是一种语义分割模型,能够将目标图像分割为前景区域和背景区域。

在步骤203中,处理装置根据目标图像中每个像素的分类标识,生成前景概率图。

前景概率图用于指示目标图像中前景区域和背景区域所在的位置,根据该前景概率图可以确定目标图像中每个位置上的像素属于前景区域还是属于背景区域,从而能够将目标图像划分为前景区域和背景区域,实现对目标图像的前景区域或背景区域的抠取。

在一种可能实现方式中,将目标图像中每个像素的分类标识作为前景概率图中对应位置上像素的像素值,从而生成前景概率图。则在前景概率图中,任一像素的像素值为第一标识表示该像素在该目标图像中对应的像素属于前景区域,任一像素的像素值为第二标识表示该像素在该目标图像中对应的像素属于背景区域。

例如,第一标识为1,第二标识为0,前景概率图中的白色区域表示该目标图像中相应的位置为前景区域,前景概率图中的黑色区域表示该目标图像中相应的位置为背景区域。

在步骤204中,处理装置根据前景概率图,对目标图像的前景区域或背景区域进行处理。

为了提高前景区域的清晰度,既可以对前景区域进行增强处理,也可以对背景区域进行虚化处理。相应地,步骤204包括以下步骤2041和2042的至少一种:

在步骤2041中,根据前景概率图,对目标图像的前景区域进行增强处理。

处理装置根据前景概率图中每个像素的像素值,确定像素值为第一标识的像素组成的图像区域,将该图像区域在目标图像中对应的图像区域提取出来,作为目标图像的前景区域,并确定像素值为第二标识的像素组成的图像区域,将该图像区域在目标图像中对应的图像区域提取出来,作为目标图像的背景区域。

之后,采用图像增强算法,对前景区域进行增强处理,得到处理后的前景区域,将处理后的前景区域和背景区域进行组合,得到处理后的图像,以提高前景区域的质量,使前景区域更加清晰,从而更加突出前景区域。

例如,图像增强算法可以为直方图均衡化算法、对比度增强算法或者其他可以增强图像的算法,在此不再一一赘述。

在步骤2042中,根据前景概率图,对目标图像的背景区域进行模糊化处理。

在一种可能实现方式中,处理装置对目标图像进行模糊化处理,得到第一图像,并根据前景概率图中每个像素的像素值,确定像素值为第二标识的像素组成的图像区域,将该图像区域在第一图像中对应的图像区域提取出来,该图像区域为目标图像的背景区域经过模糊化处理后的区域,即为模糊化处理后的背景区域,并确定像素值为第一标识的像素组成的图像区域,将该图像区域在目标图像中对应的图像区域提取出来,作为目标图像的前景区域,之后,将前景区域和模糊化处理后的背景区域进行组合,得到处理后的图像,实现了对目标图像的背景区域的模糊化处理,从而更加突出前景区域。

在另一种可能实现方式中,在前景概率图中,前景区域中像素的像素值为1,背景区域中像素的像素值为0,根据前景概率图,采用以下公式,对目标图像的背景区域进行模糊化处理:

target=source*mask+gaussian*(255-mask)。

其中,source表示目标图像,gaussian表示目标图像进行模糊化处理后得到的图像,mask表示前景概率图,target表示目标图像的背景区域进行模糊化处理后得到的图像。source*mask表示目标图像的前景区域,gaussian*(255-mask)表示目标图像经过模糊化处理后得到的图像的背景区域,将目标图像的前景区域和目标图像经过模糊化处理后得到的图像的背景区域组合,就可以得到目标图像的背景区域进行模糊化处理后得到的图像。

需要说明的是,本公开实施例中处理装置对目标图像进行处理时,可以先对目标图像进行增强处理,再对目标图像进行模糊化处理。或者,处理装置对目标图像进行处理时,可以只对目标图像进行增强处理,或者,只对目标图像进行模糊化处理。

本公开实施例提供的方法,获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域,将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识,根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域,从而可以提取目标图像的前景区域或背景区域。通过训练像素分类模型的方式,可以直接基于像素分类模型,对目标图像进行图像分割,而无需进行大量计算,减少了计算量,节省了时间,提高了背景虚化的流程速度。

并且,通过将前景区域进行增强处理,可以使前景区域更加清晰,通过对背景区域进行模糊化处理,可以将背景区域弱化,增强了前景区域和背景区域之间的差异,从而可以更加突出前景区域,使前景区域更加明显。

本公开实施例可以应用于人脸识别,视频监控、视频直播以及美化图片等场景下,例如,在人脸识别场景下,可以从目标图像中提取到人脸区域,忽略除人脸区域以外的区域,从而对人脸区域进行人脸识别。在视频监控场景下,可以从视频流中的每张图像中提取目标物体区域,忽略除目标物体区域以外的区域,从而获取视频流中目标物体的动态变化信息,实现对目标物体的跟踪。在视频直播场景下,可以在直播的视频流中的每张图像,实时区分前景区域和背景区域,并对背景区域进行虚化处理,从而突出前景区域,使前景区域更加清晰,增强直播效果。

图3是根据一示例性实施例示出的一种处理装置的框图。参见图3,该装置包括模型获取模块301、标识确定模块302以及区域确定模块303。

模型获取模块301,被配置为获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域;

标识确定模块302,被配置为将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识;

区域确定模块303,被配置为根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域。

在一种可能实现的方式中,装置还包括:

样本获取模块,被配置为获取多个样本图像以及多个样本图像中每个像素的分类标识;

训练模块,被配置为根据多个样本图像以及多个样本图像中每个像素的分类标识进行模型训练,得到像素分类模型。

在另一种可能实现的方式中,区域确定模块303包括:

生成单元,被配置为根据目标图像中每个像素的分类标识,生成前景概率图,前景概率图用于指示目标图像的前景区域和背景区域所在的位置。

在另一种可能实现的方式中,装置还包括:

处理模块,被配置为根据前景概率图,对目标图像的前景区域进行增强处理;或者,处理模块,还被配置为根据前景概率图,对目标图像的背景区域进行模糊化处理。

在另一种可能实现的方式中,处理模块包括:

提取单元,被配置为根据前景概率图,提取目标图像的前景区域;

提取单元,还被配置为对目标图像进行模糊化处理,得到第一图像,并根据前景概率图,提取第一图像的背景区域;

组合单元,被配置为将目标图像的前景区域和第一图像的背景区域进行组合,得到第二图像。

在另一种可能实现的方式中,前景概率图中,前景区域中像素的像素值为1,背景区域中像素的像素值为0,处理模块,还被配置为根据前景概率图,采用以下公式,对目标图像的背景区域进行模糊化处理:

target=source*mask+gaussian*(255-mask);

其中,source表示目标图像,gaussian表示目标图像进行模糊化处理后得到的图像,mask表示前景概率图,target表示目标图像的背景区域进行模糊化处理后得到的图像。

关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。

图4是根据一示例性实施例示出的一种用于图像分割的终端400的框图。该终端400用于执行上述图像分割方法中处理装置所执行的步骤,可以是便携式移动终端,比如:智能手机、平板电脑、mp3播放器(movingpictureexpertsgroupaudiolayeriii,动态影像专家压缩标准音频层面3)、mp4(movingpictureexpertsgroupaudiolayeriv,动态影像专家压缩标准音频层面4)播放器、笔记本电脑或台式电脑。终端400还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。

通常,终端400包括有:处理器401和存储器402。

处理器401可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器401可以采用dsp(digitalsignalprocessing,数字信号处理)、fpga(field-programmablegatearray,现场可编程门阵列)、pla(programmablelogicarray,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器401也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称cpu(centralprocessingunit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器401可以在集成有gpu(graphicsprocessingunit,图像处理器),gpu用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器401还可以包括ai(artificialintelligence,人工智能)处理器,该ai处理器用于处理有关机器学习的计算操作。

存储器402可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器402还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器402中的非暂态的计算机可读存储介质用于存储至少一个指令,该至少一个指令用于被处理器401所具有以实现本申请中方法实施例提供的图像分割方法。

在一些实施例中,终端400还可选包括有:外围设备接口403和至少一个外围设备。处理器401、存储器402和外围设备接口403之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口403相连。具体地,外围设备包括:射频电路404、触摸显示屏405、摄像头406、音频电路407、定位组件408和电源409中的至少一种。

外围设备接口403可被用于将i/o(input/output,输入/输出)相关的至少一个外围设备连接到处理器401和存储器402。在一些实施例中,处理器401、存储器402和外围设备接口403被集成在同一芯片或电路板上;在一些其他实施例中,处理器401、存储器402和外围设备接口403中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。

射频电路404用于接收和发射rf(radiofrequency,射频)信号,也称电磁信号。射频电路404通过电磁信号与通信网络以及其他通信设备进行通信。射频电路404将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路404包括:天线系统、rf收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路404可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:城域网、各代移动通信网络(2g、3g、4g及13g)、无线局域网和/或wifi(wirelessfidelity,无线保真)网络。在一些实施例中,射频电路404还可以包括nfc(nearfieldcommunication,近距离无线通信)有关的电路,本申请对此不加以限定。

显示屏405用于显示ui(userinterface,用户界面)。该ui可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏405是触摸显示屏时,显示屏405还具有采集在显示屏405的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器401进行处理。此时,显示屏405还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏405可以为一个,设置终端400的前面板;在另一些实施例中,显示屏405可以为至少两个,分别设置在终端400的不同表面或呈折叠设计;在再一些实施例中,显示屏405可以是柔性显示屏,设置在终端400的弯曲表面上或折叠面上。甚至,显示屏405还可以设置成非矩形的不规则图形,也即异形屏。显示屏405可以采用lcd(liquidcrystaldisplay,液晶显示屏)、oled(organiclight-emittingdiode,有机发光二极管)等材质制备。

摄像头组件406用于采集图像或视频。可选地,摄像头组件406包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及vr(virtualreality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件406还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。

音频电路407可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器401进行处理,或者输入至射频电路404以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端400的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器401或射频电路404的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路407还可以包括耳机插孔。

定位组件408用于定位终端400的当前地理位置,以实现导航或lbs(locationbasedservice,基于位置的服务)。定位组件408可以是基于美国的gps(globalpositioningsystem,全球定位系统)、中国的北斗系统、俄罗斯的格雷纳斯系统或欧盟的伽利略系统的定位组件。

电源409用于为终端400中的各个组件进行供电。电源409可以是交流电、直流电、一次性电池或可充电电池。当电源409包括可充电电池时,该可充电电池可以支持有线充电或无线充电。该可充电电池还可以用于支持快充技术。

在一些实施例中,终端400还包括有一个或多个传感器410。该一个或多个传感器410包括但不限于:加速度传感器411、陀螺仪传感器412、压力传感器413、指纹传感器414、光学传感器415以及接近传感器416。

加速度传感器411可以检测以终端400建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器411可以用于检测重力加速度在三个坐标轴上的分量。处理器401可以根据加速度传感器411采集的重力加速度信号,控制触摸显示屏405以横向视图或纵向视图进行用户界面的显示。加速度传感器411还可以用于游戏或者用户的运动数据的采集。

陀螺仪传感器412可以检测终端400的机体方向及转动角度,陀螺仪传感器412可以与加速度传感器411协同采集用户对终端400的3d动作。处理器401根据陀螺仪传感器412采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变ui)、拍摄时的图像稳定、游戏控制以及惯性导航。

压力传感器413可以设置在终端400的侧边框和/或触摸显示屏405的下层。当压力传感器413设置在终端400的侧边框时,可以检测用户对终端400的握持信号,由处理器401根据压力传感器413采集的握持信号进行左右手识别或快捷操作。当压力传感器413设置在触摸显示屏405的下层时,由处理器401根据用户对触摸显示屏405的压力操作,实现对ui界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。

指纹传感器414用于采集用户的指纹,由处理器401根据指纹传感器414采集到的指纹识别用户的身份,或者,由指纹传感器414根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器401授权该用户具有相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器414可以被设置终端400的正面、背面或侧面。当终端400上设置有物理按键或厂商logo时,指纹传感器414可以与物理按键或厂商标志集成在一起。

光学传感器415用于采集环境光强度。在一个实施例中,处理器401可以根据光学传感器415采集的环境光强度,控制触摸显示屏405的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏405的显示亮度;当环境光强度较低时,调低触摸显示屏405的显示亮度。在另一个实施例中,处理器401还可以根据光学传感器415采集的环境光强度,动态调整摄像头组件406的拍摄参数。

接近传感器416,也称距离传感器,通常设置在终端400的前面板。接近传感器416用于采集用户与终端400的正面之间的距离。在一个实施例中,当接近传感器416检测到用户与终端400的正面之间的距离逐渐变小时,由处理器401控制触摸显示屏405从亮屏状态切换为息屏状态;当接近传感器416检测到用户与终端400的正面之间的距离逐渐变大时,由处理器401控制触摸显示屏405从息屏状态切换为亮屏状态。

本领域技术人员可以理解,图4中示出的结构并不构成对终端400的限定,可以包括比图示更多或更少的组件,或者组合某些组件,或者采用不同的组件布置。

图5是根据一示例性实施例示出的一种服务器的结构示意图,该服务器500可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(centralprocessingunits,cpu)501和一个或一个以上的存储器502,其中,所述存储器502中存储有至少一条指令,所述至少一条指令由所述处理器501加载并执行以实现上述各个方法实施例提供的方法。当然,该服务器还可以具有有线或无线网络接口、键盘以及输入输出接口等部件,以便进行输入输出,该服务器还可以包括其他用于实现设备功能的部件,在此不做赘述。

服务器500可以用于执行上述图像分割方法中处理装置所执行的步骤。

在示例性实施例中,还提供了一种非临时性计算机可读存储介质,当存储介质中的指令由处理装置的处理器执行时,使得处理装置能够执行一种图像分割方法,方法包括:

获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域;

将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识;

根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域。

在示例性实施例中,还提供了一种计算机程序产品,当计算机程序产品中的指令由处理装置的处理器执行时,使得处理装置能够执行一种图像分割方法,方法包括:

获取已训练的像素分类模型,像素分类模型用于确定任一图像中每个像素的分类标识,分类标识包括第一标识和第二标识,第一标识用于指示对应的像素属于前景区域,第二标识用于指示对应的像素属于背景区域;

将待处理的目标图像输入至像素分类模型中,基于像素分类模型,确定目标图像中每个像素的分类标识;

根据目标图像中每个像素的分类标识,确定目标图像的前景区域和背景区域。

本领域技术人员在考虑说明书及实践这里的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。

应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

当前第1页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1