图片处理方法、装置及存储介质与流程

文档序号:21272960发布日期:2020-06-26 23:03阅读:来源:国知局

技术特征:

1.一种图片处理方法,其特征在于,包括:

对待检测图片进行预处理,获得处理后的图片;

从所述处理后的图片中,分别提取图像特征信息和文本特征信息;

根据所述图像特征信息和所述文本特征信息,确定所述待检测图片的类型,其中,所述图片的类型包括正常图片或异常图片。

2.根据权利要求1所述的方法,其特征在于,所述根据所述图像特征信息和所述文本特征信息,确定所述待检测图片的类型,包括:

对所述图像特征信息和所述文本特征信息进行拼接处理,获得拼接特征信息;

对所述拼接特征信息进行流形数据的降维处理,获得所述拼接特征信息的嵌入特征;

根据所述拼接特征信息的嵌入特征和预先确定的超球,确定所述待检测图片的类型。

3.根据权利要求2所述的方法,其特征在于,所述根据所述拼接特征信息的嵌入特征和预先确定的超球,确定所述待检测图片的类型,包括:

判断所述嵌入特征是否处于所述超球内;

若所述嵌入特征处于所述超球内,则确定所述待检测图片为异常图片;

若所述嵌入特征不处于所述超球内,则确定所述待检测图片为正常图片。

4.根据权利要求2或3所述的方法,其特征在于,所述根据所述拼接特征信息的嵌入特征和预先确定的超球,确定所述待检测图片的类型之前,所述方法还包括:

获取多个样本图片;

分别提取所述多个样本图片中每个样本图片的映射特征;

对各个所述映射特征进行数据描述,得到所述超球。

5.根据权利要求4所述的方法,其特征在于,所述对各个所述映射特征进行数据描述,得到所述超球,包括:

通过支持向量数据描述svdd算法对各个所述映射特征进行数据描述,得到所述超球。

6.根据权利要求1所述的方法,其特征在于,从所述处理后的图片中,提取图像特征信息,包括:

通过多级卷积神经网络cnn,从所述处理后的图片中,提取图像特征信息。

7.根据权利要求6所述的方法,其特征在于,所述通过多级卷积神经网络cnn,从所述处理后的图片中,提取图像特征信息,包括:

将所述处理后的图片输入至第一级cnn网络中,得到与所述处理后的图片对应的第一映射图像以及所述处理后的图片中目标图像的第一区域框坐标;

将所述第一映射图像和所述第一区域框坐标输入至第二级cnn网络中,得到与所述处理后的图片对应的第二映射图像以及所述处理后的图片中目标图像的第二区域框坐标;

将所述第二映射图像和所述第二区域框坐标输入至第三级cnn网络中,得到所述图像特征信息。

8.根据权利要求1所述的方法,其特征在于,从所述处理后的图片中,提取文本特征信息,包括:

通过多级卷积神经网络cnn和循环神经网络rnn,从所述处理后的图片中,提取所述文本特征信息。

9.根据权利要求1-8任一项所述的方法,其特征在于,所述对待检测图片进行预处理,获得处理后的图片,包括:

对所述待检测图片进行图像金字塔处理,获得所述处理后的图片。

10.根据权利要求9所述的方法,其特征在于,所述对所述待检测图片进行图像金字塔处理,获得所述处理后的图片之前,所述方法还包括:

对所述待检测图片进行图像颜色矫正处理,获得矫正后的图片;

所述对所述待检测图片进行图像金字塔处理,获得所述处理后的图片,包括:

对所述矫正后的图片进行图像金字塔处理,获得所述处理后的图片。

11.一种图片处理装置,其特征在于,包括:

预处理模块,用于对待检测图片进行预处理,获得处理后的图片;

第一提取模块,用于从所述处理后的图片中,分别提取图像特征信息和文本特征信息;

确定模块,用于根据所述图像特征信息和所述文本特征信息,确定所述待检测图片的类型,其中,所述图片的类型包括正常图片或异常图片。

12.根据权利要求11所述的装置,其特征在于,所述确定模块,包括:

拼接子模块,用于对所述图像特征信息和所述文本特征信息进行拼接处理,获得拼接特征信息;

降维处理子模块,用于对所述拼接特征信息进行流形数据的降维处理,获得所述拼接特征信息的嵌入特征;

确定子模块,用于根据所述拼接特征信息的嵌入特征和预先确定的超球,确定所述待检测图片的类型。

13.根据权利要求12所述的装置,其特征在于,所述确定子模块,具体用于:

判断所述嵌入特征是否处于所述超球内;

若所述嵌入特征处于所述超球内,则确定所述待检测图片为异常图片;

若所述嵌入特征不处于所述超球内,则确定所述待检测图片为正常图片。

14.根据权利要求12或13所述的装置,其特征在于,所述装置还包括:

获取模块,用于获取多个样本图片;

第二提取模块,用于分别提取所述多个样本图片中每个样本图片的映射特征;

数据描述模块,用于对各个所述映射特征进行数据描述,得到所述超球。

15.根据权利要求14所述的装置,其特征在于,所述数据描述模块,具体用于:

通过支持向量数据描述svdd算法对各个所述映射特征进行数据描述,得到所述超球。

16.根据权利要求11所述的装置,其特征在于,所述第一提取模块还用于通过多级卷积神经网络cnn,从所述处理后的图片中,提取图像特征信息。

17.根据权利要求16所述的装置,其特征在于,所述第一提取模块还用于:

将所述处理后的图片输入至第一级cnn网络中,得到与所述处理后的图片对应的第一映射图像以及所述处理后的图片中目标图像的第一区域框坐标;

将所述第一映射图像和所述第一区域框坐标输入至第二级cnn网络中,得到与所述处理后的图片对应的第二映射图像以及所述处理后的图片中目标图像的第二区域框坐标;

将所述第二映射图像和所述第二区域框坐标输入至第三级cnn网络中,得到所述图像特征信息。

18.根据权利要求11所述的装置,其特征在于,所述第一提取模块还用于通过多级卷积神经网络cnn和循环神经网络rnn,从所述处理后的图片中,提取所述文本特征信息。

19.根据权利要求11-18任一项所述的装置,其特征在于,所述预处理模块还用于对所述待检测图片进行图像金字塔处理,获得所述处理后的图片。

20.根据权利要求19所述的装置,其特征在于,所述装置还包括:

矫正模块,用于对所述待检测图片进行图像颜色矫正处理,获得矫正后的图片;

所述预处理模块还用于对所述矫正后的图片进行图像金字塔处理,获得所述处理后的图片。

21.一种服务器,其特征在于,包括:

处理器;

存储器;以及

计算机程序;

其中,所述计算机程序被存储在所述存储器中,并且被配置为由所述处理器执行,所述计算机程序包括用于执行如权利要求1-10任一项所述的方法的指令。

22.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序使得服务器执行权利要求1-10任一项所述的方法。


技术总结
本发明实施例提供一种图片处理方法、装置及存储介质;该方法包括:对待检测图片进行预处理,获得处理后的图片;从所述处理后的图片中,分别提取图像特征信息和文本特征信息;根据所述图像特征信息和所述文本特征信息,确定所述待检测图片的类型,其中,所述图片类型包括正常图片或异常图片。本发明提供的图片处理方法、装置及存储介质,可以提升图片检测和识别的准确度。

技术研发人员:刘达
受保护的技术使用者:北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司
技术研发日:2018.12.18
技术公布日:2020.06.26
当前第2页1 2 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1