本发明涉及农产品在线无损自动检测与分级技术,尤其涉及一种红提果粉的在线视觉检测分级装置及其方法。
具体地说,本发明利用机器视觉技术同时采集红提的彩色图像和近红外图像,并进行一系列的图像预处理,获取彩色图像RGB空间中的R分量、G分量、B分量灰度参数,结合肉眼判断红提果粉品质级别,建立红提果粉区域的在线检测模型,结合分级标准设定的阈值,实现对红提果粉品质的检测分级。
背景技术:
本发明涉及的对象红提,是美国在70年代培育出来的杂交品种,果穗较大,果粒呈椭圆状,颜色呈红色或紫色,果皮较厚,肉感厚实,香甜可口,洗净后可以直接食用,是鲜萄中有价值的品种之一。果粒上的果粉是由其表皮细胞通过光合作用合成的,其合成过程需要上百种基因以及各种酶共同参与完成。红提果粉的附着程度可以直接反映红提在种植期间的用药情况,且果粉中含有诸多有益于人体健康的物质,比如白藜芦醇可以延缓衰老、齐墩果酸能够降低血糖血脂,因此果粉附着程度越高,红提用药越合理,越有益于消费者的身体健康,在红提的采后阶段对按果粉品质进行检测分级,非常具有实际意义。
目前,国内外学者在红提品质上做了很多研究。曾庆兵等【曾庆兵,刘成良, 苗玉彬, 王世平, 黄丹枫. 基于形态学图像处理的重叠葡萄果径无损测量[J].农业工程学报,2009,25(9):356-360.】通过形态学处理的方法,实现了对葡萄果粒的精确定位,从而为观测葡萄的生长状况提供了参考;Li M等【Li M,Wang Q, Zhu J.Automatic recognition of grapes' size level based on machine vision[J]. J Food Agr & Environ, 2012, 10(3):78-80.】通过检测葡萄轮廓的角点将轮廓边缘的葡萄果粒识别出来,并通过计算单粒葡萄的平均曲率作为判定标准,将葡萄按照大小分级,最终分级准确率为90%;鲁伟奇【鲁伟奇.葡萄成熟度无损检测研究[D].杭州:中国计量学院,2013.】通过采集待检测葡萄果粒区域的6个颜色特征,结合欧式距离和支持向量机的方法,对20串巨峰葡萄的成熟度进行检测,检测结果均符合实际情况;陈辰等【陈辰, 鲁晓翔, 张鹏, 陈绍慧, 李江阔. 红提葡萄V_C含量的可见/近红外检测模型[J].食品与机械,2015(5):70-74.】研究了基于可见/近红外光谱对红提VC含量的预测模型,该模型采用了多种光谱预处理方法,并结合了改进的偏最小二乘法,模型的预测决定系数为0.9318,实验结果表明,该方法对VC含量的快速无损检测具有指导意义。
经检索,国内外仅建立了葡萄的大小、成熟度等品质分级模型,目前尚未发现有关红提葡萄果粉的在线视觉检测分级装置及其方法。
技术实现要素:
本发明的目的在于实现红提果粉无损在线检测分级,提供一种红提果粉的在线视觉检测装置及其方法。
本发明的目的是这样实现的:
首先,将红提放入夹持机构固定,一并放置在导轨下方的挂钩上,打开电机使红提沿着导轨运动,当红提行进至光室一侧的光电传感器时触发开关,单片机接收触发信号并发送给计算机(上位机),从而控制工业相机采集红提彩色图像和近红外图像;计算机对图像进行处理后,提取出红提果粒上的果肉和果粉的颜色特征参数;最后通过建立的分级模型判断红提果粉的级别,再将最终的结果以文档的形式打印出来,达到红提果粉品质分级的目的。
在本发明中主要完成以下几项工作:
1、采集红提的彩色和近红外图像;
2、对采集到的红提图像进行预处理;
3、提取红提果粉和果肉区域的品质特征参数:R分量灰度值,G分量灰度值,B分量灰度值;
4、建立红提果粉区域的在线检测模型;
5、利用分级标准设定的阈值判别红提果粉的类别:全附着、部分附着、少附着。
具体地说:
一、红提果粉的在线视觉检测分级装置(简称装置)
包括检测分级对象红提果粉;
设置有夹持机构、背景纸、光室、导轨、光电传感器、工业相机、光源调节器、光源、单片机控制器和计算机;
其位置和连接关系是:
在光室左侧的箱壁内贴有黑色的背景纸;
在光室的上方设置有导轨,在导轨的下方悬挂有夹持机构,夹持机构夹持红提果粉;
在光室内的右侧正对红提果粉的位置上设置有光源8及其光源调节器;
在光室内的上面设置有光电传感器,光电传感器、单片机和计算机依次连接;
工业相机正对红提果粉,工业相机和计算机连接。
二、红提果粉的在线视觉检测分级方法(简称方法)
本方法包括以下步骤:
①红提果粉图像的采集
将红提果粉按照顺序依次摆放到导轨上,运行电机让红提果粉悬挂在导轨下方行进,当传送至光室中触发光电传感器时,工业相机拍照采集红提果粉的彩色图像和近红外图像;
②红提果粉图像的预处理
A、对彩色图像和近红外图像进行裁剪,尽可能地去掉所有的背景信息而保留全部的红提果粉信息;
B、对彩色图像和近红外图像同时采用中值滤波的方法,去除红提果粉图像中的噪声信息;
C、对红提果粉近红外图像采用灰度增强的方法,加强红提果粉表面的颜色信息的对比度。
D、提取红提果粉彩色图像中的R、G、B分量的灰度图,通过2G-R-B的色差运算粗略获取的果梗信息灰度图;
E、利用OTSU(最大类间方差)法对果梗灰度图像进行阈值分割,采用去除最小面积的方法,清除零散的无用的小面积信息,最终获取果梗的二值图像;
F、对果梗二值图像进行膨胀处理,并将其与红提果粉彩色图像进行掩膜的乘法运算,最终获取无果梗的红提果粉彩色图像。
G、采用交互式取点的方法,在任意一张无果梗的彩色图像中,分别获取红提果粉和果肉区域像素点的R、G、B三分量的颜色特征值,并将红提果粉区域的分类标签设置为1,果肉区域的分类标签设置为0,获取红提的样本数据;
③红提果粉检测模型的建立
a、统计采集到的红提像素点样本数据的数量,并将样本数据按照2:1的原则划分为训练集和测试集;
b、建立训练集判别模型,根据训练集的R、G、B颜色特征值,结合红提果粉和果肉区域像素点的标签属性,建立SVM支持向量的判别模型;
c、根据测试集的R、G、B颜色特征值,预测出红提果粉和果肉区域,并与真实值比较,对模型进行评估;
④判别红提果粉等级
ⅰ、采用OTSU(最大类间方差)法将红提果粉近红外灰度图像转化成二值图像,将膨胀后的果梗二值图像与红提果粉二值图像掩膜相乘,获取去除果梗后的红提果粉二值图像,其中红提果粉图像为白色,背景图像为黑色;
ⅱ、统计红提果粉二值图像中像素值为1的像素点个数N1;
ⅲ、将去除果梗后的红提果粉彩色图像的R、G、B颜色特征作为检测模型的输入参数,最终获取红提果粉和果肉的像素点,统计分类标签为1的像素点个数N2。
ⅳ、将红提果粉像素点个数N2与红提二值图像像素点个数N1的比值P作为红提果粉等级的判定依据;
ⅴ、当P的值大于等于0.8时,则判定该串红提果粉等级为一级(全附着),当P的值小于0.8并大于等于0.6时,则判定该串红提果粉等级为二级(部分附着),当P的值小于0.6时,则判定该串红提果粉等级为三级(少附着)。
ⅵ、将检测结果按照红提果粉的序号依次保存在文本文档中,最终完成红提果粉的无损在线检测分级。
本发明具有以下优点和积极效果:
1、采用机器视觉技术,能够完成整串红提果粉的自动检测和分级;
2、前人暂未对红提果粉进行检测分级研究,此发明具有创新性;
3、高效率、高智能,分级标准统一,能够实现无损在线检测,具有广阔的应用前景。
附图说明
图1是本装置的结构示意图;
图2是红提果粉的彩色图像;
图3是红提果粉的近红外图像;
图4是图像处理软件的工作流程图。
图中:
1—夹持机构;
2—背景纸;
3—光室;
4—导轨;
5—光电传感器;
6—工业相机;
7—光源调节器;
8—光源;
9—红提果粉;
10—单片机控制器;
11—计算机。
具体实施方式
下面结合附图和实施详细说明:
一、装置
1、总体
如图1,本装置包括检测分级对象红提果粉9;
设置有夹持机构1、背景纸2、光室3、导轨4、光电传感器5、工业相机6、光源调节器7、光源8、单片机控制器10和计算机11;
其位置和连接关系是:
在光室3左侧的箱壁内贴有黑色的背景纸2;
在光室3的上方设置有导轨4,在导轨4的下方悬挂有夹持机构1,夹持机构1夹持红提果粉9;
在光室3内的右侧正对红提果粉9的位置上设置有光源8及其光源调节器7;
在光室3内的上面设置有光电传感器5,光电传感器5、单片机10和计算机11依次连接;
工业相机6正对红提果粉9,工业相机6和计算机1连接。
工作机理:
通过夹持机构1和导轨4以及光电传感器5使红提果粉9在光室3内移动,通过单片机10、计算机11触发工业相机6对红提果粉9拍照,获得红提果粉9的图像,供检测分析。
2、功能部件
1)夹持机构1
一种通用外购件;其功能是夹紧红提果粉9使其沿导轨稳定运输。
2)背景纸2
背景纸2是一种通用外购件,如选用黑色自粘绒布墙纸;其功能是避免墙壁反光从而影响红提果粉9图像的采集效果。
3)光室3
光室3是一种矩形的不锈钢箱体;其功能是保障采集的图像不受外界光照影响,并用于安装固定工业相机6和光源8。
4)导轨4
导轨4是一种通用外购件,如选用同步带滑台(WBD-TL4080);其功能是传送红提果粉9。
5)光电传感器5
光电传感器5是一种通用外购件,如选用漫反射式光电传感器(E3Z-D61);其功能是接收信号并将信号发送给单片机控制器10。
6)工业相机6
工业相机6是一种通用外购件,如选用JAI公司的双通道工业相机;其功能同时采集红提果粉的彩色图像和近红外图像。
7)光源调节器7
光源调节器7是一种通用外购件,如选用视爵光源检测光源调节器。其功能是调节光源8的强度。
8)光源8
光源8是一种通用外购件,如选用LED环形光源;其功能是均匀照射红提果粉9。
9)单片机控制器10
单片机控制器10是一种通用外购件,如选用STM32单片机(STM32F103ZET6);其功能是接收触发信号,并将信号发送至计算机11。
7)计算机11
计算机11是一种通用外购件,如选用CPU英特尔i5-2450M CPU @2.50GHz处理器,64位,Windows XP系统;其功能是使用其内的图像处理软件对红提果粉图像进行实时处理。
如图4,所述的图像处理软件的工作流程:
a、读取图像-301;
b、中值滤波-302;
c、近红外图像阈值分割获取二值图像-303;
d、提取果梗二值图像-304;
e、计算掩膜后无果梗的彩色图像和二值图像-305;
f、统计二值图像中红提像素点的个数N1-306;
g、提取红提所有像素点的R、G、B分量值并导入检测模型-307;
h、统计检测模型中分类标签为1的个数N2-308;
i、计算N2与N1的比值P,并将其与阈值比较获取对应的级别-309;
j、将结果保存文本文档中-310。
三、检测结果
本实例的试验样品是购买于湖北武汉白沙洲水果批发市场的红提果粉,将葡其分为一级(全附着)、二级(部分附着)、三级(少附着)三个等级,只需通过对红提果粉的图像采集、图像处理、判别等过程就可以无损快速判别其果粉的级别;
该方法满足了实际生产的要求。