基于机器视觉的盆栽微型月季品质分级方法研究

作者: 张阁 兰升 刘新伟 贾彪 张黎

基于机器视觉的盆栽微型月季品质分级方法研究0

摘要建立准确高效的品质分级方法,对于花卉产业的标准化发展具有重要的意义。针对人工分级劳动强度大、经验要求高、缺乏统一性等问题,提出了基于机器视觉技术的盆栽微型月季品质分级方法。该方法根据盆栽微型月季的株高、花朵数、整齐度、花盖度和病虫害状况特征的不同,分别提取其相应的特征参数,并利用最小二乘支持向量机作为分类器,对其品质等级进行评价。经试验研究,单独利用株高、花朵数、整齐度、花盖度和病虫害状况特征进行分级的准确率分别为95.65%、94.68%、94.68%、94.20%、96.61%,而综合特征分级准确率为99.50%,验证了特征提取和分类模型的有效性,利用综合特征进行分级时间为10 s,明显提高了分级效率,该方法为建立准确高效的智能盆栽微型月季分级方法提供了理论参考。

关键词机器视觉;盆栽微型月季;品质分级;特征提取

中图分类号S126  文献标识码A  文章编号05176611(2024)07023005

doi:10.3969/j.issn.05176611.2024.07.053

Research on Quality Grading Method of Potted Mini Rose Based on Machine Vision

ZHANG Ge1,2,LAN Sheng3,LIU Xin-wei1,2 et al

(1.Yinchuan Aibida Horticulture Co.,Ltd.,Yinchuan,Ningxia 750005;2.Ningxia Flower Engineering Technology Research Center,Yinchuan,Ningxia 750005;3.School of Automation,Tsinghua University,Beijing 100084)

AbstractPotted mini rose has the characteristics of varieties,difficult of storage and large quality gap.Therefore,the establishment of accurate and efficient quality grading technology is of great significance for the standardized development of flower industry.As the traditional manual grading method need high labor intensity,high experience and lack of unity,we proposed a new quality grading method of potted mini rose based on machine vision.According to the different characteristics of plant height,flower number,uniformity,flower coverage and pest status of potted mini roses,the corresponding characteristic parameters were extracted,and the least squares support vector machine was used as a classifier to evaluate the quality grade.Through the experiment,the accuracy of a single characteristic were 95.65%,94.68%,94.68%,94.20% and 96.61%,respectively,while the accuracy of grading using the synthetic features was 99.50%,which verified the effectiveness of the proposed method.Generally,the manual grading method took several days,while the time of grading by the proposed method was 10 s,which obviously improved the efficiency.This method could provide basis for establishing an accurate and efficient intelligent grading method of potted mini rose.

Key wordsMachine vision;Potted mini rose;Quality grading;Feature extraction

微型月季具有株型矮小、色彩丰富等特点[1]。小型化紧凑型的盆栽成为新兴的花卉热门产品,盆栽微型月季因其娇小美丽、寓意美好而受到人们喜爱[2]。目前,我国每年盆栽微型月季产量可达4 000万盆,但由于其品种多、不易存储、品质差距大等特点,在包装环节对其进行品质分级存在瓶颈。目前我国盆栽微型月季分级包装主要依靠人工分选,该方法劳动强度大、分级效率低、分级成本高,而且对工作人员要求高、缺乏统一评价标准[3]。

随着计算机技术的发展,机器视觉的方法因其精度高、成本低和性能稳定等特点,越来越多地被应用到植物的病害检测和分类中[47]。目前国内外已有一些蔬菜的自动化分级系统,如郝敏[8]通过机器视觉技术,将遗传算法与概率神经网络结合,实现了基于重量、薯形和外部缺陷3个指标的马铃薯外观品质分级系统,对大、中、小3种尺寸的马铃薯分类准确率分别达到97%、96%和98%。任锐等[9]根据辣椒的形状和颜色特征,采用霍夫森林分类器实现了辣椒的外部品质分级模型,得到了一种适合有一定弯曲度、带柄农作物的研究方法。Tokuda等[10]通过研究开发了一个可用于西瓜自动收获的机器视觉系统,将样本图像的颜色模型由 RGB 模型转换成 HSI 模型,对 HSI颜色模型中饱和度 S的观察发现,当西瓜成熟度增加时,对应图像饱和度的平均值会线性下降,同时在彩色直方图中到达峰值的像素个数和达到峰值的左侧像素的个数之间的比值将会减少,运用该原理可以建立一个机器视觉系统来对西瓜的成熟程度进行分级。王巧华等[11]通过机器视觉,建立了鸭蛋大小的自动分级系统,研究表明不论蛋壳颜色以及蛋芯颜色,鸭蛋的大小和重量都与像素面积成正比,相关性达到0.97。孟繁佳等[12]设计了一种实时分选霉变玉米种子的系统,根据玉米种子表面颜色的差异,设计了一种基于HSV颜色空间的霉变玉米种子分级算法,准确率达到94%。国内关于植物分级已有一些研究,但鲜见基于机器视觉的有关盆栽微型月季的分级方法。因此,结合机器视觉研究一种快速、准确的盆栽微型月季分级方法,对于推动我国花卉产业的标准化、智能化发展具有重要的意义。

鉴于此,笔者研究基于机器视觉技术,以盆栽微型月季的株高、花朵数、整齐度、花盖度和病虫害状况作为特征,以最小二乘支持向量机作为分类器,实现其外观品质的自动分级,从而提高包装环节的效率和准确度,推动我国花卉产业的发展。

1材料与方法

1.1试验材料

试验材料为宁夏银川市本地种植的盆栽微型月季“欧布”,在白天遮光环境下使用华为Honor 30手机自带相机拍摄,摄像头为索尼IMX 700型4 000万像素。共拍摄660组图像,每组图像包括盆栽月季的侧视图和俯视图,图像大小为4 608×3 456。

将试验盆栽按照3∶1的比例进行划分,其中440组作为训练组,其余220组作为预测组。图像的选择采用随机方式,以避免拍摄顺序以及人为因素对试验造成的影响。

1.2分级标准

参考GB/T 18247.2—2000国家盆栽花卉产品等级标准和 NY/T 1656.3—2008花卉检验技术规范,制定了适用于该研究对象的企业分级标准,如表1所示。根据盆栽微型月季高度、花朵数量、整齐度、花盖度、病虫害状况等特征的综合情况将样本分为3类:A类为最优级别,B类次之,C类最差。

1.3试验方法

通过图像采集系统采集盆栽月季的侧视图和俯视图,并随机分为训练集和预测集。然后,将采集的图像进行预处理,分别提取其高度、花朵数量、整齐度、花盖度、病虫害状况特征。最后,采用最小二乘支持向量机(LSSVM)作为分类器,基于特征值对其进行训练和预测,得到最优的分级模型,并进行相应的品质分级软件的开发与测试。

图像采集系统包括相机、光源及遮光暗箱[13],如图1所示。拍摄时,相机分别处于顶部和侧面的固定位置,使用黑色遮光布作为拍摄背景,从而避免相机抖动和背景噪声对图像采集的影响。

2图像预处理

2.1图像滤波与去噪

在图像采集的过程中,由于空气灰尘、叶片掉落、湿度变化等因素,往往会导致图像中存在一定的噪声,进而对后续的特征提取产生不利的干扰。为了避免这种负面的影响因素,采取中值滤波算法[14]对图像进行预处理。通过滤波处理,可以较好地消除图像中的噪声,同时保留有用的颜色和形状信息。由图2可知,进行中值滤波后的图像中无关颜色分量减少,同时保留了有用颜色信息,有利于消除非关键信息的干扰,从而便于后续图像特征的提取。

2.2图像的Itti颜色显著图

Itti显著图是根据早期灵长类动物的视觉神经系统构造的一种视觉注意力机制模型[15]。人脑具有通过分析对图像中的区域产生不同显著等级的能力,而Itti模型[1617]就模拟了这种自下而上的注意力机制。该方法主要是先通过高斯采样方法构建图像的多个尺寸的高斯金字塔,然后由高斯金字塔分别计算图像的颜色特征图,最后将不同尺寸的特征图进行融合得到颜色显著图。

在计算Itti颜色显著图时,首先设定1个图像像素值大小的阈值,这里为图像中像素最大值的1/10。当像素值小于阈值时,将该像素点的R、G、B值设为0,当像素值大于阈值时,分别计算其R、G、B颜色分量的值如公式(1)所示:

RR=R(G+B)2GG=G(R+B)2BB=B(R+G)2(1)

对于高斯金字塔中的每层图像,其颜色分量分别表示为RR(n)、GG(n)、BB(n)和Y(n),其中n∈{0,1,2,…,6,7,8}。接着计算总颜色分量如公式(2)所示:

RR=8n=0RR(n)GG=8n=0GG(n)BB=8n=0BB(n)     (2)

由于该研究中试验样本花朵为红色,而叶片颜色为绿色,在提取其花朵数量、整齐度、病虫害特征时使用了俯视图的红色显著图,提取其高度特征时使用了侧视图的绿色显著图,提取其花盖度特征时则同时使用了俯视图的红色显著图和绿色显著图,如图3所示。

2.3图像的二值化与形态学处理

经过中值滤波和Itti颜色显著图的处理,已基本可以区分开图像中的关键区域与背景区域,但是由于图像中像素点的值为0~255,进行特征提取时计算量较大。实际上,在数字图像处理中,常常对图像进行二值化处理[1819],从而提高算法的运算效率。在图像二值化之后,由于图像像素值被压缩到0和1这2种数值,往往会使得一些区域的噪声被放大而形成孔洞,不利于特征的进一步提取。因此,对二值化后的图像进行形态学的处理,包括腐蚀和膨胀等开运算,也是图像预处理的重要部分。图4所示为进行二值化和形态学处理后的图像。

3特征的提取与分级

3.1特征提取

3.1.1高度特征。

一株盆栽的高度是指植株顶部与其根颈部之间的距离。在图像中,则对应其侧视图中像素不为0的点的纵坐标最大值与最小值之间的差。在该研究中,通过侧视图的绿色二值显著图来计算植株的株高特征,如公式(3)所示:

H=(TmaxTmin)α(3)

式中:Tmax、Tmin分别为非零像素点的纵坐标最大值与最小值;α为归一化系数,根据图像的大小而定。

3.1.2花朵数量特征。

一株盆栽中的花朵数量是衡量其品质级别的重要依据,花朵数越多,其成为优质级别的可能性就越大。由于试验样本的花朵颜色为红色,主要基于俯视图的红色二值显著图来计算花朵数量。通过观察发现,在红色二值显著图中,每一个花朵区域都是一个连通的白色区域,通过统计其中白色连通区域的数量,即可得到该盆栽中的花朵数量:

N=σNσ(4)

式中,σ表示图像区域;Nσ为区域连通状态,即Nσ=1,σ连通Nσ=0,σ连通

3.1.3整齐度特征。

整齐度是盆栽中的花朵分布整齐程度的量化特征,是影响盆栽整体观感的一个重要因素。整齐度越高,则盆栽整体看起来越规则而具有美感,相反,整齐度较低时盆栽整体看起来会比较杂乱,影响其外部观感。当在图像中计算整齐度时,该研究使用花朵区域的纵坐标的统计标准差,即盆栽俯视图的红色二值显著图中连通区域中心的纵坐标标准差作为衡量的标准:

经典小说推荐

杂志订阅

友情链接