基于改进YOLOv5的真实采摘环境下茶叶芽检测模型


发布时间:

2025-01-07

来源:

作者:

茶叶芽的检测是优质茶叶自动采摘的基础。本文提出了一种高性能的茶芽检测模型,解决了茶芽检测中环境复杂、目标茶芽小、设备聚焦模糊等问题。在春茶采摘阶段,收集山区茶园的茶芽图像并对其进行注释。YOLOv5茶叶是在YOLOv5基础上的改进,它在主干中使用了高效的简化空间金字塔池快速(Simplified Spatial Pyramid Pooling Fast,SimSPPF),便于部署在茶叶采摘设备上。颈部网络采用双向特征金字塔网络(Bidirectional Feature Pyramid network, BiFPN)结构。充分融合了深层和浅层特征信息,达到了融合不同尺度特征的效果,提高了聚焦模糊茶芽的检测精度。它用全维动态卷积(Omni-Dimensional Dynamic Convolution,ODConv)取代了传统颈部网络中独立的CBS卷积模块,从空间大小、输入通道、输出通道、卷积核等方面处理不同的权值,提高了对小目标和闭塞茶芽的检测。实验结果表明,改进后的模型与初始模型相比,精度、召回率和平均精度分别提高了4.4%、2.3%和3.2%,模型的推理速度也得到了提高。本研究对复杂环境下的茶芽采收具有一定的理论和实践意义。

 

图1  不同条件下的茶芽图像:(a)拍摄角度:侧面和顶部;(b)拍摄范围:近景和广角;(c)照明:明暗;(d)数量:少目标和多目标。

 

图2  改进了YOLOv5-tea网络结构。

 

图3  SimSPPF模块结构图。

 

图4  (a) FPN网络结构;(b) FPN + PAN网络结构;(c) BiFPN网络架构。

 

图5  ODConv中使用的四种不同权重的操作说明。

 

图6  ODConv层的结构。说明:“*”代表乘法。

 

图7  结果验证:红框表示模型检测到的茶芽。(a)原始图;(b) YOLOv5s模型检测;(c) YOLOv5-tea模型检测。

 

图8  在不同模型之间的模型训练过程中的度量演化:(a)精度;(b)召回;(c) mAP_50。

 

来 源

Li, H.; Kong, M.; Shi, Y. Tea Bud Detection Model in a Real Picking Environment Based on an Improved YOLOv5. Biomimetics 2024, 9, 692.

 

编辑

王春颖

推荐新闻

石时之约|韩志国:透过表型数据,看见植物的喜怒哀乐!

本期石时之约,我们将对话慧诺瑞德(北京)科技有限公司总经理、国际植物表型学会(IPPN)执委会委员/工业分会副主席韩志国,一起从表型数据的科学角度,去读懂农作物的喜怒哀乐和前世今生。

慧科研、慧育种、慧种田——慧聚改变的力量

让我们“慧聚”在一起,为“慧科研、慧育种、慧种田”赋能。

高通量植物表型平台建设注意事项

育种,是在给定的环境条件下,选择各种表型指标(产量、品质、抗性)最优的基因型材料的过程(AI育种,从这里起步)。育种工作中大约70%的工作量来自表型观察测量和筛选,是最耗人力物力的过程。

作物生理表型测量基础原理

生理表型测量的核心在于“早、快”,要在肉眼可见之前就能测量并预判出变化趋势,才是这个技术的核心价值。叶绿素荧光成像,恰好满足了这个要求。