基于多种成像传感器的香根草叶片分割技术的比较研究


发布时间:

2023-03-29

来源:

植物表型资讯

作者:

PhenoTrait

相机视觉系统是快速监测植物叶片的有效方法,可用于监测植物生长、病虫害及进行植物表型分析。然而,由于植物处于户外环境,使用相机视觉系统变得具有挑战性。本文通过比较不同类型的摄像机和分割技术,解决了香根草叶片分割的问题。使用嵌入式设备中的可见光、NoIR相机(NoIR 相机在镜头上没有红外线滤光器,非常适合在低光(夜光)环境中进行红外线摄影和拍照)和热感摄像机拍摄昼夜植物。采用了几种常见的阈值分割技术和K-Means算法进行叶片分割,并使用召回率、精确率和F1分数对它们的性能进行了测量。比较结果显示,可见光相机在白天图像上表现最佳,采用三角阈值法具有最高的召回率(0.934),采用K-Means(K = 3)具有最高的精确率(0.751),采用Multi-Otsu阈值法具有最高的F1分数(0.794)。对于夜间图像,热感摄像机使用Isodata和Otsu阈值法取得了最高的召回率(0.990),NoIR相机采用K-Means(K = 3)取得了最高的精确率(0.572),采用K-Means(K = 3)时NoIR相机具有最高的F1分数(0.636)。为了比较我们的阈值分割技术和K-Means算法在图像数据集和知名植物图像数据集之间的叶片分割性能,我们还使用了Ara2012图像数据集对方法进行了评估。结果显示,K-Means(K = 3)取得了最佳性能。K-Means的执行时间约为3秒,比阈值分割技术长,但对于实时植物监测系统仍然可接受。

 

图1 多摄像头系统的硬件布置。

 

图2 可见光相机拍摄的样本图像

 

图3 NoIR相机拍摄的样本图像:(a)原始图像;(b)变换后图像

 

图4 热感相机拍摄的样本图像:(a)原始图像;(b)变换后图像。

 

图5 图解三角形阈值法

 

图6 全天24小时可见光、NoIR和热图像的强度

 

图7 NoIR图像拍摄时间:(a)13:00 h;(b)19:00 h。

 

图8 热图像拍摄时间:(a)13:00 h;(b)19:00 h

 

图9 真实图像示例:(a)可见相机;(b)NoIR相机

 

图10 可见光图像的图像分割结果:(a) original tested image; (b) Isodata; (c) Li; (d) Local; (e) Mean; (f) Minimum; (g) Otsu; (h) Multi-Otsu; (i) Triangle; (j) Yen; (k) K-Means (K = 2); (l) K-Means (K = 3)

 

图11 NoIR图像的图像分割结果:(a) original tested image; (b) Isodata; (c) Li; (d) Local; (e) Mean; (f) Minimum; (g) Otsu; (h) Multi-Otsu; (i) Triangle; (j) Yen; (k) K-Means (K = 2); (l) K-Means (K = 3)

  

图12 热图像的图像分割结果:(a) original tested image; (b) Isodata; (c) Li; (d) Local; (e) Mean; (f) Minimum; (g) Otsu; (h) Multi-Otsu; (i) Triangle; (j) Yen; (k) K-Means (K = 2); (l) K-Means (K = 3)

 

图13 Ara2012图像数据集中拟南芥植物的分割性能

 

图14 (a)我们的数据集;(b)Ara2012数据集的图像直方图

 
 
来 源
Soetedjo A, Hendriarianti E. A Comparative Study of Vetiveria zizanioides Leaf Segmentation Techniques Using Visible, Infrared, and Thermal Camera Sensors in an Outdoor Environment[J]. Applied System Innovation, 2022, 6(1): 1.
 

编辑

刘昕哲
 

扩展阅读

推荐新闻

石时之约|韩志国:透过表型数据,看见植物的喜怒哀乐!

本期石时之约,我们将对话慧诺瑞德(北京)科技有限公司总经理、国际植物表型学会(IPPN)执委会委员/工业分会副主席韩志国,一起从表型数据的科学角度,去读懂农作物的喜怒哀乐和前世今生。

慧科研、慧育种、慧种田——慧聚改变的力量

让我们“慧聚”在一起,为“慧科研、慧育种、慧种田”赋能。

高通量植物表型平台建设注意事项

育种,是在给定的环境条件下,选择各种表型指标(产量、品质、抗性)最优的基因型材料的过程(AI育种,从这里起步)。育种工作中大约70%的工作量来自表型观察测量和筛选,是最耗人力物力的过程。

作物生理表型测量基础原理

生理表型测量的核心在于“早、快”,要在肉眼可见之前就能测量并预判出变化趋势,才是这个技术的核心价值。叶绿素荧光成像,恰好满足了这个要求。