基于卷积神经网络的微根管原位图像根长、直径和颜色估计框架


发布时间:

2024-12-22

来源:

作者:

本文提出了一种基于卷积神经网络(CNN)的框架,用于从微根管(MR)图像中估算根系特征(长度、直径和颜色)。该框架采用一组可重复使用的子网络模块,构建了不同的网络,用于物体(即根系)检测和属性(即特征)估算,以实现单根和整图的根系表型分析任务。该方法提供了一种无需根系分割的解决方案。单根表型分析的第一步是检测图像中的根系,随后对每个检测到的根系特征进行估算。而整图表型分析则通过聚合估算根系特征值,包括总根长(TRL)、平均根径和白根百分比。本文展示了基于回归和基于物体点检测的两种变体,分别用于单根和整图的根系特征估算。提出了五种网络架构,其中两种此前用于TRL估算(现用于评估平均根径和白根百分比),其余三种为新设计。

 

该框架在一个包含531张标注的葡萄根系图像数据集上进行了验证,并作为本文的一部分公开提供。所有图像均通过MR系统原位采集,并使用Rootfly软件进行了标注。单根检测中的回归模块在颜色、长度和直径估算上的误差分别为8.8%、15.5%和23.5%;基于点检测的模块在相同参数上的误差分别为9.1%、14.9%和25.0%。在整图层级估算中,白根百分比的误差为11.5%–16.5%,TRL的误差为13.7%–16.0%,平均根径的误差为17.6%–22.1%。研究结果表明,通过新提出的架构进行单根直径和颜色估算的聚合,可以改进相较于直接整图估算的特征估算结果。此外,为进一步展示该框架在推导不同根系特征垂直分布方面的实用性,额外提供了一个包含两种不同葡萄嫁接组合的132张根系图像的数据集(同样作为本文的一部分公开提供)。在该数据集中,不同土壤深度的根系特征得到了估算,并与人工标注结果进行了视觉对比。

 

图1. 对象检测模块的组成,展示了基于以下两种变体的预期输出:a. 边界框检测和 b. 基于点检测的热图生成。

 

图2. 基于根系检测的每根特征估计,包括长度、直径和颜色,采用了以下两种网络变体:a. 基于点检测的网络和 b. 基于回归的网络。

 

图3 基于点检测的网络架构下的每根特征估计(长度、直径和颜色),该架构由在“表型分析”部分中包含两个“主干”模块和两个“查找”模块的预训练模块组成。

 

图4基于整图的特征估算(Ihoroshevsky 等, 2024),A. 基于回归的网络,B. 基于点检测的网络。

 

图5 葡萄根系数据集中具有代表性的微根管(MR)图像。a. 带有叠加点注释的图像(蓝色),由Rootfly获得。b. 叠加在原始图像上的生成热图。

 

图6. 来自“所有数据”验证集的代表性葡萄根系检测结果;训练使用了“组合数据集”训练集,包含 a. 所有蓝色的GT边界框,b. 红色的假阳性检测,c.-f. 红色的真阳性检测及其对应的蓝色GT边界框。

 

图7. 使用推荐网络进行整图根系特征估算与GT值的比较,针对两种不同接穗品种(Cs 和 sH)的根系图像,分别估算 a. 根长密度(RLD),b. 平均根径,c. 随土壤深度变化的白根百分比。

 

图8. “Backbone”模块示意图。

 

图9 “pind”模块在“Find(用于边界框检测)”模式下的示意图。

 

图10 “Find”模块在“Find(用于点检测)”模式下的示意图

 

来 源

Khoroshevsky, F., Zhou, K., Bar-Hillel, A., Hadar, O., Rachmilevitch, S., Ephrath, J. E., ... & Edan, Y. (2024). A CNN-based framework for estimation of root length, diameter, and color from in situ minirhizotron images. Computers and Electronics in Agriculture, 227, 109457.

https://doi.org/10.1016/j.compag.2024.109457

 

编辑

小王博士在努力

推荐新闻

石时之约|韩志国:透过表型数据,看见植物的喜怒哀乐!

本期石时之约,我们将对话慧诺瑞德(北京)科技有限公司总经理、国际植物表型学会(IPPN)执委会委员/工业分会副主席韩志国,一起从表型数据的科学角度,去读懂农作物的喜怒哀乐和前世今生。

慧科研、慧育种、慧种田——慧聚改变的力量

让我们“慧聚”在一起,为“慧科研、慧育种、慧种田”赋能。

高通量植物表型平台建设注意事项

育种,是在给定的环境条件下,选择各种表型指标(产量、品质、抗性)最优的基因型材料的过程(AI育种,从这里起步)。育种工作中大约70%的工作量来自表型观察测量和筛选,是最耗人力物力的过程。

作物生理表型测量基础原理

生理表型测量的核心在于“早、快”,要在肉眼可见之前就能测量并预判出变化趋势,才是这个技术的核心价值。叶绿素荧光成像,恰好满足了这个要求。