基于CycleGAN的番茄truss生长的深度图像转换模型


发布时间:

2022-02-06

来源:

本站

作者:

PhenoTrait

  番茄植株上的truss是一组或一簇较小的枝干,花和果实生长在这些枝干上,而生长的truss是枝干延伸的部分。由于生长truss的状态对周围环境反应灵敏,因此在早期阶段控制其生长是至关重要的。随着信息技术和人工智能技术在农业领域的发展,可以使用图像识别来定位生长的truss和开花位点,以提取相关的生长信息。在不同的视觉算法中,CycleGAN算法用于使用生成学习图像生成和转换未成对图像。本研究开发了一个基于机器人的系统,用于同时获取番茄生长truss和开花的RGB和深度图像。

 

  本文通过假阴性(FN)和假阳性(FP)指标比较了大约35个样本的分割性能。对于深度相机图像,获得FN为17.55±3.01%,FP为17.76±3.55%。对于CycleGAN,获得的FN约为19.24±1.45%,FP为18.24±1.54%。通过深度图像进行图像处理,IoU为63.56±8.44%,通过CycelGAN进行分割时,IoU为69.25±4.42%,表明CycleGAN有利于提取所需要的生长truss。经过验证,当机器人在种植番茄的温室中行驶时,进行图像扫描是可行的。这证实了使用CycleGAN进行图像提取技术的现场可能性。在未来,所提出的方法有望通过无人机器人平台使用视觉技术扫描获取温室中的番茄生长指标。

 

  图1 CycleGAN的循环示意图

 

  图2 CycleGAN转换后的整个图像处理

 

  图3 从实际图像中移除预测像素后剩余图像的比率,用假阴性(FN)表示,以及从预测图像像素中移除实际图像像素时剩余图像的比率,用假阳性(FP)表示。

 

  来源:Dae-Hyun Jung, Cheoul Young Kim, Taek Sung Lee et al. Segmentation of tomato growing truss a depth image conversion model based on CycleGAN,2021,12,14, preprint (Version 1) available at Research Square https://doi.org/10.21203/rs.3.rs-1146999/v1

 

  编辑:张玉

推荐新闻

石时之约|韩志国:透过表型数据,看见植物的喜怒哀乐!

本期石时之约,我们将对话慧诺瑞德(北京)科技有限公司总经理、国际植物表型学会(IPPN)执委会委员/工业分会副主席韩志国,一起从表型数据的科学角度,去读懂农作物的喜怒哀乐和前世今生。

慧科研、慧育种、慧种田——慧聚改变的力量

让我们“慧聚”在一起,为“慧科研、慧育种、慧种田”赋能。

高通量植物表型平台建设注意事项

育种,是在给定的环境条件下,选择各种表型指标(产量、品质、抗性)最优的基因型材料的过程(AI育种,从这里起步)。育种工作中大约70%的工作量来自表型观察测量和筛选,是最耗人力物力的过程。

作物生理表型测量基础原理

生理表型测量的核心在于“早、快”,要在肉眼可见之前就能测量并预判出变化趋势,才是这个技术的核心价值。叶绿素荧光成像,恰好满足了这个要求。