利用低空无人机图像合成的图像数据集进行种子分类


发布时间:

2021-10-12

来源:

本站

作者:

PhenoTrait

        植物育种计划广泛监控种子种仁的进化以进行种子认证,其中需要按类型和质量适当标记种仁。然而,相对于大面积的育种环境,种仁的大小微不足道,在育种过程中对种仁的监测是一个很大的挑战。无人机凭借着能够在低空捕捉图像以及能够进入育种环境中偏远区域的优势,有助于种子的监测和标记。使用无人机进行种子标记的一个关键瓶颈是无人机高度,随着无人机高度的增加,图像的细节变差,进而造成分类精度的降低。当训练数据集能够代表网络在评估过程中可能遇到的不同场景时,卷积神经网络是一个多类图像分类的强有力工具。然而,由于种子处于不同的育种环境,并且图像分辨率和清晰度各不相同,因此生成涵盖所有评估场景的训练数据集是很有挑战性的。本文采用领域随机化解决了训练集创建的挑战,其中合成图像的数据集是从自主驱动的Parrot AR Drone2.0的底部相机拍摄的少量种子样本生成的。此外,本文提出了一个种子分类框架,作为使用Microsoft的ResNet-100以及Oxford的VGG-16和VGG-19的卷积神经网络的概念验证。为了提高分类精度,开发了一个集成模型,总精度达到94.6%。分类任务是对五种不同类型的种子进行的,即油菜、稻谷、高粱、大豆和小麦。

 

  图1 种子分类系统流程图

 

  图2 使用Parrot AR Drone 2.0对表型环境中的种子进行图像采集

 

  图3 上行是无人机拍摄的真实种子;下行是DR框架使用真实种子生成的合成图像。

 

  图4 微调后的VGG-16、VGG-19和ResNet-101的训练和验证准确度和损失情况

 

  图5 合成模型的工作流程

 

  表1 合成模型的评价结果表

 

  来源:Margapuri V, Penumajji N, Neilsen M. Seed Classification using Synthetic Image Datasets Generated from Low-Altitude UAV Imagery[J] 2021.

 

  链接:https://www.researchgate.net/publication/354764755_Seed_Classification_using_Synthetic_Image_Datasets_Generated_from_Low-Altitude_UAV_Imagery

 

  编辑:小王博士在努力

推荐新闻

石时之约|韩志国:透过表型数据,看见植物的喜怒哀乐!

本期石时之约,我们将对话慧诺瑞德(北京)科技有限公司总经理、国际植物表型学会(IPPN)执委会委员/工业分会副主席韩志国,一起从表型数据的科学角度,去读懂农作物的喜怒哀乐和前世今生。

慧科研、慧育种、慧种田——慧聚改变的力量

让我们“慧聚”在一起,为“慧科研、慧育种、慧种田”赋能。

高通量植物表型平台建设注意事项

育种,是在给定的环境条件下,选择各种表型指标(产量、品质、抗性)最优的基因型材料的过程(AI育种,从这里起步)。育种工作中大约70%的工作量来自表型观察测量和筛选,是最耗人力物力的过程。

作物生理表型测量基础原理

生理表型测量的核心在于“早、快”,要在肉眼可见之前就能测量并预判出变化趋势,才是这个技术的核心价值。叶绿素荧光成像,恰好满足了这个要求。