分享好友 资讯首页 资讯分类 切换频道

中国农业大学作物病虫害多模态诊断模型CropGPT,兼顾诊断精度与可解释性

2026-05-12 17:192290

中国农业大学工学院张小栓教授课题组近期在 Journal of Industrial Information Integration 期刊上发表研究,提出一个面向作物病虫害智能诊疗的多模态大模型,命名为 CropGPT。该模型旨在解决当前农业病虫害智能诊断中多模态信息融合不充分、诊断过程缺乏可解释性、以及跨作物泛化能力不足等三个主要问题。


QQ20260512-104959.jpg


技术架构:视觉编码器与大语言模型的融合


CropGPT 采用端到端架构,将视觉编码器与大语言模型整合于同一框架内。视觉编码器部分设计了一个名为 DynamicFocus 的多尺度特征提取模块。处理田间作物图像时,该模块同步获取三个层次的信息:整株作物的全局缩略图、图像的高分辨率局部切片,以及通过语义引导检测技术自动锁定的病斑区域特写。这一设计旨在模拟植保专家先观察整体长势、再仔细检查病灶部位的诊断逻辑,从而提升复杂田间背景下的细粒度识别精度。


语言模型部分引入了诊断推理链机制。模型在输出最终病害名称之前,会先生成一段逐步推理的文字说明,内容涵盖主要症状特征、与典型病害特征的比对过程,以及得出诊断结论的依据。该设计意在增强模型的可解释性,使用户不仅获得诊断结果,也能了解结论背后的逻辑路径。


QQ20260512-105443.jpg


数据集构建与知识增强机制


研究团队构建了一个名为 CropInstruct 的专用数据集。该数据集包含 53 种作物、79 种病虫害,共计超过 25,000 条图文配对样本。数据来源有两类:一是调用 GPT-4o 和 Qwen-VL-Max 等模型对病害图片自动生成症状描述,并经植物保护专家审核校正后形成的样本;二是来自北京植物诊所自 2012 年以来积累的真实电子病历记录,这些记录经过区级和市级三重审核,涵盖 47 种作物在不同生长阶段和病情严重程度下的诊断信息。


此外,研究团队从《中国农作物病虫害》等权威农业书籍及官方植保文件中整理了一个知识库,涵盖 488 种病虫害,记录每种病害的症状特征、发生规律及防治要点。当 CropGPT 遇到训练数据中未出现过的作物或病害时,系统会从该知识库中实时检索相关信息作为辅助参考,实现零样本诊断,无需重新训练模型。


测试结果:诊断准确率与泛化能力


在对比测试中,研究团队将 CropGPT 与 GPT-4o、Qwen-VL-Max 等通用多模态大模型进行了比较。结果显示:



即使提前告知通用模型候选病害类别,CropGPT 的诊断准确率仍然高出近 20 个百分点。


针对跨作物的零样本诊断能力,研究团队选取了 10 种模型在训练阶段从未见过的作物进行测试。配备外部知识库的 CropGPT 平均诊断准确率为 79.5%,而未配备知识库的同等配置模型准确率较低;同时,该结果比同等条件下的 Qwen-VL-Max 模型高出 7.3 个百分点。


配套研究:处方推荐模型 AgriPR


同一课题组在 Journal of Industrial Information Integration 期刊上还发表了另一项研究成果,即名为 AgriPR 的农业处方推荐模型。相关成果以《基于作物电子病历多模态信息的农业处方优化推荐系统》(Multimodal-information-based optimized agricultural prescription recommendation system of crop electronic medical records)为题发表于《工业信息集成杂志》(Journal of Industrial Information Integration)。


QQ20260512-105455.jpg


该研究针对农业处方推荐中″同病不同治、异病可同药″的决策特征,利用任务自适应预训练BERT与ConvNeXt分别提取文本和图像特征,并设计双线性注意力与多层特征融合机制,进一步结合Transformer强化关键跨模态信息表征,实现了对13类常见处方的精准推荐。结果表明,该模型在真实植物诊所数据集上的分类准确率达到98.88%,显著优于现有方法,并在噪声图像、不完整模态输入及缺失部分病情信息等条件下仍表现出较强鲁棒性,为模型在真实农业场景中的应用奠定了基础。


QQ20260512-105553.jpg

来源: AgroPages (世界农化网)


举报
收藏 0
打赏 0
评论 0
白粉菌致病新机制:效应蛋白CSEP0004靶向RNA解旋酶干扰寄主免疫
大麦和小麦等麦类作物受真菌病害白粉病侵染,常年对产量和品质造成严重危害。麦类白粉菌基因组编码多达~500-800个效应蛋白,并通过向寄主细胞分泌效应蛋白干扰植物免疫和促进侵染。RNA沉默是植物调控基因表达和抵御病原侵袭的重要防御机制,多种病原物能够通过RNA沉默抑制子干扰或抑制RNA沉默相关的寄主免疫。然而,专性寄

2026-11-1712

抗药性如何驱动烟粉虱种群替代?靶向CYP6CX3的RNAi绿色防控策略
近日,中国农业科学院蔬菜花卉研究所张友军院士团队联合国内外多家科研机构,在国际著名期刊Trends in Biotechnology(IF=16.6)发表了题为″Resistance fuels biological invasions while offering new avenues for RNAi-based pest management″的研究论文。该研究基于长达20年的全国烟粉虱种群动态监测数据,发现杀虫剂

2026-11-1714

雅苒加拿大产品推新:FLOSTREL加入YaraAmplix,三大方案直击关键生长期产量
雅苒在加拿大扩大其YaraAmplix生物刺激剂产品组合,推出YaraAmplix FLOSTREL。该产品为种植者提供靶向生物刺激剂,改善作物抗逆性和生殖发育,有助于块茎生长、保花保荚、籽粒发育和产量提升。YaraAmplix FLOSTREL与YaraAmplix PROCOTE OPTIMIZE和YaraAmplix OPTITRAC两款产品,一同增强雅苒综合作物营养方案。通过将必需植

2026-11-1334

丙硫菌唑水基MOF纳米悬浮剂抑制脱硫代谢物转化,小麦茎基腐病防效不减
近期,中国农科院植保所黄啟良/曹立冬研究员团队完成的题为″Balancing fungicidal efficacy and environmental safety: A water-based metal–organic framework nano-delivery system suppressing hazardous metabolite conversion of prothioconazole for sustainable agriculture″的研究在Journal of Integ

2026-11-1330

植保无人飞机施药飘移如何精准管控?可解释AI推动施药决策智能化
近日,中国农业科学院植物保护研究所智慧植保创新团队在人工智能赋能航空植保领域取得进展,通过将可解释人工智能与施药风险管控深度融合,解码植保无人飞机飘移预测模型的″黑箱″,构建了集风险预测、因素解析、预警与作业优化于一体的智能辅助决策技术体系,推动人工智能由预测工具向施药决策工具转变。相关研究成果以″

2026-11-1334

UPL用专利Aurivis技术破解真菌制剂稳定性难题,新款生物农药瞄准三大害虫
UPL巴西公司近日推出了NeoTackler,这是一种基于球孢白僵菌的生物杀虫剂,用于防治玉米叶蝉、烟粉虱和咖啡果小蠹。该产品采用Aurivis技术,这是在巴西开发的专利制剂技术,用于减少产品中真菌受到的环境影响,提高施用时的递送效率。此次推出扩大了UPL的生物防治产品组合,针对对巴西主要作物构成重大经济损失的害虫。公司

2026-11-1333

小菜蛾抗药性给防控带来挑战:贵州大学团队设计出高活性异噁唑啉化合物
小菜蛾对多类杀虫剂产生抗性,草地贪夜蛾和亚洲玉米螟也持续威胁蔬菜与玉米生产。贵州大学绿色农药全国重点实验室、精细化学品研发中心吴剑、杨朝凯团队在《Pest Management Science》发表论文Design, synthesis and insecticidal activity of isoxazoline derivatives containing a 1,2,4-triazole thioether moiety,围绕

2026-11-1328

山东省农科院作物所创制高甜菜红素″红宝石小麦″
近日,山东省农业科学院作物所小麦遗传育种团队在《The Crop Journal》(中科院1区,IF=6.705)发表题为″Development of betalain-enriched wheat by metabolic engineering″的研究论文。该研究利用合成生物学策略与多顺反子介导的高效多基因聚合技术,成功在小麦胚乳中特异性实现甜菜红素大量积累,创制出营养价值显著提

2026-11-1054

草地贪夜蛾抗药性给氯虫苯甲酰胺防控带来挑战
草地贪夜蛾已对氯虫苯甲酰胺产生抗性,传统靶标突变和代谢解毒之外,化学感受蛋白能否结合药剂并参与抗性仍待研究。长江大学与华中农业大学团队在《Journal of Agricultural and Food Chemistry》发表论文″Chemosensory Protein 10 (CSP10) Is Involved in Resistance to Chlorantraniliprole in Spodoptera frugiperda″

2026-11-1049

华南农大与广东农科院水稻所开发高效基因编辑工具箱, 实现水稻多重编辑与农艺性状定向改良
近日, 华南农业大学祝钦泷、谢先荣教授团队联合广东省农业科学院水稻研究所谭健韬副研究员团队在JIPB在线发表了题为Engineering AP/Exo-Cas12 as an efficient toolbox for rice genome editing via integrated repair and exonuclease modules的研究论文。该研究将选择富集、AP修复通路调控和5′核酸外切酶融合等策略进行

2026-11-1058