文献类型： 中文期刊
作者： 吴华瑞 1 ; 赵春江 1 ; 李静晨 1 ;
作者机构： 1.北京市农林科学院信息技术研究中心
关键词： 多模态融合;人机交互;农业知识问答;甘蓝作物;大语言模型
期刊名称： 智慧农业(中英文)
ISSN： 2096-8094
年卷期： 2025 年 7 卷 001 期
页码： 1-10
摘要： [目的/意义]随着农业信息化和智能化的快速发展，多模态人机交互技术在农业领域的重要性日益凸显。本研究提出了一种基于多模态融合的大模型架构Agri-QA Net，旨在针对甘蓝作物的农业知识，设计多模态专业问答系统。[方法]该模型通过整合文本、音频和图片数据，利用预训练的BERT (Bidirectional Encoder Representations from Transformers)模型提取文本特征，声学模型提取音频特征，以及卷积神经网络提取图像特征，并采用基于Transformer的融合层来整合这些特征。此外，引入跨模态注意力机制和领域自适应技术，增强了模型对农业领域专业知识的理解和应用能力。本研究通过收集和预处理甘蓝种植相关的多模态数据，训练并优化了AgriQA Net模型。[结果和讨论]实验评估表明，该模型在甘蓝农业知识问答任务上表现出色，相较于传统的单模态或简单多模态模型，具有更高的准确率和更好的泛化能力。在多模态输入的支持下，其准确率达到了89.5%，精确率为87.9%，召回率为91.3%,F1值为89.6%，均显著高于单一模态模型。[结论]案例研究展示了Agri-QA Net在实际农业场景中的应用效果，证明了其在帮助农民解决实际问题中的有效性。未来的工作将探索模型在更多农业场景中的应用，并进一步优化模型性能。
- 相关文献
[1]基于大语言模型的个性化作物水肥管理智能决策方法. 吴华瑞,李静晨,杨雨森. 2025
[2]基于大语言模型推理的数字孪生平台蔬菜作物生长模型研究. 赵春江,李静晨,吴华瑞,杨雨森. 2024
作者其他论文 更多>>
-
基于大语言模型的个性化作物水肥管理智能决策方法
作者：吴华瑞;李静晨;杨雨森
关键词：作物管理;大语言模型;多目标决策;个性化决策;PPO算法
-
基于双维信息与剪枝的中文猕猴桃文本命名实体识别方法
作者：齐梓均;牛当当;吴华瑞;张礼麟;王仑峰;张宏鸣
关键词：中文命名实体识别;猕猴桃文本;自建数据集;多维度注意力机制;剪枝;深度学习;文本特征增强
-
高新科技成果转化促进农业新质生产力发展:机理、困境与对策
作者：李鸿飞;赵春江;李瑾
关键词：农业新质生产力;农业高新技术;科技成果转化;科技创新;产学研协同
-
丘陵山地水稻机械化技术研究现状与展望
作者：赵春江;马晨;李瑾;王小萌
关键词：丘陵山地;水稻机械化;关键技术;主要挑战;未来趋势
-
基于ROS的蔬菜移栽机器人控制系统设计
作者：马文强;冯青春;李亚军;茹孟菲;赵春江
关键词：蔬菜移栽机器人;控制系统;ROS;伺服控制
-
智慧农业科技创新引领农业新质生产力发展路径
作者：曹冰雪;李鸿飞;赵春江;李瑾
关键词：智慧农业;科技创新;农业新质生产力;数据要素;智能育种
-
果园风送喷雾风力调控试验台设计及试验
作者：李琪;窦汉杰;翟长远;高原源;杨硕;赵春江
关键词：果园精准施药;风力调控试验台;风送喷雾
