融合注意力机制的MacBERT-DPCNN农业文本分类模型

文献类型: 中文期刊

第一作者: 张典

作者: 张典;刘畅;陈雯柏;缪祎晟;吴华瑞

作者机构:

关键词: 农业文本分类;MacBERT模型;深度金字塔卷积网络;注意力机制;预训练模型

期刊名称: 中国农机化学报

ISSN: 2095-5553

年卷期: 2025 年 46 卷 008 期

页码: 83-89

收录情况: 北大核心

摘要: 针对农业领域文本信息密度大、语义模糊、特征稀疏的特点,提出一种基于 MacBERT(MLM as correction-BERT)、深度金字塔卷积网络(DPCNN)和注意力机制(Attention)的农业文本分类模型,命名为 MacBERT—DPCNN—Attention(MDA).首先,使用 MacBERT模型充分提取农业类文本内容的上下文信息,强化文本的语义特征表示.然后,DPCNN模型通过其多层卷积神经网络和池化操作,有效捕获文本的局部特征.最后,注意力机制进一步增强农业文本序列的特征表达.结果表明,与其他主流模型如 BERT—DPCNN、BERT—CNN、BERT—RNN相比,MDA模型在农业文本分类任务上的精确率提升 1.04%以上,召回率提升 0.95%以上,F1 值提升 0.14%以上.表明所提模型在解决农业领域文本分类问题方面的有效性和优越性.

分类号: TP391

  • 相关文献

[1]面向中文科学数据集的句子级语义匹配模型. 刘建平,初新涛,王健,顾勋勋,王萌,王影菲. 2024

[2]改进YOLOv4的温室环境下草莓生育期识别方法. 龙洁花,郭文忠,林森,文朝武,张宇,赵春江. 2021

[3]基于YOLOX改进模型的茶叶嫩芽识别方法. 俞龙,黄楚斌,唐劲驰,黄浩宜,周运峰,黄永权,孙佳琪. 2022

[4]融合注意力机制的开集猪脸识别方法. 王荣,高荣华,李奇峰,刘上豪,于沁杨,冯璐. 2023

[5]基于双线性注意力网络的农业灯诱害虫细粒度图像识别研究. 姚青,姚波,吕军,唐健,冯晋,朱旭华. 2021

[6]基于改进YOLO v5的复杂环境下桑树枝干识别定位方法. 李丽,卢世博,任浩,徐刚,周永忠. 2024

[7]改进YOLOv5在胡瓜钝绥螨品质管控系统中的设计与应用. 李建兴,刘振宇,马莹,张艳璇,宋江,纪茂源,旷树森. 2023

[8]基于多维间注意力机制的水稻病害识别模型. 王忠培,谢成军,董伟,管博伦. 2024

[9]基于Attention_DenseCNN的水稻问答系统问句分类. 王郝日钦,吴华瑞,冯帅,刘志超,许童羽. 2021

[10]基于改进YOLOv5s的硬核期葡萄簇检测. 冯晓,张辉,刘运超,张微,李小红,马中杰. 2024

[11]无人机遥感影像在油菜品种识别中的应用. 李婕,李毅,张瑞杰,李俐俐,李礼,姚剑,乔江伟. 2022

[12]基于注意力机制及多尺度特征融合的番茄叶片缺素图像分类方法. 韩旭,赵春江,吴华瑞,朱华吉,张燕. 2021

[13]基于注意力机制的农业文本命名实体识别. 赵鹏飞,赵春江,吴华瑞,王维. 2021

[14]基于注意力机制和多尺度残差网络的农作物病害识别. 黄林生,罗耀武,杨小冬,杨贵军,王道勇. 2021

[15]简单三维注意力机制水稻病害识别模型. 王忠培,董伟,朱静波,谢成军. 2023

[16]基于改进UperNet的结球甘蓝叶球识别方法. 朱轶萍,吴华瑞,郭旺,吴小燕. 2024

[17]基于改进YOLOV5s网络的奶牛多尺度行为识别方法. 白强,高荣华,赵春江,李奇峰,王荣,李书琴. 2022

[18]基于CycleGAN和注意力增强迁移学习的小样本鱼类识别. 刘世晶,刘阳春,钱程,郑浩君,周捷,张成林. 2023

[19]基于改进YOLOv4算法的番茄叶部病害识别方法. 储鑫,李祥,罗斌,王晓冬,黄硕. 2023

[20]基于双阶段注意力机制和LSTM的鸡舍氨气浓度预测算法. 郭祥云,连京华,李慧敏,孙凯. 2021

作者其他论文 更多>>