您好,欢迎访问中国农业科学院 机构知识库!

基于词向量的检索扩展方法与农业领域实证

文献类型: 中文期刊

作者: 吴蕾 1 ; 梁晓贺 2 ; 乌吉斯古楞; 王瑞;

作者机构: 1.中国农业科学院农业信息研究所,北京,100081

2.中国铁道科学研究院集团有限公司电子计算技术研究所, 100081

关键词: 大数据;检索扩展;词向量;随机森林;数据挖掘;自然语言处理;机器学习;深度学习

期刊名称: 农业大数据学报

ISSN:

年卷期: 2019 年 1 卷 2 期

页码: 114-120

摘要: [目的]目前,科技文献大数据中存在着主题词不规范、 不统一的情况,因此在构建检索式时很难既满足查全要求,又满足查准要求.针对这一问题,本文提出了一种基于词向量的检索扩展方法,并在"基于多组学大数据的功能基因挖掘与辅助育种技术"领域进行了实验验证.[方法]首先清洗数据集,并将文本映射成词向量,一篇文章可以用其所有词向量的平均向量表示;然后用训练集中文章的平均词向量训练随机森林分类器;最后在测试集中对文本进行分类,从而得到正例数据即检索数据集.[结果]针对"基于多组学大数据的功能基因挖掘与辅助育种技术"领域构建检索式,通过对比检索式所提取的小数据集、 扩展检索式数据集和该方法提取的检索数据集的主题词云并对其进行主题共现聚类,结果发现相比小数据集和扩展检索式数据集,检索数据集能够表现另外两个数据集所体现的主题词和主题聚类,同时能够展现更多属于该主题领域的主题词和主题聚类.[结论]结果表明该方法具有较好的查全性和查准性,构建了满足分析的"基于多组学大数据的功能基因挖掘与辅助育种技术"领域数据集,同时在构建其他领域数据集时具有可扩展性,在未来研究中可以被应用到其他目标领域的数据集构建中.

  • 相关文献

[1]基于深度学习的自然语言处理技术的发展及其在农业领域的应用. 崔运鹏,王健,刘娟. 2019

[2]基于文献计量的植物表型组学研究进展分析. 李晓曼,张扬,徐倩,谢能付. 2019

[3]智慧农险——农业保险信息化发展的展望. 李舒,赵思健,张峭. 2016

[4]中国饲料营养大数据分析平台研制. 熊本海,赵一广,罗清尧,郑姗姗,高华杰. 2022

[5]基于随机森林算法的草原地上生物量遥感估算方法研究. 邢晓语,杨秀春,徐斌,金云翔,郭剑,陈昂,杨东,王平,朱立博. 2021

[6]基于无人机多光谱遥感和机器学习的烟田土壤碱解氮估测. 胡晓,臧玉龙,高睿康,郭利,徐锐,敖耀强,邓建强,孙玉晓,张继光,唐大鹏. 2024

[7]基于无人机遥感的盛花期薇甘菊爆发点识别与监测. 孙中宇,荆文龙,乔曦,杨龙. 2019

[8]机器学习在植物病害识别研究中的应用. 王聃,柴秀娟. 2019

[9]基于深度学习的作物基因组学和遗传改良. 辛志奇,赵航,汪海,路铁刚. 2021

[10]机器学习全基因组选择研究进展. 李竟,张元旭,王泽昭,陈燕,徐凌洋,张路培,高雪,高会江,李俊雅,朱波,郭鹏. 2024

[11]机器学习在动物基因组选择中的研究进展. 李棉燕,王立贤,赵福平. 2023

[12]栽培苜蓿草地智能感知系统关键生物物理指标实时监测及分析算法研究. 苗春丽,李仲贤,赵志成,伏帅,高金龙,刘洁,冯琦胜,梁天刚. 2023

[13]基于高光谱成像技术和深度学习的烤后烟叶品种分类判别. 孟令峰,邢富康,韦克苏,王爱华,程昌新,曹娜,林跃平,王松峰,朱荣光. 2024

[14]基于大数据的遥感参数人工智能反演范式理论形成与工程技术实现. 毛克彪,袁紫晋,施建成,武胜利,胡德勇,车进,董立新. 2023

[15]数字低碳渔仓智能化控制系统框架设计. 梁晨,周志刚,陈楠,暴愿达. 2024

[16]基于改进文本表示的农产品贸易摩擦新闻文本聚类及应用展望. 潘尧,王末,王健. 2020

[17]基于词性标注规则的马铃薯文献信息抽取方法. 王腾阳,赵小丹,胡林. 2023

[18]面向农业图书资源语义挖掘的主题模型应用设计研究. 龚浩,崔运鹏,钱平. 2018

[19]地理标志农产品品牌管理政策注意力分析模型构建及应用. 霍梦佳,刘娟,黄杰. 2023

[20]面向中文科学数据集的句子级语义匹配模型. 刘建平,初新涛,王健,顾勋勋,王萌,王影菲. 2024

作者其他论文 更多>>