您好,欢迎访问中国农业科学院 机构知识库!

基于强化学习的机器人底盘能量管理与路径规划优化算法

文献类型: 中文期刊

作者: 李潇宇 1 ; 张君华 1 ; 郭晓光 1 ; 伍纲 2 ;

作者机构: 1.北京信息科技大学机电工程学院

2.中国农业科学院农业环境与可持续发展研究所

关键词: 温室;路径规划;强化学习;能量管理;多目标优化

期刊名称: 农业工程学报

ISSN: 1002-6819

年卷期: 2024 年 40 卷 021 期

页码: 175-183

收录情况: EI ; 北大核心 ; CSCD

摘要: 为解决温室机器人底盘传统路径规划中因忽略地面粗糙度而导致的电池寿命缩短与利用效率低下的问题,该研究探讨了3种融合电池能量管理与路径规划的强化学习算法。首先,基于先验知识构建分级预打分奖励模型,并通过增加曼哈顿距离构建奖励函数,提高电池寿命和利用率;其次,针对传统Q-Learning(QL)算法收敛效率低、易陷入局部最优等问题,提出了自适应变步长的优化算法(adaptive multi-step q-learning,AMQL)和基于自适应改变探索率的优化算法(adaptive ε-greedy q-learning,AEQL),以提升Q-Learning算法的性能。此外,为进一步提高算法的可行性,该文将AMQL算法和AEQL算法进行融合,提出了一种自适应多步长和变ε-greedy融合算法(adaptive multi-step and ε-greedy q-learning,AMEQL),并通过仿真对比的方式,验证了AMQL和AMEQL算法相对于传统QL算法在3个不同垄道下的性能。仿真试验结果表明:AMQL相对于传统QL算法,训练平均时间降低23.74%,收敛平均迭代次数降低8.82%,路径平均拐点数降低54.29%,收敛后的平均波动次数降低14.54%;AMEQL相对于传统QL算法,训练平均时间降低34.46%,收敛平均迭代次数降低18.02%,路径平均拐点数降低63.13%,收敛后的平均波动次数减少15.62%,在400次迭代过程中,AMEQL到达最大奖励后平均每7.12次迭代波动1次,而AMQL平均每6.68次迭代波动1次。可知AMEQL训练时间最短,收敛最快,路径拐点数量最低,奖励波动最小,而AMQL次之。该算法可为机器人底盘自主路径规划提供理论参考。

  • 相关文献

[1]基于环境经济调度问题的空间自适应划分多目标优化. 伍大清,刘立,郑建国,朱君璇,赵燕. 2015

[2]玛曲县草畜平衡优化方案与管理决策初探. 张旭,冯琦胜,梁天刚. 2012

[3]数控机床进给机构智能设计优化系统. 刘世豪,杜彦斌,姚克恒,唐敦兵. 2017

[4]基于蚁群算法的清扫机器人路径规划设计. 周冬冬,金诚谦,倪有亮. 2018

[5]基于激光SLAM的巡检机器人自动导航与避障技术研究. 侯英勇,陈嘉茹,王树臣,李尚民,邹修国,杜彬杰. 2024

[6]基于往复运动和路径规划的蓝光激光除草机构研制. 颜浩,谭彧,马伟,封煜亮,田志伟. 2025

[7]乡村振兴战略的推进者、关键点、发展路径与风险规避. 刘合光. 2017

[8]相变蓄热技术应用于温室节能中的技术分析. Liang Hao,梁浩,Yang Qichang,杨其长,Fang Hui. 2011

[9]赴美参加国际农用塑料大会及农用塑料考察的报告. 张志斌. 2002

[10]我国设施蔬菜生产现状与发展. 张志斌. 2001

[11]可控环境下大豆组培苗的生根过程. 鲍顺淑,贺冬仙,杨其长. (Mis

[12]丛枝菌根真菌对温室有机土栽培黄瓜的作用研究. 秦海滨,贺超兴,张志斌,王怀松,任志雨. 2007

[13]温室番茄长季节生产专家系统的研制. 陈双臣,邹志荣,贺超兴,刘志勇. 2004

[14]不同试剂浸种对温室辣椒种子萌发和幼苗生长的影响. 尚庆茂,张志刚,王一鸣. 2004

[15]温室黄瓜智能专家系统的研制. 贺超兴,张培新,马丽丽,沈阳农业大学,张志斌. 2007

[16]温室内土壤-气溶胶中四环素类抗生素抗性基因的分布特征. HE Qi-Shuang,何玘霜,LU An-Xiang,陆安祥. 2017

[17]太阳能与热泵技术在温室供暖中的研究进展. Lu Wei,卢威,孙维拓,Sun Weituo,Zhang Yi,张义,Fang Hui,方慧,Yang Qichang,杨其长,Zhou Bo,周波. 2015

[18]一种便携式温室环境监测与报警系统的研究与应用. Xia Yu,夏于,Sun Zhongfu,孙忠富,Yang Yong,杨勇,Su Xiaofeng,苏小峰,Du Keming,杜克明,Zheng Feixiang. 2015

[19]主动蓄放热—热泵联合加温系统设计与优化. 孙维拓. 2014

[20]基于LabVIEW的温室番茄雾培控制系统研究. 刘义飞. 2014

作者其他论文 更多>>