文献类型： 中文期刊

作者： 樊湘鹏 ¹ ; 张岩琪 ¹ ; 周硕 ¹ ; 任美飞 ¹ ; 王雨薇 ¹ ; 柴秀娟 ¹ ;

作者机构： 1.中国农业科学院农业信息研究所

关键词： 采摘机器人;识别定位;YOLOv8s;RGB-D;融合感知;番茄抓取

期刊名称： 农业工程学报

ISSN： 1002-6819

年卷期： 2025 年 41 卷 015 期

页码： 106-116

收录情况： EI ; 北大核心 ; CSCD

摘要： 采摘机器人视觉感知系统是完成选择性收获的基本条件。针对在非结构设施环境中番茄特定种植模式约束下，现有采摘机器人果实识别与定位精度低导致的采收成功率不高等问题，该研究面向番茄采摘机器人性能提升，在自建数据集基础上，提出一种基于改进YOLOv8s和RGB-D多源信息融合感知的番茄采摘机器人识别与定位方法。首先，利用空间重构卷积单元和通道重构卷积单元进行串联组合构建空间和通道重建卷积结构实现轻量化目标；然后，在YOLOv8s颈部结构中引入SimAM三维注意力机制，使模型更加关注复杂环境下番茄的关键特征；最后使用MPDIoU损失改进损失函数，解决因果实重叠导致的检测帧失真问题，减少番茄的漏检现象。结果表明，相比于原始YOLOv8s模型，改进模型的平均精度均值(mAP₅₀)由91.49%增加到95.81%，模型大小由22.5 M减小到17.6 M，推理时间也从10.6 ms减少到8.7 ms，与YOLOv5、YOLOv6、YOLOv7、YOLOv8、YOLOv9和YOLOv10系列模型相比，改进的YOLOv8s模型在识别精度、检测速度和计算效率上具有明显优势。在改进YOLOv8s模型基础上，将RGB图像与Depth图像信息配准并融合获取番茄中心点在空间中的位置坐标，利用RealSense D435 RGB-D相机和NVIDIA Jetson AGX Orin边缘设备构建视觉感知决策系统，自主开发了番茄采摘执行系统，并开展了定位精度和采摘抓取试验。单帧图像平均耗时50 ms，采摘抓取成功率为94.73%，损伤率仅为4.17%。该研究有效解决了果实采收机器人视觉感知环节面临的技术挑战，并且适合在性能受限设备上部署应用，可为番茄等果实采收机器人识别与定位提供关键技术支撑。