关键词:
无人机
目标检测
YOLOv8
多模态融合
渐进式融合
轻量化
模态差异
摘要:
近年来,无人机在军民两用的工作中面临着日益增长的技术需求,这给地面目标检测的精度带来了重大挑战。针对复杂背景下无人机目标检测算法精度低的问题,提出了一种改进YOLOv8的双光图像融合网络。首先,该网络采用特征级融合策略,充分利用可见光和红外数据,显著提升了在复杂场景下的目标检测性能。其次,为了减少多模态融合可能引入的冗余信息,设计了轻量化特征提取分支。最后,提出了渐进式跨模态融合模块,增强了多模态信息的特征交互,有效解决了不同模态融合时的信息差带来的检测性能受限问题。实验结果表明,与原始算法相比,所提方法拥有更高的精确率和召回率,同时在行人检测数据集LLVIP上AP50和mAP0.5-0.95分别达到了91.2%、55.5%,FPS值达到了95。综上,与现有算法相比,所提方法在性能上表现更优,未来将继续探索其在不同环境中的应用潜力。