基于双模态特征增强的目标检测算法研究与应用

分享到

【获取途径】超星期刊网
【作者】王文霞，张文，何凯
【刊名】激光与红外
【作者单位】太原师范学院网络信息中心；北京邮电大学信息与通信工程学院；中国空间技术研究院西安分院
【年份】2023
【卷号】第9期
【ISSN】1001-5078
【关键词】双模态特征增强目标检测混合注意力自适应融合多尺度检测
【摘要】为提升目标检测算法在复杂环境下的精确性和实用性,将多源信息和深度学习技术相结合,提出了一种基于双模态特征增强的目标检测方法。该方法以红外和可见光图像作为输入,利用颜色空间转换、边缘提取、直方图均衡化等传统图像处理方法丰富图像信息,达到数据增强效果;特征提取部分采用卷积神经网络结构分别提取目标红外及可见光信息,并设计混合注意力机制分别从通道和空间位置角度提升有效特征权重;同时,针对目标双模态信息,引入了自适应交叉融合结构,提高特征多样性;最后,利用交替上下采样将目标全局和局部特征充分融合,并以自主...
【基金】国家自然科学基金
【文献类型】期刊