基于检索增强和模态融合机制的视觉情感分析

分享到

【作者】程立，张虹
【刊名】信息技术与信息化
【作者单位】太原师范学院
【年份】2025
【卷号】第4期
【页码】74-79
【ISSN】1672-9528
【关键词】图像情感分析 CLIP 多模态融合检索增强交叉注意力
【摘要】现有视觉情感分析方法通常直接将视觉特征输入单一视觉模型，使图像与情感之间存在巨大情感鸿沟，为提升视觉情感分析的效果，文章提出了检索增强视觉情感分析模型，可以有效连接图像与情感。通过图像特征检索相关文本，将检索到的文本特征与图像特征融合表示以进行情感分析。在多个数据集上的实验结果表明，MIRA模型在情感分类任务中表现优异，尤其在处理模糊或复杂情感图像时显著提高了分类准确性。
【文献类型】期刊