融合多尺度通道注意力的开放词汇语义分割模型SAN

分享到

【作者】武玲，张虹
【刊名】现代信息科技
【作者单位】太原师范学院
【年份】2024
【卷号】第8卷
【期号】第3期
【页码】164-168，175
【ISSN】2096-4706
【关键词】开放词汇语义分割 SAN CLIP 多尺度通道注意力
【摘要】随着视觉语言模型的发展，开放词汇方法在识别带注释的标签空间之外的类别方面具有广泛应用。相比于弱监督和零样本方法，开放词汇方法被证明更加通用和有效。文章研究的目标是改进面向开放词汇分割的轻量化模型SAN，即引入基于多尺度通道注意力的特征融合机制AFF来改进该模型，并改进原始SAN结构中的双分支特征融合方法。然后在多个语义分割基准上评估了该改进算法，结果显示在几乎不改变参数量的情况下，模型表现有所提升。这一改进方案有助于简化未来开放词汇语义分割的研究。
【文献类型】期刊