基于窗口注意力聚合Swin Transformer的无人机影像语义分割方法

作者：李俊杰; 易诗^*; 何润华; 刘茜

来源：计算机工程与应用, 2023, 1-14.

• 无人机影像
• 语义分割
• Swin Transformer
• 窗口注意力聚合

采用无人机遥感影像进行地物分类的过程中，由于无人机影像的小尺寸地物目标不够突出和无人机影像背景复杂、地物信息难以辨别等问题，采用现行的经典语义分割方法难以获得理想的地物分类效果。本研究以Swin Transformer网络模型为基础，提出了基于窗口注意力聚合Swin Transformer（WAA SwinT，Window attention aggregation Swin Transformer）的语义分割网络模型方法。该方法采用了多窗口注意力聚合的方式来进行更精准的注意力计算，以提升无人机遥感影像中的小尺寸地物目标的分类精度和质量。同时借鉴嵌入连接的思想，采用多级特征嵌入连接解码器改善网络结构，应用于无人机遥感影像的分割中，取得了更精细化的分割效果。为了验证本研究提出的方法在无人机影像语义分割中的效果，分别在城市无人机遥感影像UAVid数据集和UDD数据集进行了实验，并与现行的经典语义分割方法进行了对比。实验结果表明，该语义分割方法在UAVid数据集和UDD数据集上均可以得到最佳的语义分割效果。同时，该语义分割方法能显著的提升无人机影像中小尺寸地物精准分割的质量。

• 出版日期2023
• 单位成都理工大学; 机电工程学院