摘要

针对可见光和SAR图像由于成像机理不同导致图像内容差异大,深度特征难对齐,关联速度慢,提出一种深度多源哈希网络模型实现SAR图像和可见光图像间的关联。首先,针对SAR与光学遥感图像颜色信息差异大,提出图像变换机制,将光学图像转换生成4种不同类型的光谱图像输入到网络中,打乱颜色通道,让网络更加关注于图像的纹理和轮廓信息,而对颜色信息不敏感;其次,针对SAR图像噪声大,同一场景下2种模态图像内容异构,提出图像对训练策略,减小多源图像间的特征差异;然后,针对关联效率低,存储消耗大,提出三元组哈希损失函数,提升模型的关联准确率,降低关联时间;最后,构建了一个SAR与光学双模态遥感数据集SODMRSID,实验部分验证了数据集的实用性,同时提出算法的关联准确率明显优于现有算法。

  • 出版日期2022