科创中国
基于多尺度语义标记Transformer网络的遥感图像变化检测方法
发布时间: 2022-12-07
基本信息
合作方式：
技术服务
成果类型：
发明专利
行业领域：
电子信息技术,计算机及网络技术
成果介绍
基于多尺度语义标记Transformer网络的遥感图像变化检测方法,涉及一种遥感图像变化检测方法。为了解决现有的基于Transformer的方法在一定程度上忽略了变化区域的空间信息，从而影响了遥感图像变化检测能力的问题。本发明首先采用特征编解码器提取特征图，利用多尺度语义标记编码器将来自特征编码器的不同尺度的特征图转化为不同长度的语义标记，然后送入Transformer获得全局语义信息。之后利用多尺度语义标记解码器将不同尺度的含有丰富语义信息的语义标记和含有丰富空间信息的多尺度特征图结合起来，获得语义空间联合特征，最终多尺度的语义空间联合特征以跳跃连接的方式在特征解码器中聚合，再通过分类器得到最终的变化结果图。
成果亮点
本发明提出了一种基于多尺度语义标记Transformer的遥感图像变化检测算法，针对大多数基于Transformer的方法仅考虑了全局语义信息而忽略了空间信息这一问题，采用将Transformer和卷积神经网络结合起来的结构，提取高分辨率遥感图像的全局和局部特征。本发明提出的多尺度语义标记编码器将不同尺度的特征图转化为语义标记不仅可以减少Transformer的计算量，还可以减少在转化过程中的信息丢失。同时，为了更有效的辨别变化区域和滤除无关干扰，本发明设计了一个多尺度语义标记解码器将特征图和语义标记结合起来以此来获得语义空间联合特征。通过在两个数据集上的实验结果显示，本发明的综合评价指标高于目前先进的变化检测方法，这也验证了该发明的有效性。
团队介绍
学院现有学生近2000人，其中本科生1000余人，硕士研究生500余人，博士研究生近300人，留学生30余人。拥有教职工157人，专任教师141人。其中，正高级专业技术职务42人，副高级专业技术职务50人。具有博士学位教师119人，占专任教师总数的84%。现有博士生导师74人，硕士生导师141人。学院拥有国家级人才、享受国务院特殊津贴专家、教育部“新世纪优秀人才”，“龙江学者”特聘教授，黑龙江省杰出青年基金获得者、省级领军人才梯队带头人等国家及省部级人才10余人。
成果资料
产业化落地方案
成果综合评价报告
评价单位：“科创中国”黑龙江科技服务团 (黑龙江省科学技术协会) 评价时间：2023-11-11
评价单位：“科创中国”黑龙江科技服务团 (黑龙江省科学技术协会) 评价时间：2022-12-09
宋奇慧
千慧科技服务有限公司
总经理
综合评价
本发明为了解决现有的基于Transformer的方法在一定程度上忽略了变化区域的空间信息，从而影响了遥感图像变化检测能力。进而提出了一种基于多尺度语义标记Transformer的遥感图像变化检测方法。
1、基于多尺度语义标记Transformer网络的遥感图像变化检测方法，其特征在于，首先获取遥感图像的双时相图像，然后输入遥感图像变化检测网络进行检测，得到遥感图像变化信息；所述的遥感图像变化检测网络包括两个编码网络、一个concat层、一个Transformer模块、两个多尺度语义标记解码器、一个特征解码器和一个分类器；
两个编码网络分别输入双时相图像的一个时相图像，两个编码网络结构相同，均包括一个特征编码器和一个多尺度语义标记编码器；
所述的特征编码器包括四个依次连接的卷积神经网络单元；每个特征编码器的输出分别输入到与其对应的多尺度语义标记编码器和多尺度语义标记解码器；
查看更多>
下载app