3 个月前

时间旅行像素:基于基础模型的双时相特征融合遥感图像变化检测

时间旅行像素:基于基础模型的双时相特征融合遥感图像变化检测

摘要

变化检测是遥感领域的一个重要研究方向,对于观测与分析地表动态变化具有关键作用。尽管基于深度学习的方法已取得显著进展,但在时空复杂性较高的遥感场景中实现高精度变化检测仍面临巨大挑战。近年来,基础模型(foundation models)凭借其强大的通用性与泛化能力,为解决该问题提供了新的可能。然而,如何弥合数据与任务之间的差距仍是亟待突破的难题。本文提出了一种名为“时间旅行像素”(Time Travelling Pixels, TTP)的新方法,该方法将SAM基础模型的隐式知识有效融入变化检测流程中,能够有效应对通用知识迁移中的领域偏移问题,并充分捕捉多时相图像中同质与异质特征的表达。在LEVIR-CD数据集上的实验结果表明,TTP达到了当前最先进的性能水平。代码已公开,可访问:\url{https://kychen.me/TTP}。

代码仓库

kailaisun/indoor-depth-completion
pytorch
GitHub 中提及
KyanChen/TTP
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
change-detection-on-levir-cdTTP
F1: 92.1
IoU: 85.6
Overall Accuracy: 99.2
Precision: 93.0
Recall: 91.7

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
时间旅行像素:基于基础模型的双时相特征融合遥感图像变化检测 | 论文 | HyperAI超神经