DED-SAM:Adapting Segment Anything Model 2 for Dual Encoder–Decoder Change Detection

计算机科学 编码器 对偶(语法数字) 解码方法 变更检测 计算机视觉 算法 操作系统 文学类 艺术
作者
J. F. Qiu,Wei Liu,Xin Zhang,Erzhu Li,Lianpeng Zhang,Xing Li
出处
期刊:IEEE Journal of Selected Topics in Applied Earth Observations and Remote Sensing [Institute of Electrical and Electronics Engineers]
卷期号:18: 995-1006 被引量:18
标识
DOI:10.1109/jstars.2024.3490754
摘要

Change detection has become a crucial topic in the field of remote sensing deep learning due to its extensive application in earth observation. However, real remote sensing images often contain multiple land cover classes with significant intraclass variability and interclass similarity, limiting the performance of change detection in complex scenarios. To address this, we leverage the capabilities of vision foundation models by applying the segment anything model (SAM) to remote sensing change detection, and we name this method dual encoder–decoder SAM (DED-SAM). Specifically, we construct a DED framework, utilizing a small-scale change detection model in both branches to generate mixed prompts including image features, mask prompts, and box prompts. The SAM 2 model is used for fine-grained recognition of dual-temporal images, generating accurate, and stable feature boundaries, which are then used as constraints to generate the final change mask. To validate the effectiveness of DED-SAM across various application scenarios, we conduct quantitative experiments on three public datasets: Levir-CD, SYSU-CD, and CDD, testing its detection capabilities under single change categories, multiple change categories, and seasonal pseudochange interference. The results show that the proposed DED-SAM achieved state-of-the-art F1 scores and IoUs on these three datasets: LEVIR-CD (92.00%, 85.11%), SYSU-CD (84.15%, 72.01%), and CDD (97.72%, 95.47%).
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
1秒前
懿范完成签到 ,获得积分10
1秒前
zm完成签到,获得积分10
2秒前
2秒前
英姑应助ozbear采纳,获得10
3秒前
研友_VZG7GZ应助浮世采纳,获得10
3秒前
生动寒凝完成签到,获得积分10
5秒前
zm发布了新的文献求助10
5秒前
朴实惜寒完成签到,获得积分10
6秒前
hx完成签到 ,获得积分10
6秒前
FashionBoy应助久久久久采纳,获得10
6秒前
酷炫初雪完成签到,获得积分10
6秒前
6秒前
7秒前
8秒前
8秒前
Xiaohui_Yu完成签到,获得积分10
10秒前
tt发布了新的文献求助10
10秒前
zyy完成签到,获得积分20
11秒前
小刘先生发布了新的文献求助10
11秒前
年轻的鹤发布了新的文献求助10
12秒前
浮世完成签到,获得积分10
12秒前
隐形曼青应助sh采纳,获得10
12秒前
Jasper应助安静凝旋采纳,获得10
12秒前
niuniu发布了新的文献求助10
13秒前
昏睡的绮梅完成签到 ,获得积分10
13秒前
科研通AI6.2应助carrie117采纳,获得30
14秒前
star发布了新的文献求助30
15秒前
中华大团团应助naya6600采纳,获得10
15秒前
dyd完成签到,获得积分10
16秒前
17秒前
英姑应助酷炫初雪采纳,获得10
17秒前
18秒前
18秒前
彭于晏应助可靠F采纳,获得10
19秒前
不喜欢孜然完成签到,获得积分10
19秒前
爱听歌的悒完成签到,获得积分20
21秒前
FashionBoy应助张耀采纳,获得10
21秒前
lzl完成签到,获得积分10
21秒前
dino发布了新的文献求助20
22秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
HYDROLYSE ACIDE DE QUELQUES DIOXASPIROCYCLANES 1000
Navigating Normative Orders. Interdisciplinary Perspectives 800
1 Peter and Christ's Descent to the Dead in Its Early Christian Reception 700
Essentials of Carbohydrate Chemistry and Biochemistry, 4th Edition 600
Organizational Behavior 510
Management and the Arts 510
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7740841
求助须知:如何正确求助?哪些是违规求助? 9289399
关于积分的说明 20195525
捐赠科研通 7319012
什么是DOI,文献DOI怎么找? 3306533
关于科研通互助平台的介绍 2458819
邀请新用户注册赠送积分活动 2316791