DGFNet: Depth-Guided Cross-Modality Fusion Network for RGB-D Salient Object Detection

RGB颜色模型 计算机科学 人工智能 突出 模态(人机交互) 计算机视觉 模式识别(心理学) 融合 对象(语法) 目标检测 语言学 哲学
作者
Fen Xiao,Zhengdong Pu,Jiaqi Chen,Xieping Gao
出处
期刊:IEEE Transactions on Multimedia [Institute of Electrical and Electronics Engineers]
卷期号:26: 2648-2658 被引量:28
标识
DOI:10.1109/tmm.2023.3301280
摘要

RGB-D salient object detection (SOD) focuses on utilizing the complementary cues of RGB and depth modalities to detect and segment salient regions. However, many proposed methods train their models in a simple multi-modal manner, ignoring the differences between these two modalities in the contribution of salient detection. Furthermore, the quality of depth datasets varies significantly between individuals and is another important factor affecting model performance. To address the aforementioned issues, this article proposes a novel depth-guided fusion network framework (DGFNet) for the RGB-D SOD task. To avoid the influence of low-quality depth maps on RGB-D SOD, we design a depth map enhanced algorithm which jointly models salient detection and depth estimation to improve the quality of depth. Also, we propose a depth attention mechanism to encode valuable spatial information for SOD, which is then used in depth-guided fusion (DGF) module to guide the fusion of cross-modality features at each level. Extensive experiments on seven commonly tested datasets demonstrate that our DGFNet outperforms the 23 state-of-the-art RGB-D-based SOD methods.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
标致无血完成签到,获得积分10
1秒前
后来者完成签到,获得积分10
2秒前
潇洒仇天发布了新的文献求助10
3秒前
3秒前
4秒前
哈哈发布了新的文献求助10
5秒前
xingchenpang完成签到,获得积分10
7秒前
7秒前
淡淡的发布了新的文献求助30
7秒前
8秒前
田様应助qcy采纳,获得10
8秒前
8秒前
8秒前
9秒前
Lucas应助水云身采纳,获得10
11秒前
12秒前
陈陈陈发布了新的文献求助10
12秒前
林zi发布了新的文献求助10
12秒前
SciGPT应助WQ采纳,获得10
12秒前
z25完成签到,获得积分10
13秒前
等待平萱发布了新的文献求助10
14秒前
受力分析完成签到,获得积分10
14秒前
火星上的难胜完成签到,获得积分20
14秒前
15秒前
18秒前
18秒前
ding应助lppcll采纳,获得10
18秒前
顺心谷冬完成签到 ,获得积分10
19秒前
Orange应助上岸采纳,获得10
19秒前
20秒前
21秒前
打打应助123123采纳,获得10
22秒前
传奇3应助qqq采纳,获得10
22秒前
22秒前
22秒前
勤劳的芷天完成签到,获得积分10
23秒前
23秒前
23秒前
23秒前
Leo发布了新的文献求助10
23秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
An Introduction to Foreign Language Learning and Teaching 750
China Pluperfect I: Epistemology of Past and Outside in Chinese Art 520
Matrix Methods in Data Mining and Pattern Recognition Second Edition 510
Governing Growth: Us Industrial Policy from Hamilton to Trump 500
The fast track to determining transfer functions of linear circuits: The student guide 500
The Analytical and Numerical Solution of Electric and Magnetic Fields 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7625608
求助须知:如何正确求助?哪些是违规求助? 9200563
关于积分的说明 19726484
捐赠科研通 7196591
什么是DOI,文献DOI怎么找? 3273723
关于科研通互助平台的介绍 2435872
邀请新用户注册赠送积分活动 2269661