DGFNet: Depth-Guided Cross-Modality Fusion Network for RGB-D Salient Object Detection

RGB颜色模型 计算机科学 人工智能 突出 模态(人机交互) 计算机视觉 模式识别(心理学) 融合 对象(语法) 目标检测 语言学 哲学
作者
Fen Xiao,Zhengdong Pu,Jiaqi Chen,Xieping Gao
出处
期刊:IEEE Transactions on Multimedia [Institute of Electrical and Electronics Engineers]
卷期号:26: 2648-2658 被引量:16
标识
DOI:10.1109/tmm.2023.3301280
摘要

RGB-D salient object detection (SOD) focuses on utilizing the complementary cues of RGB and depth modalities to detect and segment salient regions. However, many proposed methods train their models in a simple multi-modal manner, ignoring the differences between these two modalities in the contribution of salient detection. Furthermore, the quality of depth datasets varies significantly between individuals and is another important factor affecting model performance. To address the aforementioned issues, this article proposes a novel depth-guided fusion network framework (DGFNet) for the RGB-D SOD task. To avoid the influence of low-quality depth maps on RGB-D SOD, we design a depth map enhanced algorithm which jointly models salient detection and depth estimation to improve the quality of depth. Also, we propose a depth attention mechanism to encode valuable spatial information for SOD, which is then used in depth-guided fusion (DGF) module to guide the fusion of cross-modality features at each level. Extensive experiments on seven commonly tested datasets demonstrate that our DGFNet outperforms the 23 state-of-the-art RGB-D-based SOD methods.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
小二郎应助炙热晓露采纳,获得10
刚刚
旧日关注了科研通微信公众号
1秒前
kkkk发布了新的文献求助10
1秒前
mason发布了新的文献求助10
2秒前
要减肥的以一完成签到 ,获得积分10
2秒前
小伍发布了新的文献求助10
2秒前
幽月发布了新的文献求助10
2秒前
4秒前
李健的小迷弟应助七七采纳,获得10
5秒前
iccv完成签到 ,获得积分10
5秒前
5秒前
打打应助Lyy采纳,获得10
6秒前
6秒前
华仔应助mason采纳,获得10
7秒前
孙大大发布了新的文献求助10
7秒前
院士完成签到,获得积分10
7秒前
科研通AI6.1应助Nickky采纳,获得10
7秒前
隐形若山完成签到,获得积分10
8秒前
斯文的夏烟完成签到,获得积分10
9秒前
liyan发布了新的文献求助30
9秒前
ybh发布了新的文献求助10
10秒前
11秒前
11秒前
科研通AI2S应助kkkk采纳,获得10
11秒前
ss发布了新的文献求助10
13秒前
充电宝应助wzh采纳,获得10
13秒前
诚心的哈密瓜完成签到 ,获得积分10
14秒前
科目三应助lincsh采纳,获得10
14秒前
旧日发布了新的文献求助10
16秒前
陈秋红发布了新的文献求助10
16秒前
HUI完成签到,获得积分10
17秒前
6a完成签到 ,获得积分10
18秒前
赵一发布了新的文献求助10
18秒前
19秒前
CodeCraft应助欢喜的元枫采纳,获得10
21秒前
22秒前
月半完成签到,获得积分10
22秒前
汉堡包应助errui采纳,获得10
23秒前
24秒前
lulu发布了新的文献求助10
24秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Kinesiophobia : a new view of chronic pain behavior 2000
Psychology and Work Today 1000
Research for Social Workers 1000
Mastering New Drug Applications: A Step-by-Step Guide (Mastering the FDA Approval Process Book 1) 800
Signals, Systems, and Signal Processing 510
Discrete-Time Signals and Systems 510
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5899523
求助须知:如何正确求助?哪些是违规求助? 6729846
关于积分的说明 15743713
捐赠科研通 5022184
什么是DOI,文献DOI怎么找? 2704534
邀请新用户注册赠送积分活动 1651687
关于科研通互助平台的介绍 1599527