MAGNet: Multi-scale Awareness and Global fusion Network for RGB-D salient object detection

计算机视觉 突出 RGB颜色模型 人工智能 比例(比率) 计算机科学 融合 对象(语法) 地图学 地理 语言学 哲学
作者
Mingyu Zhong,Jing Sun,Peng Ren,Fasheng Wang,Fuming Sun
出处
期刊:Knowledge Based Systems [Elsevier BV]
卷期号:299: 112126-112126 被引量:101
标识
DOI:10.1016/j.knosys.2024.112126
摘要

In recent years, excellent RGB-D salient object detection performance has been achieved. However, existing detection methods generally require a large number of model parameters in pursuit of high accuracy. To alleviate this problem, we propose a Multi-scale Awareness and Global fusion Network for RGB-D salient object detection, named MAGNet. MAGNet has 16.1M Params and 9.9G FLOPs. Specifically, we notice that convolutional neural networks (CNNs) can strongly perceive local spatial structures, whereas attention mechanisms can perform global correlation analysis of input information. Therefore, we exploit the advantages of both methods to design two kinds of cross-modal feature fusion modules. To reduce the computational complexity of the model, we design a multi-scale awareness fusion module (MAFM) to fully leverage the rich textural information and edge information in low-level feature maps. For the high-level feature maps, we incorporate an attention mechanism and a CNN to design a global fusion module (GFM), which enables the model to better capture the semantic information of different modalities by learning the correspondence between RGB and depth images. Then, we employ the proposed multi-level convolution module (MCM) to generate the predicted map through a step-by-step decoding process, which can gradually recover finer detection results. Finally, extensive experimental results on six datasets show that the proposed MAGNet not only achieves advanced detection performance but also drastically reduces the number of model parameters. Source code is available at https://github.com/mingyu6346/MAGNet.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
惊叹鸡腿关注了科研通微信公众号
刚刚
1秒前
xx发布了新的文献求助10
1秒前
1秒前
吴遥完成签到,获得积分10
1秒前
dong8898完成签到,获得积分10
1秒前
聚乙二醇发布了新的文献求助10
1秒前
WY完成签到 ,获得积分10
2秒前
wanggeng完成签到,获得积分10
2秒前
义气千风完成签到,获得积分10
2秒前
molihuakai的应助被淡然雅寒采纳,获得10
2秒前
缥缈伊发布了新的文献求助10
2秒前
自信的涵菡完成签到,获得积分10
2秒前
科研路上的干饭桶完成签到,获得积分10
3秒前
今后的应助被ljs采纳,获得10
3秒前
3秒前
Hello的应助被高高小兔子采纳,获得10
4秒前
热心的甜瓜完成签到,获得积分10
4秒前
5秒前
5秒前
coconut完成签到,获得积分10
5秒前
5秒前
bkagyin的应助被tang采纳,获得10
6秒前
6秒前
我不吃芒果完成签到,获得积分10
6秒前
阿文完成签到,获得积分10
6秒前
华仔的应助被anbude采纳,获得10
6秒前
6秒前
6秒前
马111发布了新的文献求助10
7秒前
蝈蝈完成签到,获得积分10
7秒前
hbhsjk发布了新的文献求助10
7秒前
水煮电吹风的应助被刘之捷采纳,获得10
7秒前
7秒前
8秒前
小二郎的应助被youyyuy采纳,获得10
8秒前
zhouzhou完成签到,获得积分10
8秒前
上课呢完成签到 ,获得积分10
8秒前
psycancan完成签到 ,获得积分10
8秒前
9秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Social Psychology in the Real World 600
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8180713
求助须知:如何正确求助?哪些是违规求助? 9570752
关于积分的说明 21814119
捐赠科研通 7776960
什么是DOI,文献DOI怎么找? 3433298
关于科研通互助平台的介绍 2557579
邀请新用户注册赠送积分活动 2479287