CMGFDet: Cross-Modal Gated Fusion Network with Multi-Receptive Field Aggregation for RGB–Infrared Aerial Object Detection

作者
Man Wu,Xiaozhang Liu,Xiulai Li,Wenbiao Gan
出处
期刊:Remote Sensing [Multidisciplinary Digital Publishing Institute]
卷期号:18 (15): 2439-2439
标识
DOI:10.3390/rs18152439
摘要

Multimodal object detection leveraging RGB and infrared imagery has become essential for robust all-weather perception in unmanned aerial vehicle (UAV) applications. However, existing methods still struggle with effective cross-modal feature fusion, spatial misalignment between modalities, and scale variation of objects in aerial views. In this paper, we propose CMGFDet, a Cross-Modal Gated Fusion Network with Multi-Receptive Field Aggregation designed for RGB–infrared aerial object detection. Our framework introduces three coordinated modules: (1) a Cross-Modal Feature Fusion Network (CMFFN) that employs a gated attention mechanism to selectively aggregate complementary information from both modalities during encoding; (2) a Global–Local Attention Module (GLAM) that performs hierarchical cross-modal feature alignment by jointly modelling global channel statistics and local spatial correlations in the decoder; and (3) a Multi-Receptive Field Aggregation Network (MRFAN) that captures multi-scale contextual information through parallel depthwise convolutions with diverse kernel sizes. Additionally, we incorporate a deep supervision strategy and a composite loss function to enhance training efficiency. Extensive experiments on four public benchmarks (DroneVehicle, RGBTDronePerson, VEDAI, and VTUAV) show that CMGFDet improves the previous best mAP@0.5 by 1.6%, 2.2%, 1.9%, and 2.2%, respectively. The implementation code will be released upon acceptance to support reproducibility.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Akim的应助被huazhangchina采纳,获得10
1秒前
tp发布了新的文献求助10
1秒前
超帅建完成签到,获得积分10
1秒前
hh完成签到,获得积分10
2秒前
tomatoGG完成签到,获得积分10
2秒前
che123发布了新的文献求助10
2秒前
2秒前
2秒前
冤家Gg完成签到,获得积分10
2秒前
red完成签到,获得积分10
2秒前
丰富诗蕾完成签到,获得积分20
3秒前
kijil完成签到,获得积分10
3秒前
4秒前
4秒前
燕子发布了新的文献求助10
4秒前
读书崽完成签到 ,获得积分10
4秒前
hah完成签到,获得积分10
5秒前
大个的应助被monster采纳,获得10
5秒前
王娜完成签到 ,获得积分20
5秒前
万能图书馆的应助被于清华采纳,获得10
5秒前
tomatoGG发布了新的文献求助10
6秒前
水天需发布了新的文献求助10
6秒前
6秒前
7秒前
Wu的应助被LJ采纳,获得10
8秒前
8秒前
牛牛发布了新的文献求助10
9秒前
翠花花完成签到 ,获得积分10
9秒前
10秒前
Lioray发布了新的文献求助10
11秒前
11秒前
11秒前
11秒前
12秒前
13秒前
13秒前
Chloe完成签到,获得积分10
14秒前
能不能学术一点完成签到,获得积分10
14秒前
章鱼哥完成签到 ,获得积分10
14秒前
完犊子发布了新的文献求助10
15秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Energie-Contracting 1500
Klimaschutzrecht durch den Energiesektor im Mehrebenensystem – Ein Rechtsvergleich 1000
Oncology Clinical Trials: Successful Design, Conduct, and Analysis, Second Edition 800
Comprehensive Heterocyclic Chemistry IV 400
Qualitative Methodologies in Tourism Studies: Disrupting and Co-creating Critical Research 350
Représentation chimique de la structure des kérogènes et des asphaltènes en fonction de leur origine et de leur degré d'évolution 300
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8050702
求助须知:如何正确求助?哪些是违规求助? 9479112
关于积分的说明 21296668
捐赠科研通 7619102
什么是DOI,文献DOI怎么找? 3393347
关于科研通互助平台的介绍 2524657
邀请新用户注册赠送积分活动 2431337