MFMG-Net: Multispectral Feature Mutual Guidance Network for Visible–Infrared Object Detection

多光谱图像 特征(语言学) 红外线的 网(多面体) 人工智能 计算机科学 计算机视觉 遥感 模式识别(心理学) 地质学 光学 数学 物理 哲学 语言学 几何学
作者
Fei Zhao,Wenzhong Lou,Hengzhen Feng,Nanxi Ding,Chenglong Li
出处
期刊:Drones [Multidisciplinary Digital Publishing Institute]
卷期号:8 (3): 112-112 被引量:7
标识
DOI:10.3390/drones8030112
摘要

Drones equipped with visible and infrared sensors play a vital role in urban road supervision. However, conventional methods using RGB-IR image pairs often struggle to extract effective features. These methods treat these spectra independently, missing the potential benefits of their interaction and complementary information. To address these challenges, we designed the Multispectral Feature Mutual Guidance Network (MFMG-Net). To prevent learning bias between spectra, we have developed a Data Augmentation (DA) technique based on the mask strategy. The MFMG module is embedded between two backbone networks, promoting the exchange of feature information between spectra to enhance extraction. We also designed a Dual-Branch Feature Fusion (DBFF) module based on attention mechanisms, enabling deep feature fusion by emphasizing correlations between the two spectra in both the feature channel and space dimensions. Finally, the fused features feed into the neck network and detection head, yielding ultimate inference results. Our experiments, conducted on the Aerial Imagery (VEDAI) dataset and two other public datasets (M3FD and LLVIP), showcase the superior performance of our method and the effectiveness of MFMG in enhancing multispectral feature extraction for drone ground detection.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
啸海完成签到,获得积分10
刚刚
韩世星发布了新的文献求助10
1秒前
杨花落尽子规啼完成签到,获得积分10
1秒前
Spongeisla发布了新的文献求助10
1秒前
1秒前
1秒前
无限初丹完成签到,获得积分10
1秒前
木木小飞虫完成签到,获得积分10
2秒前
2秒前
kinruar完成签到,获得积分10
2秒前
666发布了新的文献求助10
3秒前
Jasper应助冰冷的心采纳,获得10
3秒前
3秒前
123456发布了新的文献求助10
3秒前
怪脾气完成签到 ,获得积分10
3秒前
4秒前
5秒前
听话的傲松完成签到 ,获得积分10
5秒前
彭于晏应助清脆的傲旋采纳,获得10
5秒前
5秒前
5秒前
G_Z关注了科研通微信公众号
6秒前
7秒前
无语的千秋完成签到,获得积分10
7秒前
搜集达人应助七七采纳,获得10
7秒前
酱喵完成签到 ,获得积分10
7秒前
希望天下0贩的0应助Zz采纳,获得10
8秒前
8秒前
跳跃保温杯完成签到,获得积分20
8秒前
8秒前
闪亮的屁灯完成签到 ,获得积分10
8秒前
西西完成签到,获得积分10
8秒前
9秒前
哈哈发布了新的文献求助10
9秒前
9秒前
9秒前
刘乐源完成签到,获得积分10
9秒前
852应助鳕鱼排超人采纳,获得10
9秒前
Nat发布了新的文献求助10
9秒前
风中龙猫完成签到,获得积分10
10秒前
高分求助中
Principles of Economics, 11th Edition 10000
University Physics with Modern Physics, 16th edition 10000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Molecular Mechanisms of Photosynthesis, 4th Edition 1000
Organic Reactions, Volume 116 1000
Current concepts in cutaneous toxicity : proceedings of the Fourth Conference on Cutaneous Toxicity, Washington, D.C., May 9-11, 1979 1000
The recovery-stress questionnaires : user manual 800
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7258799
求助须知:如何正确求助?哪些是违规求助? 8880749
关于积分的说明 18764063
捐赠科研通 6939238
什么是DOI,文献DOI怎么找? 3201441
关于科研通互助平台的介绍 2375349
邀请新用户注册赠送积分活动 2177216