Multimodal Fusion of Hyperspectral and LiDAR Data Using Attention Mechanisms for Land Cover Mapping

作者
Gitanjali Pilankar,Dharmpal Dronacharya Doye
出处
期刊:International journal of advances in signal and image sciences [XLE Science]
卷期号:12 (3s): 796-808
标识
DOI:10.29284/y374x371
摘要

The proper classification of land-cover in the remote sensing needs to be associated with the effective fusion of complementary spectral and structural data. In this paper, the idea of Attention-Guided Fusion Network (GAFNet) is presented to integrate hyperspectral image (HSI) with LiDAR data by reweighting modality-specific features based on a spatial attention mechanism to accentuate the informative part of the image and reduce the background noise. The framework was tested on two benchmark datasets namely Trento and Houston which depict semi-urban and complex urban settings, respectively. Experimental evidence shows that GAFNet is always superior to state-of-the-art fusion methods, being able to obtain the Overall Accuracy of 96.75% and Kappa of 0.9564 on Trento, and the Average accuracy of 89.50%,Overall Accuracy of 91.08% and Kappa of 0.8861 on Houston. Quantitative measures and qualitative analyses have shown that the underlying nature of attention-guided multimodal feature fusion is robust, has the ability to generalize, and still performs well in remote sensing classification.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Two完成签到,获得积分10
刚刚
拓扑超导相变完成签到 ,获得积分10
1秒前
看文献就头痛完成签到 ,获得积分10
1秒前
1秒前
西风烈长歌啸完成签到,获得积分10
3秒前
cy关闭了cy的文献求助
3秒前
纪言七许完成签到 ,获得积分10
3秒前
LLLLLLL发布了新的文献求助30
3秒前
刘铭发布了新的文献求助10
3秒前
zj发布了新的文献求助10
4秒前
4秒前
5秒前
黑神话发布了新的文献求助10
6秒前
所所的应助被炙热的帽子采纳,获得10
7秒前
7秒前
8秒前
9秒前
哈哈完成签到,获得积分10
9秒前
或大或小由于求助违规,被管理员扣积分10
10秒前
Raven发布了新的文献求助10
10秒前
小小完成签到 ,获得积分10
11秒前
11秒前
12秒前
12秒前
anyway发布了新的文献求助10
12秒前
乐观冬瓜发布了新的文献求助10
12秒前
13秒前
13秒前
慈祥的映阳完成签到 ,获得积分10
15秒前
15秒前
Lucas的应助被连钧采纳,获得10
15秒前
科研通AI65的应助被即墨采纳,获得10
15秒前
sjskah完成签到,获得积分10
16秒前
16秒前
Ryuichi发布了新的文献求助10
16秒前
端庄的夏寒完成签到,获得积分10
16秒前
包容的c完成签到 ,获得积分10
16秒前
17秒前
伶俐问薇完成签到,获得积分10
17秒前
田様的应助被111采纳,获得10
18秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Agyptische Geschichte der 21.30. Dynastie 510
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8192209
求助须知:如何正确求助?哪些是违规求助? 9578801
关于积分的说明 21861940
捐赠科研通 7791695
什么是DOI,文献DOI怎么找? 3436846
关于科研通互助平台的介绍 2560562
邀请新用户注册赠送积分活动 2483617