Dual attention transformer network for hyperspectral image classification

计算机科学 高光谱成像 人工智能 模式识别(心理学) 变压器 卷积神经网络 特征提取 空间分析 遥感 物理 量子力学 电压 地质学
作者
Zhenqiu Shu,Yuyang Wang,Zhengtao Yu
出处
期刊:Engineering Applications of Artificial Intelligence [Elsevier BV]
卷期号:127: 107351-107351 被引量:54
标识
DOI:10.1016/j.engappai.2023.107351
摘要

Hyperspectral image classification (HSIC) has been a significant topic in the field of remote sensing in the past few years. Convolutional neural networks have shown promising performance in HSIC applications due to their strong local feature extraction ability. However, they struggle to extract global information from HSIs, thereby resulting in classification performance limitations. Recently, vision transformers have been used to solve HSIC problems, and its advantage is to adopt the multi-head self-attention mechanism to explore global dependencies. Nevertheless, the extracted features using MHSA usually exhibit over-dispersion due to the abundance of band information hidden in HSIs. In this work, we propose a novel method, called dual attention transformer network (DATN), for HSIC problems. It consists of two types of modules, namely the spatial–spectral hybrid transformer (SSHT) module and the spectral local-conv block (SLCB) module. Specifically, the SSHT module aims to utilize the MHSA to capture spatial and spectral feature information. Therefore, it can effectively utilize global spatial–spectral features and embed the local spatial information, simultaneously. Besides, we design a SLCB module to extract the local spectral information of HSIs effectively. Then the SSHT and SLCB modules are integrated into an end-to-end framework. Finally, the global and local spatial–spectral features extracted from this framework are input into the fully connected layer, and then classification results of HSIs are obtained. A series of experiments on three HSI datasets have demonstrated that our DATN approach outperforms several state-of-the-art HSIC approaches.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
mianmian186发布了新的文献求助10
1秒前
1秒前
夏夏完成签到 ,获得积分10
6秒前
Ava的应助被mianmian186采纳,获得30
7秒前
披着羊皮的狼举报小晴天的求助涉嫌违规
8秒前
nczpf2010完成签到,获得积分10
9秒前
不知道叫啥完成签到 ,获得积分10
10秒前
cssc完成签到,获得积分10
11秒前
华仔的应助被科研通管家采纳,获得10
11秒前
学习万岁完成签到 ,获得积分10
14秒前
mengmenglv完成签到 ,获得积分0
15秒前
18秒前
甜蜜的紫菜完成签到,获得积分10
26秒前
顺利毕业完成签到 ,获得积分10
29秒前
33秒前
ADChem_JH完成签到,获得积分10
39秒前
42秒前
aRuuuu完成签到 ,获得积分10
43秒前
44秒前
玩命的芸遥完成签到,获得积分10
45秒前
48秒前
zaq123456完成签到 ,获得积分10
48秒前
49秒前
yyyyy发布了新的文献求助10
56秒前
mianmian186发布了新的文献求助10
57秒前
乐正怡完成签到 ,获得积分0
1分钟前
1分钟前
xiaoyi完成签到 ,获得积分10
1分钟前
小红帽完成签到 ,获得积分10
1分钟前
侯子完成签到 ,获得积分10
1分钟前
1分钟前
科目三的应助被Wang采纳,获得10
1分钟前
故意的冷安完成签到,获得积分10
1分钟前
mianmian186发布了新的文献求助30
1分钟前
lucinda完成签到 ,获得积分10
1分钟前
lishuhua完成签到 ,获得积分10
1分钟前
1分钟前
仁爱觅风完成签到 ,获得积分10
1分钟前
科研通AI6.3的应助被mianmian186采纳,获得10
2分钟前
小二郎的应助被科研通管家采纳,获得10
2分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8190320
求助须知:如何正确求助?哪些是违规求助? 9577417
关于积分的说明 21852481
捐赠科研通 7788909
什么是DOI,文献DOI怎么找? 3436315
关于科研通互助平台的介绍 2560144
邀请新用户注册赠送积分活动 2482975