LET-Net: locally enhanced transformer network for medical image segmentation

计算机科学 分割 人工智能 编码器 增采样 特征学习 判别式 变压器 特征(语言学) 棱锥(几何) 模式识别(心理学) 计算机视觉 图像分割 图像(数学) 操作系统 量子力学 光学 物理 哲学 语言学 电压
作者
Na Ta,Haipeng Chen,Xianzhu Liu,Nanguo Jin
出处
期刊:Multimedia Systems [Springer Science+Business Media]
卷期号:29 (6): 3847-3861 被引量:2
标识
DOI:10.1007/s00530-023-01165-z
摘要

Abstract Medical image segmentation has attracted increasing attention due to its practical clinical requirements. However, the prevalence of small targets still poses great challenges for accurate segmentation. In this paper, we propose a novel locally enhanced transformer network (LET-Net) that combines the strengths of transformer and convolution to address this issue. LET-Net utilizes a pyramid vision transformer as its encoder and is further equipped with two novel modules to learn more powerful feature representation. Specifically, we design a feature-aligned local enhancement module, which encourages discriminative local feature learning on the condition of adjacent-level feature alignment. Moreover, to effectively recover high-resolution spatial information, we apply a newly designed progressive local-induced decoder. This decoder contains three cascaded local reconstruction and refinement modules that dynamically guide the upsampling of high-level features by their adaptive reconstruction kernels and further enhance feature representation through a split-attention mechanism. Additionally, to address the severe pixel imbalance for small targets, we design a mutual information loss that maximizes task-relevant information while eliminating task-irrelevant noises. Experimental results demonstrate that our LET-Net provides more effective support for small target segmentation and achieves state-of-the-art performance in polyp and breast lesion segmentation tasks.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
honghong完成签到,获得积分20
1秒前
极乐鸟完成签到,获得积分10
1秒前
顺利毕业发布了新的文献求助10
1秒前
meiwuzhao发布了新的文献求助20
1秒前
完美世界的应助被兔兔不睡觉采纳,获得10
2秒前
传奇3的应助被NN采纳,获得10
2秒前
yyyyy发布了新的文献求助10
2秒前
丘比特的应助被69岁扶锄种地采纳,获得10
3秒前
亦风发布了新的文献求助10
3秒前
orixero的应助被无奈醉柳采纳,获得10
3秒前
4秒前
以舟渡之发布了新的文献求助10
4秒前
4秒前
4秒前
4秒前
ZRH发布了新的文献求助10
4秒前
4秒前
5秒前
yin发布了新的文献求助10
5秒前
6秒前
bkagyin的应助被科研通管家采纳,获得10
6秒前
xing_xing的应助被科研通管家采纳,获得20
6秒前
无极微光的应助被科研通管家采纳,获得20
6秒前
慕青的应助被科研通管家采纳,获得10
6秒前
Nole的应助被科研通管家采纳,获得10
6秒前
6秒前
慕青的应助被科研通管家采纳,获得10
6秒前
CipherSage的应助被科研通管家采纳,获得10
6秒前
隐形曼青的应助被科研通管家采纳,获得10
7秒前
Lucas的应助被luo采纳,获得10
7秒前
bkagyin的应助被科研通管家采纳,获得10
7秒前
7秒前
科研通AI2S的应助被科研通管家采纳,获得10
7秒前
wind完成签到,获得积分10
7秒前
打打的应助被科研通管家采纳,获得10
7秒前
xing_xing的应助被科研通管家采纳,获得20
7秒前
7秒前
科研通AI65的应助被科研通管家采纳,获得10
7秒前
7秒前
yongktv完成签到,获得积分20
7秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Handbook of Sport Coaching Research 1000
Orthognathic Surgery - 2 Volume Set 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8193605
求助须知:如何正确求助?哪些是违规求助? 9579751
关于积分的说明 21867369
捐赠科研通 7793242
什么是DOI,文献DOI怎么找? 3437325
关于科研通互助平台的介绍 2560761
邀请新用户注册赠送积分活动 2484193