MFIFusion: An infrared and visible image enhanced fusion network based on multi-level feature injection

人工智能 特征(语言学) 计算机视觉 突出 特征提取 融合 图像(数学) 过程(计算) 图像融合 计算机科学 模式识别(心理学) 编码器 融合规则 哲学 语言学 操作系统
作者
Aimei Dong,Long Wang,Jian Liu,Guohua Lv,Guixin Zhao,Jinyong Cheng
出处
期刊:Pattern Recognition [Elsevier BV]
卷期号:152: 110445-110445 被引量:17
标识
DOI:10.1016/j.patcog.2024.110445
摘要

Infrared and visible image fusion aims to integrate complementary information from both types of images. Existing deep learning-based fusion methods rely solely on the final output of the feature extraction network, which may overlook valuable information presented in the middle layers of the network, ultimately reducing the richness of the fusion results, i.e., detailed texture information might not be fully extracted and integrated into the fused image. This study proposes a multi-level feature injection method based on an image decomposition model for infrared and visible image fusion, termed as MFIFusion. On the one hand, we introduce an attention-guided multi-level feature injection module designed to mitigate information loss during the feature extraction stage of the image scale decomposition process. More specifically, the proposed method integrates multiple fusion branches in the encoder network and employs an attention mechanism to guide the feature fusion process. On the other hand, based on the characteristics that superficial features retain image detail information and profound features are more suitable for extracting semantic information from images, we use distinct fusion strategies in these two phases to adaptively control the intensity distribution of the salient targets and to preserve the texture information in the background region. Qualitative and quantitative results demonstrate that our proposed approach produces fused images that are more visually salient to the target and contain richly detailed textures.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
GTR的我完成签到 ,获得积分10
1秒前
harden9159完成签到,获得积分10
1秒前
叶洛洛完成签到 ,获得积分10
6秒前
10秒前
机智马里奥完成签到 ,获得积分10
11秒前
情怀应助自由雪菲力采纳,获得10
12秒前
leilei完成签到,获得积分10
13秒前
澄如发布了新的文献求助30
13秒前
Asura完成签到,获得积分10
14秒前
18秒前
他有篮完成签到 ,获得积分10
20秒前
ARIA完成签到 ,获得积分10
25秒前
邢哥哥完成签到,获得积分10
28秒前
火星上的青亦完成签到,获得积分10
29秒前
阿居完成签到,获得积分10
32秒前
像风一样自由完成签到 ,获得积分10
33秒前
35秒前
cdercder应助zk.yin采纳,获得30
37秒前
郭磊完成签到 ,获得积分10
41秒前
43秒前
Owen应助Brave采纳,获得10
49秒前
灵巧的长颈鹿完成签到,获得积分10
49秒前
睁眼睡大觉完成签到 ,获得积分10
54秒前
Copyright应助科研通管家采纳,获得10
55秒前
55秒前
Copyright应助科研通管家采纳,获得10
56秒前
李爱国应助科研通管家采纳,获得10
56秒前
完美世界应助Singularity采纳,获得10
57秒前
剁辣椒蒸鱼头完成签到 ,获得积分10
59秒前
1分钟前
竹青给橙橙的求助进行了留言
1分钟前
Sthool完成签到,获得积分10
1分钟前
yang发布了新的文献求助20
1分钟前
fdyy1完成签到,获得积分10
1分钟前
1分钟前
GeGe完成签到,获得积分10
1分钟前
Singularity发布了新的文献求助10
1分钟前
1分钟前
Ste完成签到,获得积分10
1分钟前
英俊的铭应助澄如采纳,获得10
1分钟前
高分求助中
Principles of Economics, 11th Edition 10000
University Physics with Modern Physics, 16th edition 10000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Molecular Mechanisms of Photosynthesis, 4th Edition 1000
Organic Reactions, Volume 116 1000
Current concepts in cutaneous toxicity : proceedings of the Fourth Conference on Cutaneous Toxicity, Washington, D.C., May 9-11, 1979 1000
The recovery-stress questionnaires : user manual 800
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7257699
求助须知:如何正确求助?哪些是违规求助? 8879580
关于积分的说明 18757472
捐赠科研通 6938054
什么是DOI,文献DOI怎么找? 3201146
关于科研通互助平台的介绍 2375264
邀请新用户注册赠送积分活动 2176952