MFIFusion: An infrared and visible image enhanced fusion network based on multi-level feature injection

人工智能 特征(语言学) 计算机视觉 突出 特征提取 融合 图像(数学) 过程(计算) 图像融合 计算机科学 模式识别(心理学) 编码器 融合规则 哲学 语言学 操作系统
作者
Aimei Dong,Long Wang,Jian Liu,Guohua Lv,Guixin Zhao,Jinyong Cheng
出处
期刊:Pattern Recognition [Elsevier BV]
卷期号:152: 110445-110445 被引量:5
标识
DOI:10.1016/j.patcog.2024.110445
摘要

Infrared and visible image fusion aims to integrate complementary information from both types of images. Existing deep learning-based fusion methods rely solely on the final output of the feature extraction network, which may overlook valuable information presented in the middle layers of the network, ultimately reducing the richness of the fusion results, i.e., detailed texture information might not be fully extracted and integrated into the fused image. This study proposes a multi-level feature injection method based on an image decomposition model for infrared and visible image fusion, termed as MFIFusion. On the one hand, we introduce an attention-guided multi-level feature injection module designed to mitigate information loss during the feature extraction stage of the image scale decomposition process. More specifically, the proposed method integrates multiple fusion branches in the encoder network and employs an attention mechanism to guide the feature fusion process. On the other hand, based on the characteristics that superficial features retain image detail information and profound features are more suitable for extracting semantic information from images, we use distinct fusion strategies in these two phases to adaptively control the intensity distribution of the salient targets and to preserve the texture information in the background region. Qualitative and quantitative results demonstrate that our proposed approach produces fused images that are more visually salient to the target and contain richly detailed textures.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
金丝鼠发布了新的文献求助10
刚刚
自己哭哭完成签到 ,获得积分10
1秒前
4秒前
Xieyusen发布了新的文献求助20
4秒前
5秒前
Atlantis发布了新的文献求助10
8秒前
qiao应助司空三毒采纳,获得10
8秒前
9秒前
俏皮连虎完成签到,获得积分10
9秒前
ZZzz完成签到 ,获得积分10
9秒前
唯美完成签到,获得积分10
10秒前
无花果应助dsuccess采纳,获得10
16秒前
小韩完成签到,获得积分10
19秒前
20秒前
20秒前
TMUEH_FCL给Soir的求助进行了留言
20秒前
22秒前
SCIfafafafa发布了新的文献求助10
23秒前
27秒前
didididada完成签到 ,获得积分10
28秒前
29秒前
优美丹雪完成签到,获得积分20
30秒前
30秒前
31秒前
34秒前
Xieyusen发布了新的文献求助10
35秒前
仙贝完成签到,获得积分10
35秒前
36秒前
kittykitten完成签到 ,获得积分10
36秒前
852应助SCIfafafafa采纳,获得10
37秒前
yu发布了新的文献求助10
40秒前
Xieyusen完成签到,获得积分10
41秒前
43秒前
忧心的棉花糖完成签到,获得积分20
47秒前
47秒前
Orange应助zzznznnn采纳,获得30
49秒前
51秒前
xkkoala完成签到 ,获得积分10
55秒前
55秒前
57秒前
高分求助中
【此为提示信息,请勿应助】请按要求发布求助,避免被关 20000
Периодизация спортивной тренировки. Общая теория и её практическое применение 310
Mixing the elements of mass customisation 300
the MD Anderson Surgical Oncology Manual, Seventh Edition 300
Nucleophilic substitution in azasydnone-modified dinitroanisoles 300
Platinum-group elements : mineralogy, geology, recovery 260
Geopora asiatica sp. nov. from Pakistan 230
热门求助领域 (近24小时)
化学 材料科学 医学 生物 工程类 有机化学 物理 生物化学 纳米技术 计算机科学 化学工程 内科学 复合材料 物理化学 电极 遗传学 量子力学 基因 冶金 催化作用
热门帖子
关注 科研通微信公众号,转发送积分 3780394
求助须知:如何正确求助?哪些是违规求助? 3325811
关于积分的说明 10224284
捐赠科研通 3040879
什么是DOI,文献DOI怎么找? 1669109
邀请新用户注册赠送积分活动 799013
科研通“疑难数据库(出版商)”最低求助积分说明 758649