Conditional Controllable Image Fusion

融合 图像融合 图像(数学) 人工智能 计算机科学 计算机视觉 哲学 语言学
作者
Bing Cao,Xingxin Xu,Pengfei Zhu,Qilong Wang,Qinghua Hu
出处
期刊:Cornell University - arXiv [Cornell University]
标识
DOI:10.48550/arxiv.2411.01573
摘要

Image fusion aims to integrate complementary information from multiple input images acquired through various sources to synthesize a new fused image. Existing methods usually employ distinct constraint designs tailored to specific scenes, forming fixed fusion paradigms. However, this data-driven fusion approach is challenging to deploy in varying scenarios, especially in rapidly changing environments. To address this issue, we propose a conditional controllable fusion (CCF) framework for general image fusion tasks without specific training. Due to the dynamic differences of different samples, our CCF employs specific fusion constraints for each individual in practice. Given the powerful generative capabilities of the denoising diffusion model, we first inject the specific constraints into the pre-trained DDPM as adaptive fusion conditions. The appropriate conditions are dynamically selected to ensure the fusion process remains responsive to the specific requirements in each reverse diffusion stage. Thus, CCF enables conditionally calibrating the fused images step by step. Extensive experiments validate our effectiveness in general fusion tasks across diverse scenarios against the competing methods without additional training.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
鱼鱼完成签到,获得积分10
刚刚
完美世界应助等待画板采纳,获得10
1秒前
1秒前
wxy发布了新的文献求助10
1秒前
飘飘然会摔死的完成签到 ,获得积分10
2秒前
CodeCraft应助212采纳,获得10
2秒前
学术laji发布了新的文献求助10
3秒前
CipherSage应助jimmyyyyyy采纳,获得10
4秒前
4秒前
5秒前
6秒前
许蹦跶完成签到,获得积分10
7秒前
香蕉觅云应助青月小飞龙采纳,获得10
7秒前
8秒前
只想睡觉完成签到,获得积分10
9秒前
CodeCraft应助木冉采纳,获得50
9秒前
票子完成签到 ,获得积分10
9秒前
9秒前
8888拉完成签到,获得积分10
10秒前
小小吴发布了新的文献求助10
10秒前
可靠的凝梦完成签到,获得积分10
10秒前
一二三四完成签到,获得积分10
11秒前
脑洞疼应助尼亚吉拉采纳,获得10
11秒前
wlq完成签到,获得积分10
11秒前
11秒前
jinxiao关注了科研通微信公众号
12秒前
12秒前
13秒前
Lucas完成签到,获得积分10
14秒前
wxy完成签到,获得积分10
14秒前
14秒前
14秒前
14秒前
14秒前
qwerrqqq完成签到,获得积分10
14秒前
昏睡的冥发布了新的文献求助10
15秒前
sel发布了新的文献求助10
15秒前
15秒前
15秒前
16秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Nondestructive Testing Handbook: Vol. 4, Thermal and Infrared Testing (IR), 4th ed 800
作者名:Kristopher P. Plain,悉尼大学的,目前只能查到其四篇论文,想找到其博士论文 590
Évora na Idade Média 555
Soil mites of the family Rhagidiidae (Actinedida: Eupodoidea). Morphology, Systematics, Ecology 520
Matrix Methods in Data Mining and Pattern Recognition Second Edition 510
Radical Reactions 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7357086
求助须知:如何正确求助?哪些是违规求助? 8967829
关于积分的说明 19055992
捐赠科研通 7004612
什么是DOI,文献DOI怎么找? 3222348
关于科研通互助平台的介绍 2386497
邀请新用户注册赠送积分活动 2202993