Chain-of-Restoration: Multi-Task Image Restoration Models are Zero-Shot Step-by-Step Universal Image Restorers

作者
Cao, Jin,Meng, Deyu,Xiangyong Cao
出处
期刊:Cornell University - arXiv [Cornell University]
被引量:1
标识
DOI:10.48550/arxiv.2410.08688
摘要

Despite previous image restoration (IR) methods have often concentrated on isolated degradations, recent research has increasingly focused on addressing composite degradations involving a complex combination of multiple isolated degradations. However, current IR methods for composite degradations require building training data that contain an exponential number of possible degradation combinations, which brings in a significant burden. To alleviate this issue, this paper proposes a new task setting, i.e. Universal Image Restoration (UIR). Specifically, UIR doesn't require training on all the degradation combinations but only on a set of degradation bases and then removing any degradation that these bases can potentially compose in a zero-shot manner. Inspired by the Chain-of-Thought that prompts large language models (LLMs) to address problems step-by-step, we propose Chain-of-Restoration (CoR) mechanism, which instructs models to remove unknown composite degradations step-by-step. By integrating a simple Degradation Discriminator into pre-trained multi-task models, CoR facilitates the process where models remove one degradation basis per step, continuing this process until the image is fully restored from the unknown composite degradation. Extensive experiments show that CoR can significantly improve model performance in removing composite degradations, achieving comparable or better results than those state-of-the-art (SoTA) methods trained on all degradations.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
tangyuan完成签到,获得积分10
刚刚
1秒前
whale完成签到,获得积分10
2秒前
jclin发布了新的文献求助10
2秒前
细心擎呢完成签到 ,获得积分10
3秒前
hapea完成签到,获得积分20
3秒前
tangyuan发布了新的文献求助10
4秒前
spacetime发布了新的文献求助10
4秒前
nhzz2023发布了新的文献求助10
4秒前
5秒前
5秒前
6秒前
7秒前
8秒前
8秒前
生蚝大王发布了新的文献求助10
10秒前
恐怖稽器人完成签到,获得积分10
10秒前
sml发布了新的文献求助10
11秒前
传奇3的应助被LENGHUI采纳,获得10
12秒前
pegtop完成签到,获得积分20
12秒前
小巧亦竹发布了新的文献求助10
12秒前
炎坤完成签到,获得积分10
12秒前
17完成签到 ,获得积分10
13秒前
v0id的应助被shawn采纳,获得10
13秒前
13秒前
14秒前
14秒前
oddar完成签到 ,获得积分10
18秒前
FFXXFF完成签到,获得积分10
18秒前
paipai发布了新的文献求助10
18秒前
甙小新发布了新的文献求助10
18秒前
彩色泽洋发布了新的文献求助10
19秒前
碧岳春完成签到 ,获得积分10
19秒前
20秒前
vampv举报甜甜的路灯的求助涉嫌违规
21秒前
3614340767完成签到,获得积分10
21秒前
自由紊完成签到,获得积分10
21秒前
爆米花的应助被小巧亦竹采纳,获得10
22秒前
乐乐的应助被ZX采纳,获得10
23秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Energie-Contracting 1500
Klimaschutzrecht durch den Energiesektor im Mehrebenensystem – Ein Rechtsvergleich 1000
Représentation chimique de la structure des kérogènes et des asphaltènes en fonction de leur origine et de leur degré d'évolution 900
Ecotourism 400
Analytical Separation Science 300
Civilization and War 300
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8068712
求助须知:如何正确求助?哪些是违规求助? 9490087
关于积分的说明 21356875
捐赠科研通 7637177
什么是DOI,文献DOI怎么找? 3398439
关于科研通互助平台的介绍 2528267
邀请新用户注册赠送积分活动 2436302