亲爱的研友该休息了!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您度过漫漫科研夜!身体可是革命的本钱,早点休息,好梦!

Cross Paradigm Representation and Alignment Transformer for Image Deraining

计算机科学 稳健性(进化) 人工智能 变压器 代表(政治) 模式识别(心理学) 特征提取 计算机视觉 特征学习 像素 水准点(测量) 融合 图像融合 图像纹理 频道(广播) 特征(语言学) 图像(数学) 填写 传感器融合 空间分析 数据挖掘 图像处理
作者
Shasha Zou,Yi Zou,Juncheng Li,Guangwei Gao,Guo-Jun Qi
标识
DOI:10.48550/arxiv.2504.16455
摘要

Transformer-based networks have achieved strong performance in low-level vision tasks like image deraining by utilizing spatial or channel-wise self-attention. However, irregular rain patterns and complex geometric overlaps challenge single-paradigm architectures, necessitating a unified framework to integrate complementary global-local and spatial-channel representations. To address this, we propose a novel Cross Paradigm Representation and Alignment Transformer (CPRAformer). Its core idea is the hierarchical representation and alignment, leveraging the strengths of both paradigms (spatial-channel and global-local) to aid image reconstruction. It bridges the gap within and between paradigms, aligning and coordinating them to enable deep interaction and fusion of features. Specifically, we use two types of self-attention in the Transformer blocks: sparse prompt channel self-attention (SPC-SA) and spatial pixel refinement self-attention (SPR-SA). SPC-SA enhances global channel dependencies through dynamic sparsity, while SPR-SA focuses on spatial rain distribution and fine-grained texture recovery. To address the feature misalignment and knowledge differences between them, we introduce the Adaptive Alignment Frequency Module (AAFM), which aligns and interacts with features in a two-stage progressive manner, enabling adaptive guidance and complementarity. This reduces the information gap within and between paradigms. Through this unified cross-paradigm dynamic interaction framework, we achieve the extraction of the most valuable interactive fusion information from the two paradigms. Extensive experiments demonstrate that our model achieves state-of-the-art performance on eight benchmark datasets and further validates CPRAformer's robustness in other image restoration tasks and downstream applications.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刘刘完成签到 ,获得积分10
1秒前
奔跑应助欧皇采纳,获得10
2秒前
三月完成签到 ,获得积分10
7秒前
10秒前
乐观怜寒完成签到,获得积分10
12秒前
16秒前
22秒前
方方方完成签到,获得积分10
26秒前
春风化雨新完成签到,获得积分10
32秒前
35秒前
糟糕的访波完成签到,获得积分10
39秒前
Oculus完成签到 ,获得积分10
40秒前
40秒前
睡不醒发布了新的文献求助10
40秒前
41秒前
大方定帮完成签到,获得积分10
42秒前
李春宇发布了新的文献求助10
48秒前
55秒前
55秒前
Paris完成签到 ,获得积分10
1分钟前
烟消云散发布了新的文献求助10
1分钟前
幸福一江完成签到,获得积分10
1分钟前
1分钟前
魏琴发布了新的文献求助10
1分钟前
善良的青烟完成签到,获得积分20
1分钟前
阿江发布了新的文献求助10
1分钟前
阿北发布了新的文献求助10
1分钟前
1分钟前
GingerF应助Luminous采纳,获得80
1分钟前
see发布了新的文献求助10
1分钟前
可爱的函函应助see采纳,获得10
1分钟前
1分钟前
沉静连虎完成签到,获得积分10
1分钟前
joeqin完成签到,获得积分0
1分钟前
渡人舟应助科研通管家采纳,获得10
1分钟前
Kao应助科研通管家采纳,获得10
1分钟前
艾米发布了新的文献求助10
1分钟前
Kao应助科研通管家采纳,获得10
1分钟前
大力音响发布了新的文献求助10
1分钟前
务实秀完成签到,获得积分10
1分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Autoparametric Resonance in Mechanical Systems 1000
Effects of Two Weeks of Red Light Therapy on Choroidal Thickness and Axial Length in Young Adults 700
Cosmos as Art Object: Studies in Plato's Timaeus and Other Dialogues 600
Management and the Arts 510
Matrix Methods in Data Mining and Pattern Recognition Second Edition 510
the fractional Laplacian 400
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7667526
求助须知:如何正确求助?哪些是违规求助? 9236653
关于积分的说明 19880541
捐赠科研通 7236878
什么是DOI,文献DOI怎么找? 3283960
关于科研通互助平台的介绍 2442814
邀请新用户注册赠送积分活动 2285427