Spatial and Modal Optimal Transport for Fast Cross-Modal MRI Reconstruction

情态动词 计算机科学 迭代重建 人工智能 过程(计算) 任务(项目管理) 计算机视觉 图像质量 算法 图像(数学) 模式识别(心理学) 工程类 高分子化学 化学 系统工程 操作系统
作者
Qi Wang,Zhijie Wen,Jun Shi,Qian Wang,Dinggang Shen,Shihui Ying
出处
期刊:IEEE Transactions on Medical Imaging [Institute of Electrical and Electronics Engineers]
卷期号:43 (11): 3924-3935 被引量:3
标识
DOI:10.1109/tmi.2024.3406559
摘要

Multi-modal magnetic resonance imaging (MRI) plays a crucial role in comprehensive disease diagnosis in clinical medicine. However, acquiring certain modalities, such as T2-weighted images (T2WIs), is time-consuming and prone to be with motion artifacts. It negatively impacts subsequent multi-modal image analysis. To address this issue, we propose an end-to-end deep learning framework that utilizes T1-weighted images (T1WIs) as auxiliary modalities to expedite T2WIs' acquisitions. While image pre-processing is capable of mitigating misalignment, improper parameter selection leads to adverse pre-processing effects, requiring iterative experimentation and adjustment. To overcome this shortage, we employ Optimal Transport (OT) to synthesize T2WIs by aligning T1WIs and performing cross-modal synthesis, effectively mitigating spatial misalignment effects. Furthermore, we adopt an alternating iteration framework between the reconstruction task and the cross-modal synthesis task to optimize the final results. Then, we prove that the reconstructed T2WIs and the synthetic T2WIs become closer on the T2 image manifold with iterations increasing, and further illustrate that the improved reconstruction result enhances the synthesis process, whereas the enhanced synthesis result improves the reconstruction process. Finally, experimental results from FastMRI and internal datasets confirm the effectiveness of our method, demonstrating significant improvements in image reconstruction quality even at low sampling rates.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
tangerine完成签到,获得积分10
1秒前
忧虑的靖巧完成签到 ,获得积分0
1秒前
shengjiangtai完成签到 ,获得积分10
1秒前
victor1995888发布了新的文献求助10
2秒前
ZBH完成签到,获得积分10
3秒前
3秒前
要减肥的安柏完成签到 ,获得积分10
4秒前
5秒前
东风的应助被花花采纳,获得10
5秒前
李天王发布了新的文献求助10
5秒前
yy完成签到,获得积分10
6秒前
6秒前
6秒前
cdercder的应助被胡萝卜卜采纳,获得10
6秒前
6秒前
8秒前
LingYue发布了新的文献求助10
8秒前
勤劳的乐安完成签到,获得积分10
8秒前
8秒前
WYL发布了新的文献求助10
9秒前
李健的应助被雨季采纳,获得10
9秒前
9秒前
暴躁的店员完成签到 ,获得积分20
9秒前
SIMON发布了新的文献求助10
9秒前
FionaZhang发布了新的文献求助10
9秒前
10秒前
cdercder的应助被科研助理795采纳,获得10
11秒前
TomCat发布了新的文献求助10
11秒前
阿里卡多完成签到 ,获得积分10
12秒前
WYL发布了新的文献求助10
12秒前
WYL发布了新的文献求助10
12秒前
WYL发布了新的文献求助10
12秒前
yy发布了新的文献求助30
12秒前
桐桐的应助被xhsz1111采纳,获得10
12秒前
小赞发布了新的文献求助10
13秒前
13秒前
41651653发布了新的文献求助10
13秒前
k.o.发布了新的文献求助10
13秒前
wy发布了新的文献求助10
14秒前
飘逸小天鹅完成签到 ,获得积分10
14秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Handbook of Sport Coaching Research 1000
Orthognathic Surgery - 2 Volume Set 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8193348
求助须知:如何正确求助?哪些是违规求助? 9579548
关于积分的说明 21866040
捐赠科研通 7792906
什么是DOI,文献DOI怎么找? 3437242
关于科研通互助平台的介绍 2560702
邀请新用户注册赠送积分活动 2484066