Multimodal integration of neuroimaging and genetic data for the diagnosis of mood disorders based on computer vision models

重性抑郁障碍 神经影像学 人工智能 心情 机器学习 情绪障碍 计算机科学 深度学习 外显子组测序 心理学 医学 临床心理学 精神科 生物 焦虑 生物化学 突变 基因
作者
Seung‐Eun Lee,Yongwon Cho,Yuyoung Ji,Minhyek Jeon,Aram Kim,Byung‐Joo Ham,Yoonjung Yoonie Joo
出处
期刊:Journal of Psychiatric Research [Elsevier BV]
卷期号:172: 144-155 被引量:15
标识
DOI:10.1016/j.jpsychires.2024.02.036
摘要

Mood disorders, particularly major depressive disorder (MDD) and bipolar disorder (BD), are often underdiagnosed, leading to substantial morbidity. Harnessing the potential of emerging methodologies, we propose a novel multimodal fusion approach that integrates patient-oriented brain structural magnetic resonance imaging (sMRI) scans with DNA whole-exome sequencing (WES) data. Multimodal data fusion aims to improve the detection of mood disorders by employing established deep-learning architectures for computer vision and machine-learning strategies. We analyzed brain imaging genetic data of 321 East Asian individuals, including 147 patients with MDD, 78 patients with BD, and 96 healthy controls. We developed and evaluated six fusion models by leveraging common computer vision models in image classification: Vision Transformer (ViT), Inception-V3, and ResNet50, in conjunction with advanced machine-learning techniques (XGBoost and LightGBM) known for high-dimensional data analysis. Model validation was performed using a 10-fold cross-validation. Our ViT ⊕ XGBoost fusion model with MRI scans, genomic Single Nucleotide polymorphism (SNP) data, and unweighted polygenic risk score (PRS) outperformed baseline models, achieving an incremental area under the curve (AUC) of 0.2162 (32.03% increase) and 0.0675 (+8.19%) and incremental accuracy of 0.1455 (+25.14%) and 0.0849 (+13.28%) compared to SNP-only and image-only baseline models, respectively. Our findings highlight the opportunity to refine mood disorder diagnostics by demonstrating the transformative potential of integrating diverse, yet complementary, data modalities and methodologies.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
高灿完成签到 ,获得积分10
刚刚
babayega发布了新的文献求助10
刚刚
寇kk发布了新的文献求助10
刚刚
1秒前
年轻上线发布了新的文献求助10
1秒前
1秒前
枫叶完成签到,获得积分10
1秒前
1秒前
桐桐的应助被冬日采纳,获得10
1秒前
Vanff发布了新的文献求助10
1秒前
liao发布了新的文献求助10
1秒前
SciGPT的应助被Shale采纳,获得10
1秒前
1秒前
1秒前
佳佳发布了新的文献求助10
2秒前
2秒前
WistingWang发布了新的文献求助10
2秒前
2秒前
超帅冬云完成签到 ,获得积分10
2秒前
2秒前
初(*^▽^*)心的应助被胡萝卜卜采纳,获得10
2秒前
MIssing89完成签到,获得积分10
3秒前
852的应助被风中书本采纳,获得10
3秒前
烟花的应助被云书采纳,获得100
3秒前
3秒前
英吉利25发布了新的文献求助10
3秒前
安静的雨兰完成签到,获得积分20
3秒前
4秒前
4秒前
4秒前
万能图书馆的应助被zrx采纳,获得10
4秒前
4秒前
zz发布了新的文献求助10
4秒前
LLYUAN完成签到,获得积分10
4秒前
4秒前
5秒前
5秒前
5秒前
5秒前
5秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1500
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
Analyses de reconnaissances de dettes passées devant les échevins d'Ypres (1249-1291) 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8162816
求助须知:如何正确求助?哪些是违规求助? 9557103
关于积分的说明 21738393
捐赠科研通 7753330
什么是DOI,文献DOI怎么找? 3427963
关于科研通互助平台的介绍 2552742
邀请新用户注册赠送积分活动 2472556