Graph-Informed and FiLM-Enhanced Multimodal Fusion for Myocardial Infarction Prediction

计算机科学 人工智能 编码器 心肌梗塞 模态(人机交互) 模式识别(心理学) 心电图 波形 特征提取 机器学习 融合 可扩展性 变压器 心肌梗死诊断 传感器融合 图像融合 QRS波群 医学影像学 解码方法 烧蚀 信号(编程语言) 数据挖掘 深度学习 计算机视觉 数据建模
作者
Xiantong Xiang,Longxiao Gao,Yuansheng Liu,Ningji Gong,Yongshun Gong
出处
期刊:IEEE Journal of Biomedical and Health Informatics [Institute of Electrical and Electronics Engineers]
卷期号:30 (9): 7431-7444 被引量:1
标识
DOI:10.1109/jbhi.2026.3669222
摘要

Accurate and timely diagnosis of cardiovascular diseases, particularly myocardial infarction (MI), remains a critical clinical challenge. Existing electrocardiogram (ECG) analysis methods often rely solely on asingle data modality, such as raw signals or waveform images, which limits their ability to capture thebroader physiological context. To address this limitation, we propose GFM-MIP, a Graph-informed and FiLM-enhanced Multimodal Fusion framework for myocardial infarction prediction. GFM-MIP integrates 12-lead ECG time-series signals, ECG images, and laboratory test results through a unified architecture. Specifically, it employs a Graphormer encoder to model inter-lead dependencies in ECG signals and a Vision Transformer to extract morphological patterns from ECG images, both modulated by patient-specific laboratory features using Feature-wise Linear Modulation (FiLM). A Transformer-based fusion module captures cross-modal interactions, while a contrastive learning objective encourages alignment between signal and image modalities. Experimental results on a real-world clinical dataset and three public benchmarks demonstrate that GFM-MIP consistently outperforms state-of-the-art baselines across multiple evaluation metrics. Ablation studies further validate the contribution of each modality and architectural component. The proposed framework offers a clinically meaningful and scalable solution for robust, multimodal cardiovascular diagnosis.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
mmain完成签到 ,获得积分10
刚刚
柏笙笑完成签到 ,获得积分10
1秒前
lby发布了新的文献求助10
1秒前
2秒前
容易记完成签到,获得积分10
2秒前
Maestro_S的应助被车水采纳,获得60
3秒前
科研通AI6.2的应助被橙子采纳,获得10
3秒前
佩奇发布了新的文献求助10
4秒前
4秒前
爱笑的雪糕完成签到,获得积分20
4秒前
anchoro发布了新的文献求助10
5秒前
科研喵发布了新的文献求助10
5秒前
5秒前
6秒前
长弓诘完成签到 ,获得积分10
6秒前
阿啵呲嘚完成签到,获得积分10
6秒前
ZacharyY发布了新的文献求助10
6秒前
我就是KKKK发布了新的文献求助10
7秒前
虚幻的觅露完成签到,获得积分10
7秒前
隐形曼青的应助被踏实雪枫采纳,获得10
7秒前
骆十八完成签到,获得积分10
8秒前
Ruo完成签到,获得积分10
8秒前
大气颜演发布了新的文献求助10
10秒前
12秒前
13秒前
汉堡包的应助被ZacharyY采纳,获得10
14秒前
传奇3的应助被Samuel采纳,获得10
15秒前
18秒前
赵波发布了新的文献求助10
19秒前
19秒前
可妍昇发布了新的文献求助10
19秒前
英俊的铭的应助被Eidden_Zhang采纳,获得10
21秒前
21秒前
科研通AI6.4的应助被阿May采纳,获得10
23秒前
buheji发布了新的文献求助30
23秒前
24秒前
qiqi发布了新的文献求助10
24秒前
无极微光的应助被科研通管家采纳,获得20
24秒前
香蕉觅云的应助被科研通管家采纳,获得10
24秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1080
Encyclopedia of Modern Artificial Intelligence 1000
Особенности технологий и методов информационно-психологических войн СССР с Великобританией и США в период 1939-1953 гг 1000
Das Matthäusevangelium: Kapitel 1:1–17 1000
Analyses de reconnaissances de dettes passées devant les échevins d'Ypres (1249-1291) 600
Cellulose and Cellulose Derivatives: Synthesis, Modification and Applications 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8143354
求助须知:如何正确求助?哪些是违规求助? 9542834
关于积分的说明 21653730
捐赠科研通 7728504
什么是DOI,文献DOI怎么找? 3422020
关于科研通互助平台的介绍 2547337
邀请新用户注册赠送积分活动 2464797