MMFusion: Query-Guided Cross-Fusion for Robust Multimodal Knowledge Graph Completion

计算机科学 人工智能 图形 知识图 图论 稳健性(进化) 理论计算机科学 缩小 矩阵代数 基于知识的系统 机器学习 数据挖掘 算法设计 算法
作者
Mingze Han,Shuang Liu,Jiana Meng
出处
期刊:IEEE Signal Processing Letters [Institute of Electrical and Electronics Engineers]
卷期号:33: 2355-2359
标识
DOI:10.1109/lsp.2026.3683330
摘要

Multimodal knowledge graph completion enriches link prediction by combining structured triples with auxiliary modalities such as text and images, but existing solutions often rely on relation-insensitive fusion and are brittle under instance-level modality noise, leading to weak alignment between entity evidence and relational semantics. We propose MMFusion, a unified reasoning framework with three key designs. First, Relation-Guided Entity Transformation (RGET) constructs relation-conditioned entity views within each modality to enhance entity–relation compatibility. Second, Adaptive Modality Gating (AMG) performs instance-level gating across structural, visual, and textual signals to suppress noisy modalities and improve fusion robustness. Finally, Query-Guided Cross-modal Fusion (QCF) builds a unified relation-conditioned query via dual-stream attention between entity and relation modalities, enabling deep cross-modal alignment for link prediction. Extensive experiments on four public multimodal knowledge graph datasets show that MMFusion consistently outperforms strong baselines, especially in sparse and noisy settings.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
恩雁发布了新的文献求助10
1秒前
1秒前
共享精神应助南风采纳,获得10
1秒前
2秒前
mll完成签到,获得积分10
2秒前
177发布了新的文献求助10
2秒前
2秒前
zhanghaha发布了新的文献求助10
2秒前
分页符发布了新的文献求助10
2秒前
乔中义完成签到 ,获得积分10
3秒前
123完成签到 ,获得积分10
3秒前
3秒前
3秒前
4秒前
卧底玛雅应助wlx采纳,获得10
4秒前
传奇3应助快乐采纳,获得10
4秒前
孟辰凡发布了新的文献求助10
4秒前
斯文败类应助重要谷冬采纳,获得10
5秒前
香蕉觅云应助天天是好天采纳,获得10
5秒前
andi发布了新的文献求助20
5秒前
6666666666发布了新的文献求助10
5秒前
6秒前
6秒前
科研通AI6.4应助苹果灰狼采纳,获得10
6秒前
7秒前
Y_ting发布了新的文献求助10
8秒前
称心半双发布了新的文献求助10
9秒前
9秒前
XX完成签到,获得积分10
9秒前
qinghuayang833完成签到 ,获得积分10
10秒前
香菜张发布了新的文献求助10
10秒前
cecilia完成签到,获得积分20
10秒前
zhanghaha完成签到,获得积分20
10秒前
11秒前
翘着二郎腿的躺平大王完成签到,获得积分10
11秒前
有魅力中蓝完成签到,获得积分10
11秒前
11秒前
11秒前
张瑞雪完成签到,获得积分10
11秒前
11秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
2026年中国辛酸癸酸聚乙二醇甘油酯行业市场现状调查及投资机会研判报告 1000
2026年中国辛酸癸酸聚乙二醇甘油酯行业市场规模及竞争格局分析报告 1000
模型平均及其应用 900
Fundamentals of Pharmaceutical and Biologics Regulations: A Global Perspective, Second Edition 700
Évora na Idade Média 555
作者名:Kristopher P. Plain,悉尼大学的,目前只能查到其四篇论文,想找到其博士论文 550
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7342882
求助须知:如何正确求助?哪些是违规求助? 8955226
关于积分的说明 19012670
捐赠科研通 6994988
什么是DOI,文献DOI怎么找? 3219326
关于科研通互助平台的介绍 2384567
邀请新用户注册赠送积分活动 2199475