OralGPT-Omni: A Versatile Dental Multimodal Large Language Model

模式 计算机科学 水准点(测量) 人工智能 一套 构造(python库) 医学影像学 图像(数学) 机器学习 数据科学 模态(人机交互) 可信赖性 自然语言处理 治疗方式 语言模型 牙科治疗 数据建模 计算机视觉
作者
Hao Jing,Liang, Yuci,Lin, Lizhuo,FAN Yuxuan,Zhou Wen-kai,Guo Kaixin,Ye, Zanting,Sun Yan-peng,Zhang Xinyu,Yang Yan-qi,Li Qiankun,Tang, Hao,Tsoi James Kit‐Hon,Shen, Linlin,Hung, Kuo Feng
出处
期刊:Cornell University - arXiv [Cornell University]
摘要

Multimodal Large Language Models (MLLMs) have exhibited immense potential across numerous medical specialties; yet, dentistry remains underexplored, in part due to limited domain-specific data, scarce dental expert annotations, insufficient modality-specific modeling, and challenges in reliability. In this paper, we present OralGPT-Omni, the first dental-specialized MLLM designed for comprehensive and trustworthy analysis across diverse dental imaging modalities and clinical tasks. To explicitly capture dentists' diagnostic reasoning, we construct TRACE-CoT, a clinically grounded chain-of-thought dataset that mirrors dental radiologists' decision-making processes. This reasoning supervision, combined with our proposed four-stage training paradigm, substantially strengthens the model's capacity for dental image understanding and analysis. In parallel, we introduce MMOral-Uni, the first unified multimodal benchmark for dental image analysis. It comprises 2,809 open-ended question-answer pairs spanning five modalities and five tasks, offering a comprehensive evaluation suite to date for MLLMs in digital dentistry. OralGPT-Omni achieves an overall score of 51.84 on the MMOral-Uni benchmark and 45.31 on the MMOral-OPG benchmark, dramatically outperforming the scores of GPT-5. Our work promotes intelligent dentistry and paves the way for future advances in dental image analysis. All code, benchmark, and models will be made publicly available.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
跳跃的怀寒完成签到,获得积分10
刚刚
JIN0发布了新的文献求助10
刚刚
1秒前
2秒前
ZYX发布了新的文献求助10
3秒前
3秒前
将宇宙随身携带完成签到,获得积分10
4秒前
puzhongjiMiQ发布了新的文献求助10
4秒前
HQQ完成签到,获得积分10
5秒前
yyxhahaha完成签到,获得积分10
5秒前
6秒前
7秒前
Sweet发布了新的文献求助10
7秒前
7秒前
Keats完成签到,获得积分10
7秒前
HugginBearOuO完成签到,获得积分10
7秒前
8秒前
puzhongjiMiQ发布了新的文献求助10
8秒前
8秒前
徐六完成签到,获得积分10
8秒前
9秒前
9秒前
9秒前
9秒前
9秒前
Owen应助诗谙采纳,获得30
10秒前
10秒前
10秒前
在水一方应助愉快惮采纳,获得10
10秒前
puzhongjiMiQ发布了新的文献求助10
10秒前
11秒前
puzhongjiMiQ发布了新的文献求助10
11秒前
bkagyin应助光热效应采纳,获得10
11秒前
MORE发布了新的文献求助10
11秒前
11秒前
Lu完成签到,获得积分10
11秒前
11秒前
科研通AI6.2应助Keats采纳,获得30
12秒前
开放穆发布了新的文献求助10
12秒前
Lucas应助火星人采纳,获得10
13秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
HYDROLYSE ACIDE DE QUELQUES DIOXASPIROCYCLANES 1314
Navigating Normative Orders. Interdisciplinary Perspectives 800
Essentials of Carbohydrate Chemistry and Biochemistry, 4th Edition 700
1 Peter and Christ's Descent to the Dead in Its Early Christian Reception 700
Organizational Behavior 510
Management and the Arts 510
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7743909
求助须知:如何正确求助?哪些是违规求助? 9291947
关于积分的说明 20210059
捐赠科研通 7322548
什么是DOI,文献DOI怎么找? 3307496
关于科研通互助平台的介绍 2459335
邀请新用户注册赠送积分活动 2318269