A retrieval-augmented AI agent for medulloblastoma risk stratification and guideline-concordant decision support

一致性 医学 人工智能 决策支持系统 临床决策支持系统 指南 危险分层 利克特量表 机器学习 医学物理学 髓母细胞瘤 知识库 临床试验 前瞻性队列研究 计算机科学 临床实习 质量(理念) 梅德林 风险评估 质量保证 病人护理 比例(比率) Boosting(机器学习) 数据挖掘 理论(学习稳定性) 质量管理 自然语言处理 决策树 患者数据
作者
Chenhao Fang,Yueying Yao,Wen Chen,Yunjia Guo,Shuo Li,Fudong Zheng,Jintian Huang,Hong Chen,Yijin Gao,Qinchuan Liang,Huiqing Liu
出处
期刊:Digital health [SAGE Publishing]
卷期号:12
标识
DOI:10.1177/20552076261496985
摘要

Objectives The 2021 WHO classification has refined medulloblastoma stratification, but integrating imaging, pathological, and molecular data for precision management remains challenging. We evaluated a retrieval-augmented artificial intelligence agent designed to synthesize multimodal data into guideline-concordant decision support. Methods We developed a clinical agent integrating a localized knowledge base with Chain-of-Thought prompting. In a blinded retrospective evaluation using de-identified clinical vignettes from two tertiary centers, the system was assessed by 10 senior clinicians using a 5-point Likert scale across nine clinical dimensions. “Multi-center” refers to the source institutions of patient cases, not prospective validation across care settings. Four Large Language Model backends—Qwen, DeepSeek, Doubao, and GPT-4—were compared. Results The evaluation comprised 224 de-identified clinical vignettes, 896 model outputs, and 80,640 individual ratings from 10 expert evaluators across nine dimensions. Qwen and DeepSeek demonstrated superior performance (overall mean >4.90) compared with GPT-4 (mean 4.54; P<0.001). GPT-4 showed marked deficits in Applicability and Comprehensiveness. Stability analysis further showed an elongated score distribution for GPT-4, whereas the domain-optimized configurations exhibited tightly clustered distributions. Conclusion Constraining generative models with a localized retrieval corpus yielded higher expert-rated response quality than the generalist backend under the same RAG framework. This framework showed promising expert-rated guideline concordance in an offline evaluation; prospective clinical validation remains necessary before translational use in neuro-oncology.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
科研通AI2S的应助被111采纳,获得10
刚刚
还不是尽头完成签到,获得积分10
刚刚
1秒前
unn完成签到,获得积分20
1秒前
贝贝贝贝完成签到,获得积分10
1秒前
Jun的应助被小花花采纳,获得10
2秒前
122mm鲱鱼罐头关注了科研通微信公众号
2秒前
2秒前
自由的寒蕾完成签到,获得积分10
2秒前
2秒前
3秒前
3秒前
11223完成签到 ,获得积分10
3秒前
3秒前
4秒前
yuan发布了新的文献求助10
5秒前
5秒前
6秒前
菠菠发布了新的文献求助10
6秒前
无情丹秋发布了新的文献求助10
6秒前
曈12完成签到 ,获得积分10
6秒前
wanci的应助被yangyang采纳,获得10
7秒前
缄默完成签到,获得积分10
7秒前
chiyudawang发布了新的文献求助10
7秒前
orixero的应助被杰帅采纳,获得20
7秒前
庄艺斌发布了新的文献求助10
8秒前
9秒前
Jasper的应助被科研通管家采纳,获得10
9秒前
9秒前
Elva完成签到,获得积分20
9秒前
所所的应助被科研通管家采纳,获得20
9秒前
科目三的应助被科研通管家采纳,获得100
9秒前
丘比特的应助被阿Q采纳,获得10
9秒前
风吹麦浪的应助被科研通管家采纳,获得10
9秒前
酷波er的应助被科研通管家采纳,获得10
10秒前
小马甲的应助被科研通管家采纳,获得10
10秒前
bkagyin的应助被科研通管家采纳,获得10
10秒前
10秒前
斯文败类的应助被科研通管家采纳,获得30
10秒前
大个的应助被科研通管家采纳,获得30
10秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
高分子基功能界面水蒸发材料与应用研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8178048
求助须知:如何正确求助?哪些是违规求助? 9568764
关于积分的说明 21801331
捐赠科研通 7772794
什么是DOI,文献DOI怎么找? 3432613
关于科研通互助平台的介绍 2556748
邀请新用户注册赠送积分活动 2478151