清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Towards Generalist Biomedical AI

通才与专种 医学教育 医学 生物 生态学 栖息地
作者
Tao Tu,Shekoofeh Azizi,Danny Driess,Mike Schaekermann,Mohamed Amin,Pi-Chuan Chang,Andrew W. Carroll,Charles T. Lau,Ryutaro Tanno,Sofia Ira Ktena,Anil K. Palepu,Basil Mustafa,Aakanksha Chowdhery,Yun Liu,Simon Kornblith,David J. Fleet,Philip Mansfield,Sushant Prakash,Renee Wong,Sunny Virmani
出处
期刊: [Massachusetts Medical Society]
卷期号:1 (3): AIoa2300138-AIoa2300138 被引量:1058
标识
DOI:10.1056/aioa2300138
摘要

BACKGROUND: Medicine is inherently multimodal, requiring the simultaneous interpretation and integration of insights between many data modalities spanning text, imaging, genomics, and more. Generalist biomedical artificial intelligence systems that flexibly encode, integrate, and interpret these data might better enable impactful applications ranging from scientific discovery to care delivery. METHODS: To catalyze development of these models, we curated MultiMedBench, a new multimodal biomedical benchmark. MultiMedBench encompasses 14 diverse tasks, such as medical question answering, mammography and dermatology image interpretation, radiology report generation and summarization, and genomic variant calling. We then introduced Med-PaLM Multimodal (Med-PaLM M), our proof of concept for a generalist biomedical AI system that flexibly encodes and interprets biomedical data including clinical language, imaging, and genomics with the same set of model weights. To further probe the capabilities and limitations of Med-PaLM M, we conducted a radiologist evaluation of model-generated (and human) chest x-ray reports. RESULTS: We observed encouraging performance across model scales. Med-PaLM M reached performance competitive with or exceeding the state of the art on all MultiMedBench tasks, often surpassing specialist models by a wide margin. In a side-by-side ranking on 246 retrospective chest x-rays, clinicians expressed a pairwise preference for Med-PaLM Multimodal reports over those produced by radiologists in up to 40.50% of cases, suggesting potential clinical utility. CONCLUSIONS: Although considerable work is needed to validate these models in real-world cases and understand if cross-modality generalization is possible, our results represent a milestone toward the development of generalist biomedical artificial intelligence systems. (Funded by Alphabet Inc. and/or a subsidiary thereof.).
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
RZH发布了新的文献求助10
2秒前
机智的如曼完成签到,获得积分10
12秒前
Xzx1995完成签到 ,获得积分10
14秒前
FashionBoy的应助被科研通管家采纳,获得10
17秒前
fairytaler的应助被科研通管家采纳,获得10
17秒前
现代的初之完成签到,获得积分10
23秒前
大模型的应助被蜗牛好好飞采纳,获得10
24秒前
ChatGPT完成签到,获得积分10
26秒前
慕青的应助被蜗牛好好飞采纳,获得10
30秒前
夏同学完成签到 ,获得积分10
31秒前
今后的应助被蜗牛好好飞采纳,获得10
36秒前
wwrjj完成签到,获得积分0
37秒前
搜集达人的应助被cc采纳,获得10
38秒前
大模型的应助被蜗牛好好飞采纳,获得10
41秒前
47秒前
47秒前
御坂10576号完成签到,获得积分10
47秒前
49秒前
义气的雅琴完成签到,获得积分10
50秒前
cc发布了新的文献求助10
52秒前
NexusExplorer的应助被蜗牛好好飞采纳,获得10
53秒前
Harlotte完成签到 ,获得积分0
54秒前
蒋不惜完成签到,获得积分10
1分钟前
changfox完成签到,获得积分10
1分钟前
hyk完成签到 ,获得积分10
1分钟前
milalala完成签到 ,获得积分10
1分钟前
浚稚完成签到 ,获得积分10
1分钟前
1分钟前
冷傲的夜白完成签到,获得积分10
1分钟前
岳晓燕完成签到 ,获得积分10
1分钟前
1分钟前
清脆代真发布了新的文献求助50
1分钟前
1分钟前
谭访冬完成签到,获得积分10
1分钟前
MUAN完成签到 ,获得积分10
1分钟前
1分钟前
细腻海瑶完成签到,获得积分10
1分钟前
铁瓜李完成签到 ,获得积分10
1分钟前
2分钟前
红烧肉耶完成签到 ,获得积分10
2分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8173230
求助须知:如何正确求助?哪些是违规求助? 9565593
关于积分的说明 21780525
捐赠科研通 7767429
什么是DOI,文献DOI怎么找? 3431542
关于科研通互助平台的介绍 2555764
邀请新用户注册赠送积分活动 2476697