Real-world clinical impact of three commercial AI algorithms on musculoskeletal radiography interpretation: A prospective crossover reader study

工作流程 渡线 口译(哲学) 物理疗法 计算机科学 射线照相术 置信区间 算法 医学 交叉研究 医学物理学 前瞻性队列研究 临床预测规则 物理医学与康复 常规射线照相术 诊断准确性 医学诊断 数字射线照相术 临床试验 肌肉骨骼痛 机器学习 体格检查 医学影像学 肌肉骨骼疾病 梅德林 肌肉骨骼损伤 杠杆 考试(生物学) 放射科 诊断试验
作者
Philipp Prucker,Tristan Lemke,Christian Mertens,Sebastian Ziegelmayer,Markus M. Graf,Dominik Weller,Su Hwan Kim,Florian T. Gassert,Avan Kader,Felix J. Dorfner,Aymen Meddeb,Marcus R. Makowski,Jacqueline Lammert,Thomas S. Huber,Fabian Lohöfer,Keno K. Bressem,Lisa C. Adams,Ina Luiken,Felix Busch
出处
期刊:International Journal of Medical Informatics [Elsevier BV]
卷期号:205: 106120-106120 被引量:4
标识
DOI:10.1016/j.ijmedinf.2025.106120
摘要

PURPOSE: To prospectively assess the diagnostic performance, workflow efficiency, and clinical impact of three commercial deep-learning tools (BoneView, Rayvolve, RBfracture) for routine musculoskeletal radiograph interpretation. METHODS: From January to March 2025, two radiologists (4 and 5 years' experience) independently interpreted 1,037 adult musculoskeletal studies (2,926 radiographs) first unaided and, after 14-day washouts, with each AI tool in a randomized crossover design. Ground truth was established by confirmatory CT when available. Outcomes included sensitivity, specificity, accuracy, area under the receiver operating characteristic curve (AUC), interpretation time, diagnostic confidence (5-point Likert), and rates of additional CT recommendations and senior consultations. DeLong tests compared AUCs; Mann-Whitney U and χ2 tests assessed secondary endpoints. RESULTS: AI assistance did not significantly change performance for fractures, dislocations, or effusions. For fractures, AUCs were comparable to baseline (Reader 1: 96.50 % vs. 96.30-96.50 %; Reader 2: 95.35 % vs. 95.97 %; all p > 0.11). For dislocations, baseline AUCs (Reader 1: 92.66 %; Reader 2: 90.68 %) were unchanged with AI (92.76-93.95 % and 92.00 %; p ≥ 0.280). For effusions, baseline AUCs (Reader 1: 92.52 %; Reader 2: 96.75 %) were similar with AI (93.12 % and 96.99 %; p ≥ 0.157). Median interpretation times decreased with AI (Reader 1: 34 s to 21-25 s; Reader 2: 30 s to 21-26 s; all p < 0.001). Confidence improved across tools: BoneView increased combined "very good/excellent" ratings versus unaided reads (Reader 1: 509 vs. 449, p < 0.001; Reader 2: 483 vs. 439, p < 0.001); Rayvolve (Reader 1: 456 vs. 449, p = 0.029; Reader 2: 449 vs. 439, p < 0.001) and RBfracture (Reader 1: 457 vs. 449, p = 0.017; Reader 2: 448 vs. 439, p = 0.001) yielded smaller but significant gains. Reader 1 recommended fewer CT scans with AI assistance (33 vs. 22-23, p = 0.007). CONCLUSION: In a real-world clinical setting, AI-assisted interpretation of musculoskeletal radiographs reduced reading time and increased diagnostic confidence without materially affecting diagnostic performance. These findings support AI assistance as a lever for workflow efficiency and potential cost-effectiveness at scale.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
啾rr发布了新的文献求助10
2秒前
博丽灵梦发布了新的文献求助10
2秒前
4秒前
在水一方的应助被哈呼呼采纳,获得10
5秒前
orixero的应助被哈呼呼采纳,获得10
5秒前
丘比特的应助被哈呼呼采纳,获得10
5秒前
WSND发布了新的文献求助10
6秒前
6秒前
年轻的晓亦完成签到,获得积分20
6秒前
6秒前
8秒前
Echo完成签到,获得积分10
8秒前
lulu发布了新的文献求助20
9秒前
9秒前
10秒前
万能图书馆的应助被琴酒采纳,获得10
10秒前
岸边发布了新的文献求助10
11秒前
yjr发布了新的文献求助10
12秒前
田様的应助被橘子采纳,获得10
12秒前
人间慈悲的应助被快乐小凡采纳,获得10
12秒前
monster完成签到,获得积分10
13秒前
_Lanwei完成签到,获得积分10
13秒前
Zex发布了新的文献求助20
15秒前
科研通AI2S的应助被Li采纳,获得10
15秒前
JamesPei的应助被幽默玉米采纳,获得10
15秒前
博丽灵梦发布了新的文献求助10
15秒前
16秒前
李爱国的应助被淡淡初柔采纳,获得10
17秒前
科研通AI2S的应助被dochz采纳,获得10
18秒前
monster发布了新的文献求助10
19秒前
平淡丹彤完成签到,获得积分10
21秒前
21秒前
23秒前
24秒前
24秒前
科研通AI65的应助被林中鹿采纳,获得10
24秒前
无极微光的应助被温暖采纳,获得20
24秒前
25秒前
25秒前
跳跃忆山完成签到,获得积分10
25秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Agyptische Geschichte der 21.30. Dynastie 510
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8192647
求助须知:如何正确求助?哪些是违规求助? 9579118
关于积分的说明 21863752
捐赠科研通 7792215
什么是DOI,文献DOI怎么找? 3436974
关于科研通互助平台的介绍 2560633
邀请新用户注册赠送积分活动 2483864