A Novel Switching of Artificial Intelligence to Generate Simultaneously Multimodal Images to Assess Inflammation and Predict Outcomes in Ulcerative Colitis—(With Video)

医学 模式 模态(人机交互) 队列 人工智能 彩色内窥镜 结肠镜检查 治疗方式 粘膜炎症 内科学 炎症 结直肠癌 计算机科学 癌症 社会科学 社会学
作者
Marietta Iacucci,Irene Zammarchi,Giovanni Santacroce,Bisi Bode Kolawole,Ujwala Chaudhari,Rocío del Amor,Pablo Meseguer,Valery Naranjo,Miguel Puga‐Tejada,Ivan Capobianco,Ilaria Ditonno,Andrea Buda,Brian Hayes,Rory Crotty,Raf Bisschops,Subrata Ghosh,Enrico Grisan
出处
期刊:Digestive Endoscopy [Wiley]
被引量:1
标识
DOI:10.1111/den.15067
摘要

ABSTRACT Objectives Virtual Chromoendoscopy (VCE) is pivotal for assessing activity and predicting outcomes in Ulcerative Colitis (UC), though interobserver variability and the need for expertise persist. Artificial intelligence (AI) offers standardized VCE‐based assessment. This study introduces a novel AI model to detect and simultaneously generate various endoscopic modalities, enhancing AI‐driven inflammation assessment and outcome prediction in UC. Methods Endoscopic videos in high‐definition white‐light, iScan2, iScan3, and NBI from UC patients of the international PICaSSO iScan and NBI cohort (302 and 54 patients, respectively) were used to develop a neural network to identify the acquisition modality of each frame and for inter‐modality image switching. 2535 frames from 169 videos of the iScan cohort were switched to different modalities and trained a deep‐learning model for inflammation assessment. Subsequently, the model was tested on a subset of the iScan and NBI cohorts (72 and 51 videos, respectively). Performance in predicting endoscopic and histological activity and outcomes was evaluated. Results The model efficiently classified and converted images across modalities (92% accuracy). Performance in predicting endoscopic and histological remission was excellent, especially with different modalities combined in both iScan (accuracy 81.3% and 89.6%; AUROC 0.92 and 0.89 by UCEIS and PICaSSO, respectively) and the NBI cohort. Moreover, it showed a remarkable ability in predicting clinical outcomes. Conclusions Our multimodal “AI‐switching” model innovatively detects and transitions between different endoscopic modalities, refining inflammation assessment and outcome prediction in UC by integrating model‐derived images.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
tt完成签到,获得积分10
1秒前
乖咪甜球球完成签到 ,获得积分10
8秒前
Akim的应助被mianmian186采纳,获得10
13秒前
李健的应助被mianmian186采纳,获得10
13秒前
虚幻念寒完成签到 ,获得积分10
15秒前
16秒前
一方通行完成签到,获得积分10
17秒前
Lingeek的应助被科研通管家采纳,获得30
18秒前
CX完成签到,获得积分10
18秒前
爆米花的应助被科研通管家采纳,获得10
18秒前
Hanoi347的应助被科研通管家采纳,获得30
18秒前
风吹麦浪的应助被yyyyy采纳,获得10
22秒前
丝状佩奇完成签到 ,获得积分10
26秒前
翰飞寰宇完成签到 ,获得积分10
31秒前
何ry完成签到 ,获得积分10
32秒前
yandongchem完成签到,获得积分10
34秒前
刘俊彤完成签到 ,获得积分10
35秒前
西瓜皮先生完成签到 ,获得积分10
38秒前
静静的旋律完成签到 ,获得积分10
46秒前
GO1完成签到 ,获得积分10
47秒前
49秒前
喵喵大王完成签到 ,获得积分10
52秒前
壮壮归来发布了新的文献求助20
54秒前
死糊完成签到,获得积分10
54秒前
byron完成签到 ,获得积分0
54秒前
自律完成签到,获得积分10
57秒前
57秒前
整齐的曼安完成签到,获得积分10
1分钟前
痴行完成签到,获得积分10
1分钟前
花阳完成签到 ,获得积分10
1分钟前
su完成签到 ,获得积分0
1分钟前
痴行发布了新的文献求助10
1分钟前
潇洒的老黑完成签到,获得积分10
1分钟前
CJ1977完成签到,获得积分10
1分钟前
兰园蓝发布了新的文献求助10
1分钟前
xiaoxiao完成签到,获得积分10
1分钟前
feiyafei完成签到 ,获得积分10
1分钟前
k001boyxw完成签到,获得积分10
1分钟前
1分钟前
高兴的灰狼完成签到,获得积分10
1分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8190322
求助须知:如何正确求助?哪些是违规求助? 9577417
关于积分的说明 21852481
捐赠科研通 7788924
什么是DOI,文献DOI怎么找? 3436315
关于科研通互助平台的介绍 2560144
邀请新用户注册赠送积分活动 2482995