亲爱的研友该休息了!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您度过漫漫科研夜!身体可是革命的本钱,早点休息,好梦!

VesNet-RL: Simulation-Based Reinforcement Learning for Real-World US Probe Navigation

强化学习 计算机科学 人工智能 模态(人机交互) 计算机视觉 一般化 过程(计算) 二元分类 代表(政治) 机器学习 政治 支持向量机 操作系统 数学分析 数学 法学 政治学
作者
Yuan Bi,Zhongliang Jiang,Yuan Gao,Thomas Wendler,Angelos Karlas,Nassir Navab
出处
期刊:IEEE robotics and automation letters [Institute of Electrical and Electronics Engineers]
卷期号:7 (3): 6638-6645 被引量:30
标识
DOI:10.1109/lra.2022.3176112
摘要

Ultrasound (US) is one of the most common medical imaging modalities since it is radiation-free, low-cost, and real-time. In freehand US examinations, sonographers often navigate a US probe to visualize standard examination planes with rich diagnostic information. However, reproducibility and stability of the resulting images often suffer from intra- and inter-operator variation. Reinforcement learning (RL), as an interaction-based learning method, has demonstrated its effectiveness in visual navigating tasks; however, RL is limited in terms of generalization. To address this challenge, we propose a simulation-based RL framework for real-world navigation of US probes towards the standard longitudinal views of vessels. A UNet is used to provide binary masks from US images; thereby, the RL agent trained on simulated binary vessel images can be applied in real scenarios without further training. To accurately characterize actual states, a multi-modality state representation structure is introduced to facilitate the understanding of environments. Moreover, considering the characteristics of vessels, a novel standard view recognition approach based on the minimum bounding rectangle is proposed to terminate the searching process. To evaluate the effectiveness of the proposed method, the trained policy is validated virtually on 3D volumes of a volunteer's in-vivo carotid artery, and physically on custom-designed gel phantoms using robotic US. The results demonstrate that proposed approach can effectively and accurately navigate the probe towards the longitudinal view of vessels.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
学霸业的应助被洗衣机采纳,获得10
刚刚
LIYI发布了新的文献求助10
刚刚
刚刚
俭朴朝雪发布了新的文献求助10
1秒前
白华苍松发布了新的文献求助20
1秒前
辣爆虾尾完成签到 ,获得积分10
1秒前
5秒前
5秒前
6秒前
深情安青的应助被念汐采纳,获得10
7秒前
积极的逍遥完成签到,获得积分10
8秒前
8秒前
ranran完成签到 ,获得积分10
9秒前
Owen的应助被LIYI采纳,获得10
9秒前
华仔的应助被白华苍松采纳,获得10
10秒前
第四周期发布了新的文献求助10
10秒前
孟芳羽完成签到,获得积分20
11秒前
luocan发布了新的文献求助10
12秒前
14秒前
测谎仪北棠枝完成签到 ,获得积分10
14秒前
15秒前
EricSai发布了新的文献求助10
18秒前
19秒前
ceed发布了新的文献求助10
20秒前
xx发布了新的文献求助10
24秒前
25秒前
大个的应助被李密采纳,获得10
25秒前
传奇3的应助被李密采纳,获得10
28秒前
Nodens完成签到,获得积分10
29秒前
29秒前
29秒前
共享精神的应助被EricSai采纳,获得10
30秒前
彭于晏的应助被第四周期采纳,获得10
31秒前
科研通AI2S的应助被萧雨墨采纳,获得10
31秒前
xinyuanjia完成签到,获得积分10
31秒前
33秒前
念汐发布了新的文献求助10
34秒前
huahuahua发布了新的文献求助10
35秒前
wql完成签到,获得积分10
35秒前
36秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Sex, Aging, and Death in a Medieval Medical Compendium: Trinity College Cambridge MS R.14.52, Its Texts, Language, and Scribe 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
基于界面调控的高效湿气发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8190037
求助须知:如何正确求助?哪些是违规求助? 9577165
关于积分的说明 21851818
捐赠科研通 7788131
什么是DOI,文献DOI怎么找? 3436021
关于科研通互助平台的介绍 2559910
邀请新用户注册赠送积分活动 2482768