清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

NavRL: Learning Safe Flight in Dynamic Environments

航空学 计算机科学 工程类
作者
Zhefan Xu,Xinming Han,Haoyu Shen,Hanyu Jin,Kenji Shimada
出处
期刊:IEEE robotics and automation letters [Institute of Electrical and Electronics Engineers]
卷期号:10 (4): 3668-3675 被引量:132
标识
DOI:10.1109/lra.2025.3546069
摘要

Safe flight in dynamic environments requires unmanned aerial vehicles (UAVs) to make effective decisions when navigating cluttered spaces with moving obstacles. Traditional approaches often decompose decision-making into hierarchical modules for prediction and planning. Although these handcrafted systems can perform well in specific settings, they might fail if environmental conditions change and often require careful parameter tuning. Additionally, their solutions could be suboptimal due to the use of inaccurate mathematical model assumptions and simplifications aimed at achieving computational efficiency. To overcome these limitations, this letter introduces the NavRL framework, a deep reinforcement learning-based navigation method built on the Proximal Policy Optimization (PPO) algorithm. NavRL utilizes our carefully designed state and action representations, allowing the learned policy to make safe decisions in the presence of both static and dynamic obstacles, with zero-shot transfer from simulation to real-world flight. Furthermore, the proposed method adopts a simple but effective safety shield for the trained policy, inspired by the concept of velocity obstacles, to mitigate potential failures associated with the black-box nature of neural networks. To accelerate the convergence, we implement the training pipeline using NVIDIA Isaac Sim, enabling parallel training with thousands of quadcopters. Simulation and physical experiments show that our method ensures safe navigation in dynamic environments and results in the fewest collisions compared to benchmarks.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
冥土追魂发布了新的文献求助10
1秒前
丘比特的应助被武雨寒采纳,获得10
12秒前
懵懂的小之完成签到,获得积分10
12秒前
专注的怜珊完成签到,获得积分10
14秒前
完美世界的应助被武雨寒采纳,获得10
19秒前
科研通AI6.4的应助被cat采纳,获得10
24秒前
27秒前
羞涩的傲菡完成签到,获得积分10
28秒前
武雨寒发布了新的文献求助10
30秒前
兴奋乞完成签到,获得积分10
45秒前
零度空间完成签到,获得积分10
46秒前
痴情的不惜完成签到,获得积分10
56秒前
58秒前
整齐念薇完成签到,获得积分10
58秒前
武雨寒发布了新的文献求助10
1分钟前
1分钟前
诸葛平卉完成签到 ,获得积分10
1分钟前
星辰大海的应助被psm采纳,获得10
1分钟前
1分钟前
飞天大南瓜完成签到,获得积分10
1分钟前
Gilgardea发布了新的文献求助10
1分钟前
车车完成签到 ,获得积分10
1分钟前
精明开山完成签到,获得积分10
1分钟前
1分钟前
鲤鱼遥完成签到,获得积分10
1分钟前
cat发布了新的文献求助10
1分钟前
AG完成签到,获得积分10
1分钟前
田田完成签到 ,获得积分10
1分钟前
1分钟前
等待凡英完成签到,获得积分10
1分钟前
陈荆洲完成签到,获得积分10
1分钟前
高高的玉兰完成签到,获得积分10
1分钟前
2分钟前
小二郎的应助被cat采纳,获得10
2分钟前
科研通AI6.2的应助被pitinmoon采纳,获得10
2分钟前
漂亮秋荷完成签到,获得积分10
2分钟前
腼腆的雪珊完成签到,获得积分10
2分钟前
淡淡傲柔完成签到,获得积分10
2分钟前
hyk完成签到 ,获得积分10
2分钟前
Orange的应助被Gilgardea采纳,获得10
2分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
Hidden Empire of Finance: How Wall Street Profits from Our Cities and Fuels Global Inequality 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8166413
求助须知:如何正确求助?哪些是违规求助? 9559494
关于积分的说明 21750478
捐赠科研通 7757221
什么是DOI,文献DOI怎么找? 3429141
关于科研通互助平台的介绍 2553489
邀请新用户注册赠送积分活动 2473835