Prediction-Based Path Planning for Safe and Efficient Human–Robot Collaboration in Construction via Deep Reinforcement Learning

强化学习 工作区 运动规划 计算机科学 机器人学 机器人 人工智能 路径(计算) 工程类 模拟 实时计算 计算机网络
作者
Jiannan Cai,Ao Du,Xiaoyun Liang,Shuai Li
出处
期刊:Journal of Computing in Civil Engineering [American Society of Civil Engineers]
卷期号:37 (1) 被引量:75
标识
DOI:10.1061/(asce)cp.1943-5487.0001056
摘要

Robotics has attracted broad attention as an emerging technology in construction to help workers with repetitive, physically demanding, and dangerous tasks, thus improving productivity and safety. Under the new era of human–robot coexistence and collaboration in dynamic and complex workspaces, it is critical for robots to navigate to the targets efficiently without colliding with moving workers. This study proposes a new deep reinforcement learning (DRL)–based robot path planning method that integrates the predicted movements of construction workers to achieve safe and efficient human–robot collaboration in construction. First, an uncertainty-aware long short-term memory network is developed to predict the movements of construction workers and associated uncertainties. Second, a DRL framework is formulated, where predicted movements of construction workers are innovatively integrated into the state space and the computation of the reward function. By incorporating predicted trajectories in addition to current locations, the proposed method enables proactive planning such that the robot could better adapt to human movements, thus ensuring both safety and efficiency. The proposed method was demonstrated and evaluated using simulations generated based on real construction scenarios. The results show that prediction-based DRL path planning achieved a 100% success rate (with a total of 10,000 episodes) for robots to achieve the destination along the near-shortest path. Furthermore, it reduced the collision rate with moving workers by 23% compared with the conventional DRL method, which does not consider predicted information.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
xiaolizi发布了新的文献求助200
1秒前
蜗牛完成签到,获得积分10
3秒前
大大怪将军完成签到,获得积分10
3秒前
外向的斑马完成签到 ,获得积分10
12秒前
as完成签到 ,获得积分10
16秒前
19秒前
CY完成签到,获得积分10
21秒前
天天快乐应助xuxu213采纳,获得10
30秒前
无聊的老姆完成签到 ,获得积分0
32秒前
搜集达人应助youngwan采纳,获得30
34秒前
36秒前
愉快的乾完成签到 ,获得积分10
40秒前
PFT完成签到,获得积分20
42秒前
firewood完成签到,获得积分10
43秒前
科院er完成签到 ,获得积分10
44秒前
45秒前
单纯的小土豆完成签到 ,获得积分0
47秒前
xiaohansan完成签到 ,获得积分10
48秒前
48秒前
xuxu213完成签到,获得积分20
50秒前
youngwan发布了新的文献求助30
51秒前
xuxu213发布了新的文献求助10
53秒前
58秒前
wodetaiyangLLL完成签到,获得积分10
1分钟前
阿甘完成签到,获得积分10
1分钟前
简爱完成签到 ,获得积分10
1分钟前
1分钟前
isedu完成签到,获得积分0
1分钟前
hhhpass应助科研通管家采纳,获得10
1分钟前
1分钟前
祁乾完成签到 ,获得积分10
1分钟前
画龙点睛完成签到 ,获得积分10
1分钟前
sai完成签到,获得积分10
1分钟前
英俊的铭应助ZHANG_采纳,获得10
1分钟前
灬灬完成签到 ,获得积分10
1分钟前
忐忑的访彤完成签到,获得积分10
1分钟前
开心马里奥完成签到 ,获得积分10
1分钟前
1分钟前
多边形完成签到 ,获得积分10
1分钟前
猪猪hero发布了新的文献求助10
1分钟前
高分求助中
Markov Chain Monte Carlo 10000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Common Foundations of American and East Asian Modernisation: From Alexander Hamilton to Junichero Koizumi 5000
Matrix Methods in Data Mining and Pattern Recognition Second Edition 610
政治传播过程中的外交与说服——以中苏友好协会为例的历史考察 566
Discerning Saints: Moralization of Intrinsic Motivation and Selective Prosociality at Work 500
Handbuch Trainingswissenschaft – Trainingslehre 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7579355
求助须知:如何正确求助?哪些是违规求助? 9158858
关于积分的说明 19593016
捐赠科研通 7162152
什么是DOI,文献DOI怎么找? 3265687
关于科研通互助平台的介绍 2430687
邀请新用户注册赠送积分活动 2256461