Human-in-The-Loop Sim-to-Real Transfer Policy for Robotic Assembly via Reinforcement Learning

事后诸葛亮 强化学习 计算机科学 一般化 人工智能 水准点(测量) 任务(项目管理) 机器学习 钥匙(锁) 学习迁移 基线(sea) 扭捏 时差学习 克隆(编程) 机器人学 机器人 样品(材料) 控制工程 任务分析 利用
作者
Sirui Ren,Chao Zeng,Zhiyi Li,Chenguang Yang,Ning Wang
标识
DOI:10.1109/rcae66389.2025.11355281
摘要

In complex robotic tasks, reinforcement learning (RL) algorithms have garnered significant attention for their ability to dynamically adapt to environmental changes and optimize control policies. However, challenges such as sparse rewards, poor generalization capability, low sample efficiency, and the sim-to-real transfer gap continue to hinder the widespread industrial application of RL. To address these challenges, we propose a novel reinforcement learning framework that integrates Deep Deterministic Policy Gradient (DDPG), Hindsight Experience Replay (HER), and Behavior Cloning (BC) to efficiently solve robotic assembly tasks in sparse reward environments. Hindsight Experience Replay (HER) addresses sparse rewards by relabeling failed experiences as successes, enabling broader exploration of target states and faster policy learning. Combined with Behavior Cloning (BC), which uses human demonstrations to reduce exploration needs, the proposed approach effectively enhances learning efficiency and generalization in complex robotic tasks. To validate the proposed algorithm, we implemented a benchmark robotic assembly environment in the MuJoCo simulator. Experimental results show that the proposed framework significantly outperforms baseline methods in key metrics, including training speed, task success rate, and assembly efficiency. Furthermore, we developed and validated an online human-in-the-loop correction-based sim-toreal transfer strategy. By leveraging a small amount of human correction data, this strategy effectively bridges the sim-to-real gap, enabling the model to exhibit robust performance and strong generalization in real-world robotic assembly tasks.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
大力的冬萱完成签到,获得积分0
1秒前
rui完成签到 ,获得积分10
3秒前
3秒前
欣慰的舞仙完成签到,获得积分10
4秒前
诺奇完成签到,获得积分10
5秒前
mumu完成签到 ,获得积分10
5秒前
美满的机器猫完成签到,获得积分10
5秒前
典雅浩轩完成签到,获得积分10
5秒前
贤惠的人龙完成签到,获得积分10
6秒前
zdk完成签到,获得积分10
7秒前
7秒前
跳跃芷蕊完成签到,获得积分10
8秒前
Hiraeth完成签到 ,获得积分10
8秒前
yunfan完成签到,获得积分10
8秒前
728完成签到,获得积分10
10秒前
xhtnt97完成签到 ,获得积分10
10秒前
吉吉国王完成签到,获得积分10
10秒前
开朗大雁完成签到 ,获得积分10
11秒前
笑对人生完成签到 ,获得积分10
11秒前
11完成签到,获得积分10
12秒前
Antonio完成签到 ,获得积分0
12秒前
Only完成签到 ,获得积分10
12秒前
高石完成签到 ,获得积分10
12秒前
Thesimp完成签到 ,获得积分10
13秒前
果果完成签到 ,获得积分10
14秒前
15秒前
15秒前
零点完成签到,获得积分10
15秒前
16秒前
易玟完成签到,获得积分10
17秒前
lkd完成签到,获得积分10
18秒前
dd完成签到 ,获得积分10
18秒前
兴在路上完成签到,获得积分10
20秒前
lili完成签到,获得积分10
20秒前
20秒前
cenjin完成签到 ,获得积分10
21秒前
圆红完成签到 ,获得积分10
21秒前
文质彬彬的杨过完成签到,获得积分10
22秒前
落落完成签到 ,获得积分10
22秒前
暗中讨饭完成签到,获得积分10
22秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
Hidden Empire of Finance: How Wall Street Profits from Our Cities and Fuels Global Inequality 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8166570
求助须知:如何正确求助?哪些是违规求助? 9559581
关于积分的说明 21750904
捐赠科研通 7757397
什么是DOI,文献DOI怎么找? 3429170
关于科研通互助平台的介绍 2553530
邀请新用户注册赠送积分活动 2473923