EEVS: Monocular End‐Effector Pose Estimation‐Based Visual Servoing Against Uncertainties

视觉伺服 单眼 计算机视觉 人工智能 关节式人体姿态估计 计算机科学 运动学 分割 集合(抽象数据类型) 单目视觉 三维姿态估计 姿势 机器人运动学 机械臂 视觉控制 数据集 主动感知 机器人学 正向运动学 感知 方案(数学) 图像分割 机器人控制 视觉感受 光流 机器人
作者
Ze’an Liu,Xuanyin Wang,Ziyue Hao,Jiaqi Sun
出处
期刊:Journal of Field Robotics [Wiley]
卷期号:43 (2): 1033-1047 被引量:1
标识
DOI:10.1002/rob.70081
摘要

Precise robotic manipulation driven by visual perception is essential for a robot arm to autonomously execute tasks in unstructured environments. Nevertheless, uncertainties including inaccurate calibration, imperfect kinematic modeling, and dynamic environmental disturbances pose significant challenges to existing manipulation strategies. Considering that a robot arm finally performs tasks through the end‐effector, we propose a monocular end‐effector pose estimation‐based visual servoing (EEVS) method. Our method first uses a lightweight detection network to obtain a coarse pose and a mask of the end‐effector, and then refines the pose according to an optimal segmentation model. The visual servoing control of the robot arm is realized based on the relative pose between the end‐effector and the target. We theoretically demonstrate that this end‐to‐end control scheme can effectively mitigate the impact of the uncertainties. Experiments on data set demonstrate that our method achieves more accurate end‐effector pose estimation than state‐of‐the‐art approaches, especially in the scenes with significant occlusion. Moreover, real‐world robotic experiments prove that our method provides higher manipulation accuracy compared with traditional methods even in the presence of substantial kinematic errors and environmental changes.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
LY发布了新的文献求助20
刚刚
复来完成签到 ,获得积分10
1秒前
1秒前
1秒前
meng发布了新的文献求助10
1秒前
Orange的应助被赫江涛采纳,获得10
2秒前
打打的应助被以舟渡之采纳,获得10
2秒前
chengzinie完成签到,获得积分10
2秒前
2秒前
3秒前
hxt完成签到,获得积分10
4秒前
aikeyan完成签到,获得积分10
4秒前
充电宝的应助被lilili采纳,获得10
4秒前
111关注了科研通微信公众号
4秒前
云隐发布了新的文献求助10
4秒前
大模型的应助被言非离采纳,获得10
5秒前
上岸发布了新的文献求助10
5秒前
科研小趴菜完成签到 ,获得积分10
6秒前
周晓完成签到,获得积分20
6秒前
大模型的应助被YAN采纳,获得10
7秒前
斯文败类的应助被Xyw采纳,获得10
7秒前
7秒前
YAM发布了新的文献求助10
7秒前
9秒前
10秒前
10秒前
温山先生发布了新的文献求助10
10秒前
11秒前
安稳的乐松完成签到,获得积分20
11秒前
默默发布了新的文献求助10
12秒前
13秒前
Anita完成签到,获得积分20
14秒前
14秒前
粗心的从露完成签到,获得积分10
15秒前
乔治发布了新的文献求助10
15秒前
bkagyin的应助被冬至采纳,获得10
16秒前
lilili发布了新的文献求助10
16秒前
16秒前
Hello的应助被华熙采纳,获得40
16秒前
一枝清荷发布了新的文献求助10
17秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Handbook of Sport Coaching Research 1000
Orthognathic Surgery - 2 Volume Set 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8193514
求助须知:如何正确求助?哪些是违规求助? 9579686
关于积分的说明 21866883
捐赠科研通 7793152
什么是DOI,文献DOI怎么找? 3437297
关于科研通互助平台的介绍 2560725
邀请新用户注册赠送积分活动 2484176