TemporalFusion: Temporal Motion Reasoning with Multi-Frame Fusion for 6D Object Pose Estimation

人工智能 计算机视觉 计算机科学 姿势 RGB颜色模型 运动(物理) 帧(网络) 对象(语法) 运动估计 任务(项目管理) 工程类 电信 系统工程
作者
Fengjun Mu,Rui Huang,Ao Luo,Xin Li,Jing Qiu,Hong Cheng
标识
DOI:10.1109/iros51168.2021.9636583
摘要

6D object pose estimation is an essential task in vision-based robotic grasping and manipulation. Prior works extract spatial features by fusing the RGB image and depth without considering the temporal motion information, limiting their performance in heavy occlusion robotic grasping scenarios. In this paper, we present an end-to-end model named TemporalFusion, which integrates the temporal motion information from RGB-D images for 6D object pose estimation. The core of proposed TemporalFusion model is to embed and fuse the temporal motion information from multi-frame RGB-D sequences, which could handle heavy occlusion in robotic grasping tasks. Furthermore, the proposed deep model can also obtain stable pose sequences, which is essential for real-time robotic grasping tasks. We evaluated the proposed method in the YCB-Video dataset, and experimental results show our model outperforms state-of-the-art approaches. Our code is available at https://github.com/mufengjun260/TemporalFusion21.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
苹果飞薇应助科研通管家采纳,获得10
刚刚
李健应助科研通管家采纳,获得10
刚刚
杨石石石完成签到,获得积分10
1秒前
JamesPei应助当当康康采纳,获得10
1秒前
CodeCraft应助爆炸奇异果采纳,获得10
2秒前
Orange应助科研通管家采纳,获得10
2秒前
充电宝应助科研通管家采纳,获得10
2秒前
共享精神应助科研通管家采纳,获得10
2秒前
3秒前
研友_VZG7GZ应助科研通管家采纳,获得10
3秒前
科研通AI6.1应助happy采纳,获得10
3秒前
3秒前
科研通AI6.4应助happy采纳,获得10
3秒前
小莹完成签到,获得积分10
4秒前
wenyiboy发布了新的文献求助10
4秒前
共享精神应助杨石石石采纳,获得10
5秒前
ww完成签到 ,获得积分10
5秒前
Tom完成签到,获得积分20
7秒前
Benjamin完成签到,获得积分10
7秒前
7秒前
xuli21315完成签到,获得积分10
8秒前
留胡子的之云完成签到,获得积分10
8秒前
Lanyiyang完成签到,获得积分10
8秒前
开心超人发布了新的文献求助10
11秒前
11秒前
研研研完成签到,获得积分10
12秒前
舒适的紫山完成签到,获得积分20
12秒前
无极微光应助zz采纳,获得20
13秒前
16秒前
李爱国应助汐_采纳,获得10
16秒前
Owen应助诚心的黑猫采纳,获得10
16秒前
科研通AI2S应助陈洁佳采纳,获得10
17秒前
开心超人完成签到,获得积分10
17秒前
FashionBoy应助Benjamin采纳,获得10
18秒前
脑洞疼应助weigaozhao采纳,获得20
18秒前
19秒前
vivian完成签到,获得积分10
19秒前
风中书易完成签到,获得积分10
19秒前
orixero应助字母采纳,获得30
20秒前
Dahai完成签到,获得积分10
21秒前
高分求助中
Invited Discussant 63O and 64O 1000
Ideology and Meaning-Making under the Putin Regime 750
Petrology and Plate Tectonics 500
Writing Systems 500
A Handbook of User Experience Research & Design in Libraries 400
Understanding Modeling and Simulation of Polymerization Reactions 400
Direct and Iterative Linear System Solvers 400
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 计算机科学 化学工程 生物化学 物理 内科学 复合材料 催化作用 光电子学 物理化学 电极 细胞生物学 基因 遗传学
热门帖子
关注 科研通微信公众号,转发送积分 6900501
求助须知:如何正确求助?哪些是违规求助? 8595351
关于积分的说明 18248361
捐赠科研通 6300425
什么是DOI,文献DOI怎么找? 3062101
关于科研通互助平台的介绍 2082893
邀请新用户注册赠送积分活动 2039966