Vision-Language Navigation with Embodied Intelligence: A Survey

具身认知 计算机科学 人机交互 人工智能 数据科学 计算机视觉
作者
Peng Gao,Peng Wang,Feng Gao,Fei Wang,Ru-Yue Yuan
出处
期刊:Cornell University - arXiv
标识
DOI:10.48550/arxiv.2402.14304
摘要

As a long-term vision in the field of artificial intelligence, the core goal of embodied intelligence is to improve the perception, understanding, and interaction capabilities of agents and the environment. Vision-language navigation (VLN), as a critical research path to achieve embodied intelligence, focuses on exploring how agents use natural language to communicate effectively with humans, receive and understand instructions, and ultimately rely on visual information to achieve accurate navigation. VLN integrates artificial intelligence, natural language processing, computer vision, and robotics. This field faces technical challenges but shows potential for application such as human-computer interaction. However, due to the complex process involved from language understanding to action execution, VLN faces the problem of aligning visual information and language instructions, improving generalization ability, and many other challenges. This survey systematically reviews the research progress of VLN and details the research direction of VLN with embodied intelligence. After a detailed summary of its system architecture and research based on methods and commonly used benchmark datasets, we comprehensively analyze the problems and challenges faced by current research and explore the future development direction of this field, aiming to provide a practical reference for researchers.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
cc发布了新的文献求助10
1秒前
1秒前
小二郎应助麦冬采纳,获得10
2秒前
于听枫完成签到 ,获得积分10
2秒前
2秒前
斯文败类应助塔塔采纳,获得10
2秒前
王秀丽发布了新的文献求助10
2秒前
希望天下0贩的0应助小管采纳,获得10
3秒前
欢喜南琴发布了新的文献求助30
3秒前
段先生发布了新的文献求助10
3秒前
nihao发布了新的文献求助10
3秒前
小满完成签到,获得积分10
4秒前
星辰发布了新的文献求助20
4秒前
5秒前
哦1完成签到,获得积分10
5秒前
6秒前
情怀应助阔达网络采纳,获得10
6秒前
1010发布了新的文献求助10
6秒前
上官若男应助鸡血红采纳,获得10
6秒前
嘟嘟发布了新的文献求助10
6秒前
louyang完成签到,获得积分20
6秒前
靓丽笑槐发布了新的文献求助10
6秒前
汉堡包应助liguanyu1078采纳,获得10
6秒前
7秒前
领导范儿应助suxili采纳,获得10
7秒前
ldy发布了新的文献求助10
7秒前
8秒前
科目三应助孤独梦曼采纳,获得10
8秒前
VIGO完成签到,获得积分10
8秒前
wanci应助law采纳,获得10
8秒前
xi完成签到,获得积分10
8秒前
meng完成签到,获得积分10
9秒前
Rourou完成签到,获得积分10
10秒前
10秒前
ZYB143发布了新的文献求助10
11秒前
路遥v发布了新的文献求助10
11秒前
11秒前
111发布了新的文献求助10
11秒前
11秒前
NexusExplorer应助段先生采纳,获得10
11秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Chemistry and Physics of Carbon Volume 18 800
The Organometallic Chemistry of the Transition Metals 800
Leading Academic-Practice Partnerships in Nursing and Healthcare: A Paradigm for Change 800
The formation of Australian attitudes towards China, 1918-1941 640
Signals, Systems, and Signal Processing 610
全相对论原子结构与含时波包动力学的理论研究--清华大学 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 物理 内科学 复合材料 催化作用 物理化学 光电子学 电极 细胞生物学 基因 无机化学
热门帖子
关注 科研通微信公众号,转发送积分 6432276
求助须知:如何正确求助?哪些是违规求助? 8248015
关于积分的说明 17541488
捐赠科研通 5489503
什么是DOI,文献DOI怎么找? 2896587
邀请新用户注册赠送积分活动 1873148
关于科研通互助平台的介绍 1713263