VLingNav: Embodied Navigation with Adaptive Reasoning and Visual-Assisted Linguistic Memory

具身认知 计算机科学 内含代理 认知机器人学 人工智能 一般化 感知 构造(python库) 人机交互 语义学(计算机科学) 认知科学 模仿 机器人 强化学习 召回 记忆模型 编码(内存) 空间智能 计算模型 适应(眼睛) 语言理解 动作(物理) 认知地图 代表(政治) 空格(标点符号)
作者
Shaoan Wang,Yuanfei Luo,Xingyu Chen,Aocheng Luo,Dongyue Li,Chang Liu,Sheng Chen,Yangang Zhang,Fanchen Meng,Junzhi Yu
出处
期刊:IEEE Transactions on Robotics [Institute of Electrical and Electronics Engineers]
卷期号:: 1-21 被引量:16
标识
DOI:10.1109/tro.2026.3747248
摘要

VLA models have shown promising potential in embodied navigation by unifying perception and planning while inheriting the strong generalization abilities of large VLMs. However, most existing VLA models rely on reactive mappings directly from observations to actions, lacking the explicit reasoning capabilities and persistent memory required for complex, long-horizon navigation tasks. To address these challenges, we propose VLingNav, a VLA model for embodied navigation grounded in linguistic-driven cognition. First, inspired by the dual-process theory of human cognition, we introduce an adaptive chain-of-thought mechanism, which dynamically triggers explicit reasoning only when necessary, enabling the agent to fluidly switch between fast, intuitive execution and slow, deliberate planning. Second, to handle long-horizon spatial dependencies, we develop a visual-assisted linguistic memory module that constructs a persistent, cross-modal semantic memory, enabling the agent to recall past observations to prevent repetitive exploration and infer movement trends for dynamic environments. For the training recipe, we construct Nav-AdaCoT-2.9M, the largest embodied navigation dataset with reasoning annotations to date, enriched with adaptive CoT annotations that induce a reasoning paradigm capable of adjusting both when to think and what to think about. Moreover, we incorporate an online expert-guided reinforcement learning stage, enabling the model to surpass pure imitation learning and to acquire more robust, self-explored navigation behaviors. Extensive experiments demonstrate that VLingNav achieves state-of-the-art performance across a wide range of embodied navigation benchmarks. Notably, VLingNav transfers to real-world robotic platforms in a zero-shot manner, executing various navigation tasks and demonstrating strong cross-domain and cross-task generalization.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
2秒前
赵兴宇发布了新的文献求助10
2秒前
科研通AI6.2的应助被幸福遥采纳,获得10
3秒前
zln完成签到,获得积分10
3秒前
木南完成签到,获得积分10
3秒前
Arrebol发布了新的文献求助10
4秒前
窗外鱼关注了科研通微信公众号
5秒前
5秒前
5秒前
星辰大海的应助被兜兜想哒哒采纳,获得10
5秒前
我服有点黑完成签到,获得积分10
5秒前
噜噜噜的应助被现代的代丝采纳,获得10
6秒前
mensa完成签到,获得积分10
6秒前
科研通AI6.2的应助被要吃虾饺采纳,获得10
6秒前
天涯赤子完成签到,获得积分10
6秒前
大模型的应助被nmn采纳,获得10
7秒前
7秒前
闪闪的YOSH完成签到,获得积分10
7秒前
hdbys完成签到,获得积分10
7秒前
123的应助被1234采纳,获得10
8秒前
9秒前
9秒前
movoandy发布了新的文献求助10
9秒前
张子文发布了新的文献求助10
12秒前
LNVEFC完成签到,获得积分10
12秒前
12秒前
12秒前
13秒前
OisinLi发布了新的文献求助10
13秒前
玫瑰555发布了新的文献求助10
14秒前
贾香运完成签到 ,获得积分10
14秒前
阳光雨堂发布了新的文献求助10
14秒前
花开不倦1314完成签到 ,获得积分10
15秒前
deny完成签到,获得积分10
15秒前
16秒前
未完成完成签到,获得积分0
16秒前
英俊的铭的应助被baire采纳,获得30
16秒前
16秒前
zhaopeng完成签到,获得积分10
16秒前
vnewgnl的应助被miuwu采纳,获得10
17秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Markov Decision Processes and Reinforcement Learning 700
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8171039
求助须知:如何正确求助?哪些是违规求助? 9563751
关于积分的说明 21772122
捐赠科研通 7762548
什么是DOI,文献DOI怎么找? 3430786
关于科研通互助平台的介绍 2554676
邀请新用户注册赠送积分活动 2475657