清晨好,您是今天最早来到科研通的研友!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您科研之路漫漫前行!

Revealing emergent human-like conceptual representations from language prediction

计算机科学 认知科学 语言学 自然语言处理 心理学 人工智能 哲学
作者
Ningyu Xu,Qi Zhang,Chao Du,Qiang Luo,Xipeng Qiu,Xuanjing Huang,Menghan Zhang
出处
期刊:Proceedings of the National Academy of Sciences of the United States of America [National Academy of Sciences]
卷期号:122 (44): e2512514122-e2512514122
标识
DOI:10.1073/pnas.2512514122
摘要

People acquire concepts through rich physical and social experiences and use them to understand and navigate the world. In contrast, large language models (LLMs), trained solely through next-token prediction on text, exhibit strikingly human-like behaviors. Are these models developing concepts akin to those of humans? If so, how are such concepts represented, organized, and related to behavior? Here, we address these questions by investigating the representations formed by LLMs during an in-context concept inference task. We found that LLMs can flexibly derive concepts from linguistic descriptions in relation to contextual cues about other concepts. The derived representations converge toward a shared, context-independent structure, and alignment with this structure reliably predicts model performance across various understanding and reasoning tasks. Moreover, the convergent representations effectively capture human behavioral judgments and closely align with neural activity patterns in the human brain, providing evidence for biological plausibility. Together, these findings establish that structured, human-like conceptual representations can emerge purely from language prediction without real-world grounding, highlighting the role of conceptual structure in understanding intelligent behavior. More broadly, our work suggests that LLMs offer a tangible window into the nature of human concepts and lays the groundwork for advancing alignment between artificial and human intelligence.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Lucas应助淡淡幻桃采纳,获得10
5秒前
鸡鸡大魔王完成签到,获得积分10
18秒前
xn完成签到 ,获得积分10
21秒前
房天川完成签到 ,获得积分10
37秒前
虫子完成签到,获得积分10
52秒前
坚定蘑菇完成签到 ,获得积分10
1分钟前
研友_VZG7GZ应助颜林林采纳,获得10
1分钟前
cdercder应助androabo采纳,获得10
1分钟前
LJ_2完成签到 ,获得积分0
2分钟前
2分钟前
淡淡幻桃发布了新的文献求助10
3分钟前
大个应助科研通管家采纳,获得10
3分钟前
灵宝宝完成签到,获得积分10
3分钟前
沙海沉戈完成签到,获得积分0
3分钟前
顾矜应助yiiy采纳,获得10
3分钟前
拉长的芷烟完成签到 ,获得积分10
4分钟前
标致的满天完成签到 ,获得积分10
4分钟前
Linz完成签到 ,获得积分10
4分钟前
androabo完成签到,获得积分10
4分钟前
SCI的芷蝶完成签到 ,获得积分10
4分钟前
颜林林完成签到,获得积分10
5分钟前
5分钟前
颜林林发布了新的文献求助10
5分钟前
木木完成签到,获得积分10
5分钟前
煲汤的螃蟹完成签到 ,获得积分10
6分钟前
6分钟前
舒心宛发布了新的文献求助10
6分钟前
欢呼亦绿完成签到,获得积分10
7分钟前
舒心宛完成签到,获得积分10
7分钟前
Kao应助科研通管家采纳,获得10
7分钟前
画龙点睛完成签到 ,获得积分10
7分钟前
宇文雨文完成签到 ,获得积分10
7分钟前
Axel完成签到,获得积分10
7分钟前
笔墨纸砚完成签到 ,获得积分10
8分钟前
明理问柳完成签到,获得积分10
9分钟前
9分钟前
卡卡完成签到,获得积分10
9分钟前
kkdg完成签到,获得积分10
9分钟前
千帆完成签到,获得积分10
9分钟前
KKDG完成签到,获得积分10
9分钟前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
日本現代怪異事典 副読本 700
悉尼大学博士学位论文,题目:Modelling and testing of one-sided stitched laminated composites. 作者:Kristopher P. Plain 650
Machine Learning for Asset Management and Pricing 600
Numerical analysis of the coupled atmosphere-ocean models (CAO II). II 600
Models for the coupled atmosphere and ocean 600
Évora na Idade Média 555
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7384412
求助须知:如何正确求助?哪些是违规求助? 8991350
关于积分的说明 19125985
捐赠科研通 7022146
什么是DOI,文献DOI怎么找? 3227375
关于科研通互助平台的介绍 2390410
邀请新用户注册赠送积分活动 2208516