为什么大模型能通过自然语言训练表现出智能?智能的载体是自然语言吗?
2023-12-07 阅读 103
因为大模型通过海量文本做自监督学习,学会了语言中关于世界、因果、步骤、常识和交互的丰富统计模式。模型内部把这些模式压缩到高维向量和网络权重里,利用参数规模和架构把统计关联组合成能推理、归纳、生成的能力,所以在很多任务上看起来像“有智能”。
但自然语言不是智能的唯一载体,它是一个非常高效的信息浓缩介质,能把人类经验和知识传递给模型,因此特别容易催生类智能行为。真正的智能还涉及感觉、动作、长期记忆和与环境的交互等多模态与具身化成分,语言只是其中最方便也最丰富的一种载体,而不是全部。
更新于 2026年01月01日