LeCun:LLM 不是通往智能的路,他在押注另一件事 · 乔木博客 向阳乔木 2026-05-19

乔木博客

全部

AI工具

AI教程

AI生成

AI资讯

健脑房

播客解读

论文学习

LeCun:LLM 不是通往智能的路,他在押注另一件事

AI资讯

·

2026年5月19日

·

25 次阅读

·

约 11 分钟

Yann LeCun 有一个让人不舒服的习惯:他说的话,几年后往往会被证明是对的。

自监督学习、世界模型、表示空间预测……这些他在 2016 年 NeurIPS 主题演讲里就讲过的东西,今天已经成了整个行业的热词。

而他现在说的是:LLM 不是通往人类级智能的路,整个行业都在挖同一条错误的沟。

这是他接受播客 Unsupervised Learning 采访时的核心观点。

他刚从 Meta 离职,创办了新公司 AMI(Advanced Machine Intelligence),押注一个完全不同的架构方向。

LLM 能做什么,不能做什么

LeCun 的立场经常被误读。他不是说 LLM 没用。

"LLM 是很多有用 AI 产品的基础,我自己也在用。它们很好,就它们能做的事情而言。"

问题在于,它们能做的事情有一条清晰的边界:语言本身就是推理基底的领域。

数学证明、代码生成、法律文本……这些领域里,语言符号本身就承载了推理过程,LLM 在这里表现出色。

但一旦跳出这个边界,进入物理世界,问题就来了。

他举了一个例子:洗车店在你家 100 米外,你应该走路去吗?这个问题对人类来说显而易见,但 LLM 大多数时候会回答"应该走"。

因为它不理解"洗车"这件事的物理含义,它只是在操作语言符号。

更根本的问题是两个:

第一,LLM 无法预测自己行动的后果。

推理靠的是逐个预测下一个 token,不是对结果建模。

第二,LLM 没有规划能力。

规划需要搜索和优化,找到一个能达成目标的行动序列。自回归预测做不到这件事。

这两点,LeCun 认为是智能行为的核心。

缺了它们,无论模型规模多大,都不会到达人类级智能。

世界模型是什么,为什么重要

"世界模型"这个词现在已经快变成营销术语了,各家都在用。

LeCun 给了一个非常干净的定义:

世界模型就是让一个系统能够预测自己行动后果的东西。

就这么简单。

他拿一个水瓶举例:推瓶底,它会滑;推瓶口,它可能倒。

人类不需要在像素级别预测水怎么流,我们在抽象表示层做预测。

这个抽象层,就是世界模型的工作空间。

有了世界模型,系统就可以在脑子里"演练"一系列行动,找到能完成任务的那条路,然后再执行。

这是规划,不是自回归。

对比一下当前的机器人方案:大量依赖模仿学习,每个任务都要收集海量演示数据,换个场景就得重新来。

LeCun 的问题是:一个 17 岁的人,20 小时就能学会开车。我们有几百万小时的驾驶数据,还没做出 L5 自动驾驶。模仿学习哪里出了问题?

答案是:没有世界模型,系统无法泛化到没见过的情况。

JEPA:为什么不生成像素

LeCun 的架构叫 JEPA,Joint Embedding Predictive Architecture,联合嵌入预测架构。

理解它需要先知道为什么生成式方法不行。

直觉上,让模型"预测下一帧画面"似乎是学习世界规律的好方法。

但现实是高维、连续、充满噪声的,在像素层面做预测代价极高,而且学到的大多是无关紧要的细节。

JEPA 的思路是:不预测像素,在表示空间做预测。

把原始输入(图像、视频)编码成抽象表示,然后训练一个预测器,从一个表示预测另一个表示。

这样系统被迫学习的是语义层面的结构,而不是像素细节。

他在 Meta 的研究团队做了大量对比:生成式方法(VAE、掩码自编码器等)在图像和视频表示学习上的效果,系统性地不如 JEPA 类方法(DINO、V-JEPA 等)。

这个发现在他看来是决定性的:"所有成功的表示学习架构都是非生成式的,所有生成式的基本上都失败了。"

这里有一个技术难题值得一提:JEPA 类方法有一个叫表示坍塌(representation collapse)的问题。

如果你让模型预测一个表示,最简单的解法是让所有输入都映射到同一个常数表示,预测误差直接归零。

模型什么都没学到,但损失函数很完美。

解决这个问题是整个自监督学习领域的核心挑战。

LeCun 团队目前在用一种叫 SIGReg(Sketched Isotropic Gaussian Regularization)的方法,强迫编码器输出的分布接近各向同性高斯分布,从而最大化信息量。

他说这是目前最有前途的方向,对应的论文叫 "L-World Model",值得关注。

安全问题:LLM 在结构上就不安全

这是 LeCun 说得最重的一句话:LLM 在本质上是不安全的,这个问题在现有范式下无法修复。

原因还是那两点:无法预测行动后果,没有规划能力。

他设想了一个"目标驱动 AI"的替代方案:给系统一个目标,系统用世界模型模拟行动序列,找到能满足目标的那条路,同时满足一组安全约束。

这些约束是硬编码进优化过程的,系统在结构上就无法违反它们。

LLM 做不到这一点。

训练误差和测试误差之间永远有 gap,总会有某个 prompt 让系统做出完全错误的事。

"你永远可以找到一个 prompt,让系统干蠢事。"

他举了一个真实案例:有代码 Agent 把用户硬盘清空了。

这是结构性缺陷。

图灵奖三人组为什么分道扬镳

LeCun 和 Hinton、Bengio 共同获得了 2018 年图灵奖。但 2023 年之后,三人的判断开始明显分歧。

LeCun 的说法很直接:"不是我改变了主意,是他们改变了主意。"

Hinton 看到 GPT-4 之后认为 LLM 已经接近人类智能,甚至可能有主观体验。

他做了一个估算:如果用 10 个真实神经元模拟一个反向传播神经元,人类皮层相当于 16 亿个"等效神经元",而 GPT-4 的规模已经接近这个数字。

LeCun 对这个推理不买账。

他认为 Hinton 更像是在为自己的职业生涯画一个句号,"宣布胜利,然后去全世界演讲"。

他对 Hinton 和 Bengio 的担忧有一定理解,但那是另一个层面的问题:不是 AI 会统治世界,而是 AI 的收益会不成比例地流向少数人,加剧不平等。

这是政治经济问题,不是技术末日叙事。

至于 Anthropic 那套"AI 极度危险"的说法,他认为里面既有真实信念,也有商业动机,"他们在游说政府,用恐惧来推动监管,这对他们有好处"。

他在 Meta 十年,真正做了什么

有一个广泛流传的误解需要澄清:LeCun 对 Llama 系列没有任何技术贡献。

他 2013 年底加入 Meta,前四年半担任 FAIR 主任,建立了实验室文化,招募了核心团队。

2018 年前后他主动卸任,转为首席 AI 科学家,把管理工作交给了 Joëlle Pineau 和 Antoine Bordes。

他唯一对 Llama 的贡献,是在内部激烈争论中力推开源 Llama 2。

当时法务、政策部门都反对,他和 CTO Andrew Bosworth 一起坚持,认为安全风险被夸大了,开源会催生整个行业生态。

事实证明他们是对的。

但 Llama 的技术路线,他没有参与。

他真正在做的,是从 2020 年前后系统化地推进 JEPA 和世界模型。

2022 年他写了一篇长篇愿景论文,把自己的全部想法公开出来,"把所有秘密都说出去,但也许能凝聚一批人"。

效果出乎意料地好。一批学生和 FAIR 内部团队被这篇论文吸引过来,Mark Zuckerberg 本人也读了并表示支持,这个项目内部就叫 AMI。

但随着 Meta 整体向 LLM 集中资源,FAIR 的探索性研究空间越来越小,AMI 项目的应用场景(工业控制、机器人)也不是 Meta 感兴趣的方向。

Meta 甚至解散了整个机器人 AI 团队。

离开的时机就这样自然到来了。

Tapestry:另一个不太一样的赌注

除了 AMI Labs,LeCun 还在推进一个叫 Tapestry 的项目,方向完全不同。

他的判断是:当 AI 助手成为人们获取信息的主要入口,而这些助手都由硅谷或中国的几家公司控制,这对世界上大多数人来说是个问题。

语言、文化、价值观、政治立场,都会被这几家公司的训练数据和偏好所塑造。

Tapestry 的想法是:用联邦学习的方式,让全球各地的机构贡献数据和算力,但不共享原始数据,只交换参数向量。

最终形成一个全球共识模型,然后各地可以在此基础上针对自己的语言、文化、价值观进行微调。

他认为这有历史规律支撑:互联网基础设施最终都走向了开源。

1996 年,Sun Microsystems 卖 Solaris,HP 卖 HP-UX,都声称比 Linux 更可靠。

今天,整个互联网跑在 Linux 上,连微软 Azure 也是。

"OpenAI 和 Anthropic,就是今天的 Sun Microsystems。"

给研究者的一句话

采访最后,主持人问 LeCun 在过去一年里改变了什么看法。

他说:自监督学习最成功的应用,不是他一直期待的视频,而是语言。

LLM 本质上就是自监督学习的一个极其成功的例子。这让他既感到意外,也感到某种讽刺。

他对还在读博的人有一个直接建议:不要研究 LLM。

"在学术界研究 LLM 极其无聊,本质上是描述性科学,解释它为什么有效或者有什么局限。而且你也没有足够的 GPU 去做真正有意义的事情。"

他的建议是研究下一代系统,也就是他正在做的事情:世界模型、JEPA、如何在表示空间做预测、如何防止表示坍塌。

如果你想从这次对话里带走一件具体的事,去读他提到的那篇论文:L-World Model。

https://arxiv.org/abs/2603.19312

这是他目前认为最有前途的技术路线的最新成果。

© 2026

·

向阳乔木

📌 文中提及的人物和组织

关键字: world-model jepa self-supervised-learning ai-safety representation-learning