李飞飞:人也不是全靠现实数据学习啊量子位

8/6/2026

时隔近两年,李飞飞终于再做客a16z,畅谈空间智能和World Labs在机器人赛道上的全盘布局。

全程信息密度拉满,完全不敢眨眼!

我们的目标是将空间智能打造为AI的下一个前沿。

在物理空间中行动的能力,仍然是未来AI世界中最令人兴奋、也最具深远意义的能力之一,而机器人正是其中的核心。

机器人是空间智能落地的第一块试金石,也是世界建模重要的应用场景。

SceniX解决的正是机器人领域最困难的问题:训练数据和评估数据都非常匮乏。

要让机器人真正工作,我们必须释放scaling law(缩放定律)的力量。

真实环境评估不仅慢,而且还危险而昂贵。相比之下,仿真环境具备完全的可控性与可解析性;在可靠性和效率两方面都能提供独特价值。

具体用哪个模型其实不重要,因为模型总会换代,但基础设施不会。

视频刚上线,评论区网友的脑洞就彻底放飞了。甚至还有人策划起了带机器人版的“鲁滨逊漂流记”,连需要带的装备都安排得明明白白!(啊这这这,这对吗?)

不得不说,这届网友的精神状态实在是太美丽,让人忍不住想立刻递上场记板喊一声“Action”。

最近,World Labs宣布收购SceniX,并计划与SceniX合作,为机器人打造一个可规模化的数字训练场。

紧接着,World Labs CEO李飞飞便与SceniX的联合创始人李昀烛共同做客了a16z最新的一期访谈《Fei-Fei Li is Solving the Hardest Problem in Robotics》,首次公开剖析了双方正联手解决的核心难题:让AI不仅能看懂世界,还能动手改变世界。

有趣的是,李昀烛还曾是飞姐亲自指导的博士后,究竟是一段怎样的故事促成了这次合作?

我们在不改变原意的基础上,由AI对访谈内容文字实录进行了精校。

Enjoy~

为什么机器人是空间智能落地的第一个试金石?

Martin Casado(主持人):飞飞,能否先为不熟悉World Labs的听众介绍一下公司的工作?

李飞飞:好的,World Labs是一家成立两年的初创公司,也是一家前沿模型实验室。

我们的目标是将空间智能打造为AI的下一个前沿。

简单来说,就是让AI能在真实或虚拟的空间中,自如地生成、理解、推理和交互。

构建大型世界模型是通往空间智能的一条路径,也是World Labs目前最关注的方向。

主持人:你从一开始就强调,机器要能够感知空间、对空间进行推理并在其中行动。我原以为在空间中行动还是很遥远的目标,但你们现在收购了一家机器人公司。为什么已经到了成熟的收购时机?这次收购的意图是什么?

李飞飞:机器人并不是在空间中行动或与空间交互的唯一方式。在VFX(后期视觉特效)、游戏和设计等创意领域,人们早已能在虚拟空间中构建世界并进行沉浸式交互。

World Labs始终有一个判断:我们所生活的世界可以成为一个多元宇宙,而我们可以创造技术,让用户、创作者和开发者在不同空间中行动。

不过,在物理空间中行动的能力,仍然是未来AI世界中最令人兴奋、也最具深远意义的能力之一,而机器人正是其中的核心。

World Labs一直认为,机器人是空间智能落地的第一块试金石,也是世界建模重要的应用场景。邀请SceniX及其团队加入World Labs,正是我们长期愿景和使命的一部分。

主持人:昀烛,你是SceniX的联合创始人。能否简要介绍一下你的背景,以及SceniX主要做什么?

李昀烛:大家好,我是李昀烛,我是SceniX的联合创始人,也是哥伦比亚大学的助理教授。

我的研究经历始于在MIT读博士的阶段,之后在斯坦福跟随飞飞老师做博士后。我的职业目标一直都很简单,就是想帮助机器人更好地感知物理世界并与之交互。

我是一个非常务实的人,希望机器人能在真实的物理环境中工作。

我们有注意到,目前通用机器人面临许多瓶颈,大多都集中在训练和评估环节。因此,我们正在开发一条real-to-sim-to-real管线,把真实环境映射到与其高度对齐的数字世界。

所谓对齐,指的就是在数字世界中发生的事情,也应当能在真实环境中发生。

这样一来,原本必须在真实环境中完成的数据采集和评估,就可以部分由数字世界中可规模化生成的数据替代。SceniX正是由此起步。

我们组建了一支覆盖机器人、机器人学习、仿真和渲染的团队,并正在尝试构建一个完整的real-to-sim-to-real技术栈,以解决这些关键瓶颈。

李飞飞:这里还有一段很有趣的故事(笑)。你可能会以为,因为昀烛曾是我的博士后,所以我们很早就在讨论SceniX和World Labs合并的事儿。

其实不是。SceniX最初是作为客户来到World Labs的。

世界真的很小。去年冬天,大概是11月或12月吧,我们发布了生成模型Marble的第一个版本,SceniX第一时间注册并使用了它。

一开始我甚至不知道那是昀烛的公司。后面发现之后,我才给他打了电话,意识到World Labs和SceniX有很多合作空间。

主持人:能不能简单介绍一下Marble?

李飞飞:Ok。Marble是World Labs持续训练和迭代的基础模型。目前公开版本的核心能力,是接收单张或多张图像、文本或这些模态的组合,并把它们转化为一个几何一致的世界。

这个世界看起来非常真实且不会穿帮。

而SceniX所解决的正是机器人领域一个极其困难的问题:训练数据和评估数据都非常匮乏。

Scroll for more