虎嗅

李飞飞的World Labs新发布的世界模型,是真的世界模型吗?

该文章尚未提供 Deutsch 解读,以下为中文版内容。

核心内容总结

World Labs发布的Atlas不是一款普通的“画图工具”,而是能生成机器可用的结构化三维世界的“世界模拟器”。它通过深度图、点云、3D高斯光斑等技术,把普通照片变成可测量的三维数据(比如杯子直径、桌子到墙的距离),还能结合真实照片和AI生成,让机器人在虚拟环境里训练(不用真实数据也能直接用在真机上)。它的核心突破是:从“只给人看画面”的渲染器,升级到“能让机器干活”的模拟器,打通了AI生成和工业应用的鸿沟。

一、Atlas:不是“画图画”,而是“记数据”的模拟器

文章把AI系统分成三级:

  • 渲染器:只负责“画好看的画面”,比如你按方向键,它生成对应的视角,但不知道杯子有多高、桌子离墙多远(机器用不了这些画面);
  • 模拟器:要“记住世界的状态”——杯子的位置、桌子尺寸、门开多大撞墙,这些数字随时能调出来,机械臂能靠这些数据伸手拿东西;
  • 规划器:更高级,不仅知道东西在哪,还能判断“现在该不该拿、从哪个角度拿最稳”。

Atlas属于模拟器。比如你拍一张厨房照片,它能算出每个像素的深度(离镜头多远),用几百万个点拼出厨房形状,甚至用小光斑堆出3D场景——这些结果不是给人看的,而是能直接导入游戏引擎、设计软件,或者机械臂的控制代码里。

二、Atlas的“聪明之处”:用“位置记忆”解决大问题

Atlas的技术创新点在多模态输入和空间记忆:

  • 多模态输入:它同时接收文字、图片、相机位姿(拍照时相机的位置和朝向,6个数字就能描述)、深度图。比如你从门口和窗边各拍一张沙发,普通模型觉得是两张不同的图,但Atlas因为知道“你走了几步、转了多少度”,能认出是同一个沙发;
  • 空间记忆:上一代产品RTFM有个麻烦——逛虚拟房子半小时,要么存太多画面算力不够,要么忘事(回到厨房时桌子位置变了)。Atlas用“位置当索引”:想知道厨房什么样,直接找厨房附近拍的照片,不用管什么时候拍的(就像你走进会议室,能立刻想起上周的会议细节,不用翻日历)。

三、一边“还原真实”,一边“AI补全”:三维场景的新玩法

过去做三维场景有两条路:

  • 重建:用真实照片还原,但没拍到的地方就空着(比如Funes World项目,给真实建筑做备份,缺一块也不补);
  • 生成:AI凭常识造一个不存在的地方。

Atlas把两者结合:照片多就少编,照片少就多编。比如你只给一张花园照片,它会补出周围的建筑;再给一张小屋照片,就把补的部分换成真实的。对机器人来说,墙上的花纹是编的还是拍的不重要,只要墙的位置和尺寸对,机械臂就不会撞上去。

四、让机器人“在虚拟世界练手”:模拟器的核心价值

Atlas的最大应用场景是机器人训练:

  • World Labs收购了机器人公司SceniX后,用Atlas模拟器训练机器人:完全不用真实数据,直接装到真机上做装箱、绕线、搬试管,有的连续运行一小时不用人干预;
  • 模拟器不用和现实“一模一样”:比如模拟器里的墙摩擦系数和真墙不同,但只要“模拟器里A方案比B方案好,真机也这样”“模拟器说哪步容易失手,真机也在那步失手”就行(就像莱特兄弟的风洞,虽然和真实海风不一样,但能比较机翼好坏)。

这解决了机器人训练的大痛点:现实中犯错太贵(比如机械臂碰坏东西),但模拟器里能跑几千次,快速积累失败经验。

五、从ImageNet到Atlas:李飞飞团队的“世界模型”之路

李飞飞团队2009年做的ImageNet,是把互联网图片分类,让机器“认东西”(比如认出照片里的杯子)。现在Atlas要解决的是“知道东西怎么待着”:杯子在桌上的位置、被推走后下次在哪、绕到桌子背后还是不是同一个杯子。

这背后有两条路线分歧:

  • 一派认为:只要把视频数据喂够,三维结构会自己长出来(比如Meta的V-JEPA 2);
  • 另一派(Atlas):直接把相机位置、几何、物理约束塞进模型,让世界从第一天就有结构。

Atlas的路线更务实:三维数据不像文字(互联网上有海量语料),空间关系和交互很难记录,所以直接给模型“塞规则”更高效。

最后:Atlas要解决的,是“让虚拟世界能互动”

文章结尾用《莫雷尔的发明》对比:莫雷尔的机器能完美重放一周的场景,但不能做任何没发生过的事(比如碰倒杯子)。而Atlas要做的,就是让虚拟世界“活”起来——不仅能还原,还能让机器人在里面伸手、碰东西、试错,这才是真正的“世界模拟器”。

对普通人来说,Atlas可能暂时不会直接影响生活,但它会让机器人、工业设计、数字孪生这些领域变得更高效:比如未来机械臂不用在真实工厂里反复试错,直接在Atlas的虚拟世界里练熟就能上岗。这就是技术从“好看”到“好用”的关键一步。