
探寻更崭新的世界
World Labs 加入 AMD,李飞飞以「空间智能」为北极星,从语言模型转向物理世界基础模型,借硬件规模加速使命。
“来吧,朋友们,现在去追寻一个更新的世界还不算太晚。”
—— 丁尼生勋爵,《尤利西斯》
World Labs 即将加入 AMD。这对 World Labs、我们的团队以及我个人而言都是一个重大时刻,我想借此机会分享这意味着什么,以及我为何对下一篇章如此期待。
一个成长的故事
对我而言,AI 既是个人层面的追求,也是关乎人类文明的命题。
2000 年,我作为一名刚入学的研究生踏入这个领域,追寻着为机器和大脑解决视觉智能问题的那份好奇心。当时的我并不知晓,这些竟是一段职业生涯的最初步伐——令我惊叹的是,这段生涯始终处于 AI 走向成熟的核心地带。我实验室早期的 ImageNet 工作,连同神经网络算法及其在 GPU 上的实现,共同助推了现代 AI 时代的到来。自那以后,我整个职业生涯都在推动 AI 从一种学术上的好奇心,蜕变为我们这个时代最具创新性和变革性的技术。
在这段历程中,从我在计算机视觉、深度学习、机器人技术和医疗健康领域的研究,到作为首席科学家创立 Google Cloud 的 AI 部门,再到成为斯坦福以人为本 AI 研究院的创始主任,我的工作始终被一种渴望所指引:解决现实世界的问题,与人类携手推动社会进步。当生成式 AI 开始其变革进程,大规模前沿 AI 研究从学术界转向产业界时,我深知,能够产生最深远、最广泛积极影响的路径,就是创办一家初创公司,去攻克那些最胆大包天的技术难题。
2024 年初,我与两位出色的联合创始人 Ben Mildenhall 和 Justin Johnson 共同创立了 World Labs。他们都是世界一流的 AI 研究者,各自以重要方式推动了这一领域的发展。我们的目标是打造一家前沿实验室,聚焦 AI 中一些最重要的挑战——一旦解决,将大幅提升 AI 应对现实世界问题的能力。
世界并非仅由词语构成
我们创立这家公司时,秉持一个根本信念:仅靠语言不足以支撑模型的发展。宇宙并非由词语构成,而是由真实的事物构成。对 AI 而言,从科学到娱乐再到机器人技术,许多最重要的问题都要求模型能够对物理世界的结构与行为进行推理。
要攻克这一领域,需要一支具备广泛技能的独特团队,涵盖数据、计算机视觉、大模型训练、系统乃至计算机图形学。我非常幸运地组建了一支由研究者和工程师组成的创始团队,其中汇聚了这些领域的世界级专家。我们共同着手训练新型基础模型,以攻克空间智能中最困难的问题,并已朝着目标取得重大进展。
自 2024 年成立以来,World Labs 已构建起领先的 AI 空间智能能力,覆盖从创意工作到设计等各类场景。我们打造了世界领先的图像、视频与空间重建模型训练团队。同时,通过收购 SceniX,我们正朝着行业领先的机器人仿真能力迈进。
最近,我们发布了 Atlas,这是首个此类全模态模型架构,解决了空间智能领域一个悬而未决的关键问题:新相机视角预测。正如大语言模型能从一行文本预测下一个 token,Atlas 从零开始训练,能够从输入的 2D 图像预测下一个视角,其表现甚至超越了专用模型所取得的最先进结果。它通过将生成模型与多视图几何相结合,实质上解决了计算机视觉中一个长期存在的难题——稀疏重建。这带来了直接而深远的影响:从设计与工程,到科学与机器人学。
我们看到了各界对 Atlas 的浓厚兴趣:机器人学的强化学习环境;用于治疗与娱乐的场景生成;以及面向房地产、设计与建筑等领域的真实世界重建,还有更多应用即将涌现。
追随我们的北极星,走向 AMD
我们在 World Labs 如此短的时间内取得的研究与技术突破,只会进一步激发我们的雄心,并让我们清晰地看到 AI 在解决空间与物理世界问题上的潜力。既然我们已经有了切实的可能性证明,我们就要竭尽所能加速未来。
要做到这一点,就需要扩大我们的投入、拓宽我们的触达范围,并更贴近硬件。没有专注的硬件投入,AI 在效率上就会受限。在规模上也是如此。而就我们的目标而言,它也会始终被困在数字世界中。
这就引出了 AMD。我们从最早的日子起就与 AMD 合作。AMD 的 CEO 苏姿丰博士是我们使命的早期投资者和坚信者,我们共同相信 AI 能够推动社会走向更美好的未来。在我们各自穿行于科技世界的过程中,她也一直是我非常好的朋友。
去年,我们开启了一段深度技术合作,从在 AMD GPU 上进行模型训练与推理优化起步。我们近距离见证了 Lisa 如何果敢地带领 AMD 成为硬件生态中的重要力量,势头惊人。随着双方团队携手合作,我们意识到,将我们的 AI 软硬件生态、基础模型与应用整合在一起,是多么天作之合。
正如我当初深知是时候创办一家初创公司,来推动创建超越 LLM 的基础模型、并在 AI 领域实现最大影响力一样,如今同样很清楚,对我本人和 World Labs 而言,正确的道路是作为 AMD 的一部分继续我们的使命。我们将共同致力于持续推动 AI 前沿,解决真实问题,并以开放的方式与社区及整个生态携手前行。我们的使命坚定不移,也更加期待继续打造一个世界领先的前沿研究组织,在未来数十年中历久弥坚。我们致力于提供最好的开放模型与平台,实现 AI 端到端运行——从硬件到软件,再到模型,以及为这一切提供支撑所需的数据平台。
解决真实问题,造福人类
我们无比激动能参与这段共同的旅程,携手迈向我们要共同构建的未来;在这个未来里,强大的 AI 平台与系统将被开发并部署,用以帮助解决人类面临的最根本问题:从药物发现,到释放人类创造力;从变革学习方式,到开启下一代机器人技术。
能以执行副总裁兼首席科学家的身份加入,直接与 Lisa 及其团队共事,我激动之情难以言表。我的职业生涯一路走来,正是为了这一刻——在一家领先的 AI 公司里,以科学家和技术领导者的身份,继续壮大并带领一支前沿研究团队。有了这个更广阔的平台和机遇,我深感谦卑、感恩,也满怀希望:我们将构建一个我们所信仰的未来,并由那始终激励我以技术服务人类的同一颗北极星指引前行。我对未来无比期待,也感激能有这个机会让 World Labs 与 AMD 携手共建这一未来。