李飞飞团队新推实时3D世界模型，15帧速率重塑交互体验

如今，许多玩家在生成3D世界模型或视频内容时常常要经历漫长的渲染时间，令人感到沮丧。近日，由李飞飞创办的World Labs推出了一款名为Frameboy的Demo，标志着其自回归世界模型Atlas进入了实时交互的新纪元。用户只需在浏览器上操作，云端GPU便可提供最高15帧每秒的实时画面流，让用户能够像玩游戏一样自由移动视角，轻松探索由单张图片生成的3D世界。

即使走错方向或尝试不成功的创意，试错的成本几乎为零，用户只需轻松点击即可更换视角。这一进展恰逢AMD以82亿美元收购World Labs，李飞飞的团队再次展现了其技术实力。要理解这次更新，首先需要了解两个月前发布的Atlas模型。Atlas的主要特点是能够逐帧生成图像，并支持高精度的相机视角控制，无论是从单张图片构建虚拟世界，还是用照片还原地标、监控建筑进度，功能十分全面。

然而，以往的渲染速度常令人不堪重负，调整机位需要等待数十秒甚至数分钟。为了解决这个问题，团队对Atlas进行了深度优化，并推出了Frameboy的实时交互版本，其复古掌机式设计让人联想到经典的Game Boy。现在，画面生成速度提高到每秒15帧，用户在浏览器中移动视角时，几乎感受不到生成过程带来的延迟，只需转动虚拟相机，画面便能同步更新。 球友会

在Frameboy的实时模式下，用户可以在房间中自由漫游，画面实时跟随视角变化，大大简化了以前繁琐的手动迭代流程。虽然Frameboy的外观与去年的轻量级项目RTFM有些相似，但目前的Atlas无论在模型规模还是数据处理能力上都有显著提升。只需提供一张静态图片或文字描述，Atlas就能从零开始生成完整的周边场景，供用户互动探索。

World Labs还将实时串流技术集成进新应用Viewfinder，用户可以上传自己的图片，使用虚拟相机逐步构建3D场景，实时输出色彩与深度信息，帮助用户更直观地对齐三维空间。创建好场景后，用户只需一键开启Frameboy，便可将静态场景转变为实时交互的3D环境。

尽管当前Frameboy仍需要高性能云端服务器运行，相比于传统的本地渲染成本较高，但随着技术和硬件的不断进步，未来有望转变为更加普及的工具。AMD的收购将为World Labs带来充足的资源和支持，加速其技术的进一步发展。 球友会