暂无菜单项

Atlas世界模型详解:一张图生成1分钟1440p视频,还能重建3D世界

发布于 更新于
115

李飞飞团队把相机控制、空间重建与时空模拟放进一个模型,世界生成正在从“好看”走向“可控、可重建、可仿真”。

World Labs 正式发布 Atlas,一款从头预训练的多模态世界模型。它不只根据文字或图片合成视频,还把图像、视频、相机位姿、深度和显式 3D 表达统一进同一套空间上下文中。按官方披露,Atlas 可以从一张或多张图片生成最长约 1 分钟、最高 1440p 的可控镜头,也能从稀疏视角恢复新视图、点云和 3D Gaussian Splat,并为机器人研究构建 Real-to-Sim 仿真场景。

World Labs Atlas多模态世界模型发布展示
Atlas 把视频生成、空间重建与仿真能力放进统一模型。

Atlas 是什么?它和普通 AI 视频模型有何不同

普通视频生成模型主要解决“下一帧看起来是否连贯”,而世界模型更强调场景是否具有可导航、可观察、可重建的空间结构。Atlas 被 World Labs 定义为 omni world model:它原生理解文本、图像、视频和 3D 条件,并在共享空间坐标中处理镜头运动、遮挡关系、几何结构与时间变化。

这意味着创作者不必只靠自然语言反复猜镜头。Atlas 可以接收相机轨迹、相机位姿、参考图像或多视角素材,把“镜头怎么走”和“世界长什么样”分开控制。对影视预演、游戏关卡、XR、建筑可视化和机器人仿真而言,这比单纯生成一段漂亮视频更接近真正的生产工具。

Atlas世界模型统一空间上下文示意
多模态输入被放入统一空间上下文,便于连续观察同一场景。

能力一:像素级相机控制,最长 1 分钟 1440p

Atlas 的第一项核心能力是 camera-controlled generation。用户可从一张或多张图片出发,指定相机的平移、旋转、推拉和轨迹,生成具有新视角的连续画面。官方给出的上限是约 1 分钟、1440p,并强调像素级相机控制。

“可控”比“更长”更重要。广告、电影分镜和产品展示需要镜头按照设计移动,而不是每次生成一条不可复现的随机运动。Atlas 将相机姿态作为原生条件输入,可降低镜头漂移、主体突然变形和空间关系失真的概率。

Atlas相机可控视频生成案例
从参考画面出发,Atlas 可沿指定相机轨迹生成新镜头。
Atlas长视频与1440p输出展示
更长时长与更高分辨率,为剪辑、预演和商业制作提供了更大空间。
Atlas镜头运动动态演示
动态演示:镜头运动不再只由模型随机决定。

能力二:从照片恢复可浏览的 3D 世界

Atlas 的 spatial reconstruction 支持从一张、数张乃至更多照片或视频中恢复场景的新视角,并输出点云与 3D Gaussian Splat。输入视角越充分,模型越偏向忠实重建;输入越稀疏,模型就需要对不可见区域进行更多合理补全。

这项能力适合把拍摄素材快速转成可浏览空间,也能服务于虚拟制片、数字孪生、房产与建筑展示、游戏场景原型。需要注意的是,模型“补全”的隐藏区域并不等同于测量结果,工程级应用仍需用真实扫描、标定数据和人工验收兜底。

Atlas稀疏图片3D重建结果
Atlas 可从稀疏视角恢复新视图与显式 3D 表达。
Atlas点云与Gaussian Splat输出
点云与 Gaussian Splat 输出让结果能够进入后续 3D 工作流。

能力三:视频重取景与机器人 Real-to-Sim

Atlas 还能对已有视频进行空间重取景:同一段事件可以换一个相机位置重新观察,而不仅是做二维裁切。对影视制作而言,它可用于补机位、镜头预演和 VFX 空间延展;对机器人而言,则可以把真实拍摄的环境转换为可重复测试的仿真世界。

在 Real-to-Sim 场景中,模型可生成 RGB 与深度传感器视图,并改变物体、光照和背景,用于导航、操作与策略评估。它解决的是仿真数据生产效率问题,但不能自动保证物理规律完全准确。碰撞、摩擦、质量和传感器噪声仍需专业仿真器与真实世界测试验证。

Atlas视频重取景与时空模拟
同一事件可从新的观察位置重新生成,实现视频重取景。
Atlas机器人Real-to-Sim仿真
Real-to-Sim 可快速构造多种环境变化,但仍需要真实机器人测试闭环。

能力四:图像、360°全景与跨场景空间拼接

除视频与 3D 外,Atlas 也支持文本生成图像和 360°全景。更有意思的是共享空间上下文:即使两张输入图片来自并不连续的视角,模型也能尝试构建一段视觉上连贯的过渡空间。这为概念设计、虚拟场景扩展和镜头衔接提供了新的工作方式。

不过,连续并不等于真实。模型可能生成视觉合理但几何错误的走廊、房间或物体背面,因此涉及真实空间尺寸、规划审批和安全决策时,不应把生成结果当成测绘数据。

Atlas 360度全景图生成
360°全景生成让概念场景可以被环视和继续扩展。
Atlas跨图片空间过渡生成
共享空间上下文帮助模型在不同参考画面之间构造连续过渡。

技术路线:自回归 Transformer 加整流流扩散

根据 World Labs 的技术说明,Atlas 采用多模态自回归扩散 Transformer:自回归部分负责按序建模上下文,rectified flow diffusion 负责高质量视觉生成。统一架构使文字、图像、视频、相机参数和 3D 信息能够相互条件化,并可利用 KV Cache 等机制提高长上下文推理效率。

通俗地说,它既要“记住这个世界已经发生了什么”,也要“画出下一段看起来可信的观察结果”。世界模型真正的难点不是单帧美感,而是长时间、跨视角和遮挡变化后,场景身份与几何关系仍然稳定。

Atlas多模态自回归扩散Transformer架构
统一架构同时处理视觉生成、相机控制和空间重建条件。

官方评测怎么看:成绩亮眼,但仍需独立验证

World Labs 展示了相机控制、视频质量、稀疏视角重建等内部评测,并称 Atlas 在多项测试中达到领先水平。阅读这些结果时应注意三点:其一,评测由发布方组织;其二,人类偏好测试容易受案例选择和提示词设置影响;其三,不同模型是否获得同等相机控制条件,会直接影响比较结果。

因此,更稳妥的结论是:Atlas 展示了非常有竞争力的空间生成能力,但“领先”仍需公开模型、统一协议和第三方复现实验确认。对于采购或生产决策,应以自己的素材、镜头轨迹、失败率、算力成本和交付时间进行小规模验证。

Atlas、Marble 与普通视频生成器的关系

  • Atlas:处于合作伙伴早期访问阶段的底层多模态世界模型,覆盖生成、重建和仿真。
  • Marble:World Labs 面向用户的世界创建产品与工作流,未来将由 Atlas 等模型能力驱动。
  • 普通视频生成器:重点通常是文本或图片到二维视频;Atlas 更强调原生相机姿态、空间一致性及显式 3D 输出。

想查看 Atlas 的官网介绍、开放状态与入口,可访问站内整理的 World Labs Atlas 导航页。文章内只保留此前台站内链接,便于后续统一更新官网入口。

谁最值得关注 Atlas

  • 影视与广告团队:用于分镜预演、补机位、镜头探索和 VFX 场景扩展。
  • 游戏与 XR 团队:快速制作可浏览世界、关卡概念和环境资产原型。
  • 建筑与空间设计:将多视角素材转为可观察场景,但精确测量仍需专业设备。
  • 机器人研究者:构造多样化 Real-to-Sim 场景和 RGB/深度观察数据。
  • AI 视频创作者:在更稳定的相机控制下制作长镜头与空间转场。

现阶段限制与使用建议

Atlas 目前并非所有用户都能直接调用的公开产品,官方仅向部分合作伙伴提供早期访问,价格、算力配置和完整授权条款尚未公开。官方样片通常经过筛选,复杂人物交互、快速运动、反射透明材质、长时间身份一致性和不可见区域几何仍可能出现问题。

  1. 先用少量代表性素材测试相机轨迹、几何稳定性和失败率。
  2. 重建任务尽量增加重叠视角,并保留相机标定与真实尺寸参考。
  3. 机器人场景把生成数据用于训练和压力测试,不替代真实环境验证。
  4. 商业制作提前确认人物肖像、训练素材、输出版权和保密要求。

总结:世界模型正在成为空间内容的新底座

Atlas 的价值不只是一张图生成一分钟视频,而是把镜头控制、3D 重建、视频重取景和机器人仿真放进同一个模型。它让“生成一段画面”向“构造一个可以从不同位置观察、编辑和测试的世界”迈进了一步。真正决定 Atlas 能否进入生产流程的,将是开放程度、稳定性、推理成本、第三方评测以及与现有 3D 和机器人工具链的兼容能力。

0 点赞
0 收藏
分享
0 讨论
反馈
热门资讯
相关素材

暂无数据