首页 >> 综合 > 快讯 >

英伟达 Lyra 2.0 开源发布 单张照片生成 90 米可漫游 3D 世界、生成速度提升 13 倍

2026-11-10 10:12:30 来源:网易 编辑:陶彩成 

英伟达空间智能实验室推出的 Lyra 2.0 已经开源,这款 AI 框架只需要一张照片作为输入,就能生成跨度 90 米、空间连贯、支持自由漫游探索的 3D 虚拟环境,它的快速版本在保证画面质量基本不变的前提下,生成速度相比原版提升 13 倍,专门解决过去单图生成长距离 3D 场景容易出现的画面漂移、重访同一个位置时场景错乱的问题,生成好的场景还能导出高斯泼溅、网格模型,直接导入 Isaac Sim 这类物理仿真引擎,多用于机器人、具身智能的仿真训练。之前很多 3D 生成模型,相机走远之后就会忘记之前生成的环境,再次回到老位置会生成不一样的画面,误差一点点累积之后整个场景直接扭曲,Lyra 2.0 靠空间记忆机制保存每一帧的 3D 几何信息,回看旧区域的时候调取历史信息,同时训练的时候让模型学习修正自己生成的错误画面,稳住长距离场景的一致性。下面整理 Lyra 2.0 核心参数清单、版本对比表,还有使用的完整流程。

英伟达 Lyra 2.0 核心参数清单

  • 研发主体:英伟达 Spatial Intelligence Lab(空间智能实验室)
  • 输入素材:单张静态照片
  • 最大生成场景范围:90 米可探索连贯 3D 环境
  • 模型规模:14B 参数
  • 开源协议:代码采用 Apache2.0 开源;模型权重仅限科研使用,禁止商用部署
  • 加速版本:DMD 快速版,降噪步数从 35 步压缩到 4 步,速度提升 13 倍
  • 输出格式:漫游视频、3D 高斯 Splatting、表面网格
  • 典型用途:机器人仿真、具身智能训练、虚拟场景快速搭建
  • 核心解决痛点:空间遗忘、长时序画面漂移失真

Lyra 2.0 原版与 DMD 快速版对比表

版本降噪步数单段生成耗时速度提升适用场景
原版 Lyra 2.035 步约 194 秒基准版本追求最高画质、科研实验
DMD 快速版4 步约 15 秒提升 13 倍快速迭代、批量生成场景

Lyra 2.0 从照片生成 3D 世界操作步骤

  1. 准备一张场景照片,上传到 Lyra 2.0 框架,自定义相机漫游轨迹
  2. 模型按照设定的相机路径,逐步生成连贯的漫游视频序列
  3. 空间记忆模块持续记录每一帧 3D 几何信息,避免重访场景错乱
  4. 视频序列完成后,重建为 3D 高斯泼溅和网格模型
  5. 导出资产,接入仿真引擎,用于机器人感知训练或者可视化预览

【相关 FAQ】

问题 1:英伟达 Lyra 2.0 开源之后,是不是随便一张照片就能生成 90 米 3D 世界?

回答 1:英伟达 Lyra 2.0 开源后,输入单张照片可以生成 90 米范围的 3D 世界,但场景连贯性、画面效果会受原图内容影响,复杂场景更容易出现细节瑕疵,而且权重仅限科研用途,不能直接商用。

问题 2:英伟达 Lyra 2.0 速度提升 13 倍,是怎么做到的?

回答 2:英伟达 Lyra 2.0 的 DMD 快速版把降噪步数从 35 步减少到 4 步,在画质损失可控的前提下,大幅缩短生成时间,最终实现 13 倍的速度提升。

问题 3:英伟达 Lyra 2.0 生成的 90 米 3D 世界,主要用来做什么?

回答 3:英伟达 Lyra 2.0 生成的 90 米 3D 世界,最核心用途是机器人、具身智能的仿真训练,也可以用来快速搭建虚拟漫游场景,输出模型可以导入英伟达 Isaac Sim 仿真平台。

问题 4:英伟达 Lyra 2.0 代码开源,是不是代表可以直接拿来商用?

回答 4:英伟达 Lyra 2.0 代码是 Apache2.0 协议开源,但是配套模型权重使用单独科研许可,只允许科研研发,不允许商用部署,商用需要等待官方后续开放授权。

【参考资料】

[2026-04-17](英伟达发布 Lyra 2.0:单张照片 AI 生成 90 米 3D 场景,仿真训练机器人提速)IT 之家

[2026-04-17](英伟达 Lyra2.0:单照生成 90 米 3D 环境,具身智能训练迎来关键突破)钛媒体

[2026-04-21](NVIDIA Lyra 2.0 - Explorable 3D Worlds from One Photo)Awesome Agents

[2026-04-14](Lyra 2.0: Explorable Generative 3D Worlds)arXiv

【免责声明】

本文内容整理自英伟达官方项目页面、arXiv 论文以及科技媒体公开报道,Lyra 2.0 的权重许可、硬件门槛、生成效果受显卡、输入图片影响,具体使用限制、更新规则以英伟达官方仓库和许可协议为准,本文不构成技术落地、商用采购建议。

 
最新文章