李飞飞AI创企首款世界模型Marble上线 一句话生成3D虚拟世界

11月13日消息，AI教母李飞飞旗下AI公司World Labs正式推出首款商用世界模型产品Marble。这款创新工具采用免费增值与付费相结合的模式，用户通过文本、照片、视频、3D布局或全景图，即可生成可编辑、可下载的3D虚拟环境。 

此次发布的生成式世界模型，距离该公司结束隐身模式并获得2.3亿美元融资仅一年有余。两个月前，Marble曾以限量测试版形式首次亮相，如今正式版的推出标志着World Labs在世界模型竞赛中取得重要进展。世界模型作为一种能构建环境内部表征的AI系统，在预测未来场景和规划行动方面具有重要价值。 

尽管市场上已有Decart、Odyssey等初创公司推出免费演示版，谷歌的Genie模型也处于研究预览阶段，但Marble展现出独特优势。与同类产品不同，Marble专注于创建持久化、可下载的3D环境，而非实时生成虚拟世界。这种技术路径不仅能有效减少场景形变或不一致现象，还支持用户将生成的世界以高斯溅射、网格或视频等多种格式导出。

值得一提的是，Marble是业内首个同时提供AI原生编辑工具和混合3D编辑器的产品。用户可先勾勒空间结构草图，再由AI自动填充视觉细节，实现创意与技术的完美融合。

World Labs联合创始人贾斯汀·约翰逊表示："这是一个全新的3D世界生成模型类别，其性能将随时间不断优化。事实上，我们已经取得了显著进展。"

图：Marble的输入和输出过程

在2024年12月份，World Labs曾演示早期模型从单张图像生成交互式3D场景的能力。虽然效果令人印象深刻，但当时生成的场景仍显卡通化，且存在移动范围受限和偶发性渲染错误等问题。 

在实际测试中，仅凭图像提示，Marble就能生成从游戏场景到真实客厅复刻的多种虚拟环境。尽管测试版在场景边缘处理上仍有瑕疵，但据称正式版已对此进行优化。有趣的是，测试期间使用单一提示生成的世界，在视觉效果和意图匹配度上反而优于当前版本。

约翰逊表示，虽然编辑功能尚未经过全面测试，但其已具备支持游戏开发、视觉特效和虚拟现实项目的实用价值。

"创意控制是Marble未来的核心发展方向，"约翰逊强调，"我们既要保持快速生成的便捷性，也要赋予用户深度掌控创作细节的能力。我们不希望机器完全接管创作过程，剥夺用户的创造力。"

在创意控制方面，Marble展现出多重创新：

● 输入灵活性显著提升，从测试版的单图像支持扩展到正式版的多图像和短视频输入

● 新增实验性3D编辑器Chisel，支持用户通过文本提示定义粗略空间布局的视觉风格

● 采用结构-样式分离的生成逻辑，类似HTML与CSS的协作方式

● 支持直接操控3D物体，实现真正的交互式编辑

约翰逊称："用户可以直接移动代表沙发的3D方块，随意调整其位置。"

图：Marble的Chisel功能将结构与风格解耦

新增的"世界扩展"功能进一步增强了编辑控制能力。约翰逊解释道："生成世界后，用户至少可以进行一次扩展操作。当遇到场景破碎的区域时，可以指令模型在该区域进行扩展或增添细节。"

针对大规模空间创作需求，Marble的"组合模式"支持多个世界的无缝融合，比如约翰逊尝试将"奶酪房间配葡萄椅"与"太空未来会议室"两个风格迥异的世界进行拼接。

应用前景与行业影响

Marble推出四档订阅方案，满足不同用户需求：

免费版：支持4次文本/图像/全景生成

标准版（20美元/月）：12次生成额度，支持多图像/视频输入

专业版（35美元/月）：25次生成额度，含场景扩展和商业授权

旗舰版（95美元/月）：75次生成额度，开放全部功能

约翰逊认为，游戏、电影特效和虚拟现实将成为Marble的首批应用领域。然而，游戏开发者对这项技术的态度呈现分化趋势。近期游戏开发者大会的调查显示，约三分之一受访者认为生成式AI对游戏产业有负面影响，这个比例较上年上升12%。主要担忧集中在知识产权、能耗问题和AI生成内容质量等方面。

"Marble并非要取代现有游戏开发流程，而是为开发者提供可嵌入工作流的素材资源，"约翰逊澄清道。他设想开发者可以将Marble生成的背景环境导入Unity或虚幻引擎，再添加交互元素和代码逻辑。

在Marble中通过文本提示生成的飞船环境（请注意灯光如何在舱壁上有如真实般反射）

在视觉特效领域，Marble通过提供稳定的3D资产，帮助艺术家实现精准的镜头控制和场景布置，有效规避了AI视频生成器常见的画面闪烁和镜头控制难题。

虽然World Labs目前未将虚拟现实作为重点发展方向，但约翰逊指出VR行业正面临"内容饥渴"，对Marble的推出表现出浓厚兴趣。目前，Marble已适配Vision Pro和Quest 3等主流VR设备，所有生成世界均可通过VR头显直接体验。

在机器人技术领域，Marble同样展现出应用潜力。约翰逊指出，与图像和视频生成不同，机器人技术缺乏大规模训练数据集，而Marble这类生成器可以便捷地创建仿真训练环境。

空间智能的未来愿景

World Labs首席执行官李飞飞近期曾撰文称，Marble代表着迈向"真正空间智能世界模型"的第一步。她深信，"下一代世界模型将使机器实现全新维度的空间智能。"

李飞飞进一步阐述："如果说大语言模型教会了机器读写，那么像Marble这样的系统将教会它们观察和构建。"她强调，理解事物在三维空间中的存在和互动方式，最终将推动机器在游戏、机器人、科学和医疗等领域实现突破。

"缺乏空间智能，我们对真正智能机器的梦想将永远无法完整，"李飞飞总结道。

这一愿景不仅定义了World Labs的发展方向，也为整个AI行业的未来演进描绘了新的蓝图。（文/腾讯科技特约编译金鹿，编辑/郑萌萌）