昆仑万维开源两个模型!开源交互式世界模型 !& 可漫游3D场景生成模型!
2025 年 8 月 11 - 15 日,昆仑万维举办 SkyWork AI 技术发布周,每日推出一款前沿模型。
8 月 12 日开源了 Matrix - Game 2.0 与 Matrix - 3D
Matrix - Game 2.0:实时交互新标杆
Matrix - Game 2.0 是昆仑万维 Matrix 系列交互世界模型的升级版,它实现通用场景下交互式实时长序列生成,作为业内首个此类开源方案,意义非凡。

相比旧版,其实时生成与长序列能力大幅提升,能以 25FPS 速度在复杂场景稳定生成连续视频,生成时长可延至分钟级,极大增强连贯性与实用性。
而且,它对物理规律和场景语义理解精准,生成内容符合现实逻辑。用户通过简单指令,如键盘方向键、鼠标移动,就能操控角色在场景中自由行动,系统实时生成交互视频。
无论是类 GTA 游戏场景、Minecraft 沙盒场景,还是神庙逃亡场景,它都能生成真实、符合物理逻辑的交互视频。
项目地址:
https://github.com/SkyworkAI/Matrix-Game
Matrix - 3D:单图构建 3D 世界
Matrix - 3D 融合全景视频生成与三维重建,解决现有方法依赖多视图输入、难以从单图生成完整可探索 3D 世界的难题。
它从单图像生成高质量、轨迹一致的全景视频,还原可漫游三维空间,生成效果对标李飞飞的 World Labs,探索空间更广阔。

Matrix - 3D 生成的场景全局一致,支持 360° 自由视角浏览,几何结构、遮挡关系自然,纹理风格统一。

与现有方法相比,探索范围更大,生成可控,支持文本和图像输入,结果与输入匹配,可自定义扩展。它泛化能力强,能生成多样、逼真的高质量场景,且是首个前馈全景 3D 场景生成模型,生成速度快。
项目地址:
https://github.com/imandrewlux/matrix3d