
【太平洋科技快讯】近日,昆仑万维正式宣布其Matrix系列再获突破性进展,成功推出专为游戏世界建模设计的Matrix-Game大模型(参数规模达17B),并公开分享其核心代码。作为工业界首个开源的10B级别空间智能大模型,Matrix-Game旨在开放式环境中实现高质量的内容生成与精确控制。
Matrix-Game的亮相,旨在为游戏开发者和AI爱好者提供一个强大的工具,用以构建和探索交互式虚拟世界。基于尖端技术,该模型具备理解并学习复杂环境中的动态变化和交互模式的能力,从而生成连贯且高度可控的游戏体验。
Matrix-Game的强大功能主要源于其三大核心组件的协同作用:
1. Matrix-Game-MC数据集:昆仑万维自主构建的海量Minecraft游戏视频数据,包含无标签的大规模视频和精细标注的带有键盘鼠标控制信号的视频。
2. Matrix-Game主模型:基于先进的扩散模型技术,构建了一个从图像到世界的生成框架。这一框架能够根据用户的键盘指令和鼠标移动等输入,生成连贯且高度可控的互动视频。其在视觉质量、时序一致性以及物理合理性方面表现出卓越的性能。
3. GameWorld Score评测体系:昆仑万维首创的统一游戏交互世界评估标准,从视觉质量、时序质量、动作可控性和物理规则理解四个维度全面量化模型性能。这一评测体系的推出,填补了该领域系统性评测基准的空白,为模型性能的提升提供了有力的指导。
值得一提的是,Matrix-Game在多种Minecraft场景下实现了可控生成,包括森林、沙滩、沙漠、冰川、河流和平原等。用户可以通过简单的键盘和鼠标操作,如方向键控制角色移动、空格键跳跃、攻击键攻击以及鼠标控制视角,来操控游戏角色。Matrix-Game能够根据这些操作生成相应的游戏世界视频,支持角色的各种动态行为。
更令人兴奋的是,Matrix-Game还支持自回归式的长视频生成,能够实现动作与视角之间的流畅衔接,并在时间一致性和环境适应性方面表现出众。这一特性为开发沉浸式长时体验、创意内容生成以及游戏设计等领域提供了坚实的模型基础。
