百度360必应搜狗淘宝本站头条
HTML APICSS 语法HTML 游戏HTML5 支持CSS 谷歌字体
当前位置：网站首页 > 技术文章 > 正文

昆仑万维开源Matrix-Game大模型 可据指令生成相应游戏世界视频

myzbx 2025-05-21 15:19 52 浏览

【太平洋科技快讯】5月13日，昆仑万维宣布，旗下 Matrix 系列的交互式世界生成方向正式落地，推出 Matrix-Game 大模型(17B)，并开源其核心代码。Matrix-Game 是工业界首个开源的 10B 空间智能大模型，专为游戏世界建模而设计，致力于在开放式环境中实现高质量的内容生成与精确控制。

Matrix-Game 的目标是为游戏开发者和 AI 爱好者提供一个强大的工具，用于构建和探索交互式虚拟世界。该模型基于先进的技术，能够理解和学习复杂环境中的动态变化和交互模式，从而生成连贯、可控的游戏体验。

Matrix-Game 的功能源于其三大核心组件：

Matrix-Game-MC 数据集： 该数据集由昆仑万维自主构建，包含海量 Minecraft 游戏视频数据，分为无标签的大规模视频和带有键盘鼠标控制信号的精细标注视频。

Matrix-Game 主模型： 基于先进的扩散模型技术，Matrix-Game 主模型构建了一个从图像到世界的生成框架。该框架能够根据用户的输入，例如键盘指令和鼠标移动，生成连贯且可控的互动视频，在视觉质量、时序一致性和物理合理性方面达到了出色的平衡。

GameWorld Score 评测体系： 昆仑万维提出了这一统一的游戏交互世界评估标准，从视频的视觉质量、时序质量、动作可控性和物理规则理解四个维度全面量化模型性能。该评测体系的提出，填补了该领域缺乏系统性评测基准的空白。

Matrix-Game 能够在多种 Minecraft 场景下实现可控生成，包括森林、沙滩、沙漠、冰川、河流和平原等。用户可以通过键盘和鼠标输入指令，例如使用方向键控制角色移动，空格键跳跃，攻击键攻击，以及鼠标控制视角，来操控游戏中的角色。Matrix-Game 能够根据这些指令生成相应的游戏世界视频，支持角色的前后左右移动、跳跃、攻击以及视角变换等动态行为。

此外，Matrix-Game 还支持自回归式的长视频生成，这意味着它能够实现动作与视角之间的丝滑衔接，并在时间一致性和环境适应性方面表现出色。这一特性为开发沉浸式长时体验、创意内容生成以及游戏设计等应用奠定了坚实的模型基础。

相关推荐

vue3和web网页直接操作微信小程序云开发数据库

我们开发好小程序以后，有时候需要编写一个管理后台网页对数据库进行管理，之前我们只能借助云开发自带的cms网页，但是cms网页设计的比较丑，工作量和代码量也不够，所以我们今天就来带大家实现用vue3编写...

WebCurl:极致轻量的跨平台 HTTP 请求调试工具

在接口开发与测试领域，工具的轻量化、兼容性与安全性往往直接影响工作效率。WebCurl作为一款纯原生、无依赖的网页版API测试与调试工具，凭借极简架构与全场景适配能力，重新定义了接口调试工具的使...

webapi 全流程_webapi项目

C#中的WebAPIMinimalApi没有控制器，普通api有控制器，MinimalApi是直达型，精简了很多中间代码，广泛适用于微服务架构MinimalApi一切都在组控制台应用程序类【Progr...

Nodejs之MEAN栈开发(四)-- form验证及图片上传

这一节增加推荐图书的提交和删除功能，来学习node的form提交以及node的图片上传功能。开始之前需要源码同学可以先在git上fork：https://github.com/stoneniqiu/R...

CodeSpirit.Amis.AiForm 智能表单使用指南

概述AiForm是CodeSpirit.Amis框架的智能表单功能，专为AI驱动的长时间处理任务设计。它自动生成一个多步骤的用户界面，包含表单输入、进度监控、日志显示和结果展示等功能。功能特点...

初级、中级、高级前端工程师，对于form表单实现的区别

在React项目中使用AntDesign（Antd）的Form组件能快速构建标准化表单，特别适合中后台系统开发。以下是结合Antd的最佳实践和分层实现方案：一、基础用法：快速搭...

Bun v0.7 大版本发布，与 Vite 牵手来破局?

大家好，很高兴又见面了，我是"高级前端进阶"，由我带着大家一起关注前端前沿、深入前端底层技术，大家一起进步，也欢迎大家关注、点赞、收藏、转发，您的支持是我不断创作的动力。今天给大家带来...

「前端」界面可视化开发框架formio.js

简介formio是一个前端可视化开发框架，无需写css/js就可以开发一套前端界面。直接在界面内拖拽就可以完成界面的布局及开发。数据交互也是固定的，表单校验也可以配置，功能非常强大。特性使用ES6...

小伙给同事爬取数据竟获取不到，竟要使用这种请求方式才能获取?

Http请求中FormData和RequestPayload两种参数的区别?AjaxPost请求中常用的两种的形式：formdata和requestpayload一、默认的表单方式...

WinForm + Win32 API 自定义无边框窗口实战(工业软件必备)

前言随着.NET9.0AOT（Ahead-of-Time）的发布，便萌生了用代码测试AOT编译效果的想法，同时评估未来是否为NanUI开发支持AOT编译的新版本。关于NanUI项目，若大家尚未了...

DeepSeek从入门到精通(11)——网页版、APP、API使用方式比较

DeepSeek提供了三种主要的使用方法：网页版、手机APP和API调用。这三种方式各有特点，适用于不同的使用场景。下面从使用方法和主要特点两方面进行比较：一、网页版使用方法：直接通过浏览器访问De...

初略Web API Notification 桌面通知

HTML5WebNotificationsAPI通知接口用于向用户配置和显示桌面通知弹窗。例如，Email邮件通知、来电提醒、聊天信息提醒或任务提醒等。关于Web开发技术中Notificat...

什么是API网关?——驱动数字化转型的“隐形冠军”

什么是API网关API网关（APIGateway）是一个服务器，位于应用程序和后端服务之间，提供了一种集中式的方式来管理API的访问。它是系统的入口点，负责接收并处理来自客户端的请求，然后将请求路由...

.NET 7使用 Entity Framework Core 制作增删改查(CRUD) Web API 教程

在本文中，我们将使用EntityFrameworkCore(EFCore)实现一个.NET7WebAPICRUD示例。WebAPI是一个构建HTTP服务的框架，可以从浏览器、移动设备和...

C# ASP.NET Core Web Api 与 MVC 模式下 body 参数传递，post 参数方式

在ASP.NETCore中，WebAPI和MVC模式在处理HTTP请求时，特别是POST请求，使用body参数来传递数据的方式非常相似。两者都使用模型绑定来自动将请求体中的数据映射到C#对象上。下...

一周热门
最近发表
标签列表