昆仑万维开源Matrix-Game大模型 可据指令生成相应游戏世界视频
myzbx 2025-05-21 15:19 37 浏览
【太平洋科技快讯】5月13日，昆仑万维宣布，旗下 Matrix 系列的交互式世界生成方向正式落地，推出 Matrix-Game 大模型(17B)，并开源其核心代码。Matrix-Game 是工业界首个开源的 10B 空间智能大模型，专为游戏世界建模而设计，致力于在开放式环境中实现高质量的内容生成与精确控制。
Matrix-Game 的目标是为游戏开发者和 AI 爱好者提供一个强大的工具，用于构建和探索交互式虚拟世界。该模型基于先进的技术，能够理解和学习复杂环境中的动态变化和交互模式，从而生成连贯、可控的游戏体验。
Matrix-Game 的功能源于其三大核心组件：
Matrix-Game-MC 数据集： 该数据集由昆仑万维自主构建，包含海量 Minecraft 游戏视频数据，分为无标签的大规模视频和带有键盘鼠标控制信号的精细标注视频。
Matrix-Game 主模型： 基于先进的扩散模型技术，Matrix-Game 主模型构建了一个从图像到世界的生成框架。该框架能够根据用户的输入，例如键盘指令和鼠标移动，生成连贯且可控的互动视频，在视觉质量、时序一致性和物理合理性方面达到了出色的平衡。
GameWorld Score 评测体系： 昆仑万维提出了这一统一的游戏交互世界评估标准，从视频的视觉质量、时序质量、动作可控性和物理规则理解四个维度全面量化模型性能。该评测体系的提出，填补了该领域缺乏系统性评测基准的空白。
Matrix-Game 能够在多种 Minecraft 场景下实现可控生成，包括森林、沙滩、沙漠、冰川、河流和平原等。用户可以通过键盘和鼠标输入指令，例如使用方向键控制角色移动，空格键跳跃，攻击键攻击，以及鼠标控制视角，来操控游戏中的角色。Matrix-Game 能够根据这些指令生成相应的游戏世界视频，支持角色的前后左右移动、跳跃、攻击以及视角变换等动态行为。
此外，Matrix-Game 还支持自回归式的长视频生成，这意味着它能够实现动作与视角之间的丝滑衔接，并在时间一致性和环境适应性方面表现出色。这一特性为开发沉浸式长时体验、创意内容生成以及游戏设计等应用奠定了坚实的模型基础。
- 上一篇：游戏帧数低硬件不背锅 如何完善游戏运行环境?
- 下一篇：游戏开发需要学什么
相关推荐
- IT之家学院:如何修改Win10 Edge浏览器下载路径?
-
IT之家讯目前Win10Edge浏览器的默认下载路径不可修改，只能是系统“下载”文件夹，虽然用户可以通过移动该文件夹位置来间接达到修改目的，但Edge浏览器本身却无法修改。不过我们可以通过修改注册表...
- Win 10自带Edge浏览器史上最强，好内核配了滥界面
-
微软在Win10上为我们带来了全新的Edge浏览器，而跌落神坛的IE正式被微软抛弃！随着Win10周年版更新的到来，Edge浏览器也带来了很多全新的特性，功能也更加完善！这让微软信心大增，微软甚...
- Win10全新浏览器Microsoft Edge图标:致敬IE
-
IT之家讯今天早些时候，微软宣布了斯巴达（Spartan）浏览器项目的官方命名，微软在Windows10上集成的新浏览器的内核名为Edge，所以大家一定猜到了，它被命名为MicrosoftEdge...
- Edge 84稳定版发布:优化集锦 默认禁用TLS 1.0/1.1
-
时隔6周时间，Edge浏览器的最新稳定版v84.0.522.40正式发布。新版本为IE模式改善了站点列表下载时间，在“以管理员身份运行”运行时允许用户登录浏览器等等。下载地址:https...
- 真相:Win10微软Edge和IE11浏览器图标相似的原因
-
IT之家讯5月7日消息，微软在Build2015大会上公布了Win10斯巴达浏览器的正式名称“MicrosoftEdge”以及正式图标，蓝色的“e”。这款新浏览器的图标让各位Windows老用户...
- 微软 Win11，20 多年来首个没有 IE 浏览器的 Windows 版本
-
IT之家6月26日消息在Windows10的生命周期中，你可能已经安装了IE浏览器、微软Edge的经典版本，以及新的Chromium驱动的Edge浏览器。这三个浏览器完...
- 微软宣布2022年6月15日停止支持IE浏览器:已推出25年
-
5月20日消息，在推出25年之后，微软最终决定于明年停止对IE浏览器的支持。多年来，这款网络浏览器基本上没有太多消费者使用，为此微软定于2022年6月15日完全停止对其支持，转...
- 我采访了一位 Pornhub 工程师，聊了这些纯纯的话题
-
成人网站在推动Web发展方面所起到的作用无可辩驳。从突破浏览器的视频能力限制，到利用WebSocket推送广告（防止被广告拦截器拦截），你必须不断想出各种聪明的办法，让自己处在Web技术创...
- 如何在 Microsoft Edge 中使用IE浏览器
-
随着微软Windows10，Windows11的推出，IE浏览器逐渐被抛弃，可是国内一些银行和政府网站还必须使用IE才能访问，下面我来解决这个问题。首先在MicrosoftEdge中启用IE模式...
- IE浏览器无法加载网站时将自动跳转到Edge中打开
-
来源：cnBeta.COM目前微软已经将开发重心放在基于Chromium的新版Edge浏览器上，而传统的InternetExplorer则逐渐被淘汰。也就是说，如果你当前使用的是IE...
- 告诉你手机信号栏中E、H、T都是什么意思!
-
手机信号经常会出现E啊，H啊，T啊……之类的字母，每次出现的时候小编都会自动关机，觉得手机坏掉了……ORZ……那么这些字母具体表示些什么意思呢？如果是G，那么代表的是GPRS，指2.5G网络，此时网速...
- 比Chrome更适合国人用 Chromium版Edge横空出世
-
编辑微软终于正式发布Chromium内核的Edge浏览器了。这意味着微软放弃了自研浏览器内核，Windows自带浏览器也成为了Chrome的马甲。关于微软为什么要这么做，笔者曾经撰文分析，大家可以点...
- Microsoft 新浏览器 Edge 将不再支持 ActiveX、VBScript 技术
-
Microsoft继宣布将推出将取代IE的全新浏览器Edge后，日前又再宣布Edge不会支持沿用以久的ActiveX、VBScript与BrowerHelperObjects（...
- 隐藏功能超炫酷 新版Edge浏览器还能这么玩
-
基于Chromium的新版Edge浏览器已经开放测试，但由于是测试期，可供用户选择的功能还比较少。不过有一部分功能已经内置到浏览器中，只是尚未开放而已。这就像汽车里的刷EPU一样，没事自己玩一玩，也是...
- 微软推出的新版Edge浏览器，让我抛弃用了5年的谷歌
-
随着新版Edge浏览器的发布，这个微软的亲儿子以崭新的面貌和大家见面啦。这次更新可谓是好评如潮，相比浏览器届的老大哥——谷歌浏览器，它少了些臃肿，但又多了一些独特的功能。今天，我就为大家介绍8...
- 一周热门
- 最近发表
-
- IT之家学院:如何修改Win10 Edge浏览器下载路径?
- Win 10自带Edge浏览器史上最强，好内核配了滥界面
- Win10全新浏览器Microsoft Edge图标:致敬IE
- Edge 84稳定版发布:优化集锦 默认禁用TLS 1.0/1.1
- 真相:Win10微软Edge和IE11浏览器图标相似的原因
- 微软 Win11，20 多年来首个没有 IE 浏览器的 Windows 版本
- 微软宣布2022年6月15日停止支持IE浏览器:已推出25年
- 我采访了一位 Pornhub 工程师，聊了这些纯纯的话题
- 如何在 Microsoft Edge 中使用IE浏览器
- IE浏览器无法加载网站时将自动跳转到Edge中打开
- 标签列表
-
- HTML 简介 (30)
- HTML 响应式设计 (31)
- HTML URL 编码 (32)
- HTML Web 服务器 (31)
- HTML 表单属性 (32)
- HTML 音频 (31)
- HTML5 支持 (33)
- HTML API (36)
- HTML 总结 (32)
- HTML 全局属性 (32)
- HTML 事件 (31)
- HTML 画布 (32)
- HTTP 方法 (30)
- 键盘快捷键 (30)
- CSS 语法 (35)
- CSS 轮廓宽度 (31)
- CSS 谷歌字体 (33)
- CSS 链接 (31)
- CSS 定位 (31)
- CSS 图片库 (32)
- CSS 图像精灵 (31)
- SVG 文本 (32)
- 时钟启动 (33)
- HTML 游戏 (34)
- JS Loop For (32)