Matrix-Game 3.0: Real-Time and Streaming Interactive World Model with Long-Horizon Memory

关键功能

以流模式实时生成交互式世界模型输出。
支持720p长视频生成。
使用长视野内存来提高时间一致性。
一起改进数据、模型和推理组件。
基于具有合成和真实世界来源的升级数据引擎构建。
包括视频-姿势-动作-提示四元组训练数据。
利用虚幻引擎和 AAA 游戏集合进行更丰富的监督。
针对连贯性和延迟都很重要的实际交互场景。

该项目页面强调了数据、模型设计和推理方面的改进,包括结合了虚幻引擎合成数据、AAA 游戏的大规模自动收集和现实世界视频增强的升级数据引擎。该管道将​​视频-姿势-动作-提示四元组数据输入到训练过程中,表明该系统是围绕结构化交互式监督构建的,而不是简单的视频提示生成。


Matrix-Game 3.0旨在同时提高时间一致性和实时响应能力。通过将内存增强建模与流生成相结合,它的目标是更长、更连贯的交互,并将自己定位为动态视频生成和交互环境的实用世界模型基础。

在您的网站添加此徽章,以获得更多点赞并登上搜索结果顶部!

嵌入按钮预览 - 浅色主题
嵌入按钮预览 - 深色主题

Subscribe to the AI Search Newsletter

Get top updates in AI to your inbox every weekend. It's free!