昆仑万维旗下Skywork AI开源Matrix-Game 4.0,将游戏引擎与AI视频渲染结合,让玩家在AI生成的画面中实时操作。团队称,该系统在单张RTX 5090显卡上可实现480p、每秒60帧输出,按键到画面响应的延迟低于150毫秒。
系统由游戏引擎负责角色位置、物理状态和交互规则,先生成简单的低多边形画面,再由视频模型将其转化为更丰富的视觉效果。这样,游戏规则和状态由引擎持续维护,AI主要承担画面渲染。
玩家还可通过自然语言提出新玩法,由编程智能体将指令转化为游戏规则和提示词,修改玩法并调整生成画面。
此次发布包括模型权重、推理代码、浏览器演示及游戏源码,提供中世纪城堡、古埃及射击场景和城市驾驶场景。团队后续计划提高分辨率、扩展游戏类型,并探索多人游戏中的一致视角。





