米兰体育

网易米兰体育 > > 正文

720P画面跑超24帧,VAST开源实时世界模型

0
分享至

一句话生成一个能玩的世界,这件事现在有了开源版本。VAST 发布实时世界模型 EdenLive 和 Golem,核心思路是把状态与渲染拆开:上游交互系统维护逻辑规则与状态,生成模型只负责高保真的视觉渲染。


为什么要拆?因为视频模型擅长生成看起来合理的画面,却无法独自维护血量、碰撞、物体身份和胜负条件。过去的世界模型演示,往往用一段视频证明模型能够想象世界,但画面再好看,也接不住玩家的操作。

EdenLive 的架构分三层:持续演化的状态、状态到画面的接口、生成式渲染器。状态层保证交互逻辑的确定性,渲染层负责把状态画出来。用一句话概括这套分工:参考画面决定结构、运动和镜头,生成模型负责重写这些内容。

性能上,EdenLive 能追着不断变化的参考画面生成,在 RTX 5090 上以超过 24 FPS 的速度输出 720P 画面。实时交互跟随,是它区别于传统视频生成模型的关键能力。

长时生成的一致性靠三方分工解决:

  • 参考视频提供结构与运动
  • 目标首帧确定画风
  • 文本提示词补充细节

在 Gemini-3.8-Flash 的盲评中,EdenLive 在参考遵循、首帧一致性等多个维度领先对手。

另一个模型 Golem 则专注具身智能数据增强。它的做法是把真人视频中的手部替换为机械臂,为模型提供机器人视角的训练素材,用来解决视觉分布差异。对做机器人训练数据的人来说,这是一条绕开真机采集的路径。

落地方向也摆得很清楚:实时游戏制作、视频画风转换、具身数据增强。从一句话到一个能玩的世界,中间隔的不是想象力,是状态和渲染能不能各司其职。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
谎话连篇的特朗普及其团队,挽救不了中期选举

谎话连篇的特朗普及其团队,挽救不了中期选举

山河路口
2026-10-20 21:45:29
有人问,要是当年国民党赢了,老蒋主政中国,中国后来会是什么样子?

有人问,要是当年国民党赢了,老蒋主政中国,中国后来会是什么样子?

z千年历史老号
2026-09-03 18:18:17
东风导弹泄密案中,间谍郭万钧一家三口均被依法执行死刑

东风导弹泄密案中,间谍郭万钧一家三口均被依法执行死刑

人生录
2026-06-17 20:53:45
700亿+!全球首富马斯克要“直接发钱”:人人可领1000,前提只有一个

700亿+!全球首富马斯克要“直接发钱”:人人可领1000,前提只有一个

明镜pro
2026-10-20 09:07:49
上海全城严查!嘉定警方已经行动,多人被查!

上海全城严查!嘉定警方已经行动,多人被查!

尚虹桥
2026-10-20 11:49:22
天亮了?时隔724天再取连胜,升降级恢复,四川雄起,下轮重头戏

天亮了?时隔724天再取连胜,升降级恢复,四川雄起,下轮重头戏

萌兰聊个球
2026-10-20 22:00:52
国家数据集团成立,七个股东组成天团

国家数据集团成立,七个股东组成天团

知产库
2026-10-20 23:23:50
统一不能再拖、赖清德在做一件可怕的事、马英九给郑丽文2个忠告

统一不能再拖、赖清德在做一件可怕的事、马英九给郑丽文2个忠告

三生一梦莫
2026-10-12 22:30:17
李小冉离婚,参加乘风时徐佳宁曾为她打赏至榜一,结婚超十年没要孩子

李小冉离婚,参加乘风时徐佳宁曾为她打赏至榜一,结婚超十年没要孩子

韩小娱
2026-10-20 06:36:02
【时政】王晓晖在全省进一步深化国资国企改革工作推进会议上强调:坚定不移深化国资国企改革,为四川高质量发展和现代化建设提供有力支撑

【时政】王晓晖在全省进一步深化国资国企改革工作推进会议上强调:坚定不移深化国资国企改革,为四川高质量发展和现代化建设提供有力支撑

方志四川
2026-10-20 20:48:42
72岁潘虹独自照顾92岁母亲!她后悔当年太挑剔,不生孩子是错误

72岁潘虹独自照顾92岁母亲!她后悔当年太挑剔,不生孩子是错误

细品名人
2026-10-18 16:44:37
消息称引望不允许车企补贴华为乾崑智驾ADS软件费用,持续收费才能维护庞大研发力量

消息称引望不允许车企补贴华为乾崑智驾ADS软件费用,持续收费才能维护庞大研发力量

IT之家
2026-10-20 16:26:07
越涨越凶?南通网友:再这样下去,要开始捡柴火做饭了!

越涨越凶?南通网友:再这样下去,要开始捡柴火做饭了!

好通网
2026-10-20 16:29:57
阿森纳旧将托马斯:在监狱11个月像过了5年,不适应就会被摧毁

阿森纳旧将托马斯:在监狱11个月像过了5年,不适应就会被摧毁

懂球帝
2026-10-20 19:27:08
妻子生日买一万六手机五千四羽绒服,丈夫嫌大手大脚,她回怼丈夫没本事挣大钱

妻子生日买一万六手机五千四羽绒服,丈夫嫌大手大脚,她回怼丈夫没本事挣大钱

观世记
2026-10-19 16:27:44
从 iPhone 18 开始,苹果给你的照片打上「看不见」的水印

从 iPhone 18 开始,苹果给你的照片打上「看不见」的水印

爱范儿
2026-09-23 17:20:48
美媒:五大因素令冲突再次席卷全球

美媒:五大因素令冲突再次席卷全球

参考消息
2026-10-19 18:25:02
一男子成都租走坦克300,失联半年后GPS竟在境外上线,警方介入调查

一男子成都租走坦克300,失联半年后GPS竟在境外上线,警方介入调查

红星米兰体育-米兰(中国)官网
2026-10-19 16:47:20
血管硬不硬,看手就知道!手上出现3种迹象,血管或许已经堵了

血管硬不硬,看手就知道!手上出现3种迹象,血管或许已经堵了

熊猫医学社
2026-10-15 11:30:05
压制费玉清、周华健多年,史上唯一“三金歌王”,为何内地无人知?

压制费玉清、周华健多年,史上唯一“三金歌王”,为何内地无人知?

世界音乐公号
2026-10-20 00:38:45
2026-10-21 03:51:00
闪存猎手
闪存猎手
全网蹲好价的野生捕手,算力与羊毛都不可辜负。
208文章数 82关注度
往期回顾 全部

在二游里赛博上班的我,终于在这里当了回大爷

距中国台湾110公里 日美出动6万人大举军演为历史之最

距中国台湾110公里 日美出动6万人大举军演为历史之最

巴拉克:天生亚军与漫长极夜

刘恺威承认新恋情,打球认识

抄底万达之后 私募大佬又对恒大下手了

新版MiniMax,能和DeepSeek掰手腕吗?

黑科技一次看全 2026奇瑞全球创新大会干货汇总

态度原创

iPhone Duo铰链上方屏幕按压会下陷起皱 苹果尚未说明是否影响耐用性

奇!41岁女子不知怀孕,腹部剧痛送医顺产7斤儿子!

特朗普狠批泽连斯基"不想结束战争" 泽连斯基强硬回怼

无障碍浏览 进入关怀版