蚂蚁灵波把全栈大脑升到2.0了,世界模型能连续跑一小时不掉画质

蚂蚁灵波这次全栈大脑2.0,真正该盯的是世界模型,别的可以先放一放。

交代下背景:这回一口气放了好几个模型,世界模型、具身VLA、视频、空间深度都有,而且是开源的。世界模型有两个指标最硬:

  • 能连续生成一个小时,画质不衰减
  • 能用键盘以720p/60fps实时操控角色在场景里跑动

为什么说一小时是硬指标?做长时生成,最常见的毛病就是结构飘:开头还好好的,越往后场景越对不上,最后整个崩掉。时长每拉长一截,误差就多累积一截,所以能把一小时稳住,说明它在场景一致性上是真下了功夫。

但我觉得它的价值不在能玩,键盘操控跑来跑去只是个展示手段。更实际的用处是给机器人当仿真训练场:在真实物理环境里采数据太贵,摔一次撞一次都是钱;换到一个符合物理规律的虚拟世界里,机器人可以反复试错,训练成本能压下来不少。

开源这一步走得实在。接下来我打算把模型扒下来,看看推理开销到底多大,这个数决定了它离普通开发者有多远。

开源这步给个赞 :clap:

1 个赞

仿真练得再好,sim2real那关也不好过

蹲推理开销

牛啊