Alaya World把15B权重放出来了,是能推着摇杆走的那种

Alaya World开源了,15B的模型权重和推理代码在github.com上能直接拿,协议Apache 2.0,训练代码、数据和部署流程说是这个月继续放。

它跟Runway、可灵那种出一段成片不一样。给一句话、一张图或者一段视频当起点,模型以720p、24FPS往下实时生成:摇杆往前推,街道就接着长出来;转视角,它补出新的空间;生成途中临时输一句把整条街换成赛博朋克,画面就跟着变。底下没有一张提前搭好的地图,你走到哪它生成到哪,目前能连续跑一分钟以上。

长时间生成最难的就是误差一帧帧累积,离开一条街再走回来就换了个地方。它加了两层记忆,3D cache记物体大概在什么位置,压缩帧历史记画面里出现过什么,再配上漂移模拟、Error Bank、Self-Forcing++这些机制往回压。

代价是实时推理还要H200级的算力,家里那点显存暂时别想。