通义万相2.1开源了首尾帧生视频,给定头尾自动补中间

阿里把通义万相2.1的首尾帧生视频模型也开源了。用法说白了就三步:

  1. 给一张起始画面
  2. 给一张结束画面
  3. 让模型自己把中间的运动过程补出来

关键帧之间的过渡不用再一帧帧抠,做分镜、动态预演特别对味,故事板动态化、镜头运动预览这些,理想情况下都能省不少事。

中间补出来的东西可控性有多强,我还不敢打包票,主体会不会形变、运镜听不听话,得真喂两张关键帧进去才知道。不过能开源出来自己调,已经比只能看demo强多了。

分镜预演的福音 :clap:

就怕中间补得鬼畜,蹲实测