最近一直在拿AnimateDiff做AI小动画,个人感觉比商业那几家灵活多了。原理就是在文生图的SD上叠一个运动模块,早期只能加一丢丢动作,现在社区把它盘得很能打了。
这篇讲A1111的路子,比ComfyUI好上手(我自己更爱Comfy,可配置性高)。要求NVIDIA卡,文生视频8G显存够,视频转视频建议10G。A1111必须v1.6.0以上。运动模块推荐官方的V1.5 v2,底模用SD1.5系的,二次元DarkSushiMix、写实epiCRealism都行,SDXL暂时不支持。
扩展装好后几个关键设置:帧数16到24就够,短一点效果反而好;FPS 16到24更顺;overlap设4到6画面过渡平滑;stride保持1,往上调会抖。prompt尽量带落叶、下雪、风这种自然现象,动起来特别自然。保存我一般GIF和MP4都勾,方便不同平台发。