Twinlight 出图发灰,折腾半晚上原来是 VAE 没换

记一下昨晚跑 Twinlight 的经过,后面要下这个模型的可以少走点弯路。

下好以后我图省事,直接套了之前那一套 VAE 和 text encoder 就开跑。第一批出来全是灰蒙蒙的,眼睛那块像糊了一层膜。当时以为是权重给低了,就在权重上来回调,调了小半晚上,一直不对。

最后没辙回去翻说明,人家写得清清楚楚:要配原版的 VAE 和 text encoder。差的就这一个地方,质感能差出不止一档。换回原版再跑,那股味道马上对了。

说说是什么味道。它给自己的定位是柔和的诡异感、空灵向的动漫插画,画意梦核那一挂,再掺一点巴洛克式的精致。落到出图上,就算画甜系角色也会自带一点说不上来的距离感,可爱和瘆人之间那条线卡得挺妙,我个人很吃这口。

另外两件事顺手记下:

  • 许可挂的是 NVIDIA 那份开放模型许可加 CircleStone Labs 的非商用 v1.1,接单的同行注意,商稿别上来就用。
  • 它是 Anima 这边的新东西。没碰过 Anima 的建议先照默认配置跑通一次再动手改,别学我一上来就换零件,出了问题都不知道该怪谁。

码住

1 个赞

VAE 这坑我踩过至少三回,每次都先怀疑自己参数写错了,最后都是它

非商用那条有点劝退,本来还想拿来做一套表情包卖

梦核那个味儿确实到位,出来的脸总感觉在盯着我看 :eyes: