练 LoRA 我这套糙流程,数值别照抄

被问过好几次怎么练 LoRA,干脆把自己这套糙流程写下来。不是什么标准答案,是练废几次之后留下来的习惯。

  1. 抠素材。风格 lora 我准备二三十张,人物角色几十张起步。宁可少几张也别放糊图,背景乱七八糟的要么裁掉要么换掉,因为模型分不清哪些是你想让它学的,背景一杂它会连杂物一起记进去。

  2. 打标。这步最磨人,也最容易想反。我的理解是:该固定的特征留着标,想让它学的别去标。没标出来的东西会被当成这个 lora 本身吸进去,标出来的反而成了可以替换的部分。我一开始就搞反过,出来的东西换个提示词就散。

  3. 参数小步试。步数和学习率我都不敢一把拉满,每次只动一点,跑完马上出几张图看。细节开始发僵、提示词怎么写都长一个样,基本就是过拟合了,往回退。练废几次很正常,别心疼那点时间。

数值这块真是各人素材不同,我的数搬到你那儿可能完全不对,所以干脆不贴。自己跑几轮找到手感,比抄参数管用。练过的也来补两句,尤其打标那块你们怎么取舍的。

打标我都先批量跑一遍再手动删,能省一半功夫

谢bro

1 个赞

参数别照抄这句太对,我照别人的抄一次废一次

素材质量比数量重要,糊图再多也白搭

过拟合我一般看它是不是把背景都记死了,一记死就减步数

感谢分享

小步试真的省心,一把梭很容易翻车 :+1: