看了下贾佳亚团队这个 DreamOmni 的思路,挺对我胃口。以前生成一个模型、抠图一个、重绘一个、风格迁移又一个,工具链拼得很碎。它想做的是用一套统一框架把文生图和各类编辑任务都收进来,训练收敛也比较快。
对我这种更偏工程化、喜欢少维护几个组件的人来说,统一接口意味着更好的可维护性和调度。
当然通用统一往往要在单项极致性能上让步,具体到某个专精任务未必打得过垂直模型,得看实际场景权衡。方向上我是认可大一统这条路的。
看了下贾佳亚团队这个 DreamOmni 的思路,挺对我胃口。以前生成一个模型、抠图一个、重绘一个、风格迁移又一个,工具链拼得很碎。它想做的是用一套统一框架把文生图和各类编辑任务都收进来,训练收敛也比较快。
对我这种更偏工程化、喜欢少维护几个组件的人来说,统一接口意味着更好的可维护性和调度。
当然通用统一往往要在单项极致性能上让步,具体到某个专精任务未必打得过垂直模型,得看实际场景权衡。方向上我是认可大一统这条路的。
工具链太碎确实是痛点
统一框架维护成本低,工程友好
通用往往牺牲单项,看场景
收敛快对训练成本是实打实的好处