“排名第一”这四个字哪儿都能看见,可没人说清是哪个第一。做架构久了习惯先拆维度:出图质量、生成速度、好不好上手,三条不同的曲线,权重一换名次就翻过来。同一个模型,跑批量图和画概念稿的结论完全可以相反。榜单我压根不打算背。
自己搭一套能重复跑的横测,眼下是这三步:
- 描述锁死。 同一句描述几个模型各跑一批,一个字都不改,否则差别分不清是模型的还是提示词的。
- 分辨率锁死。 同一分辨率下比,不然有的模型在长边上占了便宜,看着“更精细”,其实是尺寸在骗眼睛。
- 看一批,不看一张。 挑一张神图谁都会,我更在意一批里能用的占多少,稳不稳比上限重要。
卡住的是最后一环:除了主观看图,有没有客观点的比法。主观我不太信自己——同一批看到第三十张人眼就开始飘,前面惊艳的后面看着也就那样,标准一路在漂,前后两批根本对不齐。
有思路的甩过来,我拿这套挨个验一遍,省得被营销号带着走。