干运维的对这类灰色玩法太熟——总有人用各种隐晦提示词、拼音谐音、暗号一样的词去绕生成模型的审核,产出低俗内容。这跟当年论坛用变体词躲关键词过滤一个道理,攻防永远此消彼长。
平台想靠单纯的关键词黑名单挡住基本没戏,改个字换个说法就破了,最后还得靠模型层面的内容理解加人工复审兜底。
工具本身没有善恶,但放任这种暗号泛滥,受伤的是整个生成生态的口碑,该管的还是得管。
干运维的对这类灰色玩法太熟——总有人用各种隐晦提示词、拼音谐音、暗号一样的词去绕生成模型的审核,产出低俗内容。这跟当年论坛用变体词躲关键词过滤一个道理,攻防永远此消彼长。
平台想靠单纯的关键词黑名单挡住基本没戏,改个字换个说法就破了,最后还得靠模型层面的内容理解加人工复审兜底。
工具本身没有善恶,但放任这种暗号泛滥,受伤的是整个生成生态的口碑,该管的还是得管。
攻防此消彼长 太真实了
关键词黑名单确实挡不住
这锅不能全甩给工具
顶
变体词躲审核 老论坛那套了 ![]()
人工复审成本是真高
复审贵所以各家都在押语义审核,误伤率又成了新问题