刚看到有个新的 AI 视频检测工具放出来,说是能识别 Sora、Gen-2、Pika 这几家生成的片子,报出来的准确率是 93.7%。这个数字我持保留态度——检测这类东西最怕的就是换个模型、换个后处理流程就失效,实验室里跑的准确率和真实野外分布差距往往很大。
而且生成模型迭代太快,检测器基本是在追着跑,今天能认出的下个版本可能就抓瞎。
真正难的不是识别已知这几家,是面对没见过的模型还能不能保持。做鉴伪的和做生成的本来就是猫鼠游戏,这轮谁领先都撑不了太久。
刚看到有个新的 AI 视频检测工具放出来,说是能识别 Sora、Gen-2、Pika 这几家生成的片子,报出来的准确率是 93.7%。这个数字我持保留态度——检测这类东西最怕的就是换个模型、换个后处理流程就失效,实验室里跑的准确率和真实野外分布差距往往很大。
而且生成模型迭代太快,检测器基本是在追着跑,今天能认出的下个版本可能就抓瞎。
真正难的不是识别已知这几家,是面对没见过的模型还能不能保持。做鉴伪的和做生成的本来就是猫鼠游戏,这轮谁领先都撑不了太久。
93.7 这种精确到小数点后一位的数字最容易过拟合测试集
蹲一个开源,想拿自己的样本试试泛化
生成器一升级检测器就废,这活儿太累了
同问有 demo 吗