Cloudflare 发布开放权重模型 Clef-omni,支持音视频输入和分类

Clef-omni 不是生视频模型,它站在"看懂/听懂"那一侧——这是我翻完 Cloudflare 公开信息之后的判断。

目前能确认的就两点:权重是开放的;能吃音频和视频输入,主打分类。名字里带个 omni,很容易让人以为又来了一个全能生成模型,但从定位看它不管生成这一块。

为什么我反倒觉得它对我们更实用?天天跟素材打交道的人都知道,最磨人的常常不是生成本身,而是生成之后:素材库要打标签,要按内容归类,一次跑出来一堆片段还得先筛一遍哪些能用。这些活现在基本靠人眼一条条过。要是一个模型能同时听声音、看画面再给出分类,起码第一轮粗筛能交给它。

不知道的部分也说清楚:参数量、跑分、许可证细节,我暂时没看到确切说法,就不瞎猜了。

我更好奇的是它往哪条路走。Cloudflare 本行是网络和边缘计算,这回发开放权重,后面会不会跟自家 Workers AI 绑在一起用,还是权重拿下来本地也能顺利跑,现在都看不出来。我最想知道的还是它给 AI 生成的视频片段分类到底准不准,谁要是已经拉了权重在试,回来说一声。

前排围观

音视频一起进来做分类,拿来给 AIGC 片段做审核预筛倒是挺对口的

开放权重≠随便商用 先看清license再说

楼上说审核的,我觉得没那么快,分类类别要是固定死的,换到自己业务里还得微调,不然标签对不上,最后还是得人工兜底,省不了多少事。

1 个赞

Cloudflare 也开始卷模型了?还以为它只卖CDN :joy:

1 个赞

回头试试能不能扔进ComfyUI当个节点用