ElevenLabs 发布语音转文字模型 Scribe v3 与 Scribe v3 Live:官方称词错误比上一代分别少 27% 和 43%,实时版新增说话人分离,按小时计价不变

ElevenLabs 11 月 10 日发布语音转文字模型 Scribe v3(录音转写)和 Scribe v3 Live(实时转写)。官方称,在覆盖 102 种语言的内部版 FLEURS 测试中,Scribe v3 的词错误比 Scribe v2 少 27%,Scribe v3 Live 比 Scribe v2 Realtime 少 43%;实时版新增说话人分离、按整段对话判断话轮结束、句中切换语言的多语模式和最多 1 万个术语的术语库。两款模型已进入 API,模型 ID 为 scribe_v3 和 scribe_v3_live,价格页显示分别为每小时 0.20 和 0.22 美元,与上一代相同。准确率数字均为厂商自测。

录音版和实时版同时换代

ElevenLabs 11 月 10 日发布两款语音转文字模型:Scribe v3 处理录好的音频,Scribe v3 Live 面向语音智能体等实时场景。两者都已进入 ElevenAPI,模型 ID 分别是 scribe_v3 和 scribe_v3_live,官方称从 v2 迁移只需改 ID。官方 API 价格页显示,Scribe v3 每小时 0.20 美元,Scribe v3 Live 每小时 0.22 美元,与上一代持平。

官方给出的准确率

博文称,在覆盖 102 种语言的内部版 FLEURS 测试中,Scribe v3 的词错误比 Scribe v2 少 27%,德语、西班牙语和英语分别少 42%、35% 和 23%;Scribe v3 Live 的语义词错误率比 Scribe v2 Realtime 低 43%,常规词错误率低 31%。说话人分离方面,Scribe v3 的错误整体少 12%,三人以上的录音少 17%。FLEURS 是短句、干净的朗读语音;说话人分离用的是 ElevenLabs 自建的 16 种语言数据集,官方称之后会开源。以上数字均为厂商自测,暂无第三方复现。

实时转写补上“谁在说话”

Scribe v3 Live 新增实时说话人分离,话轮检测改为结合整段对话判断,区分句中停顿和说完;多语模式支持一句话中途换语言,术语库最多可放 1 万个专有名词。录音版新增语言提示、数字按阿拉伯数字或英文单词输出等选项,关键词提示上限 1000 个。官方还称正在准备面向医疗对话的 Scribe v3 Live 版本。对已经接入 Scribe v2 的语音客服和会议纪要应用,换模型 ID 后先用自家录音做对比,比直接采用厂商口径更稳妥。

via: ElevenLabs Blog:Scribe v3 and Scribe v3 Live、ElevenLabs API 定价页、ElevenLabs 文档:Models