跳转到内容

Jonathan Kemper

2026 年 9 月 27 日

Nvidia 发布了 Nemotron 3 Diarization,这是一个 AI 模型,能够识别对话中任意时刻正在说话的是哪位说话人。该模型约有 1 亿个参数,其权重可免费获取。它最多能区分八位说话人,并能检测出多人同时说话的情况。参与者更多、背景噪声严重或混响都会推高错误率。搭配像 Parakeet 这样的语音识别系统,该模型可以生成带说话人标签的转录文本,不过标签只是诸如“speaker_2”这样的匿名标识。它既适用于录音,也适用于实时音频。

Bar chart: A comparison of the twelve English dialogue synthesis models in the VoiceArena benchmark; NVIDIA Nemotron 3 achieved the best score at 14.7%.
在 VoiceArena Diarization Benchmark v1 中,可免费获取的 Nemotron 3 以 14.7% 的 DER 领先,并比其前代 Streaming Sortformer 高出 41%。

音频缓冲区可设置为四个级别,从 30.4 秒到 0.32 秒不等。较短的缓冲区通常会降低准确率。在VoiceArena 的 Diarization-Bench上,该模型目前以 14.72% 的错误率位居第一,领先于次优系统的 19.3%。该基准测试很严格。重叠语音会被计入,甚至连说话人切换处的微小错位也会被记为错误。与其前代 Streaming Sortformer 相比,新模型在使用 1.04 秒缓冲区时,在八个测试场景中将错误率平均降低了 41%。

没有炒作的 AI 新闻——由人类精选

订阅 THE DECODER,享受无广告阅读、每周 AI 新闻简报、每年六期独家“AI Radar”前沿报告、完整档案访问权限以及评论区访问权限。

立即订阅