#Nemotron-Labs-Sigma

全部资讯模型
清除条件
共 1 条
MarkTechPost6 小时前模型新模型发布海外

NVIDIA 开源连续扩散语言模型 Sigma,14 个检查点覆盖 3B/8B

NVIDIA 发布 Nemotron-Labs-Sigma,共 14 个开源检查点,规模为 3B 和 8B,属于连续扩散语言模型:它在 16 维嵌入空间中去除噪声,而不是像 LLaDA、Dream 那样在离散 token 上做扩散。上下文为 4096 token(Sigma-8B-instruct 为 8192),单张 H100 上 bf16 推理约 120-140 token/s,不支持 CPU,也未列出量化版本。Sigma-8B base 在 6 项任务上平均 71.16,高于 NLD-8B 的 70.22;G…

推荐理由想试非自回归文本生成可下载 14 个检查点,单张 H100 即可运行,8 步蒸馏版仍保持 70.34 平均分。