主要来源NVIDIA AI
查看原文事件专题 ·多源确认
NVIDIA 发布 Nemotron-Labs-Sigma:扩散语言模型一次并行生成整块 token
NVIDIA 发布开源模型系列 Nemotron-Labs-Sigma,提供 14 个 3B/8B 尺寸的开放权重 checkpoint。与主流自回归模型逐 token 生成不同,该系列将视觉领域的连续扩散方法引入语言建模,以 16 维平滑 ODE 轨迹并行生成整块 token。论文(arXiv:2610.02665)展示了扩散机制在蒸馏与可控引导上的优势,训练了面向数学的 8 个 TPF 与面向代码的 4 个 TPF。并行生成带来更快的推理速度,同时保持准确性与输出多样性,适合在数学和编程任务上并行探索多个解题路径。所有权重已在 Hugging Face 上开放,开发者可直接下载微调。
当前结论
NVIDIA 把扩散模型搬进了语言生成,Nemotron-Labs-Sigma 一次并行吐出一块 token,数学任务 8 个 TPF、代码任务 4 个。14 个 3B/8B 权重已开放在 Hugging Face,想试试非自回归路线或做蒸馏可控生成的开发者可以上手玩玩。
11 个信源57° AI 热度最后更新 2026/11/18 20:01:15
证据链
11 个信源冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。