NVIDIA Nemotron 3.5 Super VL 首次公开 ARC-AGI 成绩
NVIDIA 第一次有模型进 ARC-AGI 榜单,ARC-AGI-2 才 1.94%,想看这个基准有多难可以参考。
NVIDIA 的 Nemotron 3.5 Super VL 首次出现在 ARC Prize 官方评测中。该模型在 ARC-AGI-2 上得分为 1.94%,每任务成本 $0.02。在 ARC-AGI-1 上得分为 22.67%,每任务成本 $0.03。这是 NVIDIA 首个被 ARC-AGI 评测纳入的模型。
NVIDIA Nemotron 3.5 Super VL from @NVIDIAAI on ARC-AGI (Verified):
- ARC-AGI-2: 1.94%, $0.02/task - ARC-AGI-1: 22.67%, $0.03/task
Nemotron 3.5 Super VL is the first NVIDIA model we've evaluated on ARC-AGI. https://t.co/UhP4mRioqN