模型精选

Reflection AI 的 Beam 1.0 公布 ARC-AGI 成绩:ARC-AGI-2 得 23.5%

精选理由

Reflection AI 的 Beam 1.0 在 ARC-AGI-2 拿了 23.5%,每任务才 $0.61,还公开了高低推理档的成本差,价格党可以看看。

Reflection AI 的 Beam 1.0 在 ARC-AGI(Verified)榜单上公布成绩:ARC-AGI-2 得 23.5%,每任务成本 $0.61;ARC-AGI-1 得 74.0%,每任务成本 $0.31。最佳成绩出现在 xhigh 推理档位,但 high 档在 ARC-AGI-2 上也达到 20.0%,与 23.5% 相差不大,成本约低 43%。该成绩来自 ARC Prize 官方发布的评测数据。

原文 · ARC Prize

Beam 1.0 from @reflection_ai on ARC-AGI (Verified):

- ARC-AGI-2: 23.5%, $0.61/task - ARC-AGI-1: 74.0%, $0.31/task

Beam’s best scores came at xhigh reasoning, but high was close on ARC-AGI-2: 20.0% versus 23.5%, at about 43% lower cost. https://t.co/Et3fnkAPaw