主要来源shao__meng
查看原文事件专题 · 单一信源
LoopArena:模型作为管理者的可测量基准
LoopArena 基准测试解决了编码智能体评测中的盲区,将模型作为管理者的能力从系统能力中剥离单独测量。该基准采用 Controller-Reporter-Worker 三角架构,固定 Worker 为 Qwen3.7-Plus,只评测 Controller 模型的决策能力。实验评测了 5 个模型,包括 GPT-5.5 和 Claude Opus 4.8,结果显示长程循环控制仍然困难,最高成功率仅 24.69%。
当前结论
LoopArena 基准首次单独测量模型作为'管理者'的能力,发现 GPT-5.5 在长程任务中表现最佳,但成功率仍不足 25%。
2 个信源78° AI 热度最后更新 2026/9/1 00:59:19
证据链
相关来源 1lmarena.ai
查看原文冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。