主要来源arXiv cs.AI
查看原文事件专题 ·单一信源
Environment Duels:评估 LLM 出题与解题双重能力的动态基准
arXiv 论文提出 Environment Duels,一个动态智能体基准,让模型同时担任环境的作者和解题者。每个模型编写带特权提示的交互环境,目标是设计出解题者没有提示时失败、有提示时通过的任务。在九个前沿 LLM 上的测试显示,解题与出题是两种不同能力,最强的解题者并非最强的出题者。较小的模型从其他模型的对局记录中学习更多,并写出最难的环境和最有用的提示。论文还用 Qwen3.8-27B 做强化学习实验,发现提示带来的提升与在相应环境上训练后的held-out基准改善相关。
当前结论
让 9 个模型互相出题、互相解题,结果最强的解题者反而不是最好的出题者,小模型出题更狠,挺有意思的视角。
2 个信源51° AI 热度最后更新 2026/10/21 17:55:31
证据链
2 个信源相关来源 1TestingCatalog
查看原文冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。