事件专题 ·多源确认

TCSExam 基准测试:评估前沿 LLM 在理论计算机科学研究中的能力

TCSExam 是一个覆盖理论计算机科学(TCS)全领域研究的统一评测框架,考察定理证明、求解器工程、构造方法以及求解开放猜想的能力。TCSExam-Full 包含 100 个专家审核的任务,提交结果由 Lean 内核或可执行任务检查器验证;TCSExam-Lite 从中选出 20 个任务,在相同单次尝试预算下减少 80% 的任务尝试量。评测结果显示,GPT-6 Astra 在 Full 版以 71.9 的 TCSExam Index 排名第一,Opus 5.5 在 Lite 版以 72.3 领先,两个版本的排名在八个共同评测的智能体上高度一致(Spearman ρ=0.93)。评测还产出了改进的求解器输出和数学构造,并获得了开放猜想尝试中经独立验证的特殊情形与界。

当前结论

理论计算机科学版的 LLM 考试来了:GPT-6 Astra 和 Opus 5.5 分别拿下两个版本第一,还真能推进一些开放猜想的特殊情形,做研究的人可以看看这套用 Lean 验证的评测框架。

11 个信源53° AI 热度最后更新 2026/11/5 12:58:43

证据链

11 个信源
相关来源 1Artificial Analysis
查看原文
相关来源 8Simon Willison’s Weblog
查看原文

冲突核查

现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。