主要来源rohanpaul_ai
查看原文事件专题 ·单一信源
Science's Last Exam 用可复现验证给科研智能体打分
AItonomy Foundation 推出基准 Science's Last Exam(SLE),包含 113 个任务,覆盖 9 个学科。它不是让 AI 答有标准答案的题,而是给智能体一个研究目标、数据和实验软件,再用智能体看不到的隐藏检查来评分。任务的验证标准由领域专家在构建时封存,成果可以被打开重跑。SLE 用训练截止日期之后发表的论文来核对 AI 假设,防止记忆作弊。结果显示 DeepSeek V4.1 Flash 领先,其 21.28% 的假设预测了后续研究。
当前结论
给科研智能体出开放题,用隐藏检查打分,还能防背题,DeepSeek V4.1 Flash 猜中了两成多后续研究。
2 个信源58° AI 热度最后更新 2026/11/5 19:04:36
证据链
2 个信源相关来源 1elvis
查看原文冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。