主要来源Decoder
查看原文事件专题 ·多源确认
Alibaba 发布 Co-Design Bench:最强模型也只能完整解决 26.4% 的任务
Alibaba 推出编程智能体基准 Co-Design Bench,测试集全部来自真实用户请求中曾让智能体失败的任务。表现最好的 GPT-6 Astra 完整解决率只有 26.4%,意味着约四分之三的任务仍需人工收尾。而同样的模型在旧基准上的成绩超过 99%,两套数字之间的落差暴露了现有评测与实际使用之间的差距。
当前结论
Alibaba 搞了个新基准,专挑真实翻车任务来测,最强的 GPT-6 Astra 也只过四分之一,跟旧基准 99% 的成绩反差很大。
4 个信源57° AI 热度最后更新 2026/11/8 09:50:59
证据链
4 个信源冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。