事件专题 ·多源确认

Alibaba 发布 Co-Design Bench:最强模型也只能完整解决 26.4% 的任务

Alibaba 推出编程智能体基准 Co-Design Bench,测试集全部来自真实用户请求中曾让智能体失败的任务。表现最好的 GPT-6 Astra 完整解决率只有 26.4%,意味着约四分之三的任务仍需人工收尾。而同样的模型在旧基准上的成绩超过 99%,两套数字之间的落差暴露了现有评测与实际使用之间的差距。

当前结论

Alibaba 搞了个新基准,专挑真实翻车任务来测,最强的 GPT-6 Astra 也只过四分之一,跟旧基准 99% 的成绩反差很大。

4 个信源57° AI 热度最后更新 2026/11/8 09:50:59

证据链

4 个信源
相关来源 3Artificial Analysis
查看原文

冲突核查

现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。