Ever 在当下的 AI 语境中,主要因「Every Eval Ever」项目而成为热议关键词——这是一个把分散各处的 AI 评测结果整理成统一模式、并沉淀为社区仓库的标准化倡议。它受到关注的原因在于,模型评测长期各自为政,结果难以复现,也难以横向比较。
Ever 相关近期进展
编号 2606.14516v1 的 arXiv 论文《Every Eval Ever:AI评估结果的统一模式与社区仓库》提出,用同一套数据模式记录被测模型、任务、指标与运行环境,并开放社区共建仓库,使评测结果可追溯、可聚合分析。Every Eval Ever:AI评估结果的统一模式与社区仓库
IDECS26 大会上,MDEC 主席探讨了 Agentic AI 如何改变企业运营,认为智能体进入真实业务流程后,企业需要持续、可标准化的能力评估,这与统一评测基础设施的思路相互呼应。MDEC 主席在 IDECS26 谈 Agentic AI 如何改变企业运营
GPT-5.6 Sol 发布后被指遭 OpenAI 悄悄削弱,Gary Marcus 就此公开提出质疑。此类争议凸显了第三方、可复现评测的价值:若评测模式统一且结果开放,模型发布后的版本变化更容易被社区捕捉与验证。OpenAI 被指发布 GPT-5.6 Sol 后悄悄削弱模型
当前焦点与观察点
围绕 Ever 及其代表的评测标准化方向,目前值得观察三点:统一模式能否覆盖智能体与多模态等复杂评测场景;社区仓库的治理规则,包括数据质量与提交门槛;以及厂商在发布后调整模型行为时的透明度。评测结果从论文附录走向共享基础设施,是这一轮讨论的核心动向,实际采用率仍待检验。