METR 评估:Anthropic 研发效率已被 AI 提升 1.5 倍
METR 给 Anthropic 的 AI 研发加速打了个具体分数:1.5 倍。想知道 AI 到底多大程度替代了工程师干活,这个口径很严谨,值得看看。
评估机构 METR 认为 Anthropic 目前的 AI 驱动研发加速系数约为 1.5 倍。这一数字采用严格口径,衡量 AI 对整体研发进程的实际加速,而非仅统计 AI 生成代码行数。METR 指出 Anthropic 内部由 AI 撰写的代码行数和 AI 设计的实验占比已超过纯人工产出。按此口径,1.5 倍属于相当快的速度。
METR believes Anthropic is at 1.5x AI-driven R&D acceleration. This is a very rigorous definition (obviously they now have OOMs more AI-written LOCs, AI-defined experiments etc than fully-human-authored ones). So this is pretty fast. https://t.co/Rj3XscU4DR