AITOPAI热报

Agent Arena

共 112 条相关 AI 资讯
6月27日
12:53
6月19日
04:02
04:02lmarena.ai@lmarena_ai
82°
Agent Arena推出了因果追踪方法论，通过分析人类与AI代理协作的追踪数据来量化协作的真实价值，并能观测到广泛的模型行为。基于该方法的新排行榜显示，GLM-5.2 (Max)进入前十，成为最强开源模型，确认成功率比基线高+9.4%，表扬-抱怨比高+14.9%。Claude Fable 5在几乎所有指标上曾排名第一，但因美国政府指令暂停访问。排行榜基于数百万个真实世界长期代理任务，使用因果追踪评估模型相对于平均模型的表现。
AI模型Agent ArenaGLM-5.2Claude Fable 5
事件专题
推荐理由：想看看人机协作到底有没有用？Agent Arena拿数据说话，GLM-5.2开源最强，Claude Fable 5刚登顶就被叫停，这瓜值得吃。
原文
6月18日
05:05
05:05lmarena.ai@lmarena_ai
76°
Agent Arena上线两周，新增10个模型。GLM-5.2 (Max)进入前十，以+9.4%确认成功率和+14.9%赞美vs抱怨率成为最强开源模型。Claude Fable 5在多项指标排名第一，但受美国政府指令暂停访问。评测基于超过30万任务、200万次工具调用和4000万行代码。
AI模型Agent ArenaGLM-5.2Claude Fable 5
事件专题
推荐理由：想看看最新智能体模型谁最强？Agent Arena更新了，GLM-5.2开源冲进前十，Claude Fable 5暂时下线，榜单有了新格局。
原文
04:01
04:01lmarena.ai@lmarena_ai
Agent Arena 发布了一篇博客介绍其因果追踪方法论，该方法用于分析智能体在竞技场中的行为归因。博客详细解释了如何通过干预模型内部表示来定位影响输出的关键组件。该技术可帮助研究者理解Agent在复杂任务中的决策路径。
论文Agent Arena因果追踪智能体评估
推荐理由：想搞懂Agent决策是怎么归因的？Agent Arena这篇博客把因果追踪的方法讲得很清楚，适合做智能体评估的研究者。
原文
04:01
6月17日
03:46
03:28
03:28lmarena.ai@lmarena_ai
Agent Arena 是一个智能体性能排行榜，现已在 arena.ai/leaderboard/ag... 上线。用户可通过按开放模型或按实验室（lab）筛选来查看详细数据。该排行榜为不同智能体模型提供了直接的性能对比基准。
AI模型Agent Arena智能体排行榜
推荐理由：想比对比不同智能体模型？去Agent Arena排行榜，能按开放模型或实验室筛选，帮你找到合适的。
原文
03:01
01:59
01:31
6月13日
22:57
13:00
12:58
11:05
10:56
09:46
6月12日
04:35
04:35lmarena.ai@lmarena_ai
Agent Arena 发布了完整的智能体排行榜，涵盖多个 AI 模型的智能体能力评测。该排行榜通过自动化测试评估各模型在任务执行、工具调用等方面的表现，为开发者选择智能体模型提供参考。榜单数据公开可查，支持社区持续关注和对比。
AI产品智能体排行榜评测
推荐理由：做智能体开发的团队可以直接参考这份排行榜选型，省去自己评测的时间，建议点开看看各模型的具体表现。
原文
04:05
04:05lmarena.ai@lmarena_ai
精选73°
GPT-5.5 (xHigh) 在 Agent Arena 中排名第二，净提升 10.6%，成为 OpenAI 排名最高的模型，仅次于 Claude Fable 5 (High)。在 Praise vs. Complaint 和 Bash Recovery 两项指标上，GPT-5.5 甚至超过了 Claude Fable 5。Agent Arena 通过数百万真实世界、长周期智能体任务评估模型，涵盖代码编写、幻灯片制作、网页研究、应用构建和文档分析等复杂工作流。该平台还推出了 Agent Mode，允许用户直接测试 GPT-5.5、Claude Opus 4.7、Gemini 3.1 Pro 等前沿模型。
AI模型GPT-5.5Agent Arena智能体评测
事件专题
推荐理由：做智能体开发和 AI 评测的团队值得关注——GPT-5.5 在用户满意度和故障恢复上反超 Claude，说明 OpenAI 在实用场景上有了实质提升，建议直接去 Agent Arena 跑跑自己的任务。
原文
6月11日
05:37
05:37lmarena.ai@lmarena_ai
83°
Claude Fable 5 在全新 Agent Arena 排行榜上以最大优势超越 Opus-4.8 和 GPT-5.5，排名第一。该排行榜基于 30 万+真实任务、200 万+工具调用和 4000 万行代码评估，衡量模型在任务成功率、用户表扬/抱怨比等关键信号上的表现。Fable 5 在可完成任务上表现极佳，但可引导性较弱。Agent Arena 提供网页搜索、文件系统和终端工具，让模型完成编写代码、制作幻灯片、研究网页等复杂工作流。
AI模型Claude Fable 5Agent Arena智能体评测
事件专题
推荐理由：做 AI 智能体开发的团队终于有了真实任务驱动的评测基准——Fable 5 在 30 万任务中碾压对手，值得关注其强执行与弱引导的权衡。
原文
00:52
00:52lmarena.ai@lmarena_ai
72°
Agent Arena 团队指出，传统依赖人类偏好的评测方式无法扩展至智能体场景，因为人类难以判断30分钟轨迹中的数百次工具调用。他们构建了基于真实使用轨迹的客观信号评测方法，包括Bash错误、工具幻觉和“疯狂信号”等指标。这种方法能更准确地评估智能体在复杂任务中的表现，避免人类主观判断的局限性。该评测方法已应用于Agent Arena排行榜，为开发者提供更可靠的模型性能参考。
AI模型智能体评测方法Agent Arena
推荐理由：智能体评测一直是个难题，Agent Arena 用真实轨迹信号替代人类偏好，做智能体开发的团队可以直接参考这套方法论来改进自己的评测体系。
原文
6月10日
12:51
12:51lmarena.ai@lmarena_ai
Anthropic 的 Claude Fable 5 模型在 Agent Arena 中首次亮相，由 Peter Gostev 进行评测。该视频展示了模型在智能体任务中的表现，包括推理、工具调用和交互能力。Claude Fable 5 被认为在复杂任务处理上有所提升，为开发者提供了新的选择。
AI产品Claude Fable 5智能体评测
事件专题
推荐理由：做智能体开发的团队可以看看 Claude Fable 5 在 Agent Arena 的实际表现，直接对比其他模型，值得点开视频一探究竟。
原文
08:43
08:33
08:33lmarena.ai@lmarena_ai
精选76°
Anthropic 的 Claude Opus 4.8 在 Agent Arena 排行榜上首次亮相，在 Thinking 模式下与 GPT 5.5 (High) 并列第一，但在 Non-Thinking 模式下仅排第八。相比前代 Opus 4.7，Opus 4.8 在开启思考时任务完成率更高，但可操控性略差，从 bash 错误中恢复更慢，且工具幻觉率上升。Agent Arena 基于 30 万+任务、200 万+工具调用和 4000 万行代码，通过因果追踪方法评估模型在真实世界智能体任务中的表现。该排行榜衡量任务成功、可操控性、错误恢复、用户反馈和工具幻觉五个信号。
AI模型智能体模型评测Claude Opus 4.8
事件专题
推荐理由：Agent Arena 用真实任务和因果推断评估智能体，比传统基准更贴近实际使用场景。做智能体开发或选型的团队，值得关注这个排行榜来对比模型的实际表现。
原文
03:37
03:37lmarena.ai@lmarena_ai
83°
Anthropic 的 Claude Fable 5 模型已上线 Agent 模式，用户可在 Agent Arena 中测试其智能体能力。Agent Arena 是一个基于真实用户任务的智能体评估平台，通过数百万次实时会话衡量模型在代码编写、网页搜索、文件操作等复杂工作流中的表现。排行榜基于 30 万+任务、200 万+工具调用和 4000 万行代码构建，当前排名第一的是 OpenAI 的 GPT-5.5 (High)，Claude-Opus-4.7 (Thinking) 位列第二。评估信号包括任务成功率、可操控性、错误恢复、用户反馈和工具幻觉等。
AI产品智能体Agent ArenaClaude Fable 5
事件专题
推荐理由：想对比主流模型在真实任务中的智能体能力？Agent Arena 用 30 万+任务和 200 万+工具调用给出了量化排名，做 AI 应用选型的团队可以直接参考排行榜做决策。
原文
6月9日
05:03
01:47
6月7日
01:13
01:13lmarena.ai@lmarena_ai
Arena.ai 推出了 Agent Mode，允许用户使用前沿 AI 智能体完成深度研究、生成报告、创建图像、构建网站、调试代码等复杂任务。该模式通过集成网页搜索、沙箱环境中的 bash、图像生成、文件写入和追问等功能，让智能体更自主地处理真实工作。用户的使用数据将用于在 Agent Arena 排行榜上对模型进行排名。目前支持的模型包括 GPT-5.5、Claude Opus 4.7、Gemini 3.1 Pro 以及顶级开源模型。这一更新为 AI 智能体的能力评估提供了更贴近实际应用的基准。
AI产品Agent ArenaAgent Mode智能体
推荐理由：Agent Mode 让 AI 智能体从聊天走向真实工作，做自动化、开发或研究的团队可以直接上手测试前沿模型的实际表现，还能影响排行榜排名，值得一试。
原文
00:48
00:48lmarena.ai@lmarena_ai
精选72°
Agent Arena 排行榜发布方法论深度解读，通过因果推断评估模型的智能体性能。排行榜基于五个信号：任务成功率、可操控性、错误恢复能力、用户表扬与投诉比、工具幻觉率。这为评估 AI 智能体能力提供了更全面的框架，帮助开发者理解模型在实际任务中的表现。
AI产品智能体排行榜因果推断
推荐理由：做 AI 智能体评估的团队终于有了更科学的参考框架——五个信号覆盖了任务执行和用户体验，值得研究评测方法的开发者点开细看。
原文
6月5日
23:30
08:13
08:13lmarena.ai@lmarena_ai
精选76°
Arena.ai 宣布将 NVIDIA 的 Nemotron 3 Ultra 模型加入其新的 Agent Mode，用于评估 AI 智能体在真实世界中的多步骤任务能力。Agent Arena 通过数百万次真实用户会话，测量模型在编写代码、创建演示文稿、网络研究、构建应用和文档分析等复杂工作流中的表现。评估基于任务成功率、可操控性、错误恢复、用户反馈和工具幻觉五个信号。当前排行榜显示 OpenAI GPT-5.5 排名第一，Anthropic Claude-Opus-4.7 第二，Zai GLM-5.1 第三。该平台已积累超过 30 万任务、200 万次工具调用和 4000 万行代码数据。
AI产品智能体评估/基准NVIDIA
事件专题
推荐理由：Agent Arena 用真实任务数据解决了智能体评估难的问题，做 AI 智能体开发或选型的团队可以直接参考排行榜和会话信号，比纯基准测试更有说服力。
原文
01:54
01:51