事件专题 ·官方一手

RoboRisk 基准与 LEASH 安全框架:给机器人智能体加上安全闸门

研究者发布 RoboRisk 基准,包含 92 个仿真任务和 13 个物理机器人任务,覆盖任务拒绝、计划修复、执行期危险、注入攻击、顺序记忆五类风险场景,此前同类基准最多只覆盖两类。 论文评测了 GPT-6 Astra、GPT-6.1 Sol、GPT-6 Luna、Claude Opus 5.5、Gemini 4 Argon、Grok 4.7 六个基础模型,以及 Dream API 和 PokeBot 的 RoboAPI 两个机器人专用 API,结果显示这些模型普遍存在较高危害率。 作者随后提出 LEASH 安全框架,用决策模型(Jev 或 OpenAI 的 Decisions API)在任务、动作、不可逆操作三个层级设置审查闸门,规划器与闸门共享同一套安全策略。实验表明 LEASH 能降低全部六个模型的危害率,同时基本保留任务完成度,时间与 token 开销很小,且可接入几乎任意智能体架构。

当前结论

让 GPT-6、Claude Opus 5.5 这些模型去真控制机器人,危害率都不低。这篇论文给了一套能直接套在现有架构上的三层闸门方案,任务照做、危险操作被拦,做具身智能和机器人方向的开发者值得看测试细节。

11 个信源38° AI 热度最后更新 2026/11/10 14:06:20

证据链

11 个信源
相关来源 4Artificial Analysis
查看原文

冲突核查

现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。