模型多源确认

9 个模型总结《哈克贝利·费恩历险记》改动版,仅 Claude Fable 5 两次全部通过

精选理由

有人改了《哈克贝利·费恩历险记》原文喂给 9 个模型测理解力,只有 Claude Fable 5 两次都过关,Gary Marcus 拿它说事,看看你用的模型表现如何。

SilentRoom Journal 将 Mark Twain 的《哈克贝利·费恩历险记》做文本编辑后,交给 9 个 AI 模型做章节摘要,每个模型测试两次。结果只有 Claude Fable 5 两次都按编辑后的文本进行总结,GPT-5.5 只有其中一次遵循了编辑内容。Gary Marcus 转发该测试,称其与自己 2014 年提出的理解能力挑战以及和 Miles Brundage 的赌注相关。

原文 · Gary Marcus

Relevant to the comprehension challenge I posed in 2014 and my bet with Miles Brundage. SilentRoom Journal @silentroomjrnl We edited Mark Twain's Huckleberry Finn and fed it to 9 AI models to summarize a chapter, twice each. Only Claude Fable 5 followed the edited text both times; GPT-5.5 followed it once ↓ 🔗 View Quoted Tweet 💬 0 🔄 0 ❤️ 1 👀 503 ⚡