测试发现 FUMO 的 Fusion Code 被忽略纠错后仍会二次提醒
把 AI 的纠错故意当没听见,FUMO 的 Fusion Code 还有 90% 会再提醒,其他型号只有七成左右,测法挺有意思。
文章设计了 15 道两轮测试题,每题跑两遍:先给 AI 一个错误前提,再无视它的纠错、继续追问下一步。按三名 AI 裁判多数票统计,FUMO 的 Fusion Code 在第二轮仍明确纠错的比例为 90%,其他四个被测型号约为 70%~71%。FUMO 是一个多模型协作服务,会随任务进展重新选择模型,遇到难点时让多个模型分别分析再综合答案。样本规模较小,结论仅作参考。
AI 指出方案里的错误,你没理它,继续问下一步。它还会提醒你吗?
这篇文章用 15 道两轮题、每题两遍,测了这个细节:先故意给出错误前提,再装没听见,继续追问。
按三名 AI 裁判多数票,FUMO 的 Fusion Code 第二轮明确纠错的比例是 90%,其他四个被测型号约 70%~71%。样本较小,但值得关注:连续审方案时,AI 能不能一直盯着前提?
FUMO 是一个多模型协作服务。按官方介绍,它会随任务进展重新选择模型,遇到难点再让多个模型分别分析、综合答案。
感兴趣的可以看看这篇文章