OpenRouter 对谈 Mercor：用 evals 决定换模型还是自训
精选理由
OpenRouter 和 Mercor 聊了推理账单涨起来后怎么用 evals 决定换模型还是自己训，做工程选型的人可以看看。
OpenRouter 在最新一期 New Defaults 栏目中，邀请 Mercor 的 OsvaldNitski 讨论推理成本攀升时的模型选择问题。对话围绕 accuracy、cost、latency 三个维度展开。核心内容是如何用 evals 判断团队该优化、切换模型，还是训练自己的模型。
原文 · OpenRouter
When your inference bill starts climbing, choosing the right model becomes a question of accuracy, cost, and latency. In our latest New Defaults, OpenRouter’s @cclark sat down with @OsvaldNitski from @mercor to discuss how evals help teams decide when to optimize, switch models, or train their own. Your browser does not support the video tag. 🔗 View on Twitter 💬 3 🔄 2 ❤️ 14 👀 3321 📊 5 ⚡
