#LAB-Bench

共 1 条 · 7 天 1 条 · 30 天 1 条
信息流里打上「LAB-Bench」标签的资讯、产品与论文,按刊登时间排,新的在上。
11月17日
论文Agent 与开发者多源确认13:39
Routing Beyond Task Categories: 基于 LAB-Bench 的成本感知路由研究

想在有限预算里用便宜模型跑、必要时切贵模型的人应该看看这篇。它在 LAB-Bench 上实测了几种路由策略,发现语义路由和 deferral 各提 0.66 和 1.35 个百分点,但置信区间跨零,效果未必稳。写模型路由代码前值得对齐一下预期。

事件专题
arXiv cs.AI@Ahmed Tariq, Leo Guinan原文