Jerry Liu 详解 ParseBench 2:让用户自定义评测指标与惩罚策略
LlamaIndex 的 Jerry Liu 回应了解析基准 ParseBench 2 的争议,还开放了自定义惩罚策略的试用入口。做 RAG 或文档处理的开发者可以亲自调整评测规则,不用被动接受厂商偏好的排名。对比各家自评方案,这套机制透明多了,值得上手试试。
LlamaIndex 的 Jerry Liu 回应了解析基准 ParseBench 2 的争议,还开放了自定义惩罚策略的试用入口。做 RAG 或文档处理的开发者可以亲自调整评测规则,不用被动接受厂商偏好的排名。对比各家自评方案,这套机制透明多了,值得上手试试。