事件专题 ·官方一手

arXiv 研究:概率相关性评分在 BEIR SciFact 上优于纯稠密检索

该研究在 BEIR SciFact 基准的 300 条官方测试查询上,比较纯稠密检索 BGE-M3 与两种概率相关性决策评分(TypeSafe Jev Noul 和 OpenAI Decisions Predicate)。在全库检索加重排的条件下,深度 50 时的 nDCG@10 分别为 BGE-M3 0.6413、OpenAI 0.7545、Jev 0.7805,Jev 的 Recall@5 和 nDCG@10 最高。把候选深度从 50 扩到 100 能提高已知正例召回,但配对自助法显示最终效果变化不显著。API 评分成本约为原来的两倍,缓存可降低增量开销;研究结论是相关性决策可作为稠密检索的补充,不构成普遍优越性证明。

当前结论

做 RAG 检索的可以看看:同一套 BEIR SciFact 查询下,加一层概率相关性重排,nDCG 从 0.64 提到 0.78,还给了成本和延迟的实测数据。

6 个信源31° AI 热度最后更新 2026/11/5 13:36:45

证据链

6 个信源

冲突核查

现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。