BM25是一种广泛应用于搜索引擎和自然语言处理领域的信息检索算法,用于评估文档与查询之间的相关性。近期,BM25技术正与向量搜索技术融合,形成混合检索系统,在AI搜索领域展现出新的应用潜力。
BM25 近期进展
当前焦点与观察点
IBM研究表明,更多内存并不一定带来更好的检索效果,AI代理需要精准检索历史信息,BM25算法在精确匹配方面具有优势。更多内存不等于更好,IBM研究指出AI代理需精准检索历史腾讯微信团队开源的企业级LLM知识平台WeKnora和阿里Zvec团队开源的zg搜索工具,都体现了BM25技术在企业知识管理中的应用趋势。腾讯微信团队开源企业级 LLM 知识平台 WeKnora 阿里 Zvec 团队开源 zg 搜索工具
DeepSeek提出的HIRA方法是一种用于监管行业文档分类的人机协同检索增强级联方法,结合了BM25和人工审核的优势,在特定领域展示了良好的应用前景。HIRA:一种用于监管行业文档分类的人机协同检索增强级联方法