上下文检索(Contextual Retrieval)介绍

本文介绍了一种可显著提升检索增强生成(RAG)检索环节的方法——上下文检索(Contextual Retrieval)。它通过两种子技术:上下文嵌入(Contextual Embeddings)与上下文 BM25(Contextual BM25),在向量化与建索引之前为每个分块补充其所在文档的说明性上下文,可将检索失败率降低 49%,再配合重排序可降低 67%。文章详述了实现方法、借助提示缓存大幅降低预处理成本的方案、各领域的评测数据、实现注意事项,并与重排序技术结合给出了最大化检索准确率的实践建议。