arXiv · Information Retrieval· Elyas Irankhah, Muhammad Arif·· 3 小时前AI 评分24
RAGFlip：衡量检索器升级中的查询级负向翻转
RAGFlip: Measuring Query-Level Negative Flips in Retriever Upgrades
AI 导读
RAGFlip 将检索器升级中的负向翻转定义为：BM25 能检索到判定相关段落而替换检索器不能的查询。研究在 Natural Questions、HotpotQA、FiQA 三个 BEIR 数据集上评估 BGE-large、E5-large-v2、SPLADE，k=1 时 8.6-37.5% 的 BM25 成功查询丢失；与 BM25 的固定预算组合可降低回归。
来源：arXiv · Information Retrieval · arxiv.org