RAGFlip 论文:测量检索器升级中的查询级负翻转
Get the story
RAGFlip 论文提出检索器升级中“查询级负向翻转”的衡量方法,将其定义为:BM25 能检索到判定相关段落、而替换检索器不能的查询。研究在 Natural Questions、HotpotQA、FiQA 三个 BEIR 数据集上评估 BGE-large、E5-large-v2、SPLADE,结果显示 k=1 时 8.6%–37.5% 的 BM25 成功查询在替换检索器下丢失;论文还称与 BM25 的固定预算组合可降低回归。
Generated from reports · updated 3 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Information RetrievalRAGFlip:衡量检索器升级中的查询级负向翻转
RAGFlip 将检索器升级中的负向翻转定义为:BM25 能检索到判定相关段落而替换检索器不能的查询。研究在 Natural Questions、HotpotQA、FiQA 三个 BEIR 数据集上评估 BGE-large、E5-large-v2、SPLADE,k=1 时 8.6-37.5% 的 BM25 成功查询丢失;与 BM25 的固定预算组合可降低回归。
Heat trend
Current heat 9·Comparable peak 10(Oct 7)·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.