跳到正文
原文
arXiv · Information Retrieval· Suting Chen, Peichun Hua, Yunming Xiao·· 6 小时前精选AI 评分60

RAG 中相关性不足以证明证据充分:RINSE 在生成前检测证据缺口

Relevance Is Not Sufficient Evidence: Detecting Evidence Gaps Before Generation in RAG

AI 导读

论文指出 RAG 检索到的段落常只包含正确实体但缺少回答问题的事实,即使要求模型拒绝,仍有 40.0-99.3% 的问题被回答。作者构建了控制表面特征的配对基准,提出 RINSE 方法,通过问题覆盖度、段落是否提供答案以及小语言模型对段落充分性的判断来评估证据充分性。

推荐理由

提出不依赖生成即可判断证据充分性的方法,为 RAG 系统的可靠性评估提供了可本地部署的新思路。

来源:arXiv · Information Retrieval · arxiv.org