TSG Suggester:面向云故障管理的树结构知识图谱检索排障指南推荐系统
TSG Suggester 针对云服务故障排障场景,在 314 个真实故障、112 份 TSG、18 个服务团队的数据上评估 5 种检索策略。Tree+KG 融合树结构保留与实体知识图谱,达到 Top 1 54.78%、Top 5 82.48%,较纯文本 RAG 提升 8.58 点;结构对齐优于扁平分块,多模态增强反而使 Top 5 下降 22.64 点。
TSG Suggester 针对云服务故障排障场景,在 314 个真实故障、112 份 TSG、18 个服务团队的数据上评估 5 种检索策略。Tree+KG 融合树结构保留与实体知识图谱,达到 Top 1 54.78%、Top 5 82.48%,较纯文本 RAG 提升 8.58 点;结构对齐优于扁平分块,多模态增强反而使 Top 5 下降 22.64 点。
论文对 RAG 流水线的四个特征(section expansion、agentic search、completeness check、table-of-contents-guided retrieval)进行 2^4 全因子消融实验,覆盖 16 种配置、24 个查询、两种云端模型和五篇公开文档。
Sieve and Sage 将检索失败分解为不可回答与受干扰两种状态,用轻量模块 Sieve 筛选干扰证据,再调用 LLM(Sage)生成与拒答。在通用和高风险专家领域较单阶段基线准确率最高提升 69.4 个百分点、Macro-F1 提升 55.2 个百分点,速度最高加快 1.99 倍。
Socrates-RAG 提出一种前提导向的主动检索策略,通过表示竞争答案、选择能区分答案的未解决前提,并用新证据修正后续查询,在 48 世界反事实评测上将安全准确率从 79.2% 提升至 93.8%(p=.0391),不安全答案从 1 降至 0,收益集中在两跳案例。
Multiverse Computing 提出 ProvenanceGuard,在 MCP agent 回答后逐条核查 claim 与来源是否匹配,而非把所有证据混合后判断。测试中它从 139 条应被拦截的 claim 中拦下 138 条,并对来源识别正确的比例约 86%。该方法可对接 RARR 修复循环,在本地配置下每条回答约增加半秒开销。