Skip to content
arXiv · Computers and Society· Theodore O. Cochran·· 4 hr agoAI score35

LLM 维护的 Wiki 知识库中渐进式披露的预注册消融研究

Progressive Disclosure for LLM-Maintained Wiki Knowledge Bases: a Preregistered Ablation

AI brief

研究者在一个由 LLM 维护的 709 页 markdown 知识库上做预注册实验,改造成渐进式披露结构并构建四种仅访问方式不同的版本,页面内容完全一致。能力强的 agent 从不加载大索引,直接按问题定位页面,预期节省不存在,因此改以答案质量为主要结果;改造后答案质量与原版相当,成本在所有测试条件下均下降,引用页数与工具轮次更少。质量结论依赖模型裁判,且在强制先加载目录时不成立。

Source: arXiv · Computers and Society · arxiv.org