LLM维护知识库渐进式披露预注册消融研究
Get the story
2026年10月8日,arXiv Computers and Society(一手)报道一项预注册消融研究:研究者在一个由LLM维护的709页markdown知识库上,将其改造成渐进式披露结构,并构建四种仅访问方式不同、页面内容完全一致的版本。能力强的agent从不加载大索引、直接按问题定位页面,预期节省不存在,因此改以答案质量为主要结果。改造后答案质量与原版相当,成本在所有测试条件下均下降,引用页数与工具轮次更少。质量结论依赖模型裁判,且在强制先加载目录时不成立。
Generated from reports · updated 3 hr ago
Timeline
Follow the coverage from different angles.
- arXiv · Computers and SocietyLLM 维护的 Wiki 知识库中渐进式披露的预注册消融研究
研究者在一个由 LLM 维护的 709 页 markdown 知识库上做预注册实验,改造成渐进式披露结构并构建四种仅访问方式不同的版本,页面内容完全一致。能力强的 agent 从不加载大索引,直接按问题定位页面,预期节省不存在,因此改以答案质量为主要结果;改造后答案质量与原版相当,成本在所有测试条件下均下降,引用页数与工具轮次更少。质量结论依赖模型裁判,且在强制先加载目录时不成立。
Heat trend
Current heat 9·Comparable peak 10(Oct 8)·Comparable change over 24 hours –
The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.