arXiv · Software Engineering· Thibaud Gloaguen, Niels M\"undler-Sasahara, Mark Niklas M\"uller, Veselin Raychev, Martin Vechev·· 6 小时前精选AI 评分67
评估 AGENTS.md:仓库级上下文文件对编码 Agent 是否有帮助?
Evaluating AGENTS.md: Are Repository-Level Context Files Helpful for Coding Agents?
AI 导读
论文系统评估了仓库上下文文件(如 AGENTS.md)对编码 Agent 任务完成率的影响,发现提供上下文文件并未普遍提升成功率,反而平均增加 20% 以上推理成本,且该结论在多种 LLM、编码 Agent 以及 LLM 生成与开发者提交的上下文文件中均成立。
推荐理由
研究对仓库级上下文文件的实际效果提出质疑,读者可据此重新评估为编码 Agent 补充 AGENTS.md 的投入产出。
来源:arXiv · Software Engineering · arxiv.org