LLM生成代码检测器会过时，存在指标幻觉

2026-10-02 arXiv Software Engineering 发表研究，评估 8 个通用 LLM 判断器和 3 个专用检测器在 C++、Java、Python 上的表现，发现检测器会随代码生成模型演进而过时。同日同一期刊又发表另一项研究，评估 7 种前沿训练数据检测（TDD）方法在 8 个 CodeLLMs 上的表现，提出 CodeSnitch 函数级基准（含 9000 个代码样本，三种语言），并基于 Type-1 至 Type-4 代码克隆分类设计变异策略测试鲁棒性。两篇研究共同指向检测器指标与时效性问题。

Generated from reports · updated 2 hr ago

1. Oct 2 · 1 reports
   CodeSnitch：代码LLM训练数据检测的实证研究
   arXiv · Software Engineering: AI 代码生成器会泄露代码吗？对 CodeLLMs 训练数据检测的实证研究
2. Oct 2 · 1 reports
   Code Detectors Have a Half-Life: LLM生成代码检测器的过时与指标幻觉
   arXiv · Software Engineering: 代码检测器具有半衰期：LLM 生成代码检测中的过时与指标幻觉

There is not enough continuous observation data to draw a trend yet.