arXiv · Software Engineering· Lucas Jing, Xinqi Wang, Liao Zhang, Simon S. Du·· 4 hr agoAI score39
PBT-Bench:AI 智能体属性测试基准
PBT-Bench: Benchmarking AI Agents on Property-Based Testing
AI brief
PBT-Bench 包含 100 个属性测试问题,覆盖 40 个真实 Python 库,共注入 365 个语义 bug(平均每题 3.65 个),按 L1-L3 难度分层。
Source: arXiv · Software Engineering · arxiv.org