Skip to content
Original
arXiv · Software Engineering· Shuo Wang, Guodong Fan, Ming Zhu, Jing Li, Chun Wang·· 3 hr agoAI score23

SCCGBench：面向真实 Web 服务调用代码生成的 可执行性评测基准

SCCGBench: Executability-Oriented Evaluation for Real-World Web Service-Call Code Generation

AI brief

研究者发布 Service-Call Code Generation Benchmark（SCCGBench），收录 3,135 个来自真实 GitHub 仓库、可追溯且经去污染过滤的 RapidAPI 调用函数，用于评测 LLM 生成服务调用代码在真实执行环境中的表现。

Source: arXiv · Software Engineering · arxiv.org

#论文/研究#评测/基准#编码#RAG#DeepSeek#arXiv