Skip to content
Hot eventLive

SCCGBench：真实 Web 服务调用代码生成评测基准发布

1 reports1 sources2 hr ago updated

Get the story

AI overview

2026年10月12日，研究者在 arXiv（Software Engineering 栏目，一手来源）发布 Service-Call Code Generation Benchmark（SCCGBench）。该基准收录 3,135 个来自真实 GitHub 仓库的 RapidAPI 调用函数，这些函数可追溯并经过去污染过滤，用于评测大语言模型生成服务调用代码在真实执行环境中的表现。目前公开信息仅涉及基准的发布与数据构成，未披露具体评测结果或模型排名。

Generated from reports · updated 2 hr ago

LatestOct 12
研究者发布 SCCGBench，含 3,135 个可追溯、去污染的真实 RapidAPI 调用函数。

Timeline

Follow the coverage from different angles.

Oct 12, 2026
  1. arXiv · Software Engineering
    SCCGBench：面向真实 Web 服务调用代码生成的 可执行性评测基准

    研究者发布 Service-Call Code Generation Benchmark（SCCGBench），收录 3,135 个来自真实 GitHub 仓库、可追溯且经去污染过滤的 RapidAPI 调用函数，用于评测 LLM 生成服务调用代码在真实执行环境中的表现。

Heat trend

There is not enough continuous observation data to draw a trend yet.