Skip to content
Hot eventLive

PolyCodeEval 多语言代码生成基准发布

1 reports1 sources3 hr ago updated

Get the story

AI overview

PolyCodeEval 是一个统一的多语言、多粒度代码生成基准，于 2026-10-09 在 arXiv 发布。该基准包含 2,590 个任务，覆盖 5 种编程语言、58 个真实可执行开源仓库，从函数到仓库层级均采用统一执行式协议评测。评测结果显示，现有方法在函数、文件、仓库层级的正确率最高分别为 71.7%、76.7% 和 31.0%，且方法排名随评测粒度与编程语言变化。

Generated from reports · updated 3 hr ago

LatestOct 9
PolyCodeEval 基准发布，含 2,590 任务、5 语言、58 仓库，仓库级正确率最高仅 31.0%。

Timeline

Follow the coverage from different angles.

Oct 9, 2026
  1. arXiv · Software Engineering
    PolyCodeEval：从函数到仓库的多语言代码生成基准

    PolyCodeEval 是一个统一的多语言、多粒度代码生成基准，包含 2,590 个任务，覆盖 5 种编程语言、58 个真实可执行开源仓库，从函数到仓库层级均用统一执行式协议评测。评测显示，现有方法在函数、文件、仓库上的正确率最高分别为 71.7%、76.7% 和 31.0%，且排名随粒度和语言变化。

Heat trend

Current heat 9·Comparable peak 10（Oct 9）·Comparable change over 24 hours –

02.557.510Oct9Oct9Oct9Oct9

The trend compares only the same participants observed continuously; its range may be smaller than the current heat count. Move or click on the chart to inspect hourly heat; use the left and right arrow keys to switch.