Together AI·· 2026-06-23精选AI 评分66
ParallelKernelBench:前沿大语言模型尚不能编写高效多GPU内核
ParallelKernelBench: Frontier LLMs can't write fast multi-GPU kernels (yet)
AI 导读
Together AI发布ParallelKernelBench(PKB)开源基准,包含87个来自真实代码库的多GPU内核生成问题,要求模型用CUDA内核替代PyTorch+NCCL并通过NVLink直接通信。
推荐理由
基准揭示前沿模型在多GPU内核生成上正确率与速度优势均有限,为分布式优化研究提供了可复现的测试平台。
来源:Together AI · together.ai