跳到正文
原文
Vector Institute· Kylie Williams·· 2025-04-10精选AI 评分67

Vector Institute 发布 State of Evaluation 研究:全球11个AI模型经16项基准评估

State of Evaluation Study: Vector Institute Unlocks New Transparency in Benchmarking Global AI Models

AI 导读

Vector Institute AI Engineering团队评估了11个前沿模型(涵盖开源与闭源),使用16项基准(含MMLU-Pro、MMMU、OS-World),并首次开源结果与代码,提供交互排行榜。

推荐理由

Vector开源了16项基准与代码并附交互排行榜,读者可据此独立复现和比较11个前沿模型的能力与局限。

来源:Vector Institute · vectorinstitute.ai