Vector Institute· Kylie Williams·· 2025-04-10精选AI 评分67
Vector Institute 发布 State of Evaluation 研究:全球11个AI模型经16项基准评估
State of Evaluation Study: Vector Institute Unlocks New Transparency in Benchmarking Global AI Models
AI 导读
Vector Institute AI Engineering团队评估了11个前沿模型(涵盖开源与闭源),使用16项基准(含MMLU-Pro、MMMU、OS-World),并首次开源结果与代码,提供交互排行榜。
推荐理由
Vector开源了16项基准与代码并附交互排行榜,读者可据此独立复现和比较11个前沿模型的能力与局限。
来源:Vector Institute · vectorinstitute.ai