Sebastian Raschka· Sebastian Raschka, PhD·· 2025-08-09AI 评分60
OpenAI 发布 gpt-oss-120b 与 gpt-oss-20b 开源权重模型
From GPT-2 to gpt-oss: Analyzing the Architectural Advances
AI 导读
OpenAI 发布 gpt-oss-120b 与 gpt-oss-20b 两款开源权重模型,是自 GPT-2 以来首次开放大权重模型。模型采用 MoE、SwiGLU、GQA、滑动窗口注意力和 RMSNorm 等现代设计,并支持 MXFP4 量化以在单卡运行。两款模型均为推理模型,支持低/中/高推理强度调节,并在多个基准上接近 OpenAI 自有闭源模型。
来源:Sebastian Raschka · magazine.sebastianraschka.com