Muon 卷积理论争议：理论上不成立但实证有效

2026年10月7日，arXiv 机器学习理论方向发布研究（一手来源），讨论 Muon 优化器在卷积上的适用性问题。研究指出，Muon 优化器对矩阵更新有清晰的理论解释，但卷积核通常以四维张量形式存储，而标准实现会将其 reshape 成矩阵处理，这一做法破坏了原有理论基础。因此研究认为 Muon 在卷积上的理论依据不成立。不过报道同时提到，尽管理论上存在问题，Muon 在卷积场景下的实证表现仍然有效。该研究目前仅呈现理论分析与实证结果的矛盾，尚未给出进一步解释或解决方案。

AI 根据报道生成 · 2 小时前更新

还没有足够的连续观测数据，暂不绘制趋势。