2022–2024年在MMLU的评估中得分超过60%

AI 性能提升的另一个显著趋势是小型模型、开源模型性能快速提升。据斯坦福《2025年人工智能指数报告》，2022 年，在 MMLU 上得分超过 60%的最小模型是拥有 5400 亿参数的 PaLM。而到 2024 年，微软仅有 38 亿参数的 Phi-3-mini 就实现了相同水平，参数量缩减了 142 倍，主要得益于算法效率的提升。同时，开源/开放权重模型与闭源模型之间的性能差距也几乎消失。在 Chatbot Arena 上，2024 年初领先的闭源模型比顶尖开放权重模型高出 8.0%，到 2025 年初，这一差距已缩小至 1.70%。这标志着先进 AI 技术获取门槛正快速降低。