本地大模型多大显存够用?

查看 22|回复 3
作者:s2555   
有没有人跑本地大模型养龙虾,多大显存能用得爽一点?我打算买个 4090 魔改 48G 的,够用了吗?
mokeyjay   
你至少也要先规划一下自己想跑多少 B 的模型吧?如果你对「够用」的定义是能跑就行,那 2B 4B 的小模型手机都跑得动
s2555
OP
  
@mokeyjay 没概念,能达到 ds 刚出来的效果吗?
zhandouji2023   
论文助手,润色之类需要什么显卡够了
@mokeyjay
您需要登录后才可以回帖 登录 | 立即注册

返回顶部