llama 3 的体验感觉不好

查看 71|回复 5
作者:julie   
我体验了最近很火的llama 3的8b和70b的模型, 感觉并没有想象的好. 我感觉最好的还是c4ai-command-r-plus, 对指令的理解和完成的正确率都很好. llama 3对指令的理解还是不行.
大家认为呢?

感觉, 指令, 正确率

Telegramr   
一个chatgpt我都玩不明白,这么多的吗?
tsaioil   
我还是玩 Claude3 吧
julie
OP
  

Telegramr 发表于 2024-5-5 11:46
一个chatgpt我都玩不明白,这么多的吗?

chatgpt感觉越来越笨了. 很多问题也不愿意回答. 即使是gpt4也是这样. 还是自建的好. 有问必答, 也不用每月付钱了.
hhxx   
个人感觉llama指令服从还说得过去,但是让他输出中文的时候会有大量的中英混合问题而且貌似通过prompt很难调整,估计得通过中文微调解决了...不过8b模型用来跑翻译效果不错,又轻又快
julie
OP
  

hhxx 发表于 2024-5-5 11:54
个人感觉llama指令服从还说得过去,但是让他输出中文的时候会有大量的中英混合问题而且貌似通过prompt很难 ...

我感觉简单的指令还行, 但是稍微复杂一点的, 它就不行了, 会漏掉一些给的要求. 对于英文指令也是这样. 过几个月看看finetuning后的模型. 现阶段还是c4ai的好.
您需要登录后才可以回帖 登录 | 立即注册

返回顶部