LLaMA加载时遇见:ValueError: Tokenizer class LLaMATokenizer does not exist or is not currently imported.

LLaMA加载时遇见:ValueError: Tokenizer class LLaMATokenizer does not exist or is not currently imported.

    正在检查是否收录...

在加载LLaMA模型时遇到到的问题及解决方法。

1. 问题1


解决方法:找到llama模型中的tokenizer_config.json文件,把“tokenizer_class”对应的“LLaMATokenizer”改为“LlamaTokenizer”。

2. 问题2

在解决问题1后,继续运行可能会遇到下面的问题:

解决方法:!pip install transformers[sentencepiece]

llamatokencodetransformer解决问题transformersjsonurl
  • 本文作者:李琛
  • 本文链接: https://wapzz.net/post-215.html
  • 版权声明:本博客所有文章除特别声明外,均默认采用 CC BY-NC-SA 4.0 许可协议。
本站部分内容来源于网络转载,仅供学习交流使用。如涉及版权问题,请及时联系我们,我们将第一时间处理。
文章很赞!支持一下吧 还没有人为TA充电
为TA充电
还没有人为TA充电
0
  • 支付宝打赏
    支付宝扫一扫
  • 微信打赏
    微信扫一扫
感谢支持
文章很赞!支持一下吧
关于作者
2.3W+
5
0
1
WAP站长官方

Stable Diffusion生成图片

上一篇

Photoshop 2023 Beta 24.6_爱国版_安装教程,内置AI绘画_创意填充Generative Fill功能及常见问题

下一篇
  • 复制图片
按住ctrl可打开默认菜单