hugging face被墙了,在本地电脑无论是不是科学上网,使用的时候都会报错。尝试了很多办法都没有成功。
因此,采用ModelScope
的方式来下载20B模型
pip install modelscope==1.9.5
pip install transformers==4.35.2
并使用python脚本下载
import torch
from modelscope import snapshot_download, AutoModel, AutoTokenizer
import os
model_dir = snapshot_download('Shanghai_AI_Laboratory/internlm-chat-20b', cache_dir='your path', revision='master')
一次就成功了,下载的时间比较长
测试数学题,简单的题还可以,知道用python写函数,复杂的就是胡说八道了。