logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

hf加载模型解决:ValueError: Connection error, and we cannot find the requested files in the cached path.

在加载模型时,可能会遇到两个常见问题。首先,当出现ValueError: Connection error, and we cannot find the requested files in the cached path错误时,通常是由于模型路径问题导致的。解决方法是将模型路径改为绝对路径,例如:tokenizer = AutoTokenizer.from_pretrained("a

#python#transformer
cuda、torch与显卡问题:解决RuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILED

复现Shi等人的工作时,手动修复FileNotFound错误后定位到RuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILED。可以确定此错误由显卡算力、cuda、torch三部分的不匹配问题导致。其他问题可能有:python版本、训练参数要求的显卡算力过大等,但出现可能性很低。注意到,如果错误是由于显卡不足的简单问题导致的,修改batch_s

文章图片
#pytorch#深度学习#人工智能
换源下载Huggingface模型权重,以及出现[Errno 13] Permission denied : ‘/.cache‘

是由于huggingface会默认去/home/ubuntu的/.cache文件夹下读取已下载的模型权重,而/.cache无读写权限。因此,需要修改Huggingface的环境变量HF_HOME,使用/.cache以外的其他目录作为缓存路径。

#深度学习
cuda、torch与显卡问题:解决RuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILED

复现Shi等人的工作时,手动修复FileNotFound错误后定位到RuntimeError: cuDNN error: CUDNN_STATUS_EXECUTION_FAILED。可以确定此错误由显卡算力、cuda、torch三部分的不匹配问题导致。其他问题可能有:python版本、训练参数要求的显卡算力过大等,但出现可能性很低。注意到,如果错误是由于显卡不足的简单问题导致的,修改batch_s

文章图片
#pytorch#深度学习#人工智能
到底了