【下载预训练模型失败】OSError: Consistency check failed: file should be of size xxx but has size xxx

shengchao0920 2024-06-15 16:01:06 阅读 77

问题描述

这个错误表明在下载预训练模型文件pytorch_model.bin时出现了一致性检查失败。下载的文件大小与期望的文件大小不一致。

解决方法

如果在使用vpn,那就先关闭代理。

代码中加上force_download=True和resume_download=False参数,强制重新下载模型文件并禁用断点续传。

示例:

from transformers import AutoTokenizer, AutoModelForSeq2SeqLMtokenizer = AutoTokenizer.from_pretrained("csebuetnlp/mT5_multilingual_XLSum", force_download=True, resume_download=False)model = AutoModelForSeq2SeqLM.from_pretrained("csebuetnlp/mT5_multilingual_XLSum", force_download=True, resume_download=False)

如果问题仍然存在,检查网络,最重要的一点:关闭代理!!!



声明

本文内容仅代表作者观点,或转载于其他网站,本站不以此文作为商业用途
如有涉及侵权,请联系本站进行删除
转载本站原创文章,请注明来源及作者。