原文发布于本人博客:如何快速下载huggingface大模型 - padeoe的小站这是博主第一次上知乎发文章,欢迎评论、交流! Update: 推荐 huggingface 镜像站: https://hf-mirror.com。Update: 推荐官方的 huggingface-cli 命令行工具、以及本人开发的 hfd脚本。 AI开发绕不过一个问题是,如何从hugging face下载模型/数据集,相...
主要是一个简单记录,方便后续使用 安装 pip install -U huggingface_hub 1. 使用 下载模型 huggingface-cli download --resume-download gpt2 --local-dir gpt2 1. 下载数据 huggingface-cli download --repo-type dataset --resume-download wikitext --local-dir wikitext 1. 默认cache 位置 $HOME/.cache/h...