下载 huggingface 大模型有什么好方法吗

[iorilu]

也用了 https://hf-mirror.com/

但这个基本下几 G 就限流了

直接 huggingface 下载也是比较慢的, 反正下 7,8G 以上文件基本 没完成就没速度了

大家有啥好方法吗, 现在模型太大了, 都是几十 G

[frandy]

之前因为这个问题写了个脚本，集成 aria2 还有点问题，没问题
https://github.com/readmagic/hx
希望能帮到你

[frandy]

@frandy #21 迅雷没问题

[ethusdt]

hf 被墙了吗，年前我下载模型四个 wget 一起，拉满千兆带宽的，没挂代理。

[bushnerd]

我稍微改进了一下 https://hf-mirror.com/的 hfd.sh 脚本，就是调用迅雷来下载，基本可以达到满速，且支持断点续传，比 aria2 使用起来稳定的多。
https://gist.github.com/bushnerd/b8ec8c5576a4221696b283b90d1eacb3

[bushnerd]

@bushnerd 忘了说了，thunder.exe 只有 Win 版本的， 因此这个脚本得在 wsl 中使用，调用 Windows 中的迅雷。