赞
踩
方案一:
选择python依赖包,用代码程序解决
推荐:pycrawlers这个python包,使用这个包可以轻松实现批量下载,以及进度显示
from pycrawlers import huggingface
# 实例化类
hg = huggingface()
# 1.批量下载
urls = ['https://huggingface.co/ziqingyang/chinese-llama-2-13b/tree/main',
'https://huggingface.co/ziqingyang/chinese-llama-2-7b/tree/main']
# 默认保存位置在当前脚本所在文件夹 ./
hg.get_batch_data(urls)
# 2.单个下载
url = 'https://huggingface.co/ziqingyang/chinese-llama-2-13b/tree/main'
# 默认保存位置在当前脚本所在文件夹 ./
hg.get_data(url)
# 自定义下载位置
# 多个不同位置
paths = ['/home/model-gpt/chinese-llama-2-13b','/home/model-gpt/chinese-llama-2-7b']
hg.get_batch_data(urls, paths)
# 单一位置
path = '/home/model-gpt'
hg.get_data(url, path)
示例:
方案二:
重点:需要有***,简称 V ,能登github的明白【该处因某些原因不写明】
解决办法:配置V在Windows、Linux、Mac OS 中 git 命令相同(笔者是在MAC环境下进行的):
#建议socks5 和http 都配置一下
配置socks5
git config --global http.proxy socks5 127.0.0.1:7890
git config --global https.proxy socks5 127.0.0.1:7890
配置http
git config --global http.proxy 127.0.0.1:7890
git config --global https.proxy 127.0.0.1:7890
# 主机号 127.0.0.1是使用的 V 的主机号(也就是有 V 的本机)
# 端口号 7890 指 V 的端口号,软件设置里查看(在你 V 软件里找)
查看设置:
git config --global --get http.proxy
git config --global --get https.proxy
取消办法:
git config --global --unset http.proxy
git config --global --unset https.proxy
最后正常下载
备选方案:
直接去huggingface里下载
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。