终端使用代理进行大模型下载_tly代理

需求

想在本地终端下载huggingface的模型进行微调使用, 但是需要代理进行访问.不然下载容易报超时错误.

解决方案

1. 本地下载代理软件, 我这里使用的是TLY.
2. 打开全局代理, 但是这个时候发现, 页面可以打来google页面, 但是终端却ping不通www.google.com
3. 终端设置代理

# 打开代理
export http_proxy=socks5://127.0.0.1:1080
export https_proxy=socks5://127.0.0.1:1080

# run download model coding...

# 释放掉
unset http_proxy
unset https_proxy
1
2
3
4
5
6
7
8
9

4. 查看代理是否设置成功使用命令

curl ipinfo.io
1

如果显示如下:

{
  "ip": "211.23.97.64",
  "hostname": "211-23-97-64.hinet-ip.hinet.net",
  "city": "Taichung",
  "region": "Taiwan",
  "country": "TW",
  "loc": "24.1469,120.6839",
  "org": "AS3462 Data Communication Business Group",
  "timezone": "Asia/Taipei",
  "readme": "https://ipinfo.io/missingauth"
}
1
2
3
4
5
6
7
8
9
10
11

则表示代理成功
如果显示如下:

{
  "ip": "183.xxx.xxx.xxx",
  "city": "Beijing",
  "region": "Beijing",
  "country": "CN",
  "loc": "39.9075,116.3972",
  "org": "AS56048 China Mobile Communicaitons Corporation",
  "timezone": "Asia/Shanghai",
  "readme": "https://ipinfo.io/missingauth"
}
1
2
3
4
5
6
7
8
9
10

以上为使用过程中的记录笔记.希望可以帮到大家!