赞
踩
一、在阿里云的免费下进行,感谢阿里
安装完一定要看显卡安装情况
二、进行conda的安装(可以用简版)
1、wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
2、bash Miniconda3-latest-Linux-x86_64.sh
3、安装完成后,关闭当前终端并打开新终端,这将激活 Conda,
4、sudo su - root
5、conda update conda
更新conda,下面是增加软件包渠道
conda config --add channels conda-forge
conda config --add channels defaults
conda list
三、进行虚拟环境安装配置
conda create -n langchain-chatglm python==3.10.4
conda activate langchain-chatglm
四、部署langchain+GLM
git clone https://github.com/imClumsyPanda/langchain-ChatGLM;
cd langchain-ChatGLM
pip3 install -r requirements.txt
pip3 install -U gradio
pip3 install modelscope
注意:我的GLM存在langchain-GLM 的同级目录,因此在config.py 就在config目录下,需要修改路径为:../chatglm-6b 注意是2个点。。 修改完就可以load model正常了
五、启动
python webui.py
开始加载模型,估计要几分钟吧。。。
使用浏览器打开 http://localhost:7860/
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。