当前位置:   article > 正文

DB-GPT 保姆级安装教程_db-gpt 安装教程

db-gpt 安装教程

环境准备

必须使用能暴露地址的服务云

如果不能就会显示

源码下载

git clone https://github.com/eosphoros-ai/DB-GPT.git

Miniconda环境安装

  1. #export http_proxy=http://172.16.254.2:10800 && export
  2. https_proxy=http://172.16.254.2:10800
  3. wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
  4. bash Miniconda3-latest-Linux-x86_64.sh -b -p /home/user/netdisk/MinniConda3
  5. vim ~/.bashrc
  6. export PATH="/home/user/netdisk/data/Minionda3/bin:$PATH"
  7. # 刷新
  8. source ~/.bashrc
  9. conda init
  10. conda create -n dbgpt_env python=3.10
  11. conda activate dbgpt_env
  12. conda install -c conda-forge util-linux
  13. # it will take some minutes
  14. pip install -e ".[default]"
  1. cd DB-GPT
  2. cp .env.template  .env

本地模型

  1. mkdir models and cd models
  2. #### embedding model
  3. git clone https://huggingface.co/GanymedeNil/text2vec-large-chinese
  4. 或者
  5. git clone https://huggingface.co/moka-ai/m3e-large
  6. #### llm model, if you use openai or Azure or tongyi llm api service, you don't need to download llm model
  7. git clone https://www.modelscope.cn/qwen/Qwen-14B-Chat-Int4.git
  8. git lfs clone --verbose https://www.modelscope.cn/Xorbits/vicuna-13b-v1.5

环境变量配置, 配置LLM_MODEL参数在 `.env` 文件中

vim .env

LLM_MODEL 参照 这个文件 修改        

如果启动  Qwen-14B-Chat-Int4 模型 还需要在DB-GPT/models/Qwen-14B-Chat-Int4/config.json这配置

disable_exllama:true

运行服务

python dbgpt/app/dbgpt_server.py

可能会报错 是有包没有安装 安装即可  希望能帮到大家

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/你好赵伟/article/detail/748611
推荐阅读
相关标签
  

闽ICP备14008679号