当前位置:   article > 正文

使用docker搭建faiss向量数据库

使用docker搭建faiss向量数据库

        为了不污染服务器环境,保证程序运行时有更好的隔离性,领导要求基于容器运行程序。

一、准备工作

1、创建文件夹faiss

文件夹有用于存放faiss相关的文件及脚本

mkdir ~/faiss

2、创建data文件夹

 cd ~/faiss

mkdir data

 这个文件夹用于volume,映射容器内部文件夹

二、编写Dockerfile

  1. # 使用 centos:7.9 作为基础镜像
  2. FROM centos:7
  3. # 安装必要的系统软件包
  4. RUN yum install -y wget bzip2 vim
  5. # 下载并安装 Miniconda
  6. RUN wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh -O miniconda.sh
  7. RUN bash miniconda.sh -b -p /opt/conda
  8. RUN rm miniconda.sh
  9. ENV PATH="/opt/conda/bin:${PATH}"
  10. # 创建 conda 环境并安装 faiss-gpu 和 pandas
  11. RUN conda create -y -n faiss_env python=3.8 && echo "conda activate faiss_env" >> ~/.bashrc
  12. #RUN conda create -n faiss_env python=3.8
  13. #RUN conda init bash
  14. #RUN conda activate faiss_env && \
  15. # pip3 install faiss-gpu -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com
  16. #RUN pip3 install pandas -i http://pypi.douban.com/simple --trusted-host pypi.douban.com
  17. # 设置工作目录
  18. WORKDIR /app

主要是创建了一个基于centos7的镜像,然后按照miniconda、faiss-gpu 和 pandas,但是奇怪的是在这里不管是执行pip install 还是conda install,都执行不成功,但是把这个放到容器中执行就可以,咱也不知道为啥。

三、构建镜像

创建一个名为faiss-gpu的镜像,版本为v1;为了方便记录,创建一个构建的脚本build.sh 

  1. #!/bin/bash
  2. docker build -t faiss-gpu:v1 .

执行即可:

 sh build.sh

 查看是否成功:

docker images |grep faiss

四、运行容器

 创建一个run.sh的文件,内容如下:

docker run -it --name=ndf-faiss -v /home/ndf/faiss/data:/app/data faiss-gpu:v1 /bin/bash

--name:指定了一个名称为ndf-faiss的容器;
-v:指定一个卷(volume),将宿主机的/home/ndf/faiss/data目录映射到容器的/app/data目录;

命令最后是指定了使用的镜像及版本;

OK,可以开始表演了!

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/从前慢现在也慢/article/detail/283704
推荐阅读
相关标签
  

闽ICP备14008679号