【docker】Dockerfile制作基础镜像 python 底层镜像制作 | 打包所有的requirement依赖_dockerfile中的requirement.txt 文件 有什么要求吗

一、Dockerfile思想

我们正常的对一个项目进行打包 docker image 通常是在CI工具编译时进行对依赖的安装，比如golang的go get、python的pip install、node的npm install 等等

好处：我们更新了依赖可以动态的再编译时进行一个对依赖的更新
坏处：每一次CI时间都很长，浪费大量时间等待发版

下面我们就从2个角度去打包我们自己的Dockerfile

二、两种方式打包

1、合并打包底层依赖

文件目录如下：

1.1、Dockerfile 文件如下

注意：
1、当前系统和目标系统的不一致时
我们需要指定目标的系统环境：–platform=linux/amd64 （当前我机器为macos）
2、需要requirements.txt文件和Dockerfile在同一个目录中

FROM --platform=linux/amd64 python:3.9.5-slim

# Set the working directory in the container
WORKDIR /app

# Copy the current directory contents into the container at /app
COPY . /app

# 更换 pip 源为阿里云镜像 1
RUN  pip install --no-cache-dir -i https://mirrors.aliyun.com/pypi/simple/ -r requirements.txt

1
2
3
4
5
6
7
8
9
10
11

1.2、Requirement.txt文件如下

async-timeout==4.0.3
beautifulsoup4==4.12.2
certifi==2023.11.17
charset-normalizer==3.3.2
colorama==0.4.6
idna==3.6
loguru==0.7.2
mysql-connector-python==8.2.0
numpy==1.26.3
pandas==2.1.4
protobuf==4.21.12
PyMySQL==1.1.0
python-dateutil==2.8.2
pytz==2023.3.post1
redis==5.0.1
requests==2.31.0
schedule==1.2.1
six==1.16.0
soupsieve==2.5
tzdata==2023.4
urllib3==2.1.0
win32-setctime==1.1.0

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23

1.3、进行打包

docker build -t python:3.9-x86-slim-all . 
1

1.4、查看镜像

docker images
1

1.5、上传至私有镜像仓库（可选）

这里我们使用的是阿里云ACR
需要我们提前在仓库创建好

将镜像推送到Registry

docker login --username=xxx registry.cn-beijing.aliyuncs.com
docker tag [ImageId] registry.cn-beijing.aliyuncs.com/xxxx/python:[镜像版本号]
docker push registry.cn-beijing.aliyuncs.com/xxxx/python:[镜像版本号]
1
2
3

1.6、最终使用

因为 Requirement都打包在 registry.cn-beijing.aliyuncs.com/xxxx/python:3.9-x86-slim-all里面了，所以我们如果需要更改 Requirement就得重新打包底层的镜像

FROM registry.cn-beijing.aliyuncs.com/xxxx/python:3.9-x86-slim-all

# 设置工作目录
WORKDIR /app

# 复制当前目录下的所有文件到工作目录
COPY . /app/
COPY ./gansu/x-ticket/spot_trading/sojson.new.json /app/json/sojson.new.json
# 设置APT的环境变量
ENV DEBIAN_FRONTEND=noninteractive

# 执行主程序
CMD ["python", "gansu/schedule_task.py"]
1
2
3
4
5
6
7
8
9
10
11
12
13

共计编译用时 35 秒

2、拆分打包底层依赖

2.1、常规Dockerfile写法

这样Requirement中的依赖就可以每次在CI编译时都重新安装一遍

 # 使用官方 Python 镜像作为基础镜像
FROM registry.cn-beijing.aliyuncs.com/xxxx/python:3.9-slim


# 设置工作目录
WORKDIR /app

# 复制当前目录下的所有文件到工作目录
COPY . /app/
COPY ./gansu/x-ticket/spot_trading/sojson.new.json /app/json/sojson.new.json
# 设置APT的环境变量
ENV DEBIAN_FRONTEND=noninteractive

# 更换 pip 源为阿里云镜像，并禁用构建隔离
COPY requirements.txt .
RUN pip install --no-cache-dir --default-timeout=500 --disable-pip-version-check --no-build-isolation -i https://pypi.tuna.tsinghua.edu.cn/simple -r requirements.txt

# 执行主程序
CMD ["python", "gansu/schedule_task.py"]
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19