大数据——Superset安装篇（二）Python3.8环境+MySQL元数据库_superset mysql

1. 实际安装时间 2023-06-20

安装最新版本

$ superset --version

Python 3.8.13
Flask 2.0.3
Werkzeug 2.0.3
1
2
3
4
5

2. 安装所需环境 Python3.8

1）安装python3.8环境

使用 Miniconda3-latest-Linux-x86_64 脚本完成 conda包管理器的安装

2）conda环境、包管理器常用命令

3）配置conda国内镜像

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
conda config --set show_channel_urls yes
1
2
3

4）创建一个python3.8的环境

conda create -n python38 python=3.8
# 查看是否创建好环境
conda info --envs
1
2
3

3. 安装 Superset

1）使用 python38 环境【注意：以下所有操作必须在python38环境下执行】

conda activate python38
1

2）pip包[python官方]管理器常用命令

3）安装 superset 所需依赖

sudo yum install -y gcc gcc-c++ libffi-devel python-devel python-pip python-wheel python-setuptools openssl-devel cyrus-sasl-devel openldap-devel
1

4）安装（更新）setuptools和pip

pip install --upgrade setuptools pip --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple
1

5）安装 superset

pip install apache-superset==2.0.0 --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple -r /opt/software/base.txt
1

这里的base.txt文件为 apache-superset==2.0.0版本 所需python环境依赖

请确保 /opt/software/base.txt 存在，请于文章顶部下载资源

6）配置Superset元数据库为MySQL

# 1. 在MySQL中创建 superset元数据库
CREATE DATABASE superset DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;

# 2. 修改superset配置文件
vim /opt/module/miniconda3/envs/python38/lib/python3.8/site-packages/superset/config.py
## 注释184行，解开185行注释，并且作如下修改：
SQLALCHEMY_DATABASE_URI = 'mysql://root:你的MySQL密码@你的MySQL所在主机IP:3306/superset?charset=utf8'

# 3. 安装python msyql驱动
conda install mysqlclient

# 4. 初始化superset元数据
## flask是一个python web框架，superset使用的就是flask
export FLASK_APP=superset
## superset 建库建表
superset db upgrade
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16

4. Supersetset初始化

1）创建管理员用户

superset fab create-admin
# 用户名和密码必须输入，其他直接回车跳过
> User：hadoop
> Password：hadoop
1
2
3
4

2）初始化 superset

superset init
1

5. 启动Supterset

1）安装gunicorn

# gunicorn是一个Python Web Server，可以和java中的TomCat类比
pip install gunicorn --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple
1
2

2）启动

gunicorn --workers 5 --timeout 120 --bind 你安装superset的主机IP:8787  "superset.app:create_app()" --daemon
## 参数说明：
# --workers：指定进程个数
# --timeout：worker进程超时时间，超时会自动重启
# --bind：绑定本机地址，即为Superset访问地址
# --daemon：后台运行
1
2
3
4
5
6

3）访问 Superset

http://你安装superset的主机IP:8787
1