大数据——Superset安装篇（二）Python3.8环境+MySQL元数据库

1. 实际安装时间 2023-06-20

安装最新版本

$ superset --version

Python 3.8.13
Flask 2.0.3
Werkzeug 2.0.3

2. 安装所需环境 Python3.8

1）安装python3.8环境

使用 Miniconda3-latest-Linux-x86_64 脚本完成 conda包管理器的安装

2）conda环境、包管理器常用命令

命令	说明
conda create -n env_name	创建环境
conda remove -n env_name --all	删除一个环境
conda info --envs	查看所有环境
conda activate env_name	激活 或 切换 env_name环境
conda deactivate	退出当前环境
conda config --set auto_activate_base false	禁止自动激活/切换为 默认base环境

3）配置conda国内镜像

conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
conda config --set show_channel_urls yes

4）创建一个python3.8的环境

conda create -n python38 python=3.8
# 查看是否创建好环境
conda info --envs

3. 安装 Superset

1）使用 python38 环境【注意：以下所有操作必须在python38环境下执行】

conda activate python38

2）pip包[python官方]管理器常用命令

命令	说明
pip show 包名	查看已安装包的版本
pip search 包名	查看未安装包的版本
pip install 包名	安装包
pip install 包名==版本号	指定版本的安装包
pip install 包名 -i 镜像源	从国内镜像源下载，速度更快【清华源：https://pypi.tuna.tsinghua.edu.cn/simple 阿里源：https://mirrors.aliyun.com/pypi/ 豆瓣源：】
pip list	列出所有已安装包

3）安装 superset 所需依赖

sudo yum install -y gcc gcc-c++ libffi-devel python-devel python-pip python-wheel python-setuptools openssl-devel cyrus-sasl-devel openldap-devel

4）安装（更新）setuptools和pip

pip install --upgrade setuptools pip --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple

5）安装 superset

pip install apache-superset==2.0.0 --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple -r /opt/software/base.txt

这里的base.txt文件为 apache-superset==2.0.0版本 所需python环境依赖

请确保 /opt/software/base.txt 存在

6）配置Superset元数据库为MySQL

# 1. 在MySQL中创建 superset元数据库
CREATE DATABASE superset DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;

# 2. 修改superset配置文件
vim /opt/module/miniconda3/envs/python38/lib/python3.8/site-packages/superset/config.py
## 注释184行，解开185行注释，并且作如下修改：
SQLALCHEMY_DATABASE_URI = 'mysql://root:你的MySQL密码@你的MySQL所在主机IP:3306/superset?charset=utf8'

# 3. 安装python msyql驱动
conda install mysqlclient

# 4. 初始化superset元数据
## flask是一个python web框架，superset使用的就是flask
export FLASK_APP=superset
## superset 建库建表
superset db upgrade

4. Supersetset初始化

1）创建管理员用户

superset fab create-admin
# 用户名和密码必须输入，其他直接回车跳过
> User：hadoop
> Password：hadoop

2）初始化 superset

superset init

5. 启动Supterset

1）安装gunicorn

# gunicorn是一个Python Web Server，可以和java中的TomCat类比
pip install gunicorn --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple

2）启动

gunicorn --workers 5 --timeout 120 --bind 你安装superset的主机IP:8787  "superset.app:create_app()" --daemon
## 参数说明：
# --workers：指定进程个数
# --timeout：worker进程超时时间，超时会自动重启
# --bind：绑定本机地址，即为Superset访问地址
# --daemon：后台运行

3）访问 Superset

http://你安装superset的主机IP:8787