apache-airflow 安装配置

一, 安装环境依赖

sudo apt-get update

sudo apt-get install gcc g++ python3-dev libmysqlclient-dev mysql-client

二，安装apache-airflow

1, conda创建python 虚拟环境

conda create -n airflow python=3.5

2, pip 安装

pip install -U pip

pip install apache-airflow

3, 基本配置

# airflow 家目录

export AIRFLOW_HOME=~/airflow

# 初始化数据库

airflow initdb

# 启动webserver 

airflow webserver -p8080 -D

# 启动调度程序

airflow scheduler -D