Centos6环境，部署superset
1. 安装MySQL数据库
1.1. 更新操作系统
yum update #更新操作系统
1.2. 检查系统是否安装了mariadb，如果安装了mariadb则需要先卸载
yum list installed | grep mariadb #查看mariadb的安装状态
yum -y remove mariadb* #卸载mariadb
1.3. 建立目录并下载MySQL源包
i.安装mysql客户端
yum install mysql
安装mysql服务端
yum install -y mysql-server
yum install -y mysql-devel
iii.mysql相关设置:
设置字符集
SET NAMES 'utf8';
set character_set_database=utf8;
set character_set_server=utf8;
查看字符集
SHOW VARIABLES LIKE 'character%';
[图片上传失败...(image-388ea7-1543459317940)]
看到字符集设置成utf-8了
service mysqld start
但是启动以后再查看，字符集还是latin1，治标不治疗本
vi /etc/my.conf
在[mysqld]上面加下面的话
[client]
default-character-set=utf8
在[mysqld]最下面加下面的话
default-storage-engine=INNODB
character-set-server=utf8
collation-server=utf8_general_ci
重启mysql
service mysqld restart
SHOW VARIABLES LIKE 'character%';
[图片上传失败...(image-dd9b77-1543459317940)]
修改数据库的字符集
库名:test
ALTER DATABASE hive DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci;
修改表的字符集
student为表
ALTER TABLE student DEFAULT CHARACTER SET utf8 COLLATE utf8_general_ci;
设置账号和密码
mysqladmin -u root password ‘密码’
检查mysql是否为开机启动
chkconfig --list | grep mysqld
mysql未开机启动，需要开机启动
chkconfig mysqld on
再次chkconfig --list | grep mysqld检查一下状态
进入mysql
mysql -uroot -p密码
如果想改密码，则进行下面操作。
UPDATE user SET Password=PASSWORD('root') where USER='root';
FLUSH PRIVILEGES;
开启远程访问
GRANT ALL PRIVILEGES ON . TO root@'%' identified by '123456';
FLUSH PRIVILEGES;
2. 安装Python3、PIP和VirtualENV
2.1 为安装python3环境准备所需的包
yum groupinstall "Development tools"
yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tk-devel gdbm-devel db4-devel libpcap-devel xz-devel
2.2 安装python3环境
cd /usr/local/src #进入源码文件夹
wget www.python.org/ftp/python/3.6.6/Python-3.6.6.tgz #下载python文件
tar xf Python-3.6.6.tgz #解压缩
cd Python-3.6.6 #进入python 文件夹
./configure #配置
make && make install #安装
2.3 安装EPEL源并安装superset必备的包
yum install epel-release #安装epel源
yum install mysql-devel #安装MySQL开发包，属于pymysqlclient依赖
yum install gcc gcc-c++ libffi-devel python-devel python-wheel openssl-devel libsasl2-devel openldap-devel #安装依赖包
2.4 安装python3的virtualenv并建立superset的env
pip3 install virtualenv #安装virtualenv
python3 -m venv superset-py3 #建立superset的venv
source superset-py3/bin/activate #激活superset的venv
3. 安装Superset
3.1 在env中安装superset
pip3 install --upgrade pip #升级pip
pip3 install --upgrade setuptools pip #升级setuptools
pip3 install superset #安装superset
3.2 安装superset数据库包
pip3 install mysqlclient #安装mysql连接包
pip3 install pymssql #安装mssql连接包
3.3 配置superset
vim superset-py3/lib/python3.6/site-packages/superset/config.py
修改superset配置文件，将默认的sqlite3数据库改为MySQL找到:
SQLALCHEMY_DATABASE_URI = 'sqlite:////path/to/superset.db'
将其改为：
SQLALCHEMY_DATABASE_URI = ‘mysql://用户名:密码@IP地址/数据库名?charset=utf8’
例如:
SQLALCHEMY_DATABASE_URI= = 'mysql://root:[email protected]:3306/superset?charset=utf8'
3.4 在MySQL中创建superset数据库
mysql -uroot -p #登录MySQL
create database 数据库名； #建立superset数据库
3.5 初始化superset
fabmanager create-admin --app superset #建立管理员账号
superset db upgrade
superset load_examples 导入案例
superset init #初始化superset数据库
superset runserver #运行superset
superset runserver -d 后台启动
在基础数据表的初始化过程中，table_columns数据表中的type字段为32的varchar类型，如果需要连接排序规则为mssql的话，会导致数据表添加过程出错，无法添加数据表中的字段
因此，需要将type字段长度修改为255
数据库依赖
数据库 命令 链接方式
MySQL pip install mysqlclient mysql://
Postgres pip install psycopg2 postgresql+psycopg2://
Presto pip install pyhive presto://
Oracle pip install cx_Oracle oracle://
sqlite sqlite://
Redshift pip install sqlalchemy-redshift redshift+psycopg2://
MSSQL pip install pymssql mssql://
Impala pip install impyla impala://
SparkSQL pip install pyhive jdbc+hive://
浏览器输入
http://172.16.1.107:8088/login/
添加数据源
mysql://root:[email protected]/ky_mobile_box?charset=utf8
基于ambari添加数据源的方式:
mysql+pymysql://root:XXXXXXXXXX@localhost:3306/superset
