大数据数仓项目Kylin[安装]

Kylin安装

资源下载:https://pan.baidu.com/s/1ot-vIOO64yiuGFG2GPSZEg
提取码:8yau
依赖环境:

软件 版本
Apache hbase-1.1.1-bin.tar.gz 1.1.1
spark-2.2.0-bin-2.6.0-cdh5.14.0.tgz 2.2.0-bin-cdh5.14.0
apache-kylin-2.6.3-bin-hbase1x.tar.gz 2.6.3

集群规划:

主机名 IP 守护进程
node1 192.168.88.120 NameNode DataNode RunJar(Hive metastore) RunJar(Hive hiveserver2) QuorumPeerMain HMaster HRegionServer kylin NodeManager
node2 192.168.88.121 SecondaryNameNode JobHistoryServer DataNode HRegionServer QuorumPeerMain ResourceManager HistoryServer NodeManager
node3 192.168.88.122 HRegionServer NodeManager DataNode QuorumPeerMain

注意:

  • kylin-2.6.3-bin-hbase1x所依赖的hbase为1.1.1版本
  • 要求hbase的hbase.zookeeper.quorum值必须只能是host1,host2,…。不允许出现host:2181,…

安装kylin-2.6.3-bin-hbase1x

## 解压apache-kylin-2.6.3-bin-hbase1x.tar.gz
tar -zxf /export/softwares/apache-kylin-2.6.3-bin-hbase1x.tar.gz -C /export/servers/

增加kylin依赖组件的配置

//创建软连接时要确定自己的环境变量配置的没有问题
/export/servers/apache-kylin-2.6.3-bin-hbase1x/conf
ln -s $HADOOP_HOME/etc/hadoop/hdfs-site.xml hdfs-site.xml
ln -s $HADOOP_HOME/etc/hadoop/core-site.xml core-site.xml
ln -s $HBASE_HOME/conf/hbase-site.xml hbase-site.xml
ln -s $HIVE_HOME/conf/hive-site.xml hive-site.xml
ln -s $SPARK_HOME/conf/spark-defaults.conf spark-defaults.conf

配置kylin.sh

/export/servers/apache-kylin-2.6.3-bin-hbase1x/bin
vim kylin.sh

kylin.sh文件添加如下内容:

//路径一定要对应好 切记切记
export HADOOP_HOME=/export/servers/hadoop-2.6.0-cdh5.14.0
export HIVE_HOME=/export/servers/hive-1.1.0-cdh5.14.0
export HBASE_HOME=/export/servers/hbase-1.1.1
export SPARK_HOME=/export/servers/spark-2.2.0-bin-2.6.0-cdh5.14.0

配置conf/kylin.properties

修改 资料\Kylin\kylin_配置文件\kylin.properties 中HDFS的路径,然后上传到 Linux的 Kylin/conf文件夹中

初始化kylin在hdfs上的数据路径

hadoop fs -mkdir -p /apps/kylin

启动集群

  1. 启动zookeeper
  2. 启动HDFS
  3. 启动YARN集群
  4. 启动HBase集群
  5. 启动 metastore
    nohup hive --service metastore &
  6. 启动 hiverserver2
    nohup hive --service hiveserver2 &
  7. 启动Yarn history server
    mr-jobhistory-daemon.sh start historyserver
  8. 启动spark history server【可选】
    sbin/start-history-server.sh
  9. 启动kylin
    ./kylin.sh start
  10. 登录Kylin
    http://node1:7070/kylin
url http://IP:7070/kylin
默认用户名 ADMIN
默认密码 KYLIN

用户名和密码都必须是大写

你可能感兴趣的:(Kylin)