Kylin快速入门系列(2) | Kylin的快速入门

  大家好,我是不温卜火,是一名计算机学院大数据专业大二的学生,昵称来源于成语—不温不火,本意是希望自己性情温和。作为一名互联网行业的小白,博主写博客一方面是为了记录自己的学习过程,另一方面是总结自己所犯的错误希望能够帮助到很多和自己一样处于起步阶段的萌新。但由于水平有限,博客中难免会有一些错误出现,有纰漏之处恳请各位大佬不吝赐教!暂时只有csdn这一个平台,博客主页:https://buwenbuhuo.blog.csdn.net/

  此篇为大家带来的是Kylin的快速入门。

目录

  • 一. 数据准备
  • 二. 创建项目
    • 1. 登录系统
    • 2. 创建工程
    • 3. 选择数据源
  • 三. 创建Model
  • 四. 创建Cube
  • 五. Hive和Kylin性能对比
    • 1. Kylin查询
    • 2. Hive查询


Kylin快速入门系列(2) | Kylin的快速入门_第1张图片

一. 数据准备

  在Hive中创建数据,分别创建部门和员工外部表,并向表中导入数据。

  • 1. 用到的元素数据
    Kylin快速入门系列(2) | Kylin的快速入门_第2张图片
  • 2. 建表
// 1.创建部门表
create external table if not exists default.dept(
deptno int,
dname string,
loc int
)
row format delimited fields terminated by '\t';

// 2.创建员工表
create external table if not exists default.emp(
empno int,
ename string,
job string,
mgr int,
hiredate string, 
sal double, 
comm double,
deptno int)
row format delimited fields terminated by '\t';


// 3. 查看创建的表
hive> show tables;

Kylin快速入门系列(2) | Kylin的快速入门_第3张图片

  • 3. 向外部表中导入数据
// 1.导入数据
hive (default)> load data local inpath '/opt/module/datas/dept.txt' into table default.dept;
hive (default)> load data local inpath '/opt/module/datas/emp.txt' into table default.emp;
// 2.查询结果
hive (default)> select * from emp;
hive (default)> select * from dept;

Kylin快速入门系列(2) | Kylin的快速入门_第4张图片

二. 创建项目

1. 登录系统

Kylin快速入门系列(2) | Kylin的快速入门_第5张图片

2. 创建工程

  • 1. 点击图上所示“+”号
    Kylin快速入门系列(2) | Kylin的快速入门_第6张图片
  • 2. 填入项目名及描述点击Submit
    Kylin快速入门系列(2) | Kylin的快速入门_第7张图片

3. 选择数据源

  • 1. 选择加载数据源方式
    Kylin快速入门系列(2) | Kylin的快速入门_第8张图片
  • 2. 导入数据
    Kylin快速入门系列(2) | Kylin的快速入门_第9张图片
  • 3. 查看数据源
    Kylin快速入门系列(2) | Kylin的快速入门_第10张图片

三. 创建Model

  • 1. 回到Models页面
    Kylin快速入门系列(2) | Kylin的快速入门_第11张图片

  • 2. 点击New按钮后点击New Model
    Kylin快速入门系列(2) | Kylin的快速入门_第12张图片

  • 3.填写Model名称及描述后Next
    Kylin快速入门系列(2) | Kylin的快速入门_第13张图片

  • 4.选择事实表
    Kylin快速入门系列(2) | Kylin的快速入门_第14张图片

  • 5.添加维度表
    Kylin快速入门系列(2) | Kylin的快速入门_第15张图片

  • 6.选择添加的维度表及join字段
    Kylin快速入门系列(2) | Kylin的快速入门_第16张图片

  • 7.选择维度信息
    Kylin快速入门系列(2) | Kylin的快速入门_第17张图片

  • 8.选择度量信息
    Kylin快速入门系列(2) | Kylin的快速入门_第18张图片

  • 9.添加分区信息及过滤条件之后“Save”
    Kylin快速入门系列(2) | Kylin的快速入门_第19张图片

  • 10.创建Model完成
    Kylin快速入门系列(2) | Kylin的快速入门_第20张图片

四. 创建Cube

1.点击New按钮然后选择New Cube
Kylin快速入门系列(2) | Kylin的快速入门_第21张图片
2.选择Model及填写Cube Name
Kylin快速入门系列(2) | Kylin的快速入门_第22张图片
3.添加维度
Kylin快速入门系列(2) | Kylin的快速入门_第23张图片
Kylin快速入门系列(2) | Kylin的快速入门_第24张图片
4.添加需要做预计算的内容
Kylin快速入门系列(2) | Kylin的快速入门_第25张图片
Kylin快速入门系列(2) | Kylin的快速入门_第26张图片
Kylin快速入门系列(2) | Kylin的快速入门_第27张图片
5.动态更新相关(默认)
Kylin快速入门系列(2) | Kylin的快速入门_第28张图片
6.高阶模块(默认)
Kylin快速入门系列(2) | Kylin的快速入门_第29张图片
7.需要修改的配置
Kylin快速入门系列(2) | Kylin的快速入门_第30张图片
8.Cube信息展示
Kylin快速入门系列(2) | Kylin的快速入门_第31张图片
9.Cube配置完成
Kylin快速入门系列(2) | Kylin的快速入门_第32张图片
10.触发预计算
Kylin快速入门系列(2) | Kylin的快速入门_第33张图片
11.查看Build进度
Kylin快速入门系列(2) | Kylin的快速入门_第34张图片
12.构建Cube完成
Kylin快速入门系列(2) | Kylin的快速入门_第35张图片

五. Hive和Kylin性能对比

需求:根据部门名称[dname]统计员工薪资总数[sum(sal)]

1. Kylin查询

1.进入Insight页面
Kylin快速入门系列(2) | Kylin的快速入门_第36张图片
2.在New Query中输入查询语句并Submit

select dept.dname,sum(emp.sal) from emp join dept on emp.deptno = dept.deptno group by dept.dname;

Kylin快速入门系列(2) | Kylin的快速入门_第37张图片
第二次执行
Kylin快速入门系列(2) | Kylin的快速入门_第38张图片
3.数据图表展示及导出
Kylin快速入门系列(2) | Kylin的快速入门_第39张图片
4.图表展示之条形图
Kylin快速入门系列(2) | Kylin的快速入门_第40张图片
5.图表展示之饼图
Kylin快速入门系列(2) | Kylin的快速入门_第41张图片

2. Hive查询

hive> select dept.dname,sum(emp.sal) from emp join dept on emp.deptno = dept.deptno group by dept.dname;

Kylin快速入门系列(2) | Kylin的快速入门_第42张图片
  本次的分享就到这里了,


Kylin快速入门系列(2) | Kylin的快速入门_第43张图片

  好书不厌读百回,熟读课思子自知。而我想要成为全场最靓的仔,就必须坚持通过学习来获取更多知识,用知识改变命运,用博客见证成长,用行动证明我在努力。
  如果我的博客对你有帮助、如果你喜欢我的博客内容,请“点赞” “评论”“收藏”一键三连哦!听说点赞的人运气不会太差,每一天都会元气满满呦!如果实在要白嫖的话,那祝你开心每一天,欢迎常来我博客看看。
  码字不易,大家的支持就是我坚持下去的动力。点赞后不要忘了关注我哦!

Kylin快速入门系列(2) | Kylin的快速入门_第44张图片
Kylin快速入门系列(2) | Kylin的快速入门_第45张图片

你可能感兴趣的:(Kylin,kylin,大数据)