E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HiveQL
大数据入门-Hive学习从这里开始
同时Hive还定义了类SQL的语言(
HiveQL
)。允许用户进行和SQL相似的操作,它可以将结构化的数据文件映射为一张数据库表,并提供简单的SQL查询功能。
大数据群722680258
·
2020-06-25 16:53
大数据
大数据入门到精通
大数据
数据分析
数据挖掘
Java
大数据入门
Hive架构、角色进程、访问流程
Hive的架构1、Hive的架构图2、Hive的服务(角色)1、用户访问接口CLI(CommandLineInterface):用户可以使用Hive自带的命令行接口执行
HiveQL
、设置参数等功能JDBC
双椒叔叔
·
2020-06-25 13:42
Hive
HIVE调优【1】如何读懂explain打印出的抽象语法树
尽管
hiveql
查询会将输出写入到控制台,但hive实际上会先将输出写入到1个临时文件中,即’tok_inser
upup-我是昵称存在的分割线
·
2020-06-25 09:36
Hive
苏先生之Hive底层调优
一、为什么要了解底层
HiveQL
是一种声明式语言,用户会提交查询,而hive将其转换成MapReducejob,大多数情况我们不需要了解hive的内部工作,内部复杂的查询解析、优化和执行过程大部分时间我们是可以忽视的
菜鸟苏先森
·
2020-06-25 07:32
笔记
Hadoop
hive
hive概念及特点
用来汇集查询数据OLAP:onlineanalyzeprocess不是:关系型数据库OLTP不适合实时查询和底层更新操作特点:在数据库中存放schema,处理数据到HDFSOLAP提供类SQL语言,HQL(
HiveQL
闲来无事写播客
·
2020-06-25 04:23
hive
HiveQL
命令行的使用
1.
HiveQL
:数据操作(1)进入
HiveQL
,命令如下:hiveimage(2)Hive创建数据库:创建一个名为userdb的数据库命令:createdatabaseuserdb;image随时可以通过
一花一世界30951091
·
2020-06-25 02:25
Hive数据定义
HiveQL
是Hive查询语言,作为ANSISQL的一种方言。但是其还是有和关系数据库支持的SQL中有本质的差异。如:Hive不支持事务,且默认情况下不支持行级别插入,更新,删除操作。
qingdsj
·
2020-06-24 22:35
大数据
人工智能
互联网
hive
大数据
大数据开发
大数据学习
大数据分析
Spark SQL快速离线数据分析
2)SparkSQL可以直接运行SQL或者
HiveQL
语句3)BI工具通过JDBC连接SparkSQL查询数据4)SparkSQL支持Python、Scala、Java和R语言5)SparkSQL不仅仅是
努力的凹凸曼
·
2020-06-24 20:39
Spark新闻项目
大数据
Hive/
HiveQL
常用优化方法全面总结(上篇)
对Hive的调优既包含对
HiveQL
语句本身的优化,也包含Hive配置项和MR方面的调整。由于在写的过程中发现篇幅过长,因此决定拆成上下两篇发布。
LittleMagics
·
2020-06-24 16:04
Hive
HiveQL
collect_list保持顺序小记
有以下Hive表的定义:createtabletopic_recommend_score(category_idint,topic_idbigint,scoredouble,rankint);这张表是我们业务里话题推荐分值表的简化版本。category_id代表分类ID,topic_id是话题ID,score是评分值。rank代表每个分类下话题分值的排名,用开窗函数计算出来的:row_number
LittleMagics
·
2020-06-24 16:03
Hive
HiveQL
计算连续天数问题
现有商户每日交易汇总数据文件merch_trade_stat.txt,如下:(三列数据以','分隔,分别是商户ID、交易日期、日交易金额)[root@node1~]$moremerch_trade_day_stat.txt1,2017-07-01,1001,2017-07-02,2001,2017-07-03,3001,2017-07-04,4001,2017-07-05,5001,2017-07
chennaihuan0842
·
2020-06-22 22:36
基于Hadoop的数据仓库Hive 基础知识
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–
HiveQL
,可通过HQL语句实现简单的MR统计,Hive
大数据hadoop
·
2020-06-22 09:20
大数据学习
互联网资讯
人工智能
大数据
程序员
编程语言
HiveQL
学习笔记(五):Hive练习题
本系列是本人对Hive的学习进行一个整理,主要包括以下内容:1.
HiveQL
学习笔记(一):Hive安装及Hadoop,Hive原理简介2.
HiveQL
学习笔记(二):Hive基础语法与常用函数3.
HiveQL
AvenueCyy
·
2020-06-21 17:33
Hive
HiveQL
学习笔记(四):Hive窗口函数
本系列是本人对Hive的学习进行一个整理,主要包括以下内容:1.
HiveQL
学习笔记(一):Hive安装及Hadoop,Hive原理简介2.
HiveQL
学习笔记(二):Hive基础语法与常用函数3.
HiveQL
AvenueCyy
·
2020-06-21 17:33
Hive
HiveQL
学习笔记(二):Hive基础语法与常用函数
本系列是本人对Hive的学习进行一个整理,主要包括以下内容:1.
HiveQL
学习笔记(一):Hive安装及Hadoop,Hive原理简介2.
HiveQL
学习笔记(二):Hive基础语法与常用函数3.
HiveQL
AvenueCyy
·
2020-06-21 17:02
Hive
HiveQL
学习笔记(一):Hive安装及Hadoop,Hive原理简介
本系列是本人对Hive的学习进行一个整理,主要包括以下内容:1.
HiveQL
学习笔记(一):Hive安装及Hadoop,Hive原理简介2.
HiveQL
学习笔记(二):Hive基础语法与常用函数3.
HiveQL
AvenueCyy
·
2020-06-21 17:02
Hive
HiveQL
学习笔记(三):Hive表连接
本系列是本人对Hive的学习进行一个整理,主要包括以下内容:1.
HiveQL
学习笔记(一):Hive安装及Hadoop,Hive原理简介2.
HiveQL
学习笔记(二):Hive基础语法与常用函数3.
HiveQL
AvenueCyy
·
2020-06-21 17:02
Hive
Hive零基础入门最全--不看后悔
Hive零基础入门必看--超级全概述数据库与数据仓库的区别Hive的优缺点Hive的特性针对海量数据的高性能查询和分析系统类SQL的查询语言
HiveQL
灵活的扩展性高扩展性(Scalability)和容错性与
脑子有Bug
·
2020-06-21 13:08
Hive
新闻实时分析系统 SQL快速离线数据分析
2)SparkSQL可以直接运行SQL或者
HiveQL
语句3)BI工具通过JDBC连接SparkSQL查询数据4)SparkSQL支持Python、Scala、Java和R语言5)SparkSQL不仅仅是
weixin_30730151
·
2020-06-21 10:12
HIVE JDBC方法连接
输入hiveserver2打开hiveserver2在之前的学习和实践Hive中,使用的都是CLI或者hive–e的方式,该方式仅允许使用
HiveQL
执行查询、更新等操作,并且该方式比较笨拙单一。
lkinga
·
2020-06-21 06:28
hadoop
用
HiveQL
计算连续天数问题的方法
昨晚简书服务器可能出了什么bug,文章发布出去都会变成完全空白。没办法,只能断更一天,放在今天发了,大概能达到十万字里程碑了吧。在日常工作中,可能经常会接到业务方类似这样的需求:统计今年每个用户最长连续签到的天数;统计最近一个月连续有回帖超过5天的话题;统计本季度中连续3天以上单日销量超过100的商品。这种“连续天数”问题看似简单,但实际上对思维能力和编写复杂SQL语句的能力要求比较高。下面以我们
LittleMagics
·
2020-06-21 03:03
Hive
[AWS][大数据][Hadoop] 使用EMR做大数据分析
3.通过
HiveQL
分析数据,并将分析结果保存到S3上4.下载已经分析结果数据。
栗子哥
·
2020-06-21 01:12
aws
大数据
hadoop
云数据库DaaS
Kylin快速入门
ApacheHive是一个基于Hadoop的数据仓库工具,可以将结构化的数据文件映射为数据库表,并可以将SQL语句转换为MapReduce或Tez任务进行运行,从而让用户以类SQL(
HiveQL
,也称HQL
徐不依
·
2020-06-20 21:42
分布式
了解hive基础知识
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–
HiveQL
,可通过HQL语句实现简单的MR统计,Hive
裘马轻狂大帅
·
2020-06-07 19:58
Hive知识总结
Hive是一个构建在Hadoop之上的数据仓库软件,它可以使已经存储的数据结构化,它提供类似sql的查询语句
HiveQL
对数据进行分析处理。
DancingBUG
·
2020-05-05 14:51
Presto学译 | 3. 配置Hive连接器以查询Hive数据
叫做
HiveQL
的查询语言。Presto仅
希尔大
·
2020-04-13 15:08
HiveQL
MR基本操作
emplyee.txt文件内容,中间为tab分割,utf8文件1张三test40005002014-05-16812李四coder800010002015-08-12323王五pm400015002014-05-16444赵六cto3000010002015-11-12525田七ceo400002014-05-1646蔡八cfo3500010002015-08-12547孙久pe450050020
天堂宝宝_V
·
2020-04-11 17:32
Hive | Hive 安装详解
一、Hive介绍二、准备工作三、Hive下载四、Hive安装五、Hive启动一、Hive介绍Hive是构架在hadoop之上的数据仓库工具,提供简单的sql查询功能,被称为
HiveQL
或HQL,然后将sql
Ada54
·
2020-04-11 06:42
HiveQL
查询操作全解(六):explode函数详解
假设我们的数据如下所示,表为test表:ABC190[1030,1031,1032,1033,1190]selectid191[1030,1031,1032,1033,1190]selectid可以看到,我们的B字段是ARRAY类型的,我们假如想把B的每一个元素变成一行,我们可以使用explode函数:selectexplode(B)asDfromtest这样可以达到如下的目的D103010311
文哥的学习日记
·
2020-04-07 10:47
Hive- UDF&GenericUDF
hiveudf简介在Hive中,用户可以自定义一些函数,用于扩展
HiveQL
的功能,而这类函数叫做UDF(用户自定义函数)。
raincoffee
·
2020-03-30 06:04
hive join ..on连接中 and与where的取舍
HiveQL
与标准SQL的区别:陷阱1:SELECT*FROMfirst_tablet1JOINsecond_tablet2ONt1.id=t2.idwheret1.date="2016-06-01"在
骑着小猪啪啪啪
·
2020-03-22 05:45
HiveQL
: 数据定义之数据库操作
HiveDataDefinitionLanguage(DDL)1创建数据库--1CREATEDATABASEmydb;--2CREATEDATABASEIFNOTEXISTSmydbLOCATION'/user/Oythonhill/mydb.db'WITHDBPROPERTIES('creater'='Oythonhill','date'='2017-12-30')COMMENT'thisisa
Oythonhill
·
2020-03-19 22:24
使用Hive内置的解析器构建血缘关系
仓库组的
HiveQL
一般情况下是写好后,定时调度SparkSQL来执行的。这些
HiveQL
格式都差不多的样子insertoverwritetablenamepartition(partitio
GoofyWang
·
2020-03-19 16:58
Hive编程指南读书笔记0001
Hive概述1.Hive提供了一个被称为Hive查询语言(简称
HiveQL
或HQL)的SQL方言,来查询存储在Hadoop集群中的数据。
jackLee
·
2020-03-15 22:38
Hive学习-表的基本操作
HiveQL
是类SQL查询语句,和数据库的查询语句类似,下面介绍一些基本的表操作:1.创建表创建表的HQL语句如下,逐条输入即可,以;结束。
Ameliesun
·
2020-03-15 01:24
SQL Differences Between Impala and Hive
www.cloudera.com/documentation/cdh/5-1-x/Impala/Installing-and-Using-Impala/ciiu_langref_unsupported.html#langref_
hiveql
_deltaNotethat
时待吾
·
2020-03-07 04:27
HiveQL
查询操作全解(三):JOIN语句
Hive支持通常的SQLJOIN,但是支持等值连接1、INNERJOIN内连接中,只有进行连接的两个表中都存在于连接标准相匹配的数据才会被保留下来。比如下面的例子:SELECTa.ymd,a.price_close,b.price_closeFROMstocksaJOINstocksbONa.ymd=b.ymdWHEREa.symbol='APPL'ANDb.symbol='IBM';也可以进行多
文哥的学习日记
·
2020-03-05 12:56
Hive数据源实战
HiveContext继承自SQLContext,但是增加了在Hive元数据库中查找表,以及用
HiveQL
语法编写SQL的功能。
一个人一匹马
·
2020-02-16 06:35
Hive wordcount
一使用HiveCLI(old)命令行工具操作
HiveQL
进入hivecli[root@master/]#hive创建统计表hive>createtablewctest(line,contentstring
天堂宝宝_V
·
2020-02-16 03:00
[大数据技术原理与应用笔记]第八讲.数据仓库Hive
8.2Hive简介Hive利用了HDFS的分布式文件系统存储数据,利用MapReduce分布式并行计算模型处理数据.提供
HiveQL
运行具体的MapReduce任务两个特性:(1).采用批处理的方式处理海量数据
自然语言不理解
·
2020-02-14 05:56
大数据
HiveQL
数据定义:分区
分区•建立分区表•增加分区•重命名分区•删除分区hive组织表到分区。它是将一个表到基于分区列,如日期,城市和部门的值相关方式。使用分区,很容易对数据进行部分查询。表或分区可以细分成桶,以提供额外的结构,可以使用更高效的查询的数据。桶的工作是基于表的一些列的散列函数值。例如,一个名为Tab1表包含雇员数据,如id,name,dept和yoj(即加盟年份)。假设需要检索所有在2012年加入,查询搜索
无敌的肉包
·
2020-02-13 07:27
##常用
HiveQL
总结
常用
HiveQL
总结-Treant-博客园http://www.cnblogs.com/en-heng/p/5513176.html最近在用Hive做多维数据分析,总结一些常用
HiveQL
命令。
葡萄喃喃呓语
·
2020-02-02 15:35
Hive的入门知识
使用
HiveQL
日出卡尔
·
2020-01-08 17:25
026
HiveQL
Select – Order By Query
1.OrderByQuery–ObjectiveInlastApacheHiveTutorial,westudyHiveGroupByQueryindetail,inthistutorialwestudytoretrievethedetailsbasedononecolumnandsorttheresultsetbyascendingordescendingorderweusetheHiveQLS
胡巴Lei特
·
2020-01-06 05:41
从0开始学大数据-Hive性能优化篇
在工作中使用hive比较多,也写了很多
HiveQL
。这里从三个方面对Hive常用的一些性能优化进行了总结。
digger30
·
2020-01-04 17:17
Spark SQL 使用指北
从Shark说起Shark即HiveonSpark,为了实现与Hive兼容,Shark重用了Hive中的
HiveQL
解析,以近似认为仅从MapRed
博弈史密斯
·
2019-12-31 00:51
70、Spark SQL之Hive数据源复杂综合案例实战
HiveContext继承自SQLContext,但是增加了在Hive元数据库中查找表,以及用
HiveQL
语法编写SQL的功能。
ZFH__ZJ
·
2019-12-26 20:39
原创|Linux|CentOS|Hive|安装详解
排版:简单二、Hive介绍Hive是构架在hadoop之上的数据仓库工具,提供简单的sql查询功能,被称为
HiveQL
或HQL,然后将sql语
Hill_GM
·
2019-12-25 01:35
基于Hadoop的数据仓库Hive 基础知识
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–
HiveQL
,可通过HQL语句实现简单的MR统计,Hive
番茄吵西红柿
·
2019-12-22 18:49
大数据专题--Hive 与 impala
Hive定义了简单的类SQL查询语言,称为HQL,通过编写
HiveQL
语句,运行具体的MapReduce任务。2、特征:1)采用批处理方式处理海量数据。2)提供了ETL工具。3、Hive架构:Hive
zhang_12b6
·
2019-12-21 07:53
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他