E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hiveQL
Hive基础
Hive出现的主要原因就是为了提供一种SQL查询的方言,来查询存储在Hadoop集群种的数据,这个被称为Hive查询语言(简称
HiveQL
或HQL
零度沸腾_yjz
·
2017-06-14 11:58
Hive 取非 Group by 字段数据的方法
执行以下
Hiveql
语句:123456SELECTsid,class_idFROMtable2GROUPBYsid;会报错:1FAILED:Errorinsemanticanalysis:Line1:18ExpressionnotinGROUPBYkey'class_id
冰阔落
·
2017-05-08 14:58
数据库
Hive
hiveserver2-CDH版本客户端使用
一、简介学习和实践Hive中,使用的都是CLI或者hive–e的方式,该方式仅允许使用
HiveQL
执行查询、更新等操作,并且该方式比较笨拙单一。
献给记性不好的自己
·
2017-04-14 15:59
HiveQL
中case when..........then.......else的用法总结
核心内容:1、两个实例2、case语句中的the关键字可以理解为select关键字3、两个groupby的实例4、线性维表的实现方式优惠前金额:before_prefr_unit_price实例1、从表gdm_m04_ord_det_sum提取如下数据:求出在2014年11月11日这天的全部订单中,优惠前金额before_prefr_unit_price不同分布区间的订单的数量,按子订单统计。输出
安静的技术控
·
2017-04-12 02:28
数据仓库
《hive编程指南》阅读笔记摘要(七)
第8章
HiveQL
:索引1、hive只有有限的索引功能。
IT十年
·
2017-04-05 21:58
大数据
《hive编程指南》阅读笔记摘要(六)
第7章
HiveQL
:视图1、视图不像表一样会存储数据,hive目前不支持物化视图。2、当一个查询引用一个视图时,这个视图定义的查询语句会和用户的查询语句组合在一起,然后供hive制定查询计划。
IT十年
·
2017-04-04 09:02
大数据
Hive2.0新特性
同时Hive还定义了类SQL的语言–
HiveQL
.Hi
Dream__Boy
·
2017-03-31 19:41
hive
3-Hive SQL
1.
HiveQL
的基本操作更新:INSERT事物:支持表级,本分区级。
陌城小川
·
2017-03-31 11:21
hive
sparksql执行流程分析
SparkSQL支持在Spark中执行SQL,或者
HiveQL
的关系查询表达式。列式存储的类RDD(DataSet/Dat
ZPPenny
·
2017-03-27 21:45
《hive编程指南》阅读笔记摘要(五)
第6章
HiveQL
:查询查询字段是数组类型的元素数据selectname,subordinates[0]fromemployees;查询字段是map类型的元素数据selectname,deductions
IT十年
·
2017-03-24 09:07
大数据
《hive编程指南》阅读笔记摘要(四)
第5章
HiveQL
:数据操作既然hive没有行级别的增删改操作,那么往表中装载数据的唯一途径就是“大量”的数据装载操作,或者通过其他方式仅仅将文件写到正确的目录下。
IT十年
·
2017-03-22 23:05
大数据
《hive编程指南》阅读笔记摘要(三)
第四章
HiveQL
:数据定义hive中的数据库本质上只是表的一个目录或者命名空间,用来组织表hive有一个默认的数据库default,如果没有显式地指定数据库,默认是default库创建数据库createdatabaseifnotexiststest
IT十年
·
2017-03-21 22:38
大数据
《hive编程指南》阅读笔记摘要(一)
hive最适合做数据仓库
HiveQL
不符合ansisql标准,和mysql、oracle的sql有很多差异。mapreduce处理
IT十年
·
2017-03-19 15:36
大数据
Hive - hive.groupby.skewindata环境变量与负载均衡
HiveQL
去重操作和SQL一样,
HiveQL
中同样支持DISTINCT操作,如下示例:(1)SELECTcount(DISTINCTuid)FROMlog(2)SELECTip,count(DISTINCTuid
anneqiqi
·
2017-03-06 17:56
hive
基于Hadoop的数据仓库Hive 基础知识
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–
HiveQL
,可通过HQL语句实现简单的MR统计,Hive
·
2017-02-27 00:00
BigData
[Hive]窗口函数与分析函数
本文介绍了用于窗口函数和分析函数的
HiveQL
增强功能。所有窗口和分析函数操作都按照SQL标准。
SunnyYoona
·
2017-02-22 14:52
Hive
HiveQL
查询变量(动态参数值)的使用
主要用hiveconf来进行变量值的获取,格式如下:变量赋值:setpt_day='2016-12-31';变量引用:${hiveconf:pt_day} -->用在Hql里参考示例:setpt_day='2016-12-31';droptableifexistsxx_new_identifier;createtablexx_new_identifierasselecta1.appsource,a
BabyFish13
·
2017-01-24 16:11
#
Hive
Sql
HiveQL
查询变量(动态参数值)的使用
主要用hiveconf来进行变量值的获取,格式如下:变量赋值:setpt_day='2016-12-31';变量引用:${hiveconf:pt_day}-->用在Hql里参考示例:setpt_day='2016-12-31';droptableifexistsxx_new_identifier;createtablexx_new_identifierasselecta1.appsource,a1
BabyFish13
·
2017-01-24 16:11
#
Hive
Sql
Hive Index
用户可以使用EXPLAIN语法来分析
HiveQL
语句是否可以使
过河卒子Rover
·
2017-01-20 15:56
hive
hive select where
Hive查询语言(
HiveQL
)是一种查询语言,Hive处理在Metastore分析结构化数据。本章介绍了如何使用SELECT语句的WHERE子句。SELECT语句用来从表中检索的数据。
琳琳庚主LoveU
·
2017-01-14 09:20
大数据
hive
经典解密数据库和表的创建
数据库和表通过
HiveQL
或ImpalaSQL的DDL语句进行创建和管理,和标准SQLDDL非常相似。但是它们又有各自不同的语法,这个差异会在后面具体提出来,如果没有提到就是两者相通的。
caosheng03
·
2017-01-03 15:17
Hadoop
hive
大数据
Spark SQL Hive数据源复杂综合案例实战
Hiveql
的功能要比sql的功能要强大很多。使用HiveContext,可以执行Hive的大
张章章Sam
·
2016-12-10 23:52
我的理解2 hadoop不会替换传统数据库
主要功能:分析广告,用户打分,分析用户行为,统计日志,数据挖掘facebook就用Hive来进行日志分析,2009年时facebook就有非编程人员的30%的人使用
HiveQL
进行数据分析;淘宝搜索中的自定义筛选也使用的
aa_moon
·
2016-12-02 15:17
hadoop
facebook
Hive报错"Expression not in GROUP BY key"的解决方案
开发时假如有如下情景的需求,需要按id分组,但是每个id的经纬度都是一样的,如果
HiveQL
语句这么写:SELECTid,latitude,longitudeFROMt_poiGROUPBYid;则会报错
chinamcafee
·
2016-11-30 14:35
hive
Hive--
HiveQL
与SQL区别
链接1.hive内联支持什么格式?2.分号字符注意什么问题?3.hive中empty是否为null?4.hive是否支持插入现有表或则分区中?5.hive是否支持INSERTINTO表values()?1、Hive不支持等值连接•SQL中对两表内联可以写成:•select*fromduala,dualbwherea.key=b.key;•Hive中应为•select*fromdualajoindu
吉阿
·
2016-11-15 08:53
Spark
Hive
hive知识点小结
运行在hadoop,类SQL方法方式运行,SQL(
HiveQL
,HQL),MR运算。操纵的结构化数据。schema(模式,元信息存放到数据库中),HDFS文件。derby,mysql。
biwenjun999
·
2016-11-13 12:38
大数据
elasticsearch 与 hive集成
Hive是一个基于hdfs的数据仓库,方便使用者可以通过一种类sql(
HiveQL
)的语言对hdfs上面的打数据进行访问,通过elasticsearch与hive的结合来实现对hdfs上面的数据实时访问的效果
weitao1026
·
2016-11-08 12:00
HIVE学习与实践(一):基本命令
Hive就是其中的一套选择:Hive查询语言(
HiveQL
或者HQL),与原来应用在传统数据库上的SQL语
O白马非马O
·
2016-11-03 18:32
数据库相关
数据挖掘
Hive数据仓库--
HiveQL
视图和索引
转载请注明出处:Hive数据仓库--
HiveQL
视图和索引视图创建这样的一个视图,高收入人群。我试了下,这里的视图并
wangyang1354
·
2016-09-29 21:00
数据仓库
hive视图
Hive索引
Hive实战
Hive数据仓库--
HiveQL
查询
转载请注明出处:Hive数据仓库--
HiveQL
查询这里是之前的文章中操作的表的信息,并且,我们简单的查询下,你可以看到他的部分数据。hive>showtables; OK sala
wangyang1354
·
2016-09-29 20:00
大数据
数据仓库
hiveQL
Hive查询语句
Hive实战
hive语句简单统计搜索日志
一、前言初步学习了hive,以搜狗实验室的一部分搜索日志为数据集进行
hiveQL
语句操作练习。
alihonglong
·
2016-09-24 08:17
hadoop
[完]基于Hadoop的数据仓库Hive 基础知识
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–
HiveQL
,可通过HQL语句实现简单的MR统计,Hive
namelessml
·
2016-09-21 15:38
大数据
Hive
Apache Hive2.0的新特性介绍
同时Hive还定义了类SQL的语言–
HiveQL
.
HiveQL
允许用户进行和SQL相似的操作,它可以将结构化的数据文件映射为一张数据库表,并提供简单的SQL查询功能。
Free World
·
2016-09-19 21:55
Hadoop
《走进大数据之Hive入门》学习笔记(1)
hive.apache.orgHive入门指南:http://wiki.apache.org/hadoop/Hive/GettingStartedHQL查询语言指南:http://wiki.apache.org/hadoop/Hive/
HiveQL
allinallinallin
·
2016-09-04 14:57
Hive
HiveQL
详解
HiveQL
详解
HiveQL
是一种类似SQL的语言,它与大部分的SQL语法兼容,但是并不完全支持SQL标准,如
HiveQL
不支持更新操作,也不支持索引和事务,它的子查询和join操作也很局限,这是因其底层依赖于
张润森的博客
·
2016-09-01 11:39
ss
从SQL到
HiveQL
从SQL到
HiveQL
应转变的习惯
HiveQL
是一种类似SQL的语言,它与大部分的SQL语法兼容,但是并不完全支持SQL标准,如
HiveQL
不支持更新操作(行级别),也不支持事务,它的索引,子查询和join
leexurui
·
2016-08-29 12:19
并行计算与分布式计算
Hive总结(三)hive组件和执行过程
驱动(Driver)-控制
HiveQL
生命周期的组件,当
HiveQL
查询穿过Hive时。该驱动管理着会话句柄以及任何会话的统计。
豆豆闲品
·
2016-08-23 14:34
Hive
Hive使用中的注意事项
1.导入数据显示中文的问题数据导入前需将编码格式更改为utf-8再导入hive数据库,这样查询之后的结果才能正常显示中文而不是乱码,并且可以在相应的
HiveQL
语句中使用中文对某个字段进行判断。
cuihaolong
·
2016-07-31 00:00
Hadoop
大数据的仓库Hive原理(三)
1、编译器简介 Hive编译器将一个
HiveQL
转换操作符。操作符Operator是Hive的最小的处理单元,每个操作符代表HDFS的一个操作或者一道MapReduce作业。
u010168160
·
2016-06-29 18:00
hive
大数据
数据仓库
原理解析
Hive的数据类型解析和表的操作实例
另外一篇关于Hive的表,外部表,分区,桶的理解的博客:点击阅读本文所需要的
HIveQL
源码和所需的测试用例github地址为:点击查看一:Hive中的数据类型Hive支持两种数据类型,一类叫原子数据类型
Gamer_gyt
·
2016-06-21 20:00
分区
hive
桶
HIVE:3_
HIVEQL
查询语句上面两个语句是等价的,只是下面的用到了表的别名。对于集合类型,Hive会以JSON形式输出,对于数组可以使用name[0]的形式引用,如同理,对于MAP元素,可以使用map['name']引用,可以使用.点符号引用STRUCT类型。使用正则表达式指定列使用列值进行计算算术运算符内置函数数学函数:聚合函数聚合函数是比较特殊的函数,它们对多行进行计算,然后得到一个结果值,如hive>SELEC
BUPT_WX
·
2016-06-03 20:35
用Apache Spark进行大数据处理——第二部分:Spark SQL
基于SparkSQL可以重用HIve本身提供的元数据仓库(MetaStore).
HiveQL
,用户自定义函数UDF,及序列化和反序列化的工具(SerDes)在ApacheSpark文章系列的前一篇文章中
sinat_29581293
·
2016-06-01 16:00
hive中 join与where
HiveQL
与标准SQL的区别:陷阱1:SELECT* FROMfirst_tablet1 JIONsecond_tablet2 ONt1.id=t2.id wheret1.date="2016-06-
u013593585
·
2016-06-01 10:00
Spark SQL简单操作演示(含导出表)
SparkSQL只要在编译的时候引入Hive支持,就可以支持Hive表访问,UDF,SerDe,以及
HiveQL
/HQL启动spark-sqlguo@drguo:/opt/spark-1.6.1-bin-hadoop2.6
光于前裕于后
·
2016-05-15 22:43
Hadoop
Spark
大数据动物园
Scala
Hive
Spark SQL与Hive On MapReduce速度比较
今天就拿基于Spark的SparkSQL和基于MR的Hive比较一下,因为SparkSQL也兼容了
HiveQL
,我们就可以通过运行相同的
HiveQL
语句,比较直观的看出到底快多少了。
光于前裕于后
·
2016-05-15 16:24
Hadoop
Spark
大数据动物园
Hive
Hive教程
同时,hive定义了类sql的语言——
hiveql
。
hiveql
允许用户进行和sql相似的操作,还允许开发人员方便地使用mapper和reducer操作,这对mapreduce框架是一个强有力的支持。
duxu24
·
2016-05-13 17:00
hadoop
hive
数据仓库
HiveQL
基本操作整理
1.创建操作1.1创建表CREATETABLEpokes(fooINT,barSTRING); 1.2基于现有的表结构创建一个新表createtablenew_tablelikerecords; 1.3创建视图:CREATEVIEWvalid_recordsASSELECT*FROMrecords2WHEREtemperature!=9999; 1.4创建外部表:CREATEEXTERNALTAB
Lnho2015
·
2016-05-12 09:00
hive
基本操作
Hive-QL
HiveQL
数据定义
hive是一个基于hadoop、处理结构化数据的数据仓库基础工具。它提供简单的sql查询功能可以将sql语句转换为MapReduce任务进行运行hadoop是一个开源的大型分布式处理框架,主要包含了两个模块,MapReduce和HDFS-----MapReduce:它是一种并行编程模型在大型集群普通硬件可用于处理大型结构化,半结构化和非结构化数据。-----HDFS:Hadoop分布式文件系统是H
legotime
·
2016-04-27 18:00
hive
如何用SQL来写动态SQL,本文主要是
HiveQL
本文最主要问题:在Hive环境中怎么实现:编写一个
HiveQL
执行出来的结果是根据Hive数据仓库表中的数据动态生成我们所需要的静态的
HiveQL
.动态SQL是什么,为什么要用它,怎
Allen_Infosys
·
2016-04-15 16:39
Hadoop
SQL语句
Hive
HIVE 新特性 ACID 初试
在Hive0.14之前,
HiveQL
一直不支持insert、update、delete操作,这显然很不方便,尤其是在构建数据仓库的过程中,一个比较常见的例子是维度表经常需要更新某列,在Hive中需要更新历史所有数据
on_way_
·
2016-04-02 22:05
hive
acid
hadoop
Hadoop生态系统
上一页
6
7
8
9
10
11
12
13
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他