hiveql

Hive学习笔记(3)

Hive学习笔记HiveQL:查询SELECT…FROM语句算数运算符使用函数数学函数聚合函数表生成函数其他内置函数LIMIT语句列别名嵌套SELECT语句CASE…WHEN…THEN句式什么情况下Hive
jinesse·2018-06-22 09:26

Hive组件及Hive执行流程

驱动（Driver）－控制HiveQL生命周期的组件，当HiveQL查询穿过Hive时。该驱动管理着会话句柄以及任何会话的统计。
i000zheng·2018-06-21 18:46

【Hive】HiveQL：数据操作

本篇主要演示Hive的数据操作，包括向表中装载数据、插入数据、创建表以及导出数据。一向表中装载数据1语法结构LOADDATA[LOCAL]INPATH'filepath'[OVERWRITE]INTOTABLEtablename[PARTITION(partcol1=val1,partcol2=val2...)]2示例hive>loaddatalocalinpath'/home/hadoop/em
Alen_Liu_SZ·2018-06-21 13:29

【Hive】HiveQL：数据定义

HiveQL是Hive查询语言，和普遍使用的所有SQL方言一样，它不完全遵守任一种ANSISQL标准的修订版。
Alen_Liu_SZ·2018-06-21 00:27

Hadoop之Hive

阅读更多Hive基本介绍查询管理存储在HDFS中的大数据集合，提供像SQL的查询语句HiveQL。
theseus·2018-06-17 18:00

Hadoop之Hive

阅读更多Hive基本介绍查询管理存储在HDFS中的大数据集合，提供像SQL的查询语句HiveQL。
theseus·2018-06-17 18:00

Hive实现词频统计

Hive中提供了类似于SQL语言的查询语言——HiveQL，可以通过HiveQL语句快速实现简单的MapReduce统计，Hive自身可以将HiveQL语句快速转换成MapReduce任务进行运行，而不必开发专门的
大王go巡山·2018-06-10 22:05

Hive学习笔记(2)

Hive学习笔记HiveQL:数据定义Hive中的数据库修改数据库创建表删除表修改表HiveQL:数据操作向管理表中装载数据通过查询语句向表中插入数据单个查询语句中创建表并加载数据导出数据Hive学习笔记笔记内容主要来自
jinesse·2018-06-04 16:55

Hadoop综合大作业

（1）启动hadoop(2)查看hdfs（3）启动hive（4）进入hive,并查看所有的表(5)创建表word,,写hiveQL命令统计（6）运行结果2.用Hive对爬虫大作业产生的csv文件进行数据分析
125叶胜轩·2018-05-25 22:00

Hadoop综合大作业&补交4次作业：获取全部校园新闻，网络爬虫基础练习，中文词频统计，熟悉常用的Linux操作

（4）进入hive,并查看所有的表(5)创建表word,,写hiveQL命令统计（6）运行结果获取全部校园新闻1.取出一个新闻列表页的全部新闻包装成函数。2.获取总的新闻篇数，算出新闻总
Molemole·2018-05-25 19:00

HiveQL表的基本概念

1管理表管理表其实就是我们最常用的表，最普通的表，创建表的SQL语句与MySQL一致CREATETABLEIFNOTEXISTSmanage_table(idSTRING,nameSTRING)ROWFORMATDELIMITEDFIELDSTERMINATEDBY'|'STOREDASTEXTFILE;通常会使用IFNOTEXISTS来防止因表存在而创建失败报错的情况，这里设置字段之间的分割采用
JinbaoSite·2018-05-19 22:44

主流开源SQL（on Hadoop）总结

例如Hive不是一个引擎，它的框架使用MapReduce、TeZ或者Spark引擎去执行查询，而且它并不运行SQL，而是HiveQL，一种类似SQL的语言，非常接近SQL。
宁哥说·2018-05-13 10:35

Hive执行流程

Hive执行流程•编译器将一个HiveQL转换操作符•操作符是Hive的最小的处理单元•每个操作符代表HDFS的一个操作或者一道MapReduce作业Operator•Operator都是hive定义的一个处理过程
菜鸟级的IT之路·2018-05-11 07:02

Hive性能优化小结

在工作中使用hive比较多，也写了很多HiveQL，对于那些执行比较慢的语句，看着那些执行慢的任务显示的进度真的是欲哭无泪。是真的数据量比较大，计算比较复杂，还是还没将相关参数设置最优呢。
·2018-05-07 22:00

Hive 工作原理

4.编译器Compiler得到元数据信息，对任务进行编译，先将HiveQL转换为抽象语法树，然后将抽象语法树转换成查询块，将查询块转化为逻辑的查询计划，重写逻辑查询计划，将逻辑计划转化为物理的
菜鸟级的IT之路·2018-05-03 08:35

Hive面试题收集

4.编译器Compiler得到元数据信息，对任务进行编译，先将HiveQL转换为抽象语法树，然后将抽象语法树转换成查询块，将查询块转化为逻辑的查询计划，重写逻辑查询计划，将逻辑计划转化为物理的计划（MapReduce
菜鸟级的IT之路·2018-04-27 08:08

hive报错Expression not in GROUP BY key 'class_id'

执行以下hiveql语句：123456SELECTsid,class_idFROMtable2GROUPBYsid;会报错：1FAILED:Errorinsemanticana
Sam_hzj·2018-04-26 20:37

spark sql 的介绍

SparkSQL允许Spark执行用SQL,HiveQL或者Scala表示的关系查询。这个模块的核心是一个新类型的RDD-SchemaRDD。
Se_cure·2018-04-22 19:02

Hive 调优

Hive优化层面查看执行计划explainextendedhql；可以看到扫描数据的hdfs路径Hiveql层面优化一、hive表优化分区（不同文件夹）：分区是以字段的形式在表结构中存在，通过d
菜鸟级的IT之路·2018-04-21 16:02

Hive语法（一）

HiveQL与关系型数据库的SQL略有不同，但支持了绝大多数的语句如DDL、DML以及常见的聚合函数、连接查询、条件查询。HIVE不适合用于联机(online)事务处理，也不提供实时查询功能。
ZoeYen_·2018-04-16 00:28

hive 表的常用操作

使用load方式加载数据到Hive表中，注意分区表加载数据的特殊性如何保存HiveQL查询结果：保存到表中，保存到本地文件（注意指定列分隔符）常见查询练习，如groupby、having、join、sortby
flyfish225·2018-04-12 10:42

hive2.1.1的安装与配置

1.在hadoop处理结构化数据的数据仓库不是：关系型数据库不是OLTP实时查询和行级别的更新1.2hive的特点hive存储数据结构（schema）在数据库中，处理的数据进入hdfsolapHQL/HiveQL1.3hive
flyfish225·2018-04-11 13:42

2.2.2Hive创建索引

用户可以使用EXPLAIN语法来分析HiveQL语句是否可以使用索引来提升用户查询的性能。索引需要更多的磁盘空间，并且创建维护索引也会有一定的代价。用户必须要权衡从索引得到的好处和代价。
__Simon'·2018-04-02 11:29

hiveQL 其他内置函数

ascii(STRINGs):返回字符串s中首个ASCII字符的整数值base64(BINARYbin):将二进制bin转化成基于64位的字符串binary(STRINGs):将输入值转化为二进制值cast(‘1’asBIGINT):将字符串1转化成BIGINT数值类型concat(s1,s2,…):将s1s2拼接起来concat_ws(separator,s1,s2):与concat类似，不过是
刘公子lxl·2018-03-25 23:49

hiveQL 聚合函数

count(*):计算总行数count(expr):计算提供的expr表达式的值非NULL的行数distinct：排重sum(col):计算指定行的值的和sum(DISTINCTcol):计算排重后值的和avg(col):计算指定行的平均值avg(DISTINCTcol):计算排重后的指定行的平均值min(col):计算指定行的最小值max(col):计算指定行的最大值variance(col):
刘公子lxl·2018-03-25 22:13

HiveQL (HQL) 与 SQL 区别

Hive的查询语言是HQL，HQL支持SQL-92标准，所以与SQL非常相似。但由于Hive是基于Hadoop，而SQL通常是基于关系型数据库，这使得HQL与SQL相比有一些区别和局限。用法上的区别：1.HQL不支持行级别的增、改、删，所有数据在加载时就已经确定，不可更改。2.不支持事务。3.支持分区存储。语法上的区别：区别点HQLSQL注释符--#数据类型基本数据类型，如：int,float等复
Miss_Squirrel·2018-03-24 13:07

Hive官方使用手册——命令行

这些命令可以在CLI或者Beeline里面通过HiveQL脚本直接使用。命令命令注释sourceFILE在CLI中执行一个脚本。set=为一
Sammion·2018-03-06 13:21

centos6.5上安装和配置hive

同时Hive定义了类SQL的语言——hiveQL。hiveQL允许用户进行和SQL相似的操作，还允许开发人员方便使用Mapper和Reducer操作，对MapReduce框架师一个强有力的支
清风晨晓·2018-03-06 11:58

SPARK 2.2.1 基于HIVEQL的人力资源系统的数据处理的案例与解读

SPARK2.2.1HIVEQL的人力资源系统的数据处理的案例与解读本节给出一个简单的公司人力资源系统的数据处理案例。人力资源管理系统的管理内容组织结构如图3-10所示。
段智华·2018-02-21 13:14

sparkSQL结合hive的入门程序

学习sparkSQL时最简单的一个示例，是用json格式的文件充当hive表，并注册为临时表，然后用hiveQL的API来查询得出需要的结果。
gamedevv·2018-01-30 01:33

sparkSQL结合hive的入门程序

学习sparkSQL时最简单的一个示例，是用json格式的文件充当hive表，并注册为临时表，然后用hiveQL的API来查询得出需要的结果。
gamedevv·2018-01-30 01:33

HiveQL基础语法（聚合，分组函数）

1.聚合函数通俗说，聚合函数是将多行数据导出一条结果常用的聚合函数有：max,min,count,sum,avg对emp表查询员工的最大、最小、平均工资及所有工资的和1.hive>select*fromemp;2.OK3.7369SMITHCLERK79021980/12/17800.0NULL204.7499ALLENSALESMAN76981981/2/201600.0300.0305.752
banana`·2018-01-28 22:34

Hive学习笔记（三）与数据库有关的HiveQL语句

1.创建数据库：CREATEDATABASEmydb;如果数据库mydb已经存在的话，那么将会抛出一个错误信息。使用如下语句可以避免这种情况下抛出错误信息:CREATEDATABASEIFNOTEXISTSmydb;当我们创建数据库mydb时，Hive会对应地创建一个目录/user/hive/warehouse/mydb.db。值得注意的是，数据库default创建的目录是/user/hive/w
滴滴答答要努力·2018-01-10 11:26

hive explain详解

HiveQL是一种声明式语言，用户会提交声明式的查询，而Hive会将其转化成Mapreducejob。
i_data·2018-01-03 17:16

(防坑笔记)hadoop3.0 (五) Hive的入门与数据类型

简单提提：Hive是一个仓储结构的工具，能对hadoop中的文件以类sql的方式查询出来，也可以让熟悉mapper/reduce的开发者进行自定义操作，单总归而言，它只是一个解析引擎，将HiveQL语句解析成
CoffeeAndIce·2018-01-03 16:19

(防坑笔记)hadoop3.0 (五) Hive的入门与数据类型

简单提提：Hive是一个仓储结构的工具，能对hadoop中的文件以类sql的方式查询出来，也可以让熟悉mapper/reduce的开发者进行自定义操作，单总归而言，它只是一个解析引擎，将HiveQL语句解析成
CoffeeAndIce·2018-01-03 16:19

Hive调优

1.设置hive.map.aggr=true，提高HiveQL聚合的执行性能。这个设置可以将顶层的聚合操作放在Map阶段执行，从而减轻清洗阶段数据传输和Reduce阶段的执行时间，提升总体性能。
多哥仁慈的骆驼·2017-12-20 11:10

HiveServer2服务端配置与启动

在之前的学习和实践Hive中，使用的都是CLI或者hive–e的方式，该方式仅允许使用HiveQL执行查询、更新等操作，并且该方式比较笨拙单一。
盛装吾步·2017-12-15 18:11

Hive常用命令

usedatabase_name;显示所有表showtables;查询表结构desctable_name;显示表的详细信息describeextendedtable_name;显示分区信息showpartitions;HIVEQL
Waterkong·2017-12-04 13:15

SQL和hive下的SQL的区别

3.不支持INSERTINTO表Values（）,UPDATE,DELETE等操作4.HiveQL中String类型的字段若是空(empty)字符串,即长度为0,那么对它进
qin_na·2017-11-30 17:21

Hive编程(一)【基础知识】

Hive提供了一个被称为Hive查询语言(简称HiveQL或HQL)的SQL方言，来查询存储在Hadoop集群中的数据。Hive可以将大多数的查询转换为MapReduce任务。
风灵使·2017-11-30 16:07

Hive和HBase的整合原理

但请注意：使用Hive操作HBase中的表，只是提供了便捷性，hiveQL引擎使用的是MapReduce，对于性能上，表现比较糟糕，在实际应用过程中可针对不同的场景酌情使用。
追寻北极·2017-10-26 17:39

Hive onver Hbase详解

等操作需要借助Mapreduce程序，门槛较高；Hive对于SQL的支持有强大的功能，我们不需要写过多的自定义函数就能实现较为复杂的查询;HiveoverHbase优缺点优点：1、Hive方便地提供了HiveQL
pigcoffee·2017-09-08 11:05

大数据生态系统基础： HIVE（二）：HIVE 架构和HiveQL基本操作

在“信息平台和数据科学家的崛起”中，JeffHammerbacher将信息平台描述为“他们的公司努力吸收、处理和产生信息的中心”，以及他们如何“促进从经验数据中学习的过程”。“Jeff团队在Facebook上开发的信息平台的最大组成部分是ApacheHive，它是Hadoop上的数据仓库框架。Hive从需要管理和学习的大量数据中成长起来，这是Facebook每天从蓬勃发展的社交网络中产生的海量数据
caridle·2017-08-21 15:07

HiveQL逻辑执行顺序

FROM->WHERE->GROUPBY->HAVING->SELECT->ORDERBYHive总是按照从左到右的顺序执行的，如a、b、c三个表关联selecta.id,b.colname,c.colnamefromajoinbona.id=b.idjoincona.id=c.id大多数情况下，hive会对每个join连接对象启动一个MapReduce任务，上面的列子首先会启动一个MapRedu
BingCorePower·2017-08-16 23:20

初识Hive

Hive提供了类SQL语言-HiveQL，可使用关系数据库提供的的SQL语句来操作Hive。Hive擅长做什么？Hive擅长在不变的、大规模的数据集上执行的批量操作。
追_梦_者·2017-07-31 21:07

mapreduce执行过程详细讲解

上述问题完全可以映射成HiveQL来实现。b.假设hive中dpi表是全球每天内的平均气温，有日期，温度等字段，统计三年内每年最高气温:selectyear,max(temp)fromdpiw
Allen_Infosys·2017-07-28 17:53

Hadoop之通过Java Api连接Hive

在之前的学习和实践Hive中，使用的都是CLI或者hive–e的方式，该方式仅允许使用HiveQL执行查询、更新等操作，并且该方式比较笨拙单一。
南北雪树·2017-07-17 09:33

Hive和HBase的整合原理

但请注意：使用Hive操作HBase中的表，只是提供了便捷性，hiveQL引擎使用的是MapReduce，对于性能上，表现比较糟糕，在实际应用过程中可针对不同的场景酌情使用。
Star-Technology·2017-06-24 13:12

HBase 与Hive数据交互整合过程详解

Hive和Hbase整合理论1、为什么hive要和hbase整合2、整合的优缺点优点：(1).Hive方便地提供了HiveQL的接口来简化MapReduce的使用，而HBase提供了低延迟的数据库访问。
ChinaUnicom110·2017-06-16 17:23
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他