hiveQL 第2页

Hive 和 HDFS、MySQL 之间的关系

它提供了一种类似于SQL的查询语言（HiveQL），允许用户执行数据分析和查询操作。Hive不存储数据，而是将数据存储在底层的

月亮给我抄代码·2023-09-05 05:42

zz-hive的基本原理

驱动（Driver）－控制HiveQL生命周期的组件，当HiveQL查询穿过Hive时。该驱动管理着会话句柄以及任何会话的统计。查询编译器（QueryCompiler）－是一个组

remychan·2023-08-28 00:11

从Hadoop/Hive数据仓库导入数据到睿思BI系统

Hive是基于Hadoop的数据仓库工具，可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理，提供了类似于SQL语言的查询语言–HiveQL，可通过HQL语句实现简单的MR统计，Hive

睿思BI·2023-08-21 03:41

HiveQL 语句优先级

1.FROM3.JOIN2.ON4.WHERE5.GROUPBY6.WITH{cube|rollup}7.HAVING8.SELECT9.DISTINCT11.10.ORDERBYlateralview优先级在select之前from之后，且通常为select*from(…)tlateralview…这样的结构

Code_LT·2023-08-17 13:44

HiveQL调优

使用EXPLAIN使用EXPLAIN可以打印出查询语句的抽象语法树，比如下面的：EXPLAINSELECTSUM(number)FROMonecol;还可以使用EXPLAINEXTENDED产生更多的输出信息。可以通过分析语句的语法树来查找问题所在。join优化hive做联结操作时，会先对前面的表缓存，然后扫描最后一张表。所以，联结的时候最好保证联结查询中的表的大小从左往右是依次增加的如果表中有一

杜小瑞·2023-08-15 05:43

Hive数据倾斜解决方法总结

当我们在执行HiveQL或者运行MapReduce作业时候，如果遇到一直卡在map100%,reduce99%一般就是遇到了数据倾斜的问题。

膝盖上拔下的箭·2023-08-11 07:57

Hive常见面试题

它提供了类似于SQL的查询语言（HiveQL），使用户能够使用SQL语句来查询和分析大规模存储在Hadoop集群上的数据。

Matthew117·2023-08-06 06:13

关于Hive的使用技巧

前言Hive是一个基于Hadoop的数据仓库基础架构，它提供了一种类SQL的查询语言，称为HiveQL，用于分析和处理大规模的结构化数据。

auspicious航·2023-08-03 10:07

大数据课程F1——HIve的概述

2.Hive提供了类SQL(HQL，HiveQL)语句来管理HDFS上的大量数据，底层会将SQL转化为MapReduce来交给Hadoop

伟雄·2023-08-02 09:36

用HiveQL计算连续天数问题的方法

昨晚服务器可能出了什么bug，文章发布出去都会变成完全空白。没办法，只能断更一天，放在今天发了，大概能达到十万字里程碑了吧。在日常工作中，可能经常会接到业务方类似这样的需求：统计今年每个用户最长连续签到的天数；统计最近一个月连续有回帖超过5天的话题；统计本季度中连续3天以上单日销量超过100的商品。这种“连续天数”问题看似简单，但实际上对思维能力和编写复杂SQL语句的能力要求比较高。下面以我们曾经

LittleMagic·2023-08-01 03:27

降龙十八掌

目录大数据：1HIVE：1.1HIVEQL1.1.1创建表1.1.2更新表1.1.3常用语句1.2hive参数配置大数据：1HIVE：1.1HIVEQLDDL中常用的命令有：create，drop，alter

DLoong+·2023-07-26 13:44

Hive

Hive提供了一个被称为Hive查询语言(简称HiveQL或HQL)的SQL方言，来查询存储在Hadoop集群中的数据。

什么都懂一点的小白·2023-07-26 11:16

编写HiveQL时遇到的小问题

MySQL在Linux下数据库名、表名、列名、别名大小写规则是这样的：1、数据库名与表名是严格区分大小写的；2、表的别名是严格区分大小写的；3、列名与列的别名在所有的情况下均是忽略大小写的；4、字段内容默认情况下是大小写不敏感的。查询时加入BINARY关键字可区分大小写但在Hive中，字符串严格区分大小写

敲代码的余文乐·2023-07-24 02:07

Hive 托管表、外部表和事务表

Hive允许你使用类似于SQL的查询语言（称为HiveQL）来分析存储在Hadoop集群上的数据。在Hive中，表是数据的逻辑组织单元，你可以通过创建和管理表来组织和操作数据。

贾斯汀玛尔斯·2023-07-19 10:37

hadoop --- hive

Hive是一个构建在Hadoop之上的数据仓库和分析工具，她提供了一种类SQL的查询语言--HiveQL，用于将结构化的查询SQL转换为MapReduce任务和Tez任务，通过Hadoop的分布式计算能力来执行查询任务

三水写代码·2023-07-16 01:52

Hive学习

Hive查询操作过程严格遵守HadoopMapReduce的作业执行模型，Hive将用户的HiveQL语句通过解释器转换为提交到Hadoop集群上，Had

明月清风，良宵美酒·2023-06-17 11:36

[Hive高级特性与 DDL和DML语法]

目录前言:HiveQL语言的基本语法，包括DDL和DML两个方面。

是汤圆丫·2023-06-17 09:37

Hive面试题十道

答案：Hive是一个基于Hadoop的数据仓库工具，它提供了类似SQL的查询语言（HiveQL）来进行大规模数据的分析和处理。

MIDSUMMER_yy·2023-06-15 13:31

hive怎么发音_Hadoop Hive概念学习系列之hive里的HiveQL——查询语言（十五）

Hive的操作与传统关系型数据库SQL操作十分类似。Hive主要支持以下几类操作：DDL1、DDL：数据定义语句，包括CREATE、ALTER、SHOW、DESCRIBE、DROP等。详细点，就是Hive支持大量SQL数据定义语言(DataDefinitionLanguage，DDL)中的现有功能，包括以下各种语句：CREATEDATABASE/SCHEMA,TABLE,VIEW,FUNCTION

小问题大学问·2023-06-15 11:18

Hive的概念

Hive概述Hive是一个基于Hadoop的数据仓库系统，它提供了类似与SQL的查询语言HiveQL,可以将结构化数据存储在Hadoop分布式文件系统中，并通过MapReduce进行过处理。

陆卿之·2023-06-15 11:15

Spark SQL数据源：Hive表

hive-site.xml三、准备工作（一）启动Hive的metastore（二）启动SparkShell四、Spark读写Hive数据（一）导入SparkSession（二）创建SparkSession对象（三）执行HiveQL

梁辰兴·2023-06-15 11:51

mysql到hive调度工具_Hive详解及实战_Zeus任务资源调度工具

并通过企业实际需求分析，讲解HiveQL中的DDL和DML的使用，以及常见的性能优化方案。

长野君·2023-06-09 19:03

1.Hive系列之简介

1.Hive简介1.1Hive是什么Hive是一个基于Hadoop的数据仓库工具，它提供了类似于SQL的查询语言HiveQL，以及用于将查询转换为MapReduce任务的引擎。

沈健_算法小生·2023-06-07 22:33

HiveQL快速上手

HiveQL一、CREATEStatements1、CREATEDATABASESyntaxExamples2、CREATETABLESyntaxExamples3、CREATEVIEWDescriptionSyntaxExamples4

qq_42603181·2023-04-21 10:04

hive学习笔记之二：复杂数据类型

blog_demos内容：所有原创文章分类汇总及配套源码，涉及Java、Docker、Kubernetes、DevOPS等；《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶HiveQL

程序员欣宸·2023-04-19 09:43

大数据组件——Hive简介及入门

Hive简介ApacheHive是基于Hadoop的一种数据仓库工具，可以提供类似于SQL的查询语言——HiveQL，用来从存储在分布式存储系统中的大规模数据集合中检索和分析数据。

'Wu'·2023-04-11 19:14

Hive的UDF编程-GenericUDF编程

UDF简介在Hive中，用户可以自定义一些函数，用于扩展HiveQL的功能，而这类函数叫做UDF（用户自定义函数）。UDF分为两大类：UDAF（用户自定义聚合函数）和UDTF（用户自定义表生成函数）。

ShiPF·2023-04-11 09:12

用AI找答案：hivesql中set可以设置哪些参数

hivesql中set可以设置哪些参数AI:在HiveQL中，SET命令可以用于设置以下参数：hive.execution.engine：指定Hive的执行引擎，包括MapReduce、Tez、Spark

Redamancy_06·2023-04-08 09:18

Spark---Spark连接Hive

包含Hive支持的SparkSQL可以支持Hive表访问、UDF(用户自定义函数)以及Hive查询语言(HiveQL/HQL)等。需

快跑呀长颈鹿·2023-04-07 11:30

三十一、《大数据项目实战之用户行为分析》Spark SQL与Hive整合

可以将Hive理解为一个客户端工具，其提供了一种类SQL查询语言，称为HiveQL。这使得Hive十分适合数据仓库的统计分析，

大数据张老师·2023-04-05 23:12

三十二、《大数据项目实战之用户行为分析》Spark SQL操作Hive的几种方式

1.SparkSQL终端操作SparkSQL终端启动后，可以直接使用HiveQL语句对Hive数据仓库进行操作。

大数据张老师·2023-04-05 23:12

hive表之简单窗口函数 over()

窗口函数通常是分析人员使用hiveql进行一些复杂逻辑计算时使用的特殊函数，其中over()通常与聚合函数共同使用，比如count()、sum()、min()、max()、avg()等。

飞不高的老鸟·2023-04-01 12:07

一个数据仓库时代开始--Hive

它提供了一种类SQL的查询语言HiveQL（HiveQueryL

隐峯·2023-03-28 17:37

CDH5.13.x文档翻译SQL Differences Between Impala and Hive

https://www.cloudera.com/documentation/enterprise/5-13-x/topics/impala_langref_unsupported.html#langref_hiveql_deltaImpala

gregocean·2023-03-24 07:10

Spark入门之六：SparkSQL实战

SchemaRDD可以通过RDD、Parquet文件、JSON文件、或者通过使用hiveql查询hive数据来建立。

铁猴·2023-03-23 22:05

Spark SQL之：概述及操作应用

RDD转换为DataFrame四、SparkSQL和数据库的应用一、SparkSQL概述了解Shark(1)从shark说起 shark即HiveOnSpark，为了实现与Hive的兼容，Shark在HiveQL

落落free·2023-03-15 08:47

Day 1314：架构师训练营作业（w12）

分析如下HiveQL，生成的MapReduce执行程序，map函数输入是什么？输出是什么，reduce函数输入是什么？输出是什么？

kafkaliu·2023-02-17 16:16

Kyuubi 解锁 Spark SQL on CDH 6

Spark3.0的重磅发布，在性能方面又迎来了一次飞跃，本文将描述把Spark3集成到CDH6.3.1(未开启Kerberos)的过程，并使用Kyuubi替换HiveServer2，实现OLAP、ETL等场景下从HiveQL

517001e7cb6e·2023-01-28 19:10

hive.groupby.skewindata=true注意点

和SQL一样，HiveQL中同样支持DISTINCT操作，如下示例：(1)SELECTcount(DISTINCTuid)FROMlog(2)SELECTip,count(DISTINCTuid)FROMlogGROUPBYip

清风686·2023-01-28 04:51

Hive/HiveQL常用优化方法全面总结

目录列裁剪和分区裁剪谓词下推sortby代替orderbygroupby代替distinctgroupby配置调整map端预聚合倾斜均衡配置项join基础优化buildtable（小表）前置多表join时key相同利用mapjoin特性分桶表mapjoin倾斜均衡配置项优化SQL处理join数据倾斜空值或无意义值单独处理倾斜key不同数据类型buildtable过大MapReduce优化调整map

首席撩妹指导官·2022-12-23 10:07

Hive/HiveQL常用优化方法全面总结（上篇）

对Hive的调优既包含对HiveQL语句本身的优化，也包含Hive配置项和MR方面的调整。由于在写的过程中发现篇幅过长，因此决定拆成上下两篇发布。上篇包含从开头到join优化的内容。

liu_weiliang10405·2022-12-23 10:06

Spark DataFrame和Dataset简介

Spark程序无缝混合，允许您使用SQL或DataFrameAPI对结构化数据进行查询；支持多种开发语言；支持多达上百种的外部数据源，包括Hive，Avro，Parquet，ORC，JSON和JDBC等；支持HiveQL

Cynicism_Kevin·2022-12-18 19:41

Hive实现词频统计（详细讲解）

Hive中提供了类似于SQL语言的查询语言——HiveQL，可以通过HiveQL语句快速实现简单的MapReduce统计，Hive自身可以将HiveQL语句快速转换成MapReduce任务进行运行，

青春是首不老歌丶·2022-12-16 00:42

Hive的安装与配置——第2关：Hive Shell入门基础命令

真题OK撒·2022-12-12 09:48

spark基本架构及原理

其他Spark的库都是构建在RDD和SparkCore之上的SparkSQL：提供通过ApacheHive的SQL变体Hive查询语言（HiveQL）与Spark进行交互的API。

一只哈士奇·2022-12-09 09:55

大数据开发之Hive篇3-Hive数据定义语言

2.1.1文章目录一.Hive关系模型概述1.1.Database1.2Table1.2.1管理表和外部表1.2.2永久表和临时表1.3Partition1.4Bucket二.数据定义语言(DDL)2.1HiveQL

只是甲·2022-11-29 16:23

Spark 操作 Hive

包含Hive支持的SparkSQL可以支持Hive表访问、UDF(用户自定义函数)以及Hive查询语言(HiveQL/HQL)等。需要强调的一点是，如果要在SparkSQL中包含Hive的

Alienware^·2022-11-20 10:45

Hive调优策略之架构优化

对Hive的调优既包含对HiveQL语句本身的优化，也包含Hive配置项和MR方面的调整。1、执行引擎Hive支持多种执行引擎，分别是MapReduce、Tez、Spark、Flink。可以

悠然予夏·2022-10-18 10:37

10 Hive调优策略

对Hive的调优既包含对HiveQL语句本身的优化，也包含Hive配置项和MR方面的调整。从以下三个方面展开:架构优化参数优化SQL优化10.1架构优化执行引擎Hive支持多

微毂·2022-10-18 10:36

Spark3.x入门到精通-阶段四(SparkSql详解&java&scala实战)