E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hiveql
【HQL】
HiveQL
库和表的创建、修改、删除
今天继续学习
HiveQL
。
HiveQL
和MySQL接近,但也有差异。它不支持行级插入操作、更新操作、删除操作,不支持事务。关注公众号回复803获取《Hive编程指南》pdf。
和风与影
·
2022-07-29 19:22
Hive
大数据
hive
如何通俗地理解Hive的工作原理?
HiveQL
可以将结构化的数据文件映射为一张数据表,允许熟悉SQL的用户查询数据,也允许熟悉MapReduce的开发者开发自定义的mapper和reducer来处理内建的mapper和reducer无法完成的复杂的分析工作
Blue92120
·
2022-06-09 19:38
python
开发语言
Hadoop(四)C#连接Hive
HiveHive将
HiveQL
(类sql语言)转为MapReduce,完成数据的查询与分析,减少了编写MapReduce的复杂度。
chester·chen
·
2022-05-04 09:00
HiveQL
进阶之以柔克刚 - 将简单语法运用到极致
前言初衷如何高效地使用
HiveQL
,将
HiveQL
运用到极致。
·
2022-05-01 14:25
hive大数据sql
开发一个不需要重写成Hive QL的大数据SQL引擎
摘要:开发一款能支持标准数据库SQL的大数据仓库引擎,让那些在Oracle上运行良好的SQL可以直接运行在Hadoop上,而不需要重写成
HiveQL
。
华为云开发者社区
·
2022-04-29 11:00
Hive 简介
自然具有相同优点)2.Hive与传统数仓传统数仓:既是数据存储产品又是数据处理分析产品(同时支持数据的存储与处理分析)Hive:本身并不支持数据的存储与处理分析(一个面向用户的编程接口,提供一种编程语言,通过该语言
HiveQL
Doooooing
·
2022-04-24 15:10
学习笔记
python用户画像_python用户画像
在本案例的开发工作中,基于spark计算引擎,主要涉及的语言包括
hiveql
、python、scala、shell等。1.
weixin_39843151
·
2022-04-07 07:44
python用户画像
Hive全解
文章目录一.Hive基本介绍1.基本名词解释2.hive概述3.hive可以做什么以及适用场景a不适合:b适合:4.hive特点5.hive安装与配置二.
Hiveql
与Hive基础指令1.基础指令2.join
Sunny_god
·
2022-02-23 12:28
Hive
大数据之hive安装和配置
hive正是实现了这个,hive是要类SQL语句(
HiveQL
)来实现对hadoop下的数据管理MySQL安装官网下载mysql-server(yum安装)wgethttp://dev.mysql.co
ohoy
·
2022-02-05 12:23
大数据
大数据
Spark综合学习笔记(二十二)SparkSQL实战4-花式查询
Spark5QL模块中,将结构化数据封装到DataFrame或Dataset集合中后,提供了两种方式分析处理数据:1、SQL编程,将DataFrame/Dataset注册为临时视图或表,编写SQL语句,类似
HiveQL
斯特凡今天也很帅
·
2021-11-29 14:21
大数据
spark
scala
spark
big
data
scala
SparkSQL数据源之Hive数据库
包含Hive支持的SparkSQL可以支持Hive表访问、UDF(用户自定义函数)以及Hive查询语言(
HiveQL
/HQL)等。
大数据小同学
·
2021-06-09 08:06
一定要弄懂的Hive基础知识
Hive是基于Hadoop的数据仓库工具,可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理,提供了类似于SQL语言的查询语言–
HiveQL
,可通过HQL语句实现简单的MR统计,Hive
丨程序之道丨
·
2021-06-06 04:50
HiveQL
数据定义:数据库创建和删除
CREATEDATABASE语句CREATEDATABASE|SCHEMA[IFNOTEXISTS]IFNOTEXISTS是一个可选子句,通知用户已经存在相同名称的数据库。可以使用SCHEMA在DATABASE的这个命令。下面的查询执行创建一个名为userdb数据库:hive>CREATEDATABASE[IFNOTEXISTS]userdb;或hive>CREATESCHEMAuserdb;下面
无敌的肉包
·
2021-05-01 15:47
hive学习笔记之七:内置函数
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-30 11:43
云计算
hive学习笔记之六:
HiveQL
基础
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-25 11:52
云计算
hive学习笔记之五:分桶
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-24 15:56
云计算
hive学习笔记之四:分区表
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-23 13:15
云计算
hive学习笔记之三:内部表和外部表
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-22 14:29
云计算
Hive-常见调优方式 && 两个面试sql
对Hive的调优既包含对
HiveQL
语句本身的优化,也包含Hive配置项和MR方面的调整。从以下三个方面展开:架构优化参数优化SQL优化1.架构方面执行引擎方面针对公司内平台的资源,选择更合
·
2021-03-19 22:13
大数据
hive学习笔记之二:复杂数据类型
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-11 19:48
云计算
hive学习笔记之一:基本数据类型
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
·
2021-03-10 21:52
云计算
hive中groupby优化_HiveSQL常用优化方法全面总结
对Hive的调优既包含对
HiveQL
语句本身的优化,也包含Hive配置项和MR方面的调整。列裁剪和分区裁剪最基本的操作。所谓列裁剪就是在查询时只读取需要的列,分区裁剪就是只读取需要的分区。
周天无极
·
2020-12-31 05:16
hive中groupby优化
hive中groupby优化_HiveSQL常用优化方法
对Hive的调优既包含对
HiveQL
语句本身的优化,也包含Hive配置项和MR方面的调整。列裁剪和分区裁剪最基本的操作。所谓列裁剪就是在查询时只读取需要的列,分区裁剪就是只读取需要的分区。
工业狂魔
·
2020-12-28 01:59
hive中groupby优化
Hive架构原理与实战——apache-hive-3.1.2+Mysql部署与配置
它提供SQL类型语言查询叫
HiveQL
或HQL。它是熟知,快速,可扩展和可扩展的。Hive架构下面的组件图描绘了
codenow.fun
·
2020-09-23 23:30
大数据
Hive
HiveQL
之数据类型和存储格式
目录一、数据类型1、基本数据类型2、复杂类型二、存储格式(1)textfile(2)SequenceFile(3)RCFile(4)ORCFile(5)Parquet三、数据格式正文回到顶部一、数据类型1、基本数据类型Hive支持关系型数据中大多数基本数据类型类型描述示例booleantrue/falseTRUEtinyint1字节的有符号整数-128~1271Ysmallint2个字节的有符号整
*MuYu*
·
2020-09-16 23:54
HIVE
大数据知识点—spark概念,核心架构,运行流程
其他Spark的库都是构建在RDD和SparkCore之上的SparkSQL提供通过ApacheHive的SQL变体Hive查询语言(
HiveQL
)
BAO7988
·
2020-09-16 10:45
大数据
大数据
spark
HIVE使用指南
HIveQL
的使用知识点框架如导图,先看知识导图再详细深入知识点,会对HQL的使用和理解有帮助。一、执行HIVE查询#用法hive-f/home/test
Just Jump
·
2020-09-16 05:38
hive使用
hive使用
Hive基本操作,使用API通过JDBC连接访问
1.Hive基本操作:建库、建表、查询Hive提供了一个被称为Hive查询语言(简称
HiveQL
或是HQL)的SQL方言,其语法基本与MySql一致,比较容易上手,因为大多数的开发工程师对MySql很熟悉
xiaoyaGrace
·
2020-09-16 04:19
Nifi Processor | PutHiveQL
传入的FlowFile的内容应该是要执行的
HiveQL
命令。
HiveQL
命令可能会使用?逃避参数。
野狼e族
·
2020-09-16 03:50
Nifi
大数据
HiveQL
迁移至Spark SQL入门示例(PySpark版)
目录一、示例
HiveQL
二、迁移至Pyspark三、Linux执行命令四、查看报错的方式五、执行脚本时遇到【XXXnotfound】报错的处理方式(配置hive-site.xml)六、其他希望读者了解到的面向群体
蓝天之猪
·
2020-09-15 16:39
大数据
Spark
Hive
Pyspark
Hive-2.
HiveQL
查询中常用函数
1.SELECT....FROM语句1、创建表CREATEEXTERNALTABLEemployees(IDSTRING,nameSTRING,AGEINT,BIRTHDAYDATE,subordinatesARRAY,scoreMAP,addressSTRUCT)ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\t'COLLECTIONITEMSTERMINATEDBY
福利2020
·
2020-09-14 23:43
分布式数据计算技术
数仓应用工具Hive:从底层设计窥见其优化策略
Hive可以自动将
HiveQL
语句转换成一系列成MapReduce作业并执行,二不再需要程序员手动编写MR任务(SQL如何转化为MapRed
qingdsj
·
2020-09-14 21:09
大数据
人工智能
互联网
hive
大数据
大数据开发
大数据分析
大数据学习
Hive安装
一、简介hive是用类SQL语句(
HiveQL
)来实现对hadoop下的数据管理。
码农道路深似海
·
2020-09-14 07:58
Hadoop
hive
mysql
Hive_5. Hive QL -- Hive 查询优化
HiveQL
查询_1(翻译于《ProgramingHive》):http://flyingdutchman.iteye.com/blog/1869472
HiveQL
查询_2(翻译于《ProgramingHive
Mike_H
·
2020-09-13 11:12
Hive
SemanticException Column xx Found in more than One Tables/Subqueries
SemanticExceptionColumnxxFoundinmorethanOneTables/Subqueries执行
hiveql
时报错:SemanticExceptionColumnxxFoundinmorethanOneTables
哪有天生的学霸,一切都是厚积薄发
·
2020-09-12 06:05
Hive
大数据下的Distinct Count(一):序
例如,查看一周内app的用户分布情况,Hive中写
HiveQL
实现:selectapp,count
小狼_百度
·
2020-09-11 11:39
过滤去重
spark
hive
Kettle构建Hadoop ETL实践(三):Kettle对Hadoop的支持
Hive3.连接Impala4.建立MySQL数据库连接三、导入导出Hadoop集群数据1.向HDFS导入数据2.向Hive导入数据3.从HDFS抽取数据到MySQL4.从Hive抽取数据到MySQL四、执行
HiveQL
wzy0623
·
2020-09-11 06:37
Pentaho
Work
with
Big
Data
Spark SQL与Hive On MapReduce速度比较
今天就拿基于Spark的SparkSQL和基于MR的Hive比较一下,因为SparkSQL也兼容了
HiveQL
,我们就可以通过运行相同的
HiveQL
语句,比较直观的看出到底快多少了。
mishidemudong
·
2020-09-11 04:51
SPARK
【Hive】Hive编程指南(Part 2)
第五章
HiveQL
:数据操作向管理表中装载数据LOADDATALOCALINPATH'${env:HOME}/california-employees'OVERWRITEINTOTABLEemployeesPARTITION
玉衡瑶光
·
2020-08-25 17:32
合抱之木生于毫末
hive
mapreduce
hadoop
数据库
MySQL
大数据——Hive(数据仓库工具)
Hive提供类似SQL的
HiveQL
的数据处理功能,Hive将
HiveQL
语句转换成MapReduce程序交给Hadoop集群处理。为什么要用Hive?M
小生浩浩
·
2020-08-25 06:51
大数据
详解Hive-CliDriver续——细读Hive源码(三)
在进入executeDriver之前,我们可以认为Hive处理的是用户进入Hive程序的指令,到此用户已经进入了Hive,Cli的Driver将不断读取用户的
HiveQL
语句并解析,提交给Driver。
wotkk
·
2020-08-24 18:04
linux
Hive的原理—— 深入浅出学Hive
将转换为多少道MR作业•怎么样加快Hive的执行速度•编写HiveHQL的时候我们可以做什么•Hive怎么将HQL转换为MR作业•Hive会采用什么样的优化方式Hive架构&执行流程Hive执行流程•编译器将一个
HiveQL
快乐程序员
·
2020-08-24 14:41
hive
HiveQL
执行过程
参考之前的博客:https://blog.csdn.net/liweihope/article/details/89740863Hive是基于hadoop的数据仓库工具,可以将结构化的数据文件映射成一张数据表,并且提供SQL查询。讲SQL语句转换成MapReduce任务进行运行,实现简单的MapReduce统计,不必开发专门的MapReduce程序。hive的设计是为了减轻MapReduce的开发
liweihope
·
2020-08-24 01:30
Hive
解析Hive复杂字段2--UDF
HiveUDF在Hive中,用户可以自定义一些函数,用于扩展
HiveQL
的功能,而这类函数叫做UDF(用户自定义函数)。UDF分为两大类:UDAF(用户自定义聚合函数)
风筝flying
·
2020-08-23 17:57
Linkis 0.9.2 版本发布
是微众银行自研的一个打通了多个计算存储引擎如:Spark、TiSpark、Hive、Python和HBase等,对外提供统一REST/WebSocket/JDBC接口,提交执行SQL、Pyspark、
HiveQL
伊豚
·
2020-08-23 10:47
Linkis
20190727-Hive环境搭建
Hive可以在HDFS上构建数据仓库存储结构化数据,这些数据来源就是hdfs上,hive提供了一个类似sql的查询语言
HiveQL
来进行查询、变换数据等操作。当然Hi
陈海军_cad0
·
2020-08-23 06:30
SparkSQL数据源之Hive数据库
包含Hive支持的SparkSQL可以支持Hive表访问、UDF(用户自定义函数)以及Hive查询语言(
HiveQL
/HQL)等。
大数据小同学
·
2020-08-23 03:49
#
SparkSql
数据库
hive
hadoop
java
大数据
sparkSQL1.1入门之六:sparkSQL之基础应用
SchemaRDD可以通过RDD、Parquet文件、JSON文件、或者通过使用
hiveql
查询hive数据来建立。
mmicky20110730
·
2020-08-22 21:06
spark1.1.0
spark学习路线
elasticsearch 与 hive集成
hive是一个基于hdfs的数据仓库,方便使用者可以通过一种类sql(
HiveQL
)的语言对hdfs上面的打数据进行访问,通过elasticsearch与hive的结合来实现对hdfs上面的数据实时访问的效果
rolin-刘瑞
·
2020-08-20 14:40
hive
elasticsearch 与 hive集成
hive是一个基于hdfs的数据仓库,方便使用者可以通过一种类sql(
HiveQL
)的语言对hdfs上面的打数据进行访问,通过elasticsearch与hive的结合来实现对hdfs上面的数据实时访问的效果
JokerCao
·
2020-08-20 14:01
hive
elasticserch
Hadoop
hive
elasticsearch
数据仓库
实时搜索
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他