E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hiveql
Hive和Hbase的区别
它使用SQL-like语言
HiveQL
来查询和处理数据,数据通常是结构化或半结构化的。HBase:HBase是一个NoSQL数据库,基于Google的BigTable模型。
傲雪凌霜,松柏长青
·
2024-09-08 17:37
大数据
后端
hive
hbase
hadoop
hive学习笔记之五:分桶
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
程序员欣宸
·
2024-09-06 09:24
关于Apache Hive 和 Apache Iceberg
我们可以用大白话来比喻它们之间的关系:ApacheHive可以想象成一个“数据仓库超市”,它的货架上摆满了各种商品(数据),并且提供了一个购物车(
HiveQL
,一种类SQL语言),让你可以方便地从这些商品中挑选你想要的
[听得时光枕水眠]
·
2024-09-04 17:55
apache
hive
hadoop
hive学习笔记之九:基础UDF
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
程序员欣宸
·
2024-02-26 00:05
hive学习笔记之三:内部表和外部表
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
程序员欣宸
·
2024-02-19 22:05
Hive入门,Hive是什么?
Hive的本质是一个数据仓库基础设施,它提供了一种类似于SQL的查询语言,称为
HiveQL
,用于处理和分析存储在Hadoop集群中的数据。
JayGboy
·
2024-02-19 10:31
hive
hadoop
数据仓库
HiveQL
——不借助任何外表,产生连续数值
注:参考文章:HiveSql一天一个小技巧:如何不借助其他任何外表,产生连续数值_hive生成连续数字-CSDN博客文章浏览阅读1.3k次。0需求描述输出结果如下所示:12345...1001问题分析方法一:起始值(start)+步长(diff)=结束值(end)selectsplit(space(5),'')+----------------------+|_c0|+--------------
爱吃辣条byte
·
2024-02-10 21:44
#
HIve
SQL
大数据
数据仓库
Hive原理
它提供SQL类型语言查询叫
HiveQL
或HQL。它是熟知,快速,可扩展和可扩展的。Hive架构下面的组件图描绘了Hive的结构:该组件图包含不同的单元。
姚兴泉
·
2024-01-30 09:03
Hive-
HiveQL
练习题
目录环境行列互转题目列转行解决collect_list题目逆向行转列解决1lateralviewexplode编辑解决2数组下标取元素扩充数据题目扩充为连续整数解决笛卡尔积题目扩充为自身解决标记过滤展开数据题目展开字符串思路解决1交叉连接解决2lateralview炸裂函数环境Windows,VMware,Linux,hive-1.2.1行列互转题目列转行==>createtableab(aint
日月交辉
·
2024-01-27 23:48
HiveQL
sql
hive
Hive-
HiveQL
练习题-提取位置
文章目录提取位置题目提取1的位置解决字符串拆成数组题目成对提取解决1posexplode位置相等解决2数组下标解决3explode+排名+交叉连接提取位置题目提取1的位置createtableposition_1(avarchar(7)comment'含1的字符串')comment'1的位置';insertintoposition_1values('1011'),('0101');解决字符串拆成数
日月交辉
·
2024-01-27 23:48
HiveQL
hive
hadoop
数据仓库
Hive调优策略
对Hive的调优既包含对
HiveQL
语句本身的优化,也包含Hive配置项和MR方面的调整。从以下几个方面调优:1、架构调优2、参数调优3、SQL优化架构优化执行引
奋斗的蛐蛐
·
2024-01-26 23:24
大数据分析组件Hive-集合数据结构
它提供了一个类似于SQL的查询语言(称为
HiveQL
),允许用户以类似于关系型数据库的方式查询和分析存储在Hadoop集群中的数据。
Aimyon_36
·
2024-01-25 15:15
Hive
数据分析
hive
数据结构
Hive数学函数讲解
Hive是一个基于Hadoop的数据仓库工具,它支持类似于SQL的查询语言
HiveQL
,并且提供了许多内建的数学函数来处理数值数据。下面我将逐一讲解您提到的这些数学函数,并提供一些使用案例和注意事项。
田晖扬
·
2024-01-17 02:55
hive内置函数讲解
hive
hadoop
数据仓库
HiveQL
快速使用
hive命令包括Hivecli和
hiveQL
命令Hiveclicli就是命令行界面,可以通过cli创建表,检查模式和查询表。
Tim在路上
·
2024-01-15 02:31
Hive及各组件功能介绍
它提供了一种类似于SQL的查询语言,称为
HiveQL
,用于查询和分析存储在Hadoop中的大规模数据集。
思旭�
·
2024-01-13 12:32
hive
hadoop
数据仓库
实验二 :HIve数据定义操作实验
三、实验内容请参考《第5章
HiveQL
:数据定义》文档进行Hive数据库操作实验及Hive数据表操作实验,要有实验步骤与实验截图,实验内容与截图不能实验指导手册内容相同。实验报告雷同一律零分。
又是被bug折磨的一天
·
2024-01-13 04:55
hive
sql
大数据
Hive学习笔记(Hive数据的定义与操作)
Hive学习笔记(Hive数据的定义与操作)Hive数据定义与操作
HiveQL
数据定义语言创建数据库删除数据库创建表1.管理表外部表修改表删除表分区表静态分区动态分区
HiveQL
数据操作向管理表中装载数据经查询语句向表中插入数据单个查询语句中创建表并加载数据导入数据导出数据
ジ時光不老
·
2024-01-13 04:22
Hive学习
java
开发语言
后端
hive学习笔记之四:分区表
blog_demos内容:所有原创文章分类汇总及配套源码,涉及Java、Docker、Kubernetes、DevOPS等;《hive学习笔记》系列导航基本数据类型复杂数据类型内部表和外部表分区表分桶
HiveQL
程序员欣宸
·
2024-01-11 13:04
实验6 熟悉Hive的基本操作
(2)熟练使用常用的
HiveQL
。二、实验平台操作系统:Ubuntu18.04(或Ubuntu16.04);Hadoop版本:3.1.3;Hive版本:3.1.2;JDK版本:1.8。
Z.Q.Feng
·
2024-01-09 06:47
实验报告
大数据技术与原理
实验报告
hive
大数据
Hive元数据迁移及升级方案
Hive的架构和工作原理简介Hive是基于Hadoop之上的数仓,便于用户可以基于SQL(
HiveQL
)进行数据分析,其架构图如下:从上图可知,Hive主要用来将建立结构化数据库和后端分布式结构化文件的映射
云原生大数据
·
2024-01-07 22:49
大数据技术
hive
hadoop
数据仓库
HiveQL
或trino(presto):查询
工作中在用大数据,hive、impala、trino都有使用,使用hive和trino最多,整里了以下内容,有点长,看完,绝对有收获。提示:上面的代码是hive,下面的代码是trino,文字说明用的是hive。1、select...from语句:selectname,salaryfromhive.presto.employees;selecte.name,e.salaryfromhive.pres
三生暮雨渡瀟瀟
·
2024-01-03 11:14
SQL
presto
hive
big
data
sql
spark开发笔记(三、Spark SQL笔记)
SparkSQL在Hive兼容层面仅依赖
HiveQL
解析和Hive元数据,也就是说从HQL被解析成抽象语法树(AST)起,就全部由SparkSQL接管了。Spark
眼君
·
2023-12-27 22:27
大数据——技术生态体系
Hive构建在Hadoop之上,并提供了一种类似SQL的查询语言,被称为
HiveQL
(HiveQueryLanguage),用于处理和分析大规模数据。
Imrea
·
2023-12-26 01:56
大数据
hadoop
分布式
Hive-DDL详解(超详细)
文章目录前言
HiveQL
的数据定义语言(DDL)1.创建数据库2.切换到指定数据库3.创建表格(1)基本形式:(2)示例:4.查看表格结构5.删除数据库和表格(1)删除数据库:(2)删除数据表:总结前言本教程将介绍
大数据魔法师
·
2023-12-25 10:26
Hive之旅
hive
【Hadoop学习笔记】(二)——Hive的原理及使用
Hive数据仓库工具能为HDFS上的数据提供类似SQL的查询语言(
HiveQL
),并将SQL语句转变成MapReduce任务来执行。Hive明显降低了Hadoop的使用门槛,任何熟悉SQL的用
wanger61
·
2023-12-24 23:25
大数据开发
hadoop
hive
大数据
Hive-DML详解(超详细)
文章目录前言
HiveQL
的数据操作语言(DML)1.插入数据1.1直接插入固定值1.2插入查询结果2.更新数据3.删除数据3.1删除整个分区4.查询数据4.1基本查询4.2条件筛选4.3聚合函数总结前言本文将介绍
大数据魔法师
·
2023-12-23 22:38
Hive之旅
hive
【Hive】在博客系统中如何应用 Hive 进行离线数据管理
Hive是一个构建在Hadoop之上的数据仓库基础设施,它提供了类似SQL的查询语言
HiveQL
,使用户能够
小吴同学GOGOGO
·
2023-12-23 06:54
hive
数据仓库
大数据
hadoop
Hive-基础介绍
文章目录前言一、
HiveQL
介绍1.概述2.数据模型3.数据定义语言(DDL)(1)创建表(2)创建分区表(3)添加分区(4)删除表4.数据操作语言(DML)(1)插入数据(2)查询数据(3)更新数据(
大数据魔法师
·
2023-12-22 07:04
Hive之旅
hive
提升Hive效能:实用技巧与最佳实践
Vectorization管理和优化表结构动态分区(DynamicPartitioning)代码示例压缩数据(DataCompression)代码示例使用视图(Views)代码示例数据清理和维护代码示例
HiveQL
昊昊该干饭了
·
2023-12-22 07:33
大数据
hive
hadoop
数据仓库
Hive底层如何和数据库进行交互
hive支持类SQL的查询语言驱动器和编译器驱动器收到
HiveQL
之后会唤醒编译器,编译器将这个声明翻译成一个由Mapreduce组成的有向无环图的计划。
旅僧
·
2023-12-19 17:31
hive
数据库
hadoop
hive学习笔记之七:内置函数
本篇概览本文是《hive学习笔记》系列的第七篇,前文熟悉了
HiveQL
的常用vb.net教程语句,接下来把常用的内置函数简单过一遍,分为以下几部分:数学字符json处理转换日期条件聚合准备数据本次实战要准备两个表
chinaherolts2008
·
2023-11-17 06:17
java基础教程
大数据平台搭建之hive本地模式安装
Hive使用
HiveQL
(类似于SQL)作为查询语言,允许用户通过类SQL的语法编写查询语句,这些查询语句会被转换为MapReduce任务在Hadoop集群上执行。
bigdata从入门到放弃
·
2023-11-17 03:58
hive
大数据
hive
hadoop
linux
服务器
数据仓库
Hive建表语法和参数记录
Hive是一个基于Hadoop的数据仓库工具,可以将结构化数据映射到HDFS存储(建表对应在HDFS建了一个文件夹),并提供类SQL查询语言-
HiveQL
,Hive可以将HQL语句转换为MR任务执行。
Forge_ahead
·
2023-11-13 20:11
work_efficiency
Study
hive
hadoop
数据仓库
HiveQL
函数7—数据脱敏函数(Data Masking)
目录1.mask(stringstr[,stringupper[,stringlower[,stringnumber]]])2.mask_first_n(stringstr[,intn])3.mask_last_n(stringstr[,intn])4.mask_show_first_n(stringstr[,intn])5.mask_show_last_n(stringstr[,intn])6.
看得出的就是
·
2023-11-07 01:24
Hive
hive
Hive数据库实现分区表的创建及数据插入
Hive使用类似于SQL的查询语言——
HiveQL
,使得开发人员可以以类似于关系型数据库的方式进行数据分析和处理。本文将介绍如何在Hive数据库中创建分区表,并插入数据。
艾丽丝的爱情
·
2023-11-05 22:28
hive
数据库
hadoop
大数据
Spark SQL
RDD➢DataFrame➢DataSet1.SparkSQL特点➢易整合无缝的整合了SQL查询和Spark编程➢统一的数据访问使用相同的方式连接不同的数据源➢兼容Hive在已有的仓库上直接运行SQL或者
HiveQL
ytzhyp
·
2023-11-04 04:23
spark
sql
大数据
hive01
hive提供了
HiveQL
方言来查询存储在hadoop集群中的数据。h
流光丶
·
2023-10-24 06:51
大数据
Hive数据分析案例——汽车销售数据分析
使用
HiveQL
实现来实现,本数据为上牌汽车的销售数据,分为乘用车辆和商用车辆。数据包含销售相关数据与汽车具体参数。
lambda33
·
2023-10-20 06:20
Hadoop
数据分析
big
data
Hive编程指南
第1章基础知识前言Hive提供了一个被称为Hive查询语言(简称
HiveQL
或HQL)的SQL语言,来查询存储在Hadoop集群中的数据;Hive可以将大多数的查询转换为MapReduce任务;Hive
weixin_43177696
·
2023-10-20 06:04
大数据经典书籍笔记
hadoop
hive
数据仓库
Hive零基础从入门到实战 入门篇(二十一)
HiveQL
:数据插入
目录前言CREATETABLE表名ASSELECT……INSERT2.1无分区表插入数据2.2分区表插入数据2.2.1静态分区插入2.2.2动态分区插入2.2.3静态分区和动态分区混合使用前言我们在入门篇(十)中介绍了如何将文件中的数据导入一个表中。但实际工作中,更常用的数据插入操作是:将查询出的数据插入一个表中。实现这个操作有两种方法,1:使用CREATETABLE表名ASSELECT……语句;
zxc131405
·
2023-10-20 01:24
Hive篇面试题+详解
Hive是一个基于Hadoop的数据仓库工具,它提供了一个类SQL的查询语言(
HiveQL
)来查询和分析存储在Hadoop集群中的大规模数据。
Young_IT
·
2023-10-19 22:39
大数据开发
hadoop
hive
大数据
Hive用户中文使用手册系列(二)
它们可以在
HiveQL
脚本中使用,也可以直接在CLI或Beeline中使用。命令描述退出使用quit或exit退出交互式shell。
日复一日伐树的熊哥
·
2023-10-19 15:23
跟着熊哥学hive系列
hive
hadoop
数据仓库
大数据
【大数据】 Hive安装 【学习笔记】
Hive查询语言(
HiveQL
或HQL)用于MapReduce使用Hive处理结构化数据。什么是HiveHive是一个数据仓库基础设施工具,用于处理Hadoop中的结构化数据。
一个平凡de人
·
2023-10-16 06:31
大数据
hadoop
hive
大数据
大数据笔记--Hive(第一篇)
1、概述2、安装步骤3、Hive运行日志4、参数配置一、Hive1、概述Hive原本时有Facebook公司开发后来贡献给了Apache的一套用于进行数据仓库管理的机制Hive提供了类SQL(HQL,
HiveQL
是小先生
·
2023-10-12 05:02
大数据05-Hive
hive
big
data
hadoop
hive 优化
原文地址ApacheHive是一个类似SQL的软件,与Hadoop一起使用,使用户能够快速高效地使用自己的语言
HiveQL
执行类似SQL的查询。
熊_看不见
·
2023-10-08 05:56
SparkSQL DataFrame、Dataset和RDD
程序无缝混合,允许您使用SQL或DataFrameAPI对结构化数据进行查询;+支持多种开发语言;+支持多达上百种的外部数据源,包括Hive,Avro,Parquet,ORC,JSON和JDBC等;+支持
HiveQL
shangjg3
·
2023-10-07 08:22
计算引擎
Spark
spark
大数据
big
data
Hive的基本概念
简单理解我们可以将Hive理解为一个客户端工具,其提供了一种类SQL查询语言,称为
HiveQL
。这使得Hive十分适合数据仓库的统计分析,能够轻松使用
HiveQL
开启数据仓库任务,如提取/转换/加
乙腾
·
2023-10-01 05:13
七、Hive数据仓库应用之Hive优化(超详细步骤指导操作,WIN10,VMware Workstation 15.5 PRO,CentOS-6.7)
CentOS-6.7)文章目录一、Hive存储优化二、Hive参数优化1、配置MapReduce压缩2、配置Map个数3、配置reduce个数4、配置合并文件5、配置并行执行6、配置本地模式7、配置分组三、
HiveQL
七层楼的疯子
·
2023-09-28 19:52
Hive数据仓库应用
数据仓库
hive
hadoop
大数据
hdfs
Pig介绍和相对于Hive的优势
我们都知道pig和hive的作用是一致的都是为了简化mapReduce的编程而开发的,但是hive是过程化语言SQL,pig是数据流语言pigLatin.就工具的选择来说,
HiveQL
类似于SQL,不需要大量的学习
Tim在路上
·
2023-09-26 18:05
Sublime 3
HiveQL
语法高亮
按照https://packagecontrol.io/installation上的说明打开sublime的packagecontrol功能。在顶部导航栏里找到SublimeText-Preferences-PackageControl,输入InstallPackage,打开package安装页面。输入ApacheHive,找到hive-sublime-text,点击进行安装。Sublime右下角
Javalover93
·
2023-09-23 13:31
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他