HiveQL

HiveQL的DDL操作（一）——创建、查询、修改、删除数据库

版权声明：本文为博主原创文章，未经博主允许不得转载。https://blog.csdn.net/wx1528159409目录一、创建数据库二、查询数据库2.1显示所有数据库（showdatabases）2.2模糊查询数据库（showdatabaseslike'*'）2.3显示数据库信息（descdatabase）2.4显示数据库详细信息（descdatabaseextended）2.5切换当前数据
攻城狮Kevin·2020-07-29 00:24

大数据项目测试项目的测试工作

0.功能测试1.性能测试2.自动化测试3.文档评审4.脚本开发一、后台数据处理端后端的测试重点，主要集中在数据的采集处理、标签计算效率、异常数据排查（功能），测试脚本编写（HiveQL）、自动化脚本编写
weixin_30642029·2020-07-28 16:25

大数据-第07章 hive 结构原理图

执行流程：①客户编写hiveQL语句，并发送与hive服务器Driver②根据语句在数据源里面查找元数据③根据语句进行解释、编译、优化并发送与hadoop（1）将hiveQL语句先转换为抽象语法树（2）
lkk_123456·2020-07-28 02:55

Hive Index

用户可以使用EXPLAIN语法来分析HiveQL语句是否可以使
a280966503·2020-07-27 18:02

Spark SQL简介

从Shark说起Shark即HiveonSpark，为了实现与Hive兼容，Shark在HiveQL方面重用了Hive中的HiveQL解析、逻辑执行计划翻
tracy_668·2020-07-27 09:33

[hive] hiveql 基础操作

1.显示当前的数据库信息直接修改hive.site.xml，永久显示2.建表，模糊显示表信息droptable表名称；--删除表showtables;--显示所有表showtableslike"*u*";---模糊匹配表信息createtable；---语法和mysql相似，创建表describe表名字；desc表名字；--查看表结构3.修改表名字altertable表名字renameto新表名。
a84480766·2020-07-15 19:08

HiveQL：数据定义

–查看数据库sshowdatabases;–创建数据库createdatabasehuman_resources;–查找开头为h的所有数据库showdatabaselike'h.*';–创建数据库，并指定位置createdatabasefinancialslocation'my/dir'–创建数据库。并添加说明createdatabasefinancialscomment'Holdsallfina
hxhh·2020-07-15 14:44

Spark SQL入门基础

SparkSQL简介###从Shark说起Shark即hiveonSpark,为了实现与Hive兼容，Shark在HiveQL方面重用了Hive中HiveQL的解析、逻辑执行计划、翻译执行计划优化等逻辑
zxc123e·2020-07-15 13:36

Impala和Hive之间的SQL差异

HiveQL功能在Im
xu704928452·2020-07-15 10:22

HiveQL常用查询函数——nvl、case when、concat、collect_set、collect_list、explode & lateral view、窗口函数、rank

目录1.nvl（value，default_value）2.casewheneg1：对表emp_sex，求每个部门男女人数eg2：统计每个国家隶属洲的人口数（已知字段数据按照另一种条件分组）eg3：统计不同国家男女个数（完成不同条件的分组）3.concat、concat_ws、collect_set（列转行）4.explode&lateralview（行转列）5.窗口函数（聚合函数+窗口函数，指定
攻城狮Kevin·2020-07-15 09:17

HiveQL常用查询语句where、group by、having、join子句记录

由于hivesql中查询语句时，常用查询条件比较多，所以专门写一篇博文对HiveQL的查询语句进行总结，理清联系和区别。
攻城狮Kevin·2020-07-15 09:17

Hive数据倾斜解决方法总结

当我们在执行HiveQL或者运行MapReduce作业时候，如果遇到一直卡在map100%,reduce99%一般就是遇到了数据倾斜的问题。
weixin_30417487·2020-07-15 03:58

【Hive】07-HiveQL：视图

视图可以允许保存一个查询并像对待表一样对这个查询进行操作。这是一个逻辑结构，因为它不像一个表会存储数据。换句话说，Hive目前暂不支持物化视图。当一个查询引用一个视图时，这个视图所定义的查询语句将和用户的查询语句组合在一起，然后供Hive制定查询计划。从逻辑上讲，可以想象为Hive先执行这个视图，然后使用这个结果进行余下后续的查询。1、使用视图来降低查询复杂度当查询变得长或复杂的时候，通过使用视图
一直不懂·2020-07-14 22:35

nohup 命令 - 将程序以忽略挂起信号的方式运行起来

使用场景：一般我们都会使用XShell等终端模拟软件连接Linux服务器，但是在运行比较长时间的脚本（特别是一些HiveQL脚本）的时候，往往都要跑上个把小时甚至更长，这期间如果关闭终端窗口，运行的进程就会被杀死
qiongjingzhuan5515·2020-07-14 16:20

Hive取非Group by字段数据的方法

执行以下hiveql语句：SELECTsid,class_idFROMtable2GROUPBYsid;123456SELECTsid,class_idFROMtable2GROUPBYsid;会报错：
蚂蚁学Python·2020-07-14 16:15

Hive 用户自定义函数(UDF)

用户自定义函数UDF一、定义二、解释三、实例3.1导入相应的包3.2编写代码3.3打包3.4上传jar、编译、打包成jar包并添加到Hive中四、验证一、定义在Hive中，用户可以自定义一些函数用于扩展HiveQL
Double_Road·2020-07-14 15:58

Hive/HiveQL常用优化方法全面总结（下篇）

本文接上篇（https://www.jianshu.com/p/8e2f2f0d4b6c）继续讲解Hive/HiveQL常用优化方法，按照目录，会从“优化SQL处理join数据倾斜”说起。
LittleMagic·2020-07-14 06:06

hive自定义函数（UDF）

概述用户自定义函数(UDF)是一个允许用户扩展HiveQL的强大的功能。
冰上浮云·2020-07-14 01:55

Hive 表数据 加载 、导出 、查询

hadoop,spark,kafka交流群：2242095011）使用load方式加载数据到Hive表中，注意分区加载数据的特殊性2）如何保存HiveQL查询结果：保存到表中，保存到本地文件（注意指定列分隔符
正义飞·2020-07-13 15:44

基于Hadoop的数据仓库Hive 基础知识

基于Hadoop的数据仓库Hive基础知识Hive是基于Hadoop的数据仓库工具，可对存储在HDFS上的文件中的数据集进行数据整理、特殊查询和分析处理，提供了类似于SQL语言的查询语言–HiveQL，
white先生·2020-07-13 10:00

Hive——用户自定义函数(UDF)

Hive——用户自定义函数(UDF)  用户自定义函数(UDF)是一个允许用户扩展HiveQL的强大的功能。
universe_ant·2020-07-12 04:19

第二十四记·Spark SQL配置及使用

SparkSQL还支持HiveQL语法以及HiveSerDes和
一尺月光寒·2020-07-12 04:15

HiveQL查询操作全解(一):基础

1、SELECT....FROM语句SELECT是SQL中的射影算子。FROM标识了从哪个表，视图或者嵌套查询中选择记录。我们使用如下的表结构CREATETABLEIFNOTEXISTemployees(nameSTRING,salaryFLOAT,subordinatesARRAY,deductionsMAP,addressSTRUCT)PARTITIONEDBY(countrySTRING,s
文哥的学习日记·2020-07-12 01:16

hive安装步骤&踩过的坑,hive启动&HiveQL基本用法

1启动hive出现ls:无法访问’/usr/local/spark/lib/spark-assembly-.jar’:没有那个文件或目录解决:修改//bin/hive文件，将加载原来的lib/spark-assembly-.jar替换成jars/*.jar，就不会出现这样的问题。hive使用MySQL作为元数据2mysql安装的简单方法安装过程中直接设置用户和密码sudoapt-getupdate
sun eclipse·2020-07-11 20:05

大数据手册(Hive)--HiveQL

文章目录Hive交互Hive内置运算符Hive数据类型Hive的数据存储HiveQL常用语句创建/删除数据库创建/删除表修改表结构导入导出数据插入数据查询语句表连接表联合其他常用命令Hive常用内置函数
WilenWu·2020-07-11 20:00

Hive从入门到放弃——HiveQL数据库级别DDL设计的艺术性（四）

HiveQL  HiveQL是Hive的查询语言，和其他SQL方言一样，源于ANSISQL标准修订版，却又有自己独特的属性，语法上HiveQL和MySQL很接近，但也是有差异的，接下来我们就聊聊HiveQL
╭⌒若隐_RowYet·2020-07-10 22:33

Hive数据仓库--HiveQL查询

转载请注明出处：Hive数据仓库--HiveQL查询这里是之前的文章中操作的表的信息，并且，我们简单的查询下，你可以看到他的部分数据。hive>showtables;OKsalari
低调的洋仔·2020-07-10 05:16

Hive join操作小结

本篇对HiveQL中join、leftouterjoin、leftsemijoin和fullouterjoin等表连结操作作一简要总结。
Chungtow-Leo·2020-07-09 02:42

UltraEdit个性化定制-Hive QL代码折叠、函数列表及自动补全

本文旨在帮助你个性化配置UE，以便在写HiveQL代码时能够更高效舒畅。具体而言，实现以下目的：*对HiveQL代码实现折叠，效果如图1。
Chungtow-Leo·2020-07-09 02:42

整个阿里大数据工程师都在用的一份Hive实战文档

前言本书是一本ApacheHive的编程指南，旨在介绍如何使用Hive的SQL方法--HiveQL来汇总、查询和分析存储在Hadoop分布式文件系统上的大数据集合。
xinxindsj·2020-07-09 02:58

hive性能调优

1、内部表和外部表的区别创建函数的区别删除外部表元数据不删除，删除内部表表和元数据一起删除如果想实现数据的安全性和共享性，就使用外部表2、hive优化hiveQL数据查询语言：利用分区表优化利用桶优化join
且听夏吟·2020-07-08 20:39

Spark SQL概述

转换成抽象语法树将抽象语法树转换成查询块将查询块转换成逻辑查询计划重写逻辑查询计划将逻辑查询计划转成物理计划选择最佳的优化查询策略输出Shark：即HiveonSpark，为了实现与Hive兼容，Shark在HiveQL
夕阳惜夏·2020-07-08 19:52

使用MapReduce实现join操作

在hdfs存储的海量数据中，要实现join操作，可以通过HiveQL很方便地实现。
weixin_34245749·2020-07-08 17:29

hadoop（HDFS、MapReduce）

hadoop三大核心组件：1、HDFS：分布式存储系统（实时key-value查询hbase、HiveQL离线统计分析hive都是基于此开发的技术）2、MapReduce：分布式计算系统3、YARN：hadoop
Leonarde_WP·2020-07-08 12:51

【Hive】06-HiveQL：查询

1、SELECTFROM语句1.1、使用正则表达式来指定列我们甚至可以使用正则表达式来选择我们想要的列。下面的查询将会从表stocks中选择symbol列和所有列名以price作为前缀的列：SELECTsymbol,`price.*` FROMstocks;1.2、使用列值进行计算用户不但可以选择表中的列，还可以使用函数调用和算术表达式来操作列值。例如，我们可以查询得到转换为大写的雇员姓名、雇员对
一直不懂·2020-07-08 05:23

Hadoop数据分析平台实战——110Hive介绍和Hive环境搭建

Hive可以在HDFS上构建数据仓库存储结构化数据，这些数据来源就是hdfs上，hive提供了一个类似sql的查询语言HiveQL来进行查询、变换数据等操作。当然Hi
Albert陈凯·2020-07-08 03:36

全面了解hive

驱动（Driver）－控制HiveQL生命周期的组件，当HiveQL查询穿过Hive时。该驱动管理着会话句柄以及任何会话的统计。查询编译器（Que
JIAOSHOUJIE·2020-07-06 22:48

Kettle与Hadoop（六）执行HiveQL语句

1.建立hive表，导入原始数据，过程参考https://blog.csdn.net/wzy0623/article/details/106471124#2.%20%E5%90%91Hive%E5%AF%BC%E5%85%A5%E6%95%B0%E6%8D%AE。2.建立一个作业，查询hive表，并将聚合数据写入一个hive表。（1）打开PDI，新建一个作业，如图1所示。图1（2）编辑'SQL'作
wzy0623·2020-07-06 08:50

在Linux 中安装hive数据仓库

hive正是实现了这个，hive是要类SQL语句（HiveQL）来实现对hadoop下的数据管理。
Jianghesong_37595559·2020-07-06 01:59

使用MapReduce实现join操作

在hdfs存储的海量数据中，要实现join操作，可以通过HiveQL很方便地实现。
weixin_34162695·2020-07-06 00:48

Spark SQL

它可以从原有的RDD创建，也可以是Parquet文件，最重要的是它可以支持用HiveQL从hive里面读取数据。下面是一些案例，可以在Sparkshell当
weixin_34124939·2020-07-06 00:08

hive group报错

开发时假如有如下情景的需求，需要按id分组，但是每个id的经纬度都是一样的，如果HiveQL语句这么写：SELECTid,latitude,longitudeFROMt_poiGROUPBYid;则会报错
BYY0105·2020-07-05 17:22

hive初探

HiveHive构成原理服务端组件：Driver组件：该组件包括Complier、Optimizer和Executor，它的作用是将我们写的HiveQL（类SQL）语句进行解析、编译优化，生成执行计划，
CaspianR·2020-07-05 10:42

HiveQL DQL3—JOIN

目录概述隐式join表示法（Implicitjoinnotation）非限定列引用（Unqualifiedcolumnreference）ON子句支持复杂表达式（ComplexexpressionsinONclause）INNERJOINOUTERJOIN特殊的joinMapJoinBucketMapJoinLEFTSEMIJOIN参考概述JOIN用于将两个或多个表中的行链接在一起。Hive支持大
看得出的就是·2020-07-04 04:58

Kafka connect HDFS

HDFSconnector允许以各种格式将Kafkatopic中的数据导出到HDFS文件中，并与Hive集成，使数据可以被HiveQL查询。
阿猫阿狗Hakuna·2020-07-02 10:38

大数据-数据仓库-Hive应用

它提供类似sql的查询语句HiveQL对数据进行分析处理，Hive将HiveQL语句转换成一系列MapReduce作业并执行。
ckSpark·2020-07-01 12:27

spark从入门到放弃三十二:Spark Sql(5)hive sql 简述

操作Hive中的数据时，可以创建HiveContext,而不是SqlContext.HiveContext继承自SqlContext,但是增加了在Hive元数据库中查找表，以及用HiveQl语法编写sql
意浅离殇·2020-06-30 22:00

Hive和Spark究竟是凭借什么优势而大获成功?

数据操作可以使用名为HiveQL的
wzyzzu·2020-06-29 23:03

Hive特点

与此同时，Hive针对HiveQL到MapReduce的翻译进行了大量的优化，从而保证了生成的MapReduce任务是高效的。在实际应用中，Hive可以高效的对TB甚至PB级的数据进行处理
Winyar Wen·2020-06-29 04:13

HIVE 函数分类 （udf、udaf、udtf）

注释：在Hive中，用户可以自定义一些函数，用于扩展HiveQL的功能，而这类函数叫做UDF（用户自定义函数）。UDF分为两大类：UDAF（用户自定义聚合函数）和UDTF（用户自定义表生成函数）。
HFDYCYY·2020-06-29 03:58
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他