E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hive函数
Hive UDF函数开发及企业规范
开发步骤UDF简称自定义函数,它是
Hive函数
库的扩展,自定义函数UDF在MapReduce执行阶段发挥作用。开发步骤如下:1)给hive.ql.exec.UDF包开发一个自定义函数类,从UDF继承。
大数据研习社
·
2016-12-30 16:36
Hadoop
Hive函数
编程-逻辑运算
三、逻辑运算:101.逻辑与操作:AND102.逻辑或操作:OR103.逻辑非操作:NOT10三、逻辑运算:1.逻辑与操作:AND语法:AANDB操作类型:boolean说明:如果A和B均为TRUE,则为TRUE;否则为FALSE。如果A为NULL或B为NULL,则为NULL举例:hive>select1fromlxw_dualwhere1=1and2=2;12.逻辑或操作:OR语法:AORB操作
data_heng
·
2016-12-13 12:26
Hadoop
Hive
hive的统计函数
hive函数
—-集合统计函数集合统计函数1.个数统计函数:count语法:count(*),count(expr),count(DISTINCTexpr[,expr_.])返回值:int说明:count
风行者之倾覆天下
·
2016-09-26 11:46
hive
hive
hive函数
实例
1.and和or的优先级and优先级大于orroot@ubuntu:~#catwindfunc1001100.0ABC1001150.0BCD1001200.0CDE1001150.0DEF1002200.0ABC1002200.0ABC1002100.0BCD1002300.0CDE100250.0DEF1002400.0EFG1003100.0ABC100350.0BCD100460.0ABC
CrazyL-
·
2016-08-22 22:08
#
hive
hive函数
内置函数:简单函数,聚合函数,集合函数,特殊函数自定义函数:UDF(map阶段),UDAF(reduce阶段)cli命令showfunctions;descfunctionconcat(函数名字);函数的描述信息hive>descfunctionconcat;OKconcat(str1,str2,...strN)-returnstheconcatenationofstr1,str2,...strN
CrazyL-
·
2016-08-22 21:30
#
hive
hive -
Hive函数
大全
一、关系运算:1.等值比较:=语法:A=B操作类型:所有基本类型描述:如果表达式A与表达式B相等,则为TRUE;否则为FALSE举例:hive>select1fromlxw_dualwhere1=1;12.不等值比较:B操作类型:所有基本类型描述:如果表达式A为NULL,或者表达式B为NULL,返回NULL;如果表达式A与表达式B不相等,则为TRUE;否则为FALSE举例:hive>select1
小丁丁_ddxdd
·
2016-08-12 23:28
技术层-hive
Hive函数
2.0
Hive内部提供了很多函数给开发者使用,包括数学函数,类型转换函数,条件函数,字符函数,聚合函数,表生成函数等等,这些函数都统称为内置函数。目录数学函数集合函数类型转换函数日期函数条件函数字符函数聚合函数表生成函数数学函数ReturnTypeName(Signature)DescriptionDOUBLEround(DOUBLEa)ReturnstheroundedBIGINTvalueofa.返
mtj66
·
2016-08-07 17:52
hive函数
大全
一、关系运算:1. 等值比较:= 语法:A=B 操作类型:所有基本类型 描述:如果表达式A与表达式B相等,则为TRUE;否则为FALSE 举例: hive>select1fromlxw_dualwhere1=1; 12. 不等值比较:B操作类型:所有基本类型描述:如果表达式A为NULL,或者表达式B为N
Bryan__
·
2016-08-02 12:00
hive函数
永久自定义
hive函数
永久自定义
hive函数
1:做这件事的原因:有一些函数是比较基础的,公用的,每次都要create temporary function麻烦了,这样的基础函数需要直接集成到hive中去,避免每次都要创建。
八戒_o
·
2016-04-26 09:00
永久自定义hive函数
hive函数
--排序row_number,rank over
从学生的几门成绩中选出成绩最好的一门1.row_number()overselectstudent_id,class,scorefrom(selectstudent_id,class,score,row_number()over(partitionbyuser_idorderbyscoredesc)numfromresult--按照student_id,将成绩从高到低排序,得到成绩的排序)awhe
薇酱
·
2016-04-05 17:26
hive
hive函数
-regexp_extractd的例子
正则表达式解析函数:regexp_extract语法:regexp_extract(stringsubject,stringpattern,intindex)返回值:string说明:将字符串subject按照pattern正则表达式的规则拆分,返回index指定的字符。注意,在有些情况下要使用转义字符举例:hive>selectregexp_extract(‘foothebar’,‘foo(.*
龙明倩
·
2016-03-02 10:42
Hive
hive函数
总结-字符串函数
hive查看函数:show functions; parse_url:parse_url(url,partToExtract[,key])-extractsapartfromaURL解析URL字符串,partToExtract的选项包含[HOST,PATH,QUERY,REF,PROTOCOL,FILE,AUTHORITY,USERINFO]。举例:*parse_url('http://faceb
suinlove
·
2016-02-16 18:00
hive函数
总结-日期函数
获取当前UNIX时间戳函数:unix_timestamp语法:unix_timestamp()返回值:bigint说明:获得当前时区的UNIX时间戳举例:hive>selectunix_timestamp()fromdual; OK 1455616811 Timetaken:0.785seconds,Fetched:1row(s)日期函数UNIX时间戳转日期函数:from_unixtime语
suinlove
·
2016-02-16 18:00
hive函数
-- split 字符串分割函数
hive字符串分割函数split(str,regex)-SplitsstraroundoccurancesthatmatchregexTimetaken:0.769seconds,Fetched:1row(s)返回值为一个数组a.基本用法:例1:split('a,b,c,d',',')得到的结果:["a","b","c","d"] b.截取字符串中的某个值:当然,我们也可以指定取结果数组中的某一项
北京流浪儿
·
2016-01-19 12:00
hive自定义函数-uuid
0业务目的: 将oracle的存储过程业务搬迁到hive,因此涉及不少sql--->hql的替换工作,基本都能实现,
hive函数
不支持的oracle函数功能的就用自定义函数,遇到join的不等值连接就用
chengjianxiaoxue
·
2015-12-10 17:00
hive函数
参考手册
hive函数
参考手册原文见:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF1.内置运算符1.1关系运算符运算符类型说明
buster2014
·
2015-12-03 16:00
hive sql详解 经典
参考链接:http://blog.csdn.net/hguisu/article/details/7256833
hive函数
,操作符大全: http://www.aboutyun.com/thread
chengjianxiaoxue
·
2015-12-03 11:00
hive函数
参考手册
hive函数
参考手册 原文见:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF http://www.cnblogs.com
·
2015-11-09 12:59
hive
hive常用小常识(持续更新中)
1、
hive函数
:http://www.cnblogs.com/end/archive/2012/06/18/2553682.html 2、hive QL语言:https://cwiki.apache.org
·
2015-10-31 10:32
hive
Hive函数
参考手册
1.内置运算符 1.1关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无 失败,因为无效的语法。 SQL使用”=”,不使用”==”。 A <> B 所有原始类型 如果A不等于B返回TRUE,否则返回FALSE。如果A或B值为”NULL”,结果返回”NULL”。 A <
·
2015-10-30 13:20
hive
php使用ZipArc
hive函数
实现文件的压缩与解压缩
PHPZipArchive是PHP自带的扩展类,可以轻松实现ZIP文件的压缩和解压,使用前首先要确保PHPZIP扩展已经开启,具体开启方法这里就不说了,不同的平台开启PHP扩增的方法网上都有,如有疑问欢迎交流。这里整理一下利用phpzipArchive进行文件的压缩与解压缩的常用的示例供参考。一、解压缩zip文件$zip=newZipArchive;//新建一个ZipArchive的对象if($z
nian860314
·
2015-10-27 16:28
hive函数
参考手册
原文见:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1.内置运算符 1.1关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无 失败,因为无效的语法。 SQL使用”=”,不使用”==”。 A <> B 所
·
2015-10-27 15:28
hive
hive函数
-- regexp_extract
函数描述:regexp_extract(str,regexp[,idx])-extractsagroupthatmatchesregexp字符串正则表达式解析函数。–这个函数有点类似于substring(strfrom‘regexp’)..参数解释:其中:str是被解析的字符串regexp是正则表达式idx是返回结果取表达式的哪一部分默认值为1。0表示把整个正则表达式对应的结果全部返回1表示返回正
墨砚
·
2015-09-10 17:24
hive
hive
Hive函数
row_number实现
需求:查询一批用户最后三次登陆时间,ip数据理解需求是实现分组取前n个值,实现方式是先按照uid字段升序或倒序,时间字段倒序排序数据集合,然后遍历数据集合,用row_number函数遍历uid字段,相同则row_number值+1,取row_number=20150101)bONa.user_id=b.user_iddistributeBYuser_idsortBYuser_idASC,timeD
AlwaysOnMyWay
·
2015-08-31 21:39
BigData
Hive函数
row_number实现
需求:查询一批用户最后三次登陆时间,ip数据理解需求是实现分组取前n个值,实现方式是先按照uid字段升序或倒序,时间字段倒序排序数据集合,然后遍历数据集合,用row_number函数遍历uid字段,相同则row_number值+1,取row_number=20150101)bONa.user_id=b.user_iddistributeBYuser_idsortBYuser_idASC,timeD
jamesjxin
·
2015-08-31 21:00
ROW-NUMBER
一起学Hive系列文章
[一起学Hive]之一—Hive概述,Hive是什么[一起学Hive]之二—
Hive函数
大全-完整版[一起学Hive]之三—Hive中的数据库(Database)和表(Table)[一起学Hive]之四
superlxw1234
·
2015-07-14 15:00
hive
Hive入门
一起学Hive系列文章
[一起学Hive]之一—Hive概述,Hive是什么 [一起学Hive]之二—
Hive函数
大全-完整版 [一起学Hive]之三—Hive中的数据库(Database)和表(Table
superlxw1234
·
2015-07-14 15:00
hive
Hive入门
一起学Hive系列文章
[一起学Hive]之一—Hive概述,Hive是什么 [一起学Hive]之二—
Hive函数
大全-完整版 [一起学Hive]之三—Hive中的数据库(Database)和表(Table
superlxw1234
·
2015-07-14 15:00
hive
Hive入门
[一起学Hive]之二—
Hive函数
大全-完整版
阅读更多
Hive函数
大全–完整版现在虽然有很多SQLONHadoop的解决方案,像SparkSQL、Impala、Presto等等,但就目前来看,在基于Hadoop的大数据分析平台、数据仓库中,Hive
superlxw1234
·
2015-06-03 08:00
hive函数
[一起学Hive]之二—
Hive函数
大全-完整版
Hive函数
大全–完整版 现在虽然有很多SQL ON Hadoop的解决方案,像Spark SQL
superlxw1234
·
2015-06-03 08:00
hive函数
[一起学Hive]之二—
Hive函数
大全-完整版
Hive函数
大全–完整版 现在虽然有很多SQL ON Hadoop的解决方案,像Spark SQL
superlxw1234
·
2015-06-03 08:00
hive函数
[一起学Hive]之二—
Hive函数
大全-完整版
阅读更多
Hive函数
大全–完整版现在虽然有很多SQLONHadoop的解决方案,像SparkSQL、Impala、Presto等等,但就目前来看,在基于Hadoop的大数据分析平台、数据仓库中,Hive
superlxw1234
·
2015-06-03 08:00
hive函数
hive函数
----集合统计函数
集合统计函数1. 个数统计函数:count语法:count(*),count(expr),count(DISTINCTexpr[,expr_.])返回值:int说明:count(*)统计检索出的行的个数,包括NULL值的行;count(expr)返回指定字段的非空值的个数;count(DISTINCTexpr[,expr_.])返回指定字段的不同的非空值的个数举例:hive>selectcount
超人学院
·
2015-05-27 17:00
hadoop
hive
超人学院
hive函数
----集合统计函数
集合统计函数1. 个数统计函数:count语法:count(*),count(expr),count(DISTINCTexpr[,expr_.])返回值:int说明:count(*)统计检索出的行的个数,包括NULL值的行;count(expr)返回指定字段的非空值的个数;count(DISTINCTexpr[,expr_.])返回指定字段的不同的非空值的个数举例:hive>selectcount
超人学院66
·
2015-05-27 17:48
hadoop
hive
超人学院
吴超Hadoop
hive函数
----集合统计函数
集合统计函数1.个数统计函数:count语法:count(*),count(expr),count(DISTINCTexpr[,expr_.])返回值:int说明:count(*)统计检索出的行的个数,包括NULL值的行;count(expr)返回指定字段的非空值的个数;count(DISTINCTexpr[,expr_.])返回指定字段的不同的非空值的个数举例:hive>selectcount(
超人学院66
·
2015-05-27 17:48
Hadoop
hive
吴超Hadoop
hive函数
详解----条件函数详解
条件函数1.If函数:if语法:if(booleantestCondition,TvalueTrue,TvalueFalseOrNull)返回值:T说明: 当条件testCondition为TRUE时,返回valueTrue;否则返回valueFalseOrNull举例:hive>selectif(1=2,100,200)fromlxw_dual;200hive>selectif(1=1,100
超人学院
·
2015-05-25 15:00
hive
hive函数
条件函数
hive函数
详解----条件函数详解
条件函数1.If函数:if语法:if(booleantestCondition,TvalueTrue,TvalueFalseOrNull)返回值:T说明:当条件testCondition为TRUE时,返回valueTrue;否则返回valueFalseOrNull举例:hive>selectif(1=2,100,200)fromlxw_dual;200hive>selectif(1=1,100,2
超人学院66
·
2015-05-25 15:59
函数
条件
hive
hive函数
详解----条件函数详解
条件函数1.If函数:if语法:if(booleantestCondition,TvalueTrue,TvalueFalseOrNull)返回值:T说明: 当条件testCondition为TRUE时,返回valueTrue;否则返回valueFalseOrNull举例:hive>selectif(1=2,100,200)fromlxw_dual;200hive>selectif(1=1,100
超人学院66
·
2015-05-25 15:59
函数
hive
条件
HIVE函数
UDAF
1.模拟mysql group_concat函数 package com.lixg.udaf; import org.apache.hadoop.hive.ql.exec.UDAF; import org.apache.hadoop.hive.ql.exec.UDAFEvaluator; public class Wm_concat extends UDAF { publi
lixuguang
·
2015-05-21 17:00
hive udaf
hive函数
UDF
1. 示例代码 package com.lixg.udf; import java.util.regex.Matcher; import java.util.regex.Pattern; import org.apache.hadoop.hive.ql.exec.UDF; public class GetCmsID extends UDF { publ
lixuguang
·
2015-05-21 17:00
hive udf
Hive函数
大全
原文地址:http://www.ifree168.com/lib/?p=12426一、关系运算:二、数学运算:三、逻辑运算:四、数值计算五、日期函数六、条件函数七、字符串函数八、集合统计函数九、复合类型构建操作十、复杂类型访问操作十一、复杂类型长度统计函数一、关系运算:1. 等值比较:= 语法:A=B 操作类型:所有基本类型 描述:如果表达式A与表达式B相
baolibin528
·
2015-05-16 23:00
Hive函数大全
Hive函数
大全
一、关系运算:1.等值比较:=语法:A=B操作类型:所有基本类型描述:如果表达式A与表达式B相等,则为TRUE;否则为FALSE举例:hive>select1fromlxw_dualwhere1=1;12.不等值比较:B操作类型:所有基本类型描述:如果表达式A为NULL,或者表达式B为NULL,返回NULL;如果表达式A与表达式B不相等,则为TRUE;否则为FALSE举例:hive>select1
孟德新书
·
2015-03-09 13:46
__Hive
Hive函数
大全
一、关系运算:1.等值比较:=语法:A=B操作类型:所有基本类型描述:如果表达式A与表达式B相等,则为TRUE;否则为FALSE举例:hive>select1fromlxw_dualwhere1=1;12.不等值比较:B操作类型:所有基本类型描述:如果表达式A为NULL,或者表达式B为NULL,返回NULL;如果表达式A与表达式B不相等,则为TRUE;否则为FALSE举例:hive>select1
jiabiao1602
·
2015-03-05 12:55
Hadoop
hive函数
参考手册
hive函数
参考手册原文见:https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF1.内置运算符1.1关系运算符运算符类型说明
XZC.Log
·
2015-01-06 17:00
hive返回星期几的方法
为了解决这个问题,除了利用java自己编写udf外,也可以利用现有
hive函数
实现,笔者整理了以下内容供大家参考:hive返回星期几的方法:pmod(datediff('#date#','2012年任意一个星期日的日期
lixiaotaoplus
·
2014-12-30 16:54
数据分析
Hadoop
Hive
hive函数
用pig的时候,超不爱用pig带的函数,一般都自己写 但是用hive,就越来越懒,变成了能不写就不写自己的udf,哈哈 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1.内置运算符 1.1关系运算符 运算符
blackproof
·
2014-12-08 13:00
hive
函数
hive函数
用pig的时候,超不爱用pig带的函数,一般都自己写 但是用hive,就越来越懒,变成了能不写就不写自己的udf,哈哈 https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF 1.内置运算符 1.1关系运算符 运算符
blackproof
·
2014-12-08 13:00
hive
函数
hvie 正则表达式
.*)',1)='2';
hive函数
大全及使用示例 wiki:https://cwiki.apache.org/confluence/display/Hive/LanguageManual
cooler1217
·
2014-09-29 13:00
正则表达式
hive函数
-- stddev , stddev_pop , stddev_samp , var_pop , var_samp
标准差是方差的平方根1.方差公式:m为x1,x2...xn数列的期望值(平均数)s^2=[(x1-m)^2+(x2-m)^2+...(xn-m)^2]/ns即为标准差s^2为方差。2.实例:hive>select*fromdim_row_numlimit10; OK012345
lxpbs8851
·
2014-09-16 15:00
hive函数
-- regexp_extract
函数描述:regexp_extract(str,regexp[,idx])-extractsagroupthatmatchesregexp字符串正则表达式解析函数。--这个函数有点类似于substring(strfrom'regexp')..参数解释:其中:str是被解析的字符串regexp是正则表达式idx是返回结果取表达式的哪一部分默认值为1。0表示把整个正则表达式对应的结果全部返回1表示返回
oO寒枫Oo
·
2014-09-11 10:48
hive自带函数
上一页
1
2
3
4
5
6
7
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他