Hive 函数

Hive 函数

Hive 内置函数
1、内容较多，见《Hive 官方文档》
https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF
2、测试内置函数的快捷方式：
第一种方式：直接使用，例如：select concat(‘a’,‘a’)  aa
第二种方式：
1、创建一个 dual 表 create table dual(id string);
2、load 一个文件（一行，一个空格）到 dual 表
3、select substr(‘huangbo’,2,3) from dual;
3、查看内置函数：
show functions;
显示函数的详细信息：
desc function abs;
显示函数的扩展信息：
desc function extended concat;
4、内置函数列表
一、关系运算：

1. 等值比较: =
2. 等值比较:<=>
3. 不等值比较: <>和!=
4. 小于比较: <
5. 小于等于比较: <=
6. 大于比较: >
7. 大于等于比较: >=
8. 区间比较
9. 空值判断: IS NULL
10. 非空判断: IS NOT NULL 10. LIKE 比较: LIKE
11. JAVA 的 LIKE 操作: RLIKE 12. REGEXP 操作: REGEXP
    二、数学运算：
12. 加法操作: +
13. 减法操作: –
14. 乘法操作: *
15. 除法操作: /
16. 取余操作: %
17. 位与操作: &
18. 位或操作: |
19. 位异或操作: ^
20. 9.位取反操作: ~
    三、逻辑运算：
21. 逻辑与操作: AND 、&&
22. 逻辑或操作: OR 、||
23. 逻辑非操作: NOT、!
    四、复合类型构造函数
24. map 结构
25. struct 结构
26. named_struct 结构
27. array 结构
28. create_union
    五、复合类型操作符
29. 获取 array 中的元素
30. 获取 map 中的元素
31. 获取 struct 中的元素
    六、数值计算函数
32. 取整函数: round
33. 指定精度取整函数: round
34. 向下取整函数: floor
35. 向上取整函数: ceil
36. 向上取整函数: ceiling
37. 取随机数函数: rand
38. 自然指数函数: exp
39. 以 10 为底对数函数: log10
40. 以 2 为底对数函数: log2
41. 对数函数: log
42. 幂运算函数: pow
43. 幂运算函数: power
44. 开平方函数: sqrt
45. 二进制函数: bin
46. 十六进制函数: hex
47. 反转十六进制函数: unhex
48. 进制转换函数: conv
49. 绝对值函数: abs
50. 正取余函数: pmod
51. 正弦函数: sin
52. 反正弦函数: asin
53. 余弦函数: cos
54. 反余弦函数: acos
55. positive 函数: positive
56. negative 函数: negative
    七、集合操作函数
57. map 类型大小：size
58. array 类型大小：size
59. 判断元素数组是否包含元素：array_contains
60. 获取 map 中所有 value 集合
61. 获取 map 中所有 key 集合
62. 数组排序
    八、类型转换函数
63. 二进制转换：binary
64. 基础类型之间强制转换：cast
    九、日期函数
65. UNIX 时间戳转日期函数: from_unixtime
66. 获取当前 UNIX 时间戳函数: unix_timestamp
67. 日期转 UNIX 时间戳函数: unix_timestamp
68. 指定格式日期转 UNIX 时间戳函数: unix_timestamp
69. 5. 日期时间转日期函数: to_date
70. 日期转年函数: year
71. 日期转月函数: month
72. 日期转天函数: day
73. 日期转小时函数: hour
74. 日期转分钟函数: minute
75. 日期转秒函数: second
76. 日期转周函数: weekofyear
77. 日期比较函数: datediff
78. 日期增加函数: date_add
79. 日期减少函数: date_sub
    十、条件函数
80. If 函数: if
81. 非空查找函数: COALESCE
82. 条件判断函数：CASE
    十一、字符串函数
83. 字符 ascii 码函数：ascii
84. base64 字符串
85. 字符串连接函数：concat
86. 带分隔符字符串连接函数：concat_ws
87. 数组转换成字符串的函数：concat_ws
88. 小数位格式化成字符串函数：format_number
89. 字符串截取函数：substr,substring
90. 字符串截取函数：substr,substring
91. 字符串查找函数：instr
92. 字符串长度函数：length
93. 字符串查找函数：locate
94. 字符串格式化函数：printf
95. 字符串转换成 map 函数：str_to_map
96. base64 解码函数：unbase64(string str)
97. 字符串转大写函数：upper,ucase
98. 字符串转小写函数：lower,lcase
99. 去空格函数：trim
100. 左边去空格函数：ltrim
101. 右边去空格函数：rtrim
102. 正则表达式替换函数：regexp_replace
103. 正则表达式解析函数：regexp_extract
104. URL 解析函数：parse_url
105. json 解析函数：get_json_object
106. 空格字符串函数：space
107. 重复字符串函数：repeat
108. 左补足函数：lpad
109. 27. 右补足函数：rpad
110. 分割字符串函数: split
111. 集合查找函数: find_in_set
112. 分词函数：sentences
113. 分词后统计一起出现频次最高的 TOP-K
114. 分词后统计与指定单词一起出现频次最高的 TOP-K
     十二、混合函数
115. 调用 Java 函数：java_method
116. 调用 Java 函数：reflect
117. 字符串的 hash 值：hash
     十三、XPath 解析 XML 函数
118. xpath
119. xpath_string
120. xpath_boolean
121. xpath_short, xpath_int, xpath_long
122. xpath_float, xpath_double, xpath_number
     十四、汇总统计函数（UDAF）
123. 个数统计函数: count
124. 总和统计函数: sum
125. 平均值统计函数: avg
126. 最小值统计函数: min
127. 最大值统计函数: max
128. 非空集合总体变量函数: var_pop
129. 非空集合样本变量函数: var_samp
130. 总体标准偏离函数: stddev_pop
131. 样本标准偏离函数: stddev_samp
132. 中位数函数: percentile
133. 中位数函数: percentile
134. 近似中位数函数: percentile_approx
135. 近似中位数函数: percentile_approx
136. 直方图: histogram_numeric
137. 集合去重数：collect_set
138. 集合不去重函数：collect_list
     十五、表格生成函数 Table-Generating Functions (UDTF)
     1．数组拆分成多行：explode(array)
     2．Map 拆分成多行：explode(map)