对饮雄黄

Spark SQL内置函数

Spark版本号：2.4.3，Spark SQL命令行输入

show functions;

示例

abs：取绝对值

> select abs(-10);

+------+
| _c0  |
+------+
| 10   |
+------+

acos：反余弦函数

> select acos(0.5);

+---------------------+
|         _c0         |
+---------------------+
| 1.0471975511965979  |
+---------------------+

add_months(start_date, num_months)，增加月份

> select add_months('2016-02-29', 1);

+-------------+
|     _c0     |
+-------------+
| 2016-03-31  |
+-------------+

aggregate
and
approx_count_distinct(expr[, relativeSD])
approx_percentile(col, percentage [, accuracy])
array(expr, …) - 返回给定值组成的数组。

> select array(1, 2 , 3, 4, 5, 6);

+----------------+
|      _c0       |
+----------------+
| [1,2,3,4,5,6]  |
+----------------+

array_contains(array, value) - 如果数组包含了 value，则返回 true。

> select array_contains(array(1, 2, 3, 4, 5, 6), 1);

+------------------------------------------+
|array_contains(array(1, 2, 3, 4, 5, 6), 1)|
+------------------------------------------+
|                                      true|
+------------------------------------------+

array_distinct(array) - 数组去重

> select array_distinct(array(1, 1, 3, 3));

+---------------------------------+
|array_distinct(array(1, 1, 3, 3))|
+---------------------------------+
|                           [1, 3]|
+---------------------------------+

array_except(array1, array2) - 数组移除

> select array_except(array(1, 2, 3) , array(1));

+--------------------------------------+
|array_except(array(1, 2, 3), array(1))|
+--------------------------------------+
|                                [2, 3]|
+--------------------------------------+

array_intersect(array1, array2) - 数组求交

> select array_intersect(array(1, 2, 3) , array(1, 2));

+--------------------------------------------+
|array_intersect(array(1, 2, 3), array(1, 2))|
+--------------------------------------------+
|                                      [1, 2]|
+--------------------------------------------+

array_join(array, String[, String]): String：使用分隔符将数组的元素进行拼接。另外，我们还可以指定可选的字符来替换 null 值。如果我们没有指定 null 值的替换字符串，那么结果中将会把 null 值替换掉。

> select array_join(array('hello', null, 'world'), ',', 'null');

+--------------------------------------------------------------+
|array_join(array(hello, CAST(NULL AS STRING), world), ,, null)|
+--------------------------------------------------------------+
|                                              hello,null,world|
+--------------------------------------------------------------+

第一个参数为：stirng的数组
第二个参数为：拼接字符串
第三个参数为：null替换为字符串

array_max(array): T：返回数组中的最大值， null 元素将会被忽略。

> select array_max(array(1, 2, 10, null, 3));

+------------------------------------------------+
|array_max(array(1, 2, 10, CAST(NULL AS INT), 3))|
+------------------------------------------------+
|                                              10|
+------------------------------------------------+

array_min(array): T：返回数组中的最小值， null 元素将会被忽略。

> select array_min(array(1, 2, 10, null, 3));

+------------------------------------------------+
|array_min(array(1, 2, 10, CAST(NULL AS INT), 3))|
+------------------------------------------------+
|                                               1|
+------------------------------------------------+

array_position(array, T): Long：返回元素 T 在数组第一次出现的位置，从1开始算。

> select array_position(array(1, 3, 4, 1), 1);

+------------------------------------+
|array_position(array(1, 3, 4, 1), 1)|
+------------------------------------+
|                                   1|
+------------------------------------+

array_remove(array, T): array：从给定数组中删除所有与给定元素相等的元素。

> select array_remove(array(1, 3, 4, 1, 1), 1);

+-------------------------------------+
|array_remove(array(1, 3, 4, 1, 1), 1)|
+-------------------------------------+
|                               [3, 4]|
+-------------------------------------+

array_repeat(T, Int): array：返回包含元素计数次数的数组。

> select array_repeat('1', 2);

+------------------+
|array_repeat(1, 2)|
+------------------+
|            [1, 1]|
+------------------+

array_sort(array): array：按升序对输入数组进行排序。输入数组的元素必须是可排序的。null 元素将放置在返回数组的末尾。

> select array_sort(array(3, 4, 1, null, 0));

+------------------------------------------------+
|array_sort(array(3, 4, 1, CAST(NULL AS INT), 0))|
+------------------------------------------------+
|                                   [0, 1, 3, 4,]|
+------------------------------------------------+

array_union(array, array): array：返回给定两个数组元素的并集，结果已经去重了。使用如下

> select array_union(array(1, 2, 3), array(1, 3, 5));

+-------------------------------------------+
|array_union(array(1, 2, 3), array(1, 3, 5))|
+-------------------------------------------+
|                               [1, 2, 3, 5]|
+-------------------------------------------+

arrays_overlap(array, array): array：如果数组1最少包含数组2中一个非空的元素，则返回 true；如果两个数组没有公共元素，而且两个数组均为空则返回 false，如果其中任何一个数组包含 null 元素则返回 null。

> select arrays_overlap(array(1, 2, 3), array(3, 4, 5));

+----------------------------------------------+
|arrays_overlap(array(1, 2, 3), array(3, 4, 5))|
+----------------------------------------------+
|                                          true|
+----------------------------------------------+

array_zip(array …)：数组组合

> select arrays_zip(array(1, 2), array(2, 3));

+------------------------------------+
|arrays_zip(array(1, 2), array(2, 3))|
+------------------------------------+
|                    [[1, 2], [2, 3]]|
+------------------------------------+

ascii(string)：返回str中第一个字符的ascii值

> select ascii('China 100');

+----------------+
|ascii(China 100)|
+----------------+
|              67|
+----------------+

asin(string)：反正弦

> select ascii('0.5');

+----------+
|ascii(0.5)|
+----------+
|        48|
+----------+

assert_true(expr)：如果 expr 表达式的返回值不是 true 则抛出异常。

> select assert_true(0 < 1);

+--------------------+
|assert_true((0 < 1))|
+--------------------+
|                null|
+--------------------+

atan(double)：反正切函数

> select atan(0.5);

spark.sql("select atan(0.5)").show();
+-------------------------+
|ATAN(CAST(0.5 AS DOUBLE))|
+-------------------------+
|       0.4636476090008061|
+-------------------------+

atan2(double, double)：返回平面的正 x 轴与由坐标（expr1，expr2）点之间的弧度角度。

> select atan2(1, 1);

+-------------------------------------------+
|ATAN2(CAST(1 AS DOUBLE), CAST(1 AS DOUBLE))|
+-------------------------------------------+
|                         0.7853981633974483|
+-------------------------------------------+

avg：求平均
base64(bin)：将参数从二进制文件转换为 base64 的字符串

> select base64('hello world');

+-----------------------------------+
|base64(CAST(hello world AS BINARY))|
+-----------------------------------+
|                   aGVsbG8gd29ybGQ=|
+-----------------------------------+

bigint(expr)：将值 expr 转换为 bigint 数据类型

> select bigint('121');

+-------------------+
|CAST(121 AS BIGINT)|
+-------------------+
|                121|
+-------------------+

bin(expr)：返回 long 类型的参数 expr 的二进制字符串表示形式

> select bin(100);

+------------------------+
|bin(CAST(100 AS BIGINT))|
+------------------------+
|                 1100100|
+------------------------+

binary(expr)：将值 expr 转换为 binary 数据类型。

> select binary(bin(100));

+----------------------------------------+
|CAST(bin(CAST(100 AS BIGINT)) AS BINARY)|
+----------------------------------------+
|                    [31 31 30 30 31 3...|
+----------------------------------------+

bit_length(expr)：返回字符串数据的位长度或二进制数据的位数。

> select bit_length(binary(bin(100)));

+----------------------------------------------------+
|bit_length(CAST(bin(CAST(100 AS BIGINT)) AS BINARY))|
+----------------------------------------------------+
|                                                  56|
+----------------------------------------------------+


> select bit_length('hello world');

+-----------------------+
|bit_length(hello world)|
+-----------------------+
|                     88|
+-----------------------+

boolean(expr)：将值 expr 转换为 boolean 数据类型

> select boolean(0);

+------------------+
|CAST(0 AS BOOLEAN)|
+------------------+
|             false|
+------------------+

bround(expr, len)：四舍五入，保留len长度的小数位

> select bround(3.1415926, 2);

+--------------------+
|bround(3.1415926, 2)|
+--------------------+
|                3.14|
+--------------------+

~~cardinality~~
cast(expr AS type)：将 expr 转换成 type 类型的数据

> select cast('10' as integer);

+---------------+
|CAST(10 AS INT)|
+---------------+
|             10|
+---------------+

cbrt(expr)：返回expr的立方根

> select cbrt(8);

+-----------------------+
|CBRT(CAST(8 AS DOUBLE))|
+-----------------------+
|                    2.0|
+-----------------------+

ceil(expr)：向上取整

> select ceil(-3.1415926);

+----------------+
|CEIL(-3.1415926)|
+----------------+
|              -3|
+----------------+

ceiling(expr)：向上取整

> select ceiling(-3.1415926);

+----------------+
|CEIL(-3.1415926)|
+----------------+
|              -3|
+----------------+

char(expr)：返回二进制等效于 expr 的 ASCII 字符。如果 n 大于256，则结果等于 chr(n%256)

> select char(100);

+------------------------+
|chr(CAST(100 AS BIGINT))|
+------------------------+
|                       d|
+------------------------+

char_length(expr)：返回字符串数据的字符长度或二进制数据的字节数。字符串数据的长度包括尾随空格，二进制数据的长度包括二进制零。

> select char_length('hello world');

+-------------------+
|length(hello world)|
+-------------------+
|                 11|
+-------------------+

character_length(expr)：返回字符串数据的字符长度或二进制数据的字节数。字符串数据的长度包括尾随空格，二进制数据的长度包括二进制零。

> select character_length('hello world');

+-------------------+
|length(hello world)|
+-------------------+
|                 11|
+-------------------+

chr(expr) ：返回二进制等效于 expr 的 ASCII 字符。如果 n 大于256，则结果等于 chr(n%256)

> select chr(100);

+------------------------+
|chr(CAST(100 AS BIGINT))|
+------------------------+
|                       d|
+------------------------+

coalesce(expr1, expr2, …)：返回第一个非空参数（如果存在）。否则，返回 null。

> select coalesce(null, 1, null, 2);

+----------------------------------------------------+
|coalesce(CAST(NULL AS INT), 1, CAST(NULL AS INT), 2)|
+----------------------------------------------------+
|                                                   1|
+----------------------------------------------------+

collect_list(expr)：返回list，不去重

> select collect_list(carstate) from gps_car;

+----------------------+
|collect_list(carstate)|
+----------------------+
|  [2.0, 2.0, 2.0, 2...|
+----------------------+

collect_set(expr)：返回set，去重

> select collect_set(carstate) from gps_car;

+---------------------+
|collect_set(carstate)|
+---------------------+
|      [2.0, 0.0, 1.0]|
+---------------------+

concat(str1, str2,…,strN)：返回由 str1, str2, …, strN 组成的字符串

> select concat('hello', 'world');

+--------------------+
|concat(hello, world)|
+--------------------+
|          helloworld|
+--------------------+

concat_ws(sep, [str | array(str)]+) ：返回由 sep 分隔组成的字符串连接。

> select concat_ws(' ', 'hello', 'world');

+--------------------------+
|concat_ws( , hello, world)|
+--------------------------+
|               hello world|
+--------------------------+


> select concat_ws(' ', array('hello', 'world'));

+---------------------------------+
|concat_ws( , array(hello, world))|
+---------------------------------+
|                      hello world|
+---------------------------------+

conv(num, from_base, to_base) ：将 num 从 from_base 进制转换为 to_base 进制。

> select conv(100, 2, 10);

+--------------------------------+
|conv(CAST(100 AS STRING), 2, 10)|
+--------------------------------+
|                               4|
+--------------------------------+

~~corr(expr1, expr2)~~
cos(expr)：余弦函数

> select cos(0.5);

+------------------------+
|COS(CAST(0.5 AS DOUBLE))|
+------------------------+
|      0.8775825618903728|
+------------------------+

cosh(expr)：双曲余弦

> select cosh(0);

+-----------------------+
|COSH(CAST(0 AS DOUBLE))|
+-----------------------+
|                    1.0|
+-----------------------+

cot(expr)：余切

> select cot(1);

+----------------------+
|COT(CAST(1 AS DOUBLE))|
+----------------------+
|    0.6420926159343306|
+----------------------+

count
count_min_sketch
covar_pop
covar_samp
crc32
cube
cume_dist
current_database：查询当前数据库

> select current_database();

+------------------+
|current_database()|
+------------------+
|           default|
+------------------+

current_date：查询当前时间

> select current_date();

+--------------+
|current_date()|
+--------------+
|    2020-03-11|
+--------------+

current_timestamp()：当前时间戳

> select current_timestamp();

+--------------------+
| current_timestamp()|
+--------------------+
|2020-03-11 04:26:...|
+--------------------+

date(expr)：

> select date('2010-10-10');

+------------------------+
|CAST(2010-10-10 AS DATE)|
+------------------------+
|              2010-10-10|
+------------------------+

date_add(start_date, num_days)：增加时间

> select date_add('2010-10-10', 1);

+-------------------------------------+
|date_add(CAST(2010-10-10 AS DATE), 1)|
+-------------------------------------+
|                           2010-10-11|
+-------------------------------------+

date_format(timestamp, fmt)：时间格式化

> select date_format('2010-10-10', 'yyyy');

+------------------------------------------------+
|date_format(CAST(2010-10-10 AS TIMESTAMP), yyyy)|
+------------------------------------------------+
|                                            2010|
+------------------------------------------------+

date_sub(start_date, num_days)：时间减少天数

> select date_sub('2020-10-10', 1);

+-------------------------------------+
|date_sub(CAST(2020-10-10 AS DATE), 1)|
+-------------------------------------+
|                           2020-10-09|
+-------------------------------------+

date_trunc(fmt, ts)：时间精确，fmt：[“YEAR”, “YYYY”, “YY”, “MON”, “MONTH”, “MM”, “DAY”, “DD”, “HOUR”, “MINUTE”, “SECOND”, “WEEK”, “QUARTER”]

> select date_trunc('yyyy', '2011-11-11 11:11:11.111');

+------------------------------------------------------------+
|date_trunc(yyyy, CAST(2011-11-11 11:11:11.111 AS TIMESTAMP))|
+------------------------------------------------------------+
|                                         2011-01-01 00:00:00|
+------------------------------------------------------------+


> select date_trunc('month', '2011-11-11 11:11:11.111');

+-------------------------------------------------------------+
|date_trunc(month, CAST(2011-11-11 11:11:11.111 AS TIMESTAMP))|
+-------------------------------------------------------------+
|                                          2011-11-01 00:00:00|
+-------------------------------------------------------------+


> select date_trunc('day', '2011-11-11 11:11:11.111');

+-----------------------------------------------------------+
|date_trunc(day, CAST(2011-11-11 11:11:11.111 AS TIMESTAMP))|
+-----------------------------------------------------------+
|                                        2011-11-11 00:00:00|
+-----------------------------------------------------------+

datediff(start_date, end_date)：返回天数差

> select datediff('2011-11-11', '2011-11-10');

+------------------------------------------------------------+
|datediff(CAST(2011-11-11 AS DATE), CAST(2011-11-10 AS DATE))|
+------------------------------------------------------------+
|                                                           1|
+------------------------------------------------------------+

day(date)：返回天数

> select day('2020-2-11');

+-----------------------------------+
|dayofmonth(CAST(2020-2-11 AS DATE))|
+-----------------------------------+
|                                 11|
+-----------------------------------+

dayofmonth(date)：返回天数

> select dayofmonth('2020-2-11');

+-----------------------------------+
|dayofmonth(CAST(2020-2-11 AS DATE))|
+-----------------------------------+
|                                 11|
+-----------------------------------+

dayofweek(date)：返回天数

> select dayofmonth('2020-2-11');

+-----------------------------------+
|dayofmonth(CAST(2020-2-11 AS DATE))|
+-----------------------------------+
|                                 11|
+-----------------------------------+

dayofyear(date)：返回天数

> select dayofyear('2020-2-11');

+----------------------------------+
|dayofyear(CAST(2020-2-11 AS DATE))|
+----------------------------------+
|                                42|
+----------------------------------+

decimal(expr)：转换为decimal

> select decimal(1.0);

+--------------------------+
|CAST(1.0 AS DECIMAL(10,0))|
+--------------------------+
|                         1|
+--------------------------+

decode(bin, charset)：解码

> select decode('abcd', 'utf-8');

+-----------------------------------+
|decode(CAST(abcd AS BINARY), utf-8)|
+-----------------------------------+
|                               abcd|
+-----------------------------------+

degrees
dense_rank
double(expr)：转成double

> select double(1);

+-----------------+
|CAST(1 AS DOUBLE)|
+-----------------+
|              1.0|
+-----------------+

e()：返回e的值

> select e();

+-----------------+
|              E()|
+-----------------+
|2.718281828459045|
+-----------------+

element_att(n, input1, input2, …)：返回第几个
elt

> select elt(2, 'java', 'php', 'R');

+--------------------+
|elt(2, java, php, R)|
+--------------------+
|                 php|
+--------------------+

encode(str, charset)：编码

> select encode('abcd', 'utf-8');

+-------------------+
|encode(abcd, utf-8)|
+-------------------+
|      [61 62 63 64]|
+-------------------+

exists
exp
explode(expr)：拆分数组等

> select explode(array(1, 3, 5));

+---+
|col|
+---+
|  1|
|  3|
|  5|
+---+

explode_outer(expr)：拆分数组等

> select explode_outer(array(1, 3, 5));

+---+
|col|
+---+
|  1|
|  3|
|  5|
+---+

expm1
factorial(expr)：阶乘

> select factorial(5);

+------------+
|factorial(5)|
+------------+
|         120|
+------------+

filter
find_in_set(str, str_array)：查询索引

> select find_in_set('ab','abc,b,ab,c,def');

+-------------------------------+
|find_in_set(ab, abc,b,ab,c,def)|
+-------------------------------+
|                              3|
+-------------------------------+

first
first_value
flatten
float(expr)：转成float

> select float(1);

+----------------+
|CAST(1 AS FLOAT)|
+----------------+
|             1.0|
+----------------+

floor(expr)：向下取整

> select floor(-0.1);

+-----------+
|FLOOR(-0.1)|
+-----------+
|         -1|
+-----------+

format_number(expr1, expr2)：数字格式化

> select format_number(3141.5926, 3);

+---------------------------+
|format_number(3141.5926, 3)|
+---------------------------+
|                  3,141.593|
+---------------------------+

format_string(strfmt, obj, …)：字符串格式化

> select format_string('Hello World %d %s', 100, 'days');

+-------------------------------------------+
|format_string(Hello World %d %s, 100, days)|
+-------------------------------------------+
|                       Hello World 100 days|
+-------------------------------------------+

from_json(jsonStr, schema[, options])：

> select from_json("{'id': 1, 'name': 'zhangsan'}", "id int, name string");

+--------------------------------------------+
|jsontostructs({'id': 1, 'name': 'zhangsan'})|
+--------------------------------------------+
|                               [1, zhangsan]|
+--------------------------------------------+

from_unixtime(unix_time, format)：unix_time为java.util.Date().getTime() / 1000

> select from_unixtime(1583888136, 'yyyy-MM-dd HH:mm:ss');

+--------------------------------------------------------------+
|from_unixtime(CAST(1583888136 AS BIGINT), yyyy-MM-dd HH:mm:ss)|
+--------------------------------------------------------------+
|                                           2020-03-11 08:55:36|
+--------------------------------------------------------------+

from_utc_timestamp(timestamp, timezone)

> select from_utc_timestamp('2020-01-01', 'Asia/Seoul');

+-------------------------------------------------------------+
|from_utc_timestamp(CAST(2020-01-01 AS TIMESTAMP), Asia/Seoul)|
+-------------------------------------------------------------+
|                                          2020-01-01 09:00:00|
+-------------------------------------------------------------+

get_json_object(json_txt, path)：取最大值
greatest(expr, …)：

> select greatest(1, 3, 4, 10);

+---------------------+
|greatest(1, 3, 4, 10)|
+---------------------+
|                   10|
+---------------------+

grouping
grouping_id
hash(expr1, …)：

> select hash('hello', 'world');

+------------------+
|hash(hello, world)|
+------------------+
|        -165041762|
+------------------+

hex(expr)：转成hexadecimal

> select hex('hello world');

+--------------------+
|    hex(hello world)|
+--------------------+
|68656C6C6F20776F7...|
+--------------------+

hour(timestamp)：返回小时

> select hour('2020-11-11 11:11:11');

+--------------------------------------------+
|hour(CAST(2020-11-11 11:11:11 AS TIMESTAMP))|
+--------------------------------------------+
|                                          11|
+--------------------------------------------+

hypot(expr1, expr2)：返回值为

sqrt(expr^2 + expr2^2)

> select hypot(3, 4);

+-------------------------------------------+
|HYPOT(CAST(3 AS DOUBLE), CAST(4 AS DOUBLE))|
+-------------------------------------------+
|                                        5.0|
+-------------------------------------------+

if(expr1, expr2, expr3)：expr1=true返回expr2，否则返回expr3

> select if(1 > 2, '1', '2');

+-------------------+
|(IF((1 > 2), 1, 2))|
+-------------------+
|                  2|
+-------------------+

ifnull(expr1, expr2)：如果expr1为返回expr2

> select ifnull(null, 'expr2');

+---------------------+
|ifnull(NULL, 'expr2')|
+---------------------+
|                expr2|
+---------------------+

in：expr1 in(expr2, expr3, …)

> select 1 in(1, 3, 4);

+----------------+
|(1 IN (1, 3, 4))|
+----------------+
|            true|
+----------------+

initcap(str)：每个单词首字母大写

> select initcap('hello world');

+--------------------+
|initcap(hello world)|
+--------------------+
|         Hello World|
+--------------------+

inline

> select inline(array(struct(1, 'a'), struct(2, 'b')));

+----+----+
|col1|col2|
+----+----+
|   1|   a|
|   2|   b|
+----+----+

inline_outer

> select inline_outer(array(struct(1, 'a'), struct(2, 'b')));

+----+----+
|col1|col2|
+----+----+
|   1|   a|
|   2|   b|
+----+----+

input_file_block_length()
input_file_block_start
input_file_name
instr(str, substr)：查询索引

> select instr('hello world', 'world');

+-------------------------+
|instr(hello world, world)|
+-------------------------+
|                        7|
+-------------------------+

int(expr)：转成int

> select int(3.14);

+-----------------+
|CAST(3.14 AS INT)|
+-----------------+
|                3|
+-----------------+

isnan
isnotnull(expr)：非空返回true

> select isnotnull(1);

+---------------+
|(1 IS NOT NULL)|
+---------------+
|           true|
+---------------+

isnull：空返回true

> select isnull(null);

+--------------+
|(NULL IS NULL)|
+--------------+
|          true|
+--------------+

java_method(class, method[, arg1[, arg2 …]])：调用java方法

> select java_method('java.util.UUID', 'randomUUID');

+-----------------------------------+
|reflect(java.util.UUID, randomUUID)|
+-----------------------------------+
|               3aaebaa8-6335-440...|
+-----------------------------------+

json_tuple
kurtosis
lag
last

> select last(array(1, 3, null, 5));

+----------------------------------------------+
|last(array(1, 3, CAST(NULL AS INT), 5), false)|
+----------------------------------------------+
|                                    [1, 3,, 5]|
+----------------------------------------------+

last_day(date)：返回最后一天

> select last_day('2020-02-01');

+----------------------------------+
|last_day(CAST(2020-02-01 AS DATE))|
+----------------------------------+
|                        2020-02-29|
+----------------------------------+

last_value
lcase(str)：转换为小写

> select lcase('Hello World');

+------------------+
|lower(Hello World)|
+------------------+
|       hello world|
+------------------+

lead
least(expr, …)：返回最小值

> select least(null, 10, 3, 4);

+----------------------------------+
|least(CAST(NULL AS INT), 10, 3, 4)|
+----------------------------------+
|                                 3|
+----------------------------------+

left(str, len)：返回左边几个字符

> select left('hello world', 3);

+----------------------+
|left('hello world', 3)|
+----------------------+
|                   hel|
+----------------------+

length(expr)：返回长度

> select length('hello world');

+-------------------+
|length(hello world)|
+-------------------+
|                 11|
+-------------------+

levenshtein
like
ln
locate(substr, str[, pos])：
log
log10
log1p
log2
lower(str)：转成小写

> select lower('Hello World');

+------------------+
|lower(Hello World)|
+------------------+
|       hello world|
+------------------+

lpad
ltrim(trimStr, str)：去除前后trimStr，不传责去除前空格

> select ltrim('ha', 'haHello worldha');

+--------------------------+
|ltrim(haHello worldha, ha)|
+--------------------------+
|             Hello worldha|
+--------------------------+

map(key0, value0, key1, value1, …)：创建map

> select map(1.0, '2', 3.0, '4');

+--------------------+
| map(1.0, 2, 3.0, 4)|
+--------------------+
|[1.0 -> 2, 3.0 -> 4]|
+--------------------+

map_concat(map, …)：返回多个 map 的并集

> select map_concat(map(1, 'a', 2, 'b'), map(2, 'c', 3, 'd'));

+--------------------------------------------+
|map_concat(map(1, a, 2, b), map(2, c, 3, d))|
+--------------------------------------------+
|                        [1 -> a, 2 -> b, ...|
+--------------------------------------------+

map_from_arrays(array, array)

> select map_from_arrays(array(1.0, 3.0), array('2', '4'));

+---------------------------------------------+
|map_from_arrays(array(1.0, 3.0), array(2, 4))|
+---------------------------------------------+
|                         [1.0 -> 2, 3.0 -> 4]|
+---------------------------------------------+

map_from_entries(array>)

> select map_from_entries(array(struct(1, 'a'), struct(2, 'b')));

+---------------------------------------------------------------------------------------+
|map_from_entries(array(named_struct(col1, 1, col2, a), named_struct(col1, 2, col2, b)))|
+---------------------------------------------------------------------------------------+
|                                                                       [1 -> a, 2 -> b]|
+---------------------------------------------------------------------------------------+

map_keys(map)

> select map_keys(map(1, 'a', 2, 'b'));

+-------------------------+
|map_keys(map(1, a, 2, b))|
+-------------------------+
|                   [1, 2]|
+-------------------------+

map_values(map)

> select map_values(map(1, 'a', 2, 'b'));

+---------------------------+
|map_values(map(1, a, 2, b))|
+---------------------------+
|                     [a, b]|
+---------------------------+

max
md5(expr)：md5加密

> select md5('hello world');

+--------------------------------+
|md5(CAST(hello world AS BINARY))|
+--------------------------------+
|            5eb63bbbe01eeed09...|
+--------------------------------+

mean
min
minute(timestamp)：返回分钟数

> select minute('2011-11-11 11:11:11');

+----------------------------------------------+
|minute(CAST(2011-11-11 11:11:11 AS TIMESTAMP))|
+----------------------------------------------+
|                                            11|
+----------------------------------------------+

mod(expr1, expr2)：%

> select mod(11, 2);

+--------+
|(11 % 2)|
+--------+
|       1|
+--------+

monotonically_increasing_id
month(date)：返回月份

> select month('2011-11-11');

+-------------------------------+
|month(CAST(2011-11-11 AS DATE))|
+-------------------------------+
|                             11|
+-------------------------------+

months_between(timestamp1, timestamp2)：月份差

> select months_between('2000-10-1', '2000-11-2');

+--------------------------------------------------------------------------------+
|months_between(CAST(2000-10-1 AS TIMESTAMP), CAST(2000-11-2 AS TIMESTAMP), true)|
+--------------------------------------------------------------------------------+
|                                                                     -1.03225806|
+--------------------------------------------------------------------------------+

named_struct(name1, val1, name2, val2, …)

> select named_struct('a', 1, 'b', 2, 'c', 3);

+------------------------------+
|named_struct(a, 1, b, 2, c, 3)|
+------------------------------+
|                     [1, 2, 3]|
+------------------------------+

nanvl
negative(expr)：取反

> select negative(100);

+-------+
|(- 100)|
+-------+
|   -100|
+-------+

next_day(start_date, day_of_week)

> select next_day('2020-03-11', 'FRI');

+---------------------------------------+
|next_day(CAST(2020-03-11 AS DATE), FRI)|
+---------------------------------------+
|                             2020-03-13|
+---------------------------------------+

not
now()

> select now();

+--------------------+
| current_timestamp()|
+--------------------+
|2020-03-11 23:07:...|
+--------------------+

ntile
nullif
nvl(expr1, expr2)：expr1为空返回expr2

> select nvl(null, 'hello');

+------------------+
|nvl(NULL, 'hello')|
+------------------+
|             hello|
+------------------+

nvl2(expr1, expr2, expr3)：
octet_length(expr)：长度

> select octet_length('hello world');

+-------------------------+
|octet_length(hello world)|
+-------------------------+
|                       11|
+-------------------------+

or
parse_url
percent_rank
percentile
percentile_approx
pi()：圆周率

> select pi();

+-----------------+
|             PI()|
+-----------------+
|3.141592653589793|
+-----------------+

pmod
posexplode(expr)：分割数组

> select posexplode(array(1, 3, 4));

+---+---+
|pos|col|
+---+---+
|  0|  1|
|  1|  3|
|  2|  4|
+---+---+

posexplode_outer(expr)：分割数组

> select posexplode_outer(array(1, 3, 4));

+---+---+
|pos|col|
+---+---+
|  0|  1|
|  1|  3|
|  2|  4|
+---+---+

position(substr, str[, pos])：返回位置

> select position('he', 'world hello', 1);

+--------------------------+
|locate(he, world hello, 1)|
+--------------------------+
|                         7|
+--------------------------+

positive
pow(expr1, expr2)：乘方

> select pow(2, 4);

+-------------------------------------------+
|POWER(CAST(2 AS DOUBLE), CAST(4 AS DOUBLE))|
+-------------------------------------------+
|                                       16.0|
+-------------------------------------------+

power(expr1, expr2)：乘方

> select power(2, 4);

+-------------------------------------------+
|POWER(CAST(2 AS DOUBLE), CAST(4 AS DOUBLE))|
+-------------------------------------------+
|                                       16.0|
+-------------------------------------------+

printf(strfmt, obj, …)：字符串格式化

> select printf('Hello World %d %s', 100, 'days');

+-------------------------------------------+
|format_string(Hello World %d %s, 100, days)|
+-------------------------------------------+
|                       Hello World 100 days|
+-------------------------------------------+

quarter(date)：

> select quarter('2020-11-11');

+---------------------------------+
|quarter(CAST(2020-11-11 AS DATE))|
+---------------------------------+
|                                4|
+---------------------------------+

radians(expr)：

> select radians(180);

+----------------------------+
|RADIANS(CAST(180 AS DOUBLE))|
+----------------------------+
|           3.141592653589793|
+----------------------------+

rand([seed])：随机数

> select rand();

+-------------------------+
|rand(7896507467301193574)|
+-------------------------+
|       0.1643759947938076|
+-------------------------+

randn([seed])：随机数

> select randn();

+---------------------------+
|randn(-2498753337637632801)|
+---------------------------+
|        -0.4827279803917336|
+---------------------------+

rank
reflect(class, method[, arg1[, arg2 …]])，反射调用java方法

> select reflect('java.util.UUID', 'randomUUID');

+-----------------------------------+
|reflect(java.util.UUID, randomUUID)|
+-----------------------------------+
|               3930dab2-d5e0-49e...|
+-----------------------------------+

regexp_extract
regexp_replace(str, regexp, rep)：
repeat(str, n)：重复

> select repeat('ha', 4);

+-------------+
|repeat(ha, 4)|
+-------------+
|     hahahaha|
+-------------+

replace(str, search[, replace])：替换

> select replace('hello world', 'lo', 'ol');

+----------------------------+
|replace(hello world, lo, ol)|
+----------------------------+
|                 helol world|
+----------------------------+

reverse(str)：反转

> select reverse('hello world');

+--------------------+
|reverse(hello world)|
+--------------------+
|         dlrow olleh|
+--------------------+

right(str, len)：从右截取字符串

> select right('hello world', 3);

+-----------------------+
|right('hello world', 3)|
+-----------------------+
|                    rld|
+-----------------------+

rint(expr)：返回int部分的值

> select rint(3.14159);

+------------------------------+
|ROUND(CAST(3.14159 AS DOUBLE))|
+------------------------------+
|                           3.0|
+------------------------------+

rlike
rollup
round(expr, d)：

> select round(2.5, 0);

+-------------+
|round(2.5, 0)|
+-------------+
|            3|
+-------------+

row_number
rpad
rtrim(trimStr, str)：字符串右边截取

> select rtrim('ha', 'hahello worldha');

+--------------------------+
|rtrim(hahello worldha, ha)|
+--------------------------+
|             hahello world|
+--------------------------+

schema_of_json
second(timestamp)：查询秒

> select second('2011-11-11 11:11:11');

+----------------------------------------------+
|second(CAST(2011-11-11 11:11:11 AS TIMESTAMP))|
+----------------------------------------------+
|                                            11|
+----------------------------------------------+

sentences(str[, lang, country])

> select sentences('hello world!my dreams');

+------------------------------------+
|sentences(hello world!my dreams, , )|
+------------------------------------+
|                [[hello, world], ...|
+------------------------------------+

sequence
sha(expr)：加密

> select sha('hello world');

+---------------------------------+
|sha1(CAST(hello world AS BINARY))|
+---------------------------------+
|             2aae6c35c94fcfb41...|
+---------------------------------+

sha1(expr)：加密

> select sha1('hello world');

+---------------------------------+
|sha1(CAST(hello world AS BINARY))|
+---------------------------------+
|             2aae6c35c94fcfb41...|
+---------------------------------+

sha2(expr, bitLength)：加密

> select sha2('hello world', 256);

+--------------------------------------+
|sha2(CAST(hello world AS BINARY), 256)|
+--------------------------------------+
|                  b94d27b9934d3e08a...|
+--------------------------------------+

shiftleft
shiftright
shiftrightunsigned
shuffle
sign
signum
sin(expr)：正弦函数

> select sin(0);

+----------------------+
|SIN(CAST(0 AS DOUBLE))|
+----------------------+
|                   0.0|
+----------------------+

sinh
size(expr)：数据大小

> select size(array(1, 2, 3));

+--------------------+
|size(array(1, 2, 3))|
+--------------------+
|                   3|
+--------------------+

skewness
slice
smallint(expr)：转成smallint

> select smallint(100);

+---------------------+
|CAST(100 AS SMALLINT)|
+---------------------+
|                  100|
+---------------------+

sort_array(array[, ascendingOrder])：数组排序

> select sort_array(array(2, 3, 1, 0), true);

+-----------------------------------+
|sort_array(array(2, 3, 1, 0), true)|
+-----------------------------------+
|                       [0, 1, 2, 3]|
+-----------------------------------+

soundex
space
spark_partition_id()
split(str, regex)：字符串分割

> select split('hehahehahehaa', 'ha');

+------------------------+
|split(hehahehahehaa, ha)|
+------------------------+
|         [he, he, he, a]|
+------------------------+

sqrt(expr)：平方根

> select sqrt(9);

+-----------------------+
|SQRT(CAST(9 AS DOUBLE))|
+-----------------------+
|                    3.0|
+-----------------------+

stack
std
stddev
stddev_pop
stddev_samp
str_to_map(text[, pairDelim[, keyValueDelim]])：转成map

> select str_to_map('a:1,b:2,c:3', ',', ':');

+-----------------------------+
|str_to_map(a:1,b:2,c:3, ,, :)|
+-----------------------------+
|         [a -> 1, b -> 2, ...|
+-----------------------------+

string(expr)：转成string
struct(col1, col2, col3, …)

> select struct(1, 3, 4);

+---------------------------------------+
|named_struct(col1, 1, col2, 3, col3, 4)|
+---------------------------------------+
|                              [1, 3, 4]|
+---------------------------------------+

substr(str, pos[, len])：字符串截取

> select substr('hello world', 5, 1);

+----------------------------+
|substring(hello world, 5, 1)|
+----------------------------+
|                           o|
+----------------------------+

substring(str, pos[, len])：字符串截取

> select substring('hello world', 5, 1);

+----------------------------+
|substring(hello world, 5, 1)|
+----------------------------+
|                           o|
+----------------------------+

substring_index
sum(expr)：求和
tan(expr)：正切函数

> select tan(0);

+----------------------+
|TAN(CAST(0 AS DOUBLE))|
+----------------------+
|                   0.0|
+----------------------+

tanh
timestamp(expr)：转成时间戳
tinyint(expr)：转成tinyint
to_date(date_str[, fmt])：转成时间

> select to_date('2011-11-11 11:11:11');

+------------------------------+
|to_date('2011-11-11 11:11:11')|
+------------------------------+
|                    2011-11-11|
+------------------------------+

to_json(expr[, options])：生成json

> select to_json(named_struct('a', 1, 'b', 2));

+---------------------------------------+
|structstojson(named_struct(a, 1, b, 2))|
+---------------------------------------+
|                          {"a":1,"b":2}|
+---------------------------------------+

to_timestamp(timestamp[, fmt])：

> select to_timestamp('2011-11-11 11:11:11', 'yyyy-MM-dd HH:mm:ss');

+----------------------------------------------------------+
|to_timestamp('2011-11-11 11:11:11', 'yyyy-MM-dd HH:mm:ss')|
+----------------------------------------------------------+
|                                       2011-11-11 11:11:11|
+----------------------------------------------------------+

to_unix_timestamp(expr[, pattern])

> select to_unix_timestamp('2011-11-11 11:11:11', 'yyyy-MM-dd HH:mm:ss');

+-----------------------------------------------------------+
|to_unix_timestamp(2011-11-11 11:11:11, yyyy-MM-dd HH:mm:ss)|
+-----------------------------------------------------------+
|                                                 1320981071|
+-----------------------------------------------------------+

to_utc_timestamp(timestamp, timezone)：

> select to_utc_timestamp('2011-11-11 11:11:11', 'Asia/Seoul');

+--------------------------------------------------------------------+
|to_utc_timestamp(CAST(2011-11-11 11:11:11 AS TIMESTAMP), Asia/Seoul)|
+--------------------------------------------------------------------+
|                                                 2011-11-11 02:11:11|
+--------------------------------------------------------------------+

transform
translate
trim(str)：字符串去除前后空格

> select trim('ha', 'hahello worldha');

+-------------------------+
|trim(hahello worldha, ha)|
+-------------------------+
|               ello world|
+-------------------------+

trunc(date, fmt)：fmt - [“year”, “yyyy”, “yy”, “mon”, “month”, “mm”]

> select trunc('2011-11-11 02:11:11', 'yyyy');

+----------------------------------------------+
|trunc(CAST(2011-11-11 02:11:11 AS DATE), yyyy)|
+----------------------------------------------+
|                                    2011-01-01|
+----------------------------------------------+

ucase(str)：转换为大写

> select ucase('hello world');

+------------------+
|upper(hello world)|
+------------------+
|       HELLO WORLD|
+------------------+

unbase64(str)：

> select unbase64('aGVsbG8gd29ybGQ=');

+--------------------------+
|unbase64(aGVsbG8gd29ybGQ=)|
+--------------------------+
|      [68 65 6C 6C 6F 2...|
+--------------------------+

unhex(str)：

> select unhex('68656C6C6F');

+-----------------+
|unhex(68656C6C6F)|
+-----------------+
| [68 65 6C 6C 6F]|
+-----------------+

unix_timestamp([expr[, pattern]])：

> select unix_timestamp('2020-01-01', 'yyyy-MM-dd');

+--------------------------------------+
|unix_timestamp(2020-01-01, yyyy-MM-dd)|
+--------------------------------------+
|                            1577808000|
+--------------------------------------+

upper(str)：转换为大写

> select upper('hello world');

+------------------+
|upper(hello world)|
+------------------+
|       HELLO WORLD|
+------------------+

uuid()

> select uuid();

+--------------------+
|              uuid()|
+--------------------+
|bd8aa547-9d08-46c...|
+--------------------+

var_pop
var_samp
variance
weekday
weekofyear(date)：

> select weekofyear('2011-11-11');

+------------------------------------+
|weekofyear(CAST(2011-11-11 AS DATE))|
+------------------------------------+
|                                  45|
+------------------------------------+

when

> select case when 1 > 0 then 1 when 2 > 0 then 2.0 else 1.2 end;

+--------------------------------------------------------------------------------------------------------------------------------+
|CASE WHEN (1 > 0) THEN CAST(1 AS DECIMAL(11,1)) WHEN (2 > 0) THEN CAST(2.0 AS DECIMAL(11,1)) ELSE CAST(1.2 AS DECIMAL(11,1)) END|
+--------------------------------------------------------------------------------------------------------------------------------+
|                                                                                                                             1.0|
+--------------------------------------------------------------------------------------------------------------------------------+

window
xpath
xpath_boolean
xpath_double
xpath_float
xpath_int
xpath_long
xpath_number
xpath_short
xpath_string
year(date)：

> select year('2011-11-11');

+------------------------------+
|year(CAST(2011-11-11 AS DATE))|
+------------------------------+
|                          2011|
+------------------------------+

zip_with

你可能感兴趣的:(Spark SQL内置函数)

Java全栈项目 - 校园跑腿服务系统天天进步2015 Java项目实战 java 开发语言
项目介绍校园跑腿服务系统是一个面向高校师生的互助平台,旨在解决校园内取快递、买饭、打印等日常跑腿需求。系统采用前后端分离架构,基于SpringBoot+Vue实现。技术栈后端SpringBoot2.xSpringSecurityMyBatisPlusMySQL8.0RedisRabbitMQJWT前端Vue2.xElementUIAxiosVuexVueRouter核心功能1.用户模块注册/登录实
SQLAlchemy：Python数据库实战_第2版(贾森•迈尔斯,里克•科普兰) zxfxgn 数据库 python 开发语言
pdf：获取关于SQLAlchemy：“SQLAlchemy是一个流行的PythonSQL工具包和对象关系映射（ORM）库。”安装SQLAlchemy：“安装SQLAlchemy非常简单，你可以使用pip安装它：pipinstallsqlalchemy。”数据库连接：“使用SQLAlchemy的第一步是创建一个数据库连接。这通常是通过创建一个Engine对象来完成的，该对象表示数据库的核心接口。”
【Postgres】postgresql系列之数据类型 zkq_1986 数据库
一、数字数据类型1.1数字类型列表：类型名称存储长度描述范围smallint2bytes小范围整数类型-32768to+32767integer4bytes整数类型-2147483648to+2147483647bigint8bytes大范围数据类型-9223372036854775808to9223372036854775807decimal可变用户指定精度upto131072digitsbef
【MySQL】Mysql数据库导入导出sql文件、备份数据库、迁移数据库程序员洲洲数据库数据库 mysql 导入导出sql sql文件备份迁移
本文摘要：本文提出了xxx的实用开发小技巧。作者介绍：我是程序员洲洲，一个热爱写作的非著名程序员。CSDN全栈优质领域创作者、华为云博客社区云享专家、阿里云博客社区专家博主。同时欢迎大家关注其他专栏，我将分享Web前后端开发、人工智能、机器学习、深度学习从0到1系列文章。同时洲洲已经建立了程序员技术交流群，如果您感兴趣，可以私信我加入我的社群，也可以直接vx联系（文末有名片）v：bdizztt随时
Hadoop 和 Spark 的内存管理机制分析王子良. 经验分享 hadoop spark 大数据
欢迎来到我的博客！非常高兴能在这里与您相遇。在这里，您不仅能获得有趣的技术分享，还能感受到轻松愉快的氛围。无论您是编程新手，还是资深开发者，都能在这里找到属于您的知识宝藏，学习和成长。博客内容包括：Java核心技术与微服务：涵盖Java基础、JVM、并发编程、Redis、Kafka、Spring等，帮助您全面掌握企业级开发技术。大数据技术：涵盖Hadoop（HDFS）、Hive、Spark、Fli
SQL 查询表中某个字段数据的最大长度凌龍墨 sql 数据库 sqlserver mysql
mysqlselect字段名,length(字段名)from表名wherelength(字段名)=(selectmax(length(字段名))from表名)#示例：获取user表中的最大长度的name值selectname,length(name)fromuserwherelength(name)=(selectmax(length(name)fromuser))SqlServerselect字
sql备份mysql数据库表小白兔拔萝卜数据库 mysql sql
备份数据库表复制备份表(包含字段和数据，不包含表主键，索引和约束)：createtabletable_name2asselect*fromtable_name1复制备份表（包含字段和数据和表结构）：createtabletable_name2likeselect*fromtable_name1insertintotable_name2select*fromtable_name1
MySQL利用sql文件生成数据库 magic33416563 MySQL sql专栏 mysql 数据库 sql
1，将要导入的.sql文件移至bin文件下，这样的路径比较方便2，登录MySQL：mysql-u用户名-p如我输入的命令行:mysql-uroot-p(输入同样后会让你输入MySQL的密码)3，在MySQL中新建你要建的数据库，这时是空数据库，如新建一个名为news的目标数据库4，输入&
mysql -- WITH RECURSIVE 语法 m0_74824592 mysql 数据库 sql
引言在SQL中，WITHRECURSIVE是一个用于创建递归查询的语句。它允许你定义一个CommonTableExpression(CTE)，该CTE可以引用自身的输出。递归CTE非常适合于查询具有层次结构或树状结构的数据，例如组织结构、文件系统或任何其他具有自引用关系的数据。一、基本语法WITHRECURSIVEcte_name(column1,column2,...)AS(--非递归的初始部分
sql server 杂记 yangchz sql server
sqlserver杂记sqlserver中也具有标准SQL的三层结构：数据库(DATABASE)——模式/框架(SCHEMA)——表(TABLE)。但是在对某个表进行操作时，会有下面这三条语句：SELECT*FROMrelevantDB.relevantSchema.someTable;SELECT*FROMrelevantSchema.someTable;SELECT*FROMsomeTable
SQL语句总结杂记【收集中】 haiross oracle开发SQL语句
表test只有ID和NAME字段，包含三行数据。一、selectnullfromtest;和select*fromtest;对比：1、SQL〉select*fromtest；IDNAME--------------1a2b3c已返回3行2、SQL〉selectnullfromtest；NULL-----------已返回3行说明：null表示select语句执行后获得了结果集，只是不显示内容在屏幕
【杂记---SQL Server 的默认实例和命名实例的文件位置】 feixianxxx 杂七杂八SQL Server知识点 sql server 数据库引擎服务器 c
SQLServer的默认实例和命名实例的文件位置ps：MSDN摘入安装SQLServer将安装一个或多个单独的实例。无论是默认实例还是命名实例都有自己的一组程序文件和数据文件，同时还有在计算机上的所有SQLServer实例之间共享的一组公共文件。所有SQLServer实例的共享文件：单个计算机上的所有实例使用的公共文件安装在文件夹:/ProgramFiles/MicrosoftSQLServer/
Java全栈项目--校园餐饮点评平台项目实战天天进步2015 Java项目实战 java 开发语言
项目介绍本项目是一个面向校园师生的餐饮点评平台，用户可以在平台上查看校园内各个餐厅的信息、菜品评价、发表点评等。项目采用SpringBoot+Redis+MySQL实现，包含用户登录、商户查询、优惠券秒杀、点评发布等功能。技术栈后端：SpringBoot、MyBatis-Plus、Redis前端：Vue.js、ElementUI数据库：MySQL缓存：Redis核心功能实现1.登录功能采用Redi
Java全栈项目 - 农产品溯源管理系统开发实践天天进步2015 Java项目实战 java 开发语言
一、项目介绍农产品溯源管理系统是一个基于Java全栈技术开发的现代化信息系统，旨在实现农产品从种植、生产到销售的全过程追踪管理。本系统帮助提高农产品质量安全监管效率，保障食品安全。二、技术架构后端技术栈：SpringBoot2.5.xSpringSecurityMyBatisPlusMySQL8.0RedisJWT认证前端技术栈：Vue.js3.0ElementPlusAxiosEchartsVu
美食推荐系统协同过滤余弦函数推荐美食 Springboot Vue Element-UI前后端分离小盼江源码课题设计毕业设计美食 spring boot vue.js
个性化美食推荐系统协同过滤余弦函数推荐美食Echart数据统计SpringbootVueElement-UI前后端分离【亮点功能】1.Springboot+Vue+Element-UI+Mysql前后端分离2.Echarts图表统计数据,直观展示数据情况3.发表评论后，用户可以回复评论,回复的评论可以被再次回复,一级评论可以添加图片附件4.推荐美食列表展示,使用协同过滤余弦函数根据用户的评论,收藏
57-SQL中WITH RECURSIVE的用法烟火缠过客 MySQL sql 数据库
SQL中WITHRECURSIVE的用法文章目录SQL中WITHRECURSIVE的用法定义**WITHRECURSIVE结构通常包含以下几个关键部分：****1.CTE（CommonTableExpression，公用表表达式）：**2.递归查询的结构3.连接操作符：4.终止条件示例EXPLAIN定义WITHRECURSIVE是SQL中的一种高级查询结构，用于执行递归查询。递归查询是一种特殊的查
MYSQL数据库（二） python小桦数据库 mysql oracle
SQL分类：分类全称解释DDLDataDefinitionLanguage数据定义语言，用来定义数据库对象（数据库，表，字段）DMLDataManipulationLanguage数据操作语言，用来对数据库表中的数据进行增删改DQLDataQueryLanguage数据查询语言，用来查询数据库中表的记录DCLDataControlLanguage数据控制语言，用来创建数据库用户，控制数据库的访问权
SQL杂记 ℒℴѵℯ陆·离ꦿ໊ོﻬ° SQL sql 数据库
1.表的创建、修改、删除1.1直接创建表：CREATETABLE[IFNOTEXISTS]tb_name--不存在才创建，存在就跳过(column_name1data_type1--列名和类型必选[PRIMARYKEY--可选的约束，主键|FOREIGNKEY--外键，引用其他表的键值|AUTO_INCREMENT--自增ID|COMMENTcomment--列注释（评论）|DEFAULTdefa
PL/SQL语言的文件操作云端架构师包罗万象 golang 开发语言后端
PL/SQL语言的文件操作引言PL/SQL（ProceduralLanguage/SQL）是Oracle数据库提供的一种过程化编程语言，它结合了SQL的强大数据处理能力和过程性编程的灵活性。PL/SQL不仅可以用于数据库的操作和处理用户输入的数据，还可以进行丰富的文件操作。随着数据量的增加和信息处理需求的提高，掌握PL/SQL中的文件操作技术，对于数据库管理员和开发人员而言，显得尤为重要。本文将对
预见未来：基于MySQL的实时用户行为影响预测系统，掌握商业先机墨夶数据库学习资料2 mysql 数据库
在这个信息瞬息万变的时代，企业如何能够迅速响应市场变化，准确捕捉用户需求，成为竞争中的佼佼者？答案在于构建一个高效的实时用户行为影响预测系统。通过利用MySQL的强大功能和先进的数据分析技术，我们可以深入挖掘用户的每一次点击、浏览乃至购买背后的故事，不仅帮助公司更好地理解现有客户群体的行为模式，还能提前预测未来的趋势走向。今天，我们将带您走进这个神奇的世界，探索如何用代码编织出一张精准描绘用户心理
MySQL 进阶：运维与架构 - 从链式复制到主从复制墨夶数据库学习资料1 mysql 运维架构
MySQL进阶：运维与架构-从链式复制到主从复制在MySQL数据库的高可用性和扩展性架构中，链式复制提供了一种灵活的方式来扩展复制拓扑结构。然而，在某些情况下，你可能需要将复杂的链式复制架构简化为主从复制架构，例如为了减少延迟、简化管理或者应对特定的安全要求。本文将详细介绍如何从链式复制架构转换回主从复制架构，并提供相应的操作步骤和注意事项。❓引言：为什么从链式复制回到主从复制❓尽管链式复制提供了
MySQL 进阶：运维与架构 - 从主从复制到链式复制墨夶数据库学习资料1 mysql 运维架构
MySQL进阶：运维与架构-从主从复制到链式复制在MySQL数据库的高可用性和扩展性架构中，主从复制是一种常见的技术手段。通过主从复制，可以实现数据的备份、故障恢复、读写分离等功能。然而，随着业务规模的扩大和复杂度的增加，单一的主从复制架构可能无法满足更高的需求。因此，链式复制作为一种扩展形式，逐渐成为数据库架构师们关注的重点。本文将详细介绍从主从复制到链式复制的演进过程，以及如何实现和管理链式复
解锁SQL递归查询：WITH RECURSIVE的深度解析 2401_85762266 sql 数据库
标题：解锁SQL递归查询：WITHRECURSIVE的深度解析在数据的层级结构中探索，犹如穿梭于迷宫，每个节点都可能隐藏着通往更深层次的路径。SQL的WITHRECURSIVE正是我们手中的阿莉阿德涅之线，引领我们深入数据的每一个角落。本文将详细解读WITHRECURSIVE的神秘力量，通过实际代码示例，展示如何使用这一强大的递归查询功能。一、WITHRECURSIVE的魔法起源WITHRECUR
MySQL 进阶：运维与架构 - 延迟复制墨夶数据库学习资料1 mysql 运维架构
MySQL进阶：运维与架构-延迟复制在MySQL的主从复制架构中，延迟复制（DelayedReplication）是一种特殊的复制策略，它允许从服务器（Slave）在接收到主服务器（Master）的二进制日志事件后，延迟一段时间再执行这些事件。这种机制在多种场景下都非常有用，例如，当需要在从服务器上保留旧的数据版本以供审计或备份时，或者当需要在从服务器上进行一些非实时的数据分析时。本文将详细介绍M
创建一个存储过程来生成一个包含所有月份名称的列表可以通过PL/SQL实现 Distantfbc oracle 数据库
在Oracle数据库中，创建一个存储过程来生成一个包含所有月份名称的列表可以通过PL/SQL实现。以下是一个简单的存储过程示例，它使用一个游标（CURSOR）来遍历一个月份数字的数组，并输出对应的月份名称：CREATEORREPLACEPROCEDURElist_monthsAS--定义一个游标，用于遍历月份CURSORmonth_cursorISSELECTTO_CHAR(LEVEL,'FM00
高级java每日一道面试题-2025年01月19日-框架篇[Mybatis篇]-MyBatis 中见过什么设计模式 ? java我跟你拼了 java每日一道面试题 java mybatis 设计模式
如果有遗漏,评论区告诉我进行补充面试官:MyBatis中见过什么设计模式?我回答:1.工厂模式（FactoryPattern）定义：工厂模式是一种创建型模式，它提供了一种创建对象的最佳方式，将对象创建过程抽象化，从而提高代码的可维护性和灵活性。在MyBatis中的应用：SqlSessionFactoryBuilder和SqlSessionFactory的创建过程体现了工厂模式的应用。SqlSess
MySQL学习笔记11：limit 分页查询 AsajuHuishi MySQL mysql 数据库
简介本系列（MySQL学习笔记）是我基于B站上SQL播放量第一的MySQL基础+高级篇-数据库-sql-尚硅谷视频所做的笔记，方便大家学习和掌握MySQL。说明1.这个系列基本包含了视频中老师讲课的所有内容，包括知识点、案例、部分测试题。2.所需的配套资料（来自B站评论区）@黎曼的猜想：配套资料下载–>公众号公众号DragonWell回复：mysql注意：是公众号！！是公众号！！是公众号，点那个搜
ssm+java计算机毕业设计智能家居系统c82b7（程序+lw+源码+远程部署) 秋名计算机毕设程序源码 java 课程设计智能家居
项目运行项目含有源码(见文末)、文档、程序、数据库、配套开发软件、软件安装教程环境配置：Jdk1.8+Tomcat7.0+Mysql+HBuilderX（Webstorm也行）+Eclispe（IntelliJIDEA,Eclispe,MyEclispe,Sts都支持）。项目技术：SSM+mybatis+Maven+JSP等等组成，B/S模式+Maven管理等等。环境需要1.运行环境：最好是jav
黑客常备十大编程语言，每一个都不容易学，但每一个又很有用一秋的编程笔记 Python 编程计算机科技数据库 sql 爬虫 python 自动化编程语言
文章目录1、C语言2、Python3、SQL4、Javascript5、PHP6、C++编程7、JAVA8、Ruby9、Perl10、BashPython学习资源分享1、Python所有方向的学习路线2、学习软件3、精品书籍4、入门学习视频5、实战案例6、清华编程大佬出品《漫画看学Python》7、Python副业兼职与全职路线一定要注意，您选择的编程将在很大程度上取决于您要定位的系统类型和计划使
最新springboot医院信管系统程序媛小刘 spring java spring boot
采用技术最新springboot医院信管系统的设计与实现~开发语言：Java数据库：MySQL技术：SpringBoot+MyBatis工具：IDEA/Ecilpse、Navicat、Maven页面展示效果系统功能首页注册医生信息个人中心管理员功能首页科室管理页面医生信息页面病房管理问诊记录管理取消挂号管理医生模块首页挂号管理问诊记录管理取消挂号管理项目背景随着科学技术发展，电脑已成为人们生活中必
mongodb3.03开启认证 21jhf mongodb
下载了最新mongodb3.03版本，当使用--auth 参数命令行开启mongodb用户认证时遇到很多问题，现总结如下：（百度上搜到的基本都是老版本的，看到db.addUser的就是，请忽略） Windows下我做了一个bat文件，用来启动mongodb，命令行如下： mongod --dbpath db\data --port 27017 --directoryperdb --logp
【Spark103】Task not serializable bit1129 Serializable
Task not serializable是Spark开发过程最令人头疼的问题之一，这里记录下出现这个问题的两个实例，一个是自己遇到的，另一个是stackoverflow上看到。等有时间了再仔细探究出现Task not serialiazable的各种原因以及出现问题后如何快速定位问题的所在，至少目前阶段碰到此类问题，没有什么章法 1. package spark.exampl
你所熟知的 LRU(最近最少使用) dalan_123 java
关于LRU这个名词在很多地方或听说，或使用，接下来看下lru缓存回收的实现 1、大体的想法 a、查询出最近最晚使用的项 b、给最近的使用的项做标记通过使用链表就可以完成这两个操作，关于最近最少使用的项只需要返回链表的尾部；标记最近使用的项，只需要将该项移除并放置到头部，那么难点就出现你如何能够快速在链表定位对应的该项？这时候多
Javascript 跨域周凡杨 JavaScript jsonp 跨域 cross-domain
linux下安装apache服务器 g21121 apache
安装apache 下载windows版本apache，下载地址：http://httpd.apache.org/download.cgi 1.windows下安装apache Windows下安装apache比较简单，注意选择路径和端口即可，这里就不再赘述了。 2.linux下安装apache：下载之后上传到linux的相关目录，这里指定为/home/apach
FineReport的JS编辑框和URL地址栏语法简介老A不折腾 finereport web报表报表软件语法总结
JS编辑框： 1.FineReport的js。作为一款BS产品，browser端的JavaScript是必不可少的。 FineReport中的js是已经调用了finereport.js的。大家知道，预览报表时，报表servlet会将cpt模板转为html，在这个html的head头部中会引入FineReport的js，这个finereport.js中包含了许多内置的fun
根据STATUS信息对MySQL进行优化墙头上一根草 status
mysql 查看当前正在执行的操作，即正在执行的sql语句的方法为: show processlist 命令 mysql> show global status;可以列出MySQL服务器运行各种状态值，我个人较喜欢的用法是show status like '查询值%';一、慢查询mysql> show variab
我的spring学习笔记7-Spring的Bean配置文件给Bean定义别名 aijuans Spring 3
本文介绍如何给Spring的Bean配置文件的Bean定义别名？原始的 <bean id="business" class="onlyfun.caterpillar.device.Business"> <property name="writer"> <ref b
高性能mysql 之性能剖析 annan211 性能 mysql mysql 性能剖析剖析
1 定义性能优化 mysql服务器性能，此处定义为响应时间。在解释性能优化之前，先来消除一个误解，很多人认为，性能优化就是降低cpu的利用率或者减少对资源的使用。这是一个陷阱。资源时用来消耗并用来工作的，所以有时候消耗更多的资源能够加快查询速度，保持cpu忙绿，这是必要的。很多时候发现编译进了新版本的InnoDB之后，cpu利用率上升的很厉害，这并不
主外键和索引唯一性约束百合不是茶索引唯一性约束主外键约束联机删除
目标;第一步;创建两张表用户表和文章表第二步;发表文章 1,建表; ---用户表 BlogUsers --userID唯一的 --userName --pwd --sex create
线程的调度 bijian1013 java 多线程 thread 线程的调度 java多线程
1. Java提供一个线程调度程序来监控程序中启动后进入可运行状态的所有线程。线程调度程序按照线程的优先级决定应调度哪些线程来执行。 2. 多数线程的调度是抢占式的（即我想中断程序运行就中断，不需要和将被中断的程序协商） a)
查看日志常用命令 bijian1013 linux 命令 unix
一.日志查找方法，可以用通配符查某台主机上的所有服务器grep "关键字" /wls/applogs/custom-*/error.log 二.查看日志常用命令1.grep '关键字' error.log：在error.log中搜索'关键字'2.grep -C10 '关键字' error.log：显示关键字前后10行记录3.grep '关键字' error.l
【持久化框架MyBatis3一】MyBatis版HelloWorld bit1129 helloworld
MyBatis这个系列的文章，主要参考《Java Persistence with MyBatis 3》。样例数据本文以MySQL数据库为例，建立一个STUDENTS表，插入两条数据，然后进行单表的增删改查 CREATE TABLE STUDENTS ( stud_id int(11) NOT NULL AUTO_INCREMENT,
【Hadoop十五】Hadoop Counter bit1129 hadoop
1. 只有Map任务的Map Reduce Job File System Counters FILE: Number of bytes read=3629530 FILE: Number of bytes written=98312 FILE: Number of read operations=0 FILE: Number of lar
解决Tomcat数据连接池无法释放 ronin47 tomcat 连接池　优化
近段时间，公司的检测中心报表系统(SMC)的开发人员时不时找到我，说用户老是出现无法登录的情况。前些日子因为手头上有Jboss集群的测试工作，发现用户不能登录时，都是在Tomcat中将这个项目Reload一下就好了，不过只是治标而已，因为大概几个小时之后又会再次出现无法登录的情况。今天上午，开发人员小毛又找到我，要我协助将这个问题根治一下，拖太久用户难保不投诉。简单分析了一
java-75-二叉树两结点的最低共同父结点 bylijinnan java
import java.util.LinkedList; import java.util.List; import ljn.help.*; public class BTreeLowestParentOfTwoNodes { public static void main(String[] args) { /* * node data is stored in
行业垂直搜索引擎网页抓取项目 carlwu Lucene Nutch Heritrix Solr
公司有一个搜索引擎项目，希望各路高人有空来帮忙指导，谢谢！这是详细需求：（1）通过提供的网站地址(大概100-200个网站)，网页抓取程序能不断抓取网页和其它类型的文件（如Excel、PDF、Word、ppt及zip类型），并且程序能够根据事先提供的规则，过滤掉不相干的下载内容。（2）程序能够搜索这些抓取的内容，并能对这些抓取文件按照油田名进行分类，然后放到服务器不同的目录中。
[通讯与服务]在总带宽资源没有大幅增加之前,不适宜大幅度降低资费 comsci 资源
降低通讯服务资费，就意味着有更多的用户进入，就意味着通讯服务提供商要接待和服务更多的用户，在总体运维成本没有由于技术升级而大幅下降的情况下，这种降低资费的行为将导致每个用户的平均带宽不断下降，而享受到的服务质量也在下降，这对用户和服务商都是不利的。。。。。。。。 &nbs
Java时区转换及时间格式 Cwind java
本文介绍Java API 中 Date, Calendar, TimeZone和DateFormat的使用，以及不同时区时间相互转化的方法和原理。问题描述：向处于不同时区的服务器发请求时需要考虑时区转换的问题。譬如，服务器位于东八区（北京时间，GMT+8:00），而身处东四区的用户想要查询当天的销售记录。则需把东四区的“今天”这个时间范围转换为服务器所在时区的时间范围。
readonly,只读，不可用 dashuaifu js jsp disable readOnly readOnly
readOnly 和 readonly 不同，在做js开发时一定要注意函数大小写和jsp黄线的警告！！！我就经历过这么一件事：使用readOnly在某些浏览器或同一浏览器不同版本有的可以实现“只读”功能，有的就不行，而且函数readOnly有黄线警告！！！就这样被折磨了不短时间！！！（期间使用过disable函数，但是发现disable函数之后后台接收不到前台的的数据！！！）
LABjs、RequireJS、SeaJS 介绍 dcj3sjt126com js Web
LABjs 的核心是 LAB（Loading and Blocking）：Loading 指异步并行加载，Blocking 是指同步等待执行。LABjs 通过优雅的语法（script 和 wait）实现了这两大特性，核心价值是性能优化。LABjs 是一个文件加载器。RequireJS 和 SeaJS 则是模块加载器，倡导的是一种模块化开发理念，核心价值是让 JavaScript 的模块化开发变得更
[应用结构]入口脚本 dcj3sjt126com PHP yii2
入口脚本入口脚本是应用启动流程中的第一环，一个应用（不管是网页应用还是控制台应用）只有一个入口脚本。终端用户的请求通过入口脚本实例化应用并将将请求转发到应用。 Web 应用的入口脚本必须放在终端用户能够访问的目录下，通常命名为 index.php，也可以使用 Web 服务器能定位到的其他名称。控制台应用的入口脚本一般在应用根目录下命名为 yii（后缀为.php），该文
haoop shell命令 eksliang hadoop hadoop shell
cat chgrp chmod chown copyFromLocal copyToLocal cp du dus expunge get getmerge ls lsr mkdir movefromLocal mv put rm rmr setrep stat tail test text
MultiStateView不同的状态下显示不同的界面 gundumw100 android
只要将指定的view放在该控件里面，可以该view在不同的状态下显示不同的界面，这对ListView很有用，比如加载界面，空白界面，错误界面。而且这些见面由你指定布局，非常灵活。 PS：ListView虽然可以设置一个EmptyView，但使用起来不方便，不灵活，有点累赘。 <com.kennyc.view.MultiStateView xmlns:android=&qu
jQuery实现页面内锚点平滑跳转 ini JavaScript html jquery html5 css
平时我们做导航滚动到内容都是通过锚点来做，刷的一下就直接跳到内容了，没有一丝的滚动效果，而且 url 链接最后会有“小尾巴”，就像#keleyi，今天我就介绍一款 jquery 做的滚动的特效，既可以设置滚动速度，又可以在 url 链接上没有“小尾巴”。效果体验：http://keleyi.com/keleyi/phtml/jqtexiao/37.htmHTML文件代码： &
kafka offset迁移 kane_xie kafka
在早前的kafka版本中（0.8.0），offset是被存储在zookeeper中的。到当前版本（0.8.2）为止，kafka同时支持offset存储在zookeeper和offset manager（broker）中。从官方的说明来看，未来offset的zookeeper存储将会被弃用。因此现有的基于kafka的项目如果今后计划保持更新的话，可以考虑在合适
android > 搭建 cordova 环境 mft8899 android
1 , 安装 node.js http://nodejs.org node -v 查看版本 2, 安装 npm 可以先从 https://github.com/isaacs/npm/tags 下载源码解压到
java封装的比较器，比较是否全相同，获取不同字段名字 qifeifei
非常实用的java比较器，贴上代码： import java.util.HashSet; import java.util.List; import java.util.Set; import net.sf.json.JSONArray; import net.sf.json.JSONObject; import net.sf.json.JsonConfig; i
记录一些函数用法 .Aky. 位运算 PHP 数据库函数 IP
高手们照旧忽略。想弄个全天朝IP段数据库，找了个今天最新更新的国内所有运营商IP段，copy到文件，用文件函数，字符串函数把玩下。分割出startIp和endIp这样格式写入.txt文件，直接用phpmyadmin导入.csv文件的形式导入。（生命在于折腾，也许你们觉得我傻X，直接下载人家弄好的导入不就可以，做自己的菜鸟，让别人去说吧）当然用到了ip2long()函数把字符串转为整型数
sublime text 3 rust wudixiaotie Sublime Text
1.sublime text 3 => install package => Rust 2.cd ~/.config/sublime-text-3/Packages 3.mkdir rust 4.git clone https://github.com/sp0/rust-style 5.cd rust-style 6.cargo build --release 7.ctrl