E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive外部表
Hive
日期处理函数汇总
Hive
日期处理函数汇总最近项目处理日期操作比较繁杂,使用
Hive
的日期函数也较频繁1.加减日期date_add(‘日期字符串’,int值):把一个字符串日期格式加n天,n为int值selectdate_add
mizuhokaga
·
2024-01-10 09:30
hive
hadoop
数据仓库
Hive
之set参数大全-7
指定
Hive
LLAP(LiveLongandProcess)守护进程的委托令牌的生存期在Apache
Hive
中,
hive
.llap.daemon.delegation.token.lifetime是一个配置属性
OnePandas
·
2024-01-10 09:59
Hive
hive
hadoop
数据仓库
Hive
之set参数大全-6
L指定是否启用延迟评估(lazyevaluation)的扩展布尔字面量在Apache
Hive
中,
hive
.lazysimple.extended_boolean_literal是一个配置属性,用于指定是否启用延迟评估
OnePandas
·
2024-01-10 09:29
Hive
hive
hadoop
数据仓库
Hive
之set参数大全-2
C指定是否启用表达式缓存的评估
hive
.cache.expr.evaluation是
Hive
中的一个配置属性,用于指定是否启用表达式缓存的评估。
OnePandas
·
2024-01-10 09:28
Hive
hive
大数据
Hive
之set参数大全-3
D是否启用本地任务调试模式
hive
.debug.localtask是Apache
Hive
中的一个配置参数,用于控制是否启用本地任务调试模式。
OnePandas
·
2024-01-10 09:28
Hive
hive
大数据
Hive
之set参数大全-4
F指定在使用FETCH命令提取查询结果时的序列化/反序列化器
hive
.fetch.output.serde是
Hive
的一个配置参数,用于指定在使用FETCH命令提取查询结果时的序列化/反序列化器。
OnePandas
·
2024-01-10 09:28
Hive
hive
hadoop
大数据
Hive
的时间处理函数from_unixtime和unix_timestamp
一、概述
hive
时间处理函数from_unixtime和unix_timestamp的实现以及实例,从而方便后续的时间处理。
RayBreslin
·
2024-01-10 09:23
hive
unix
hadoop
hive
基本操作与示例
comment'库的注释'][location'库在hdfs上存放的路径'][withdbproperties('属性名'='属性值',...)]注意:location可以省略,默认存放在/user/
hive
我很ruo
·
2024-01-10 08:49
hive
大数据
使用Anaconda3安装tensorflow教程一步到位
可以在清华源镜像找到合适版本安装Anaconda,这里附链接:https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/对于python3.
你好,明天,,
·
2024-01-10 06:34
CNN
Python代码
python
tensorflow
anaconda
【spark】基于Spark的电影推荐系统+[详细代码及配置]
基于Spark的电影推荐系统项目架构组件版本及配置名称版本Hadoop2.8.5
Hive
2.1.0Spark1.6.3Kafka2.10_0.8.21MariaDB(Mysql)5.5.64Scala2.10.6Java1.8.0
BIG*BOSS
·
2024-01-10 06:25
Spark
spark
大数据本地环境搭建-Zookeeper/Hadoop/
Hive
搭建
1.Zookeeper环境安装链接:https://pan.baidu.com/s/1wzbCiDxP7H5G_llwjSS3Rw?pwd=wgal提取码:wgal1.1上传tar包zookeeper-3.4.6.tar注意:上传文件位置为/export/server目录1.2解压缩cd/export/servertarxvf/export/server/zookeeper-3.4.6.tar.g
OnePandas
·
2024-01-10 06:01
集群环境搭建
大数据
hadoop
zookeeper
hive
Hive
之函数解析
1.1查看系统自带的函数--查看系统自带函数showfunctions;--查看自带函数的用法desc/describefunction函数名;--查看自带函数的具体用法desc/describefunctionextended函数;1.2窗口函数1.2.1相关函数说明函数说明over()指定分析函数工作的数据窗口大小,这个数据窗口大小可能会随着行的变而变化。currentrow当前行nprece
OnePandas
·
2024-01-10 06:30
Hive
hive
hadoop
数据仓库
Hive
之set参数大全-5
I限制
外部表
数据插入set
hive
.insert.into.external.tables=true;在Apache
Hive
中,通过INSERTINTO语句向
外部表
(ExternalTable)插入数据时
OnePandas
·
2024-01-10 06:00
Hive
hive
hadoop
数据仓库
Oozie WorkFlow中Shell Action使用案例
cp-rexamples/apps/shelloozie-apps/mvshellshell-
hive
-selecttouchstudent-select.sh#!
明明德撩码
·
2024-01-10 05:56
ubuntu20.04安装cuda11.7和显卡驱动
blacklistnouveausudoupdate-initramfs-usudoreboot输入命令,如果没有任何输出,证明禁用成功lsmod|grepnouveau2、安装cuda11.7CUDAToolkitArc
hive
莫克_Cheney
·
2024-01-10 04:25
linux
运维
服务器
大数据OLAP引擎发展原因及特性分析
在大数据高速发展时期,多个技术团队基于OLAP的应用需求,开发出多种OLAP技术,如
Hive
、SparkSql、FlinkSql、Impala、Kylin、ClickHouse、Doris等,或者在实现其他应用需求的时候
i7杨
·
2024-01-10 01:31
大数据技术分析
大数据
Hive
的复杂数据类型
复杂数据类型:array、map、struct1.数组array,里边不能装不同类型的数据[hadoop@hadoop001data]$more
hive
_array.txtzhangsanbeijing
白面葫芦娃92
·
2024-01-10 00:35
2024-01-08 android studio CMakeLists.txt 把多个静态链接库打包成动态链接库so的方法
为了避免这种情况,您可以使用-Wl,--whole-arc
hive
和-Wl,--no-whole-arc
hive
这两个链接器标志包围您的静态库,这会告诉链接器把静
Donald Linux
·
2024-01-09 21:23
Android
webpack
前端
node.js
Docker基础镜像
镜像基础包安装1.Ubuntu/Debian#修改为阿里源(ubuntu)sudocp/etc/apt/sources.list/etc/apt/sources.list-baksudosed-is/cn.arc
hive
.ubuntu.com
boo_
·
2024-01-09 20:02
Flume的安装
下载地址:http://arc
hive
.apache.org/dist/flume/1.解压apache-flume-1.7.0-bin.tar.gz到/opt/module/目录下[honey@hadoop102software
静宸丶水默含声
·
2024-01-09 19:32
presto的
hive
connector连接以及JDBC访问(包含kerberos方式)
参考资料:https://prestodb.io/docs/current/connector/
hive
.html前言presto支持
hive
connector,并支持连接多个
hive
connector
早点起床晒太阳
·
2024-01-09 19:45
Oracle databas RMAN 备份脚本
RMAN删除归档日志进入rman管理操作rmantarget/查看所有的归档日志文件crosscheckarc
hive
logall;DELETEARC
HIVE
LOGALLCOMPLETEDBEFORE‘
为什么不问问神奇的海螺呢丶
·
2024-01-09 17:19
Oracle
database
oracle
数据库
解决:Unity : Error while downloading Asset Bundle: Couldn‘t move cache data 问题
问题日志如下:2-1815:04:10.9242869630223EUnity:Unabletoopenarc
hive
fileforwr
魂玉天成
·
2024-01-09 15:06
工作笔记
bug
unity
unity
游戏引擎
hive
函数及性能优化
--函数--查询当前系统提供的所有函数showfunctions;--模糊查询函数showfunctionsLIKE'x*y*';--查询指定函数的具体用法DESCFUNCTION函数名称;--查询指定函数的具体用法且带示例DESCFUNCTIONEXTENDED函数名称;--字符(串)函数【注,不分单双引号】--返回字符个数SELECTlength('abc'),length('你我他');se
xinxinyydss
·
2024-01-09 15:00
hive
hadoop
数据仓库
6.1.CentOS7下安装Sqoop安装与使用
python编程快速上手(持续更新中…)推荐系统基础一、Sqoop介绍二、Sqoop原理三、Sqoop安装事前准备安装包解压安装四、Sqoop使用1、MySQL->HDFS2、创建job3、导入数据到
Hive
IT瘾君
·
2024-01-09 15:29
推荐系统-大数据
sqoop
mysql
hadoop
大数据学习6-Sqoop安装与使用
sqoop搭建还是挺简单的,前提是hadoop与
hive
搭建完成上传解压首先下载sqoop,sqoop的版本是1.4.7,sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz,提取码
asXt
·
2024-01-09 15:57
大数据
笔记
linux
sqoop
基于spark的
Hive
2Pg数据同步组件
一、背景
Hive
中的数据需要同步到pg供在线使用,通常sqoop具有数据同步的功能,但是sqoop具有一定的问题,比如对数据的切分碰到数据字段存在异常的情况下,数据字段的空值率高、数据字段重复太多,影响
zcc_0015
·
2024-01-09 15:53
spark
大数据
分布式
oracle 19c容器数据库数据加载和传输-----SQL*Loader(一)
目录数据加载(一)控制文件加载1.创建用户执行sqlldr2.创建文本文件和控制文件3.查看表数据4.查看log文件(二)快捷方式加载1.system用户执行2.查看表数据3.查看log文件
外部表
数据加载和传输的工具
niceme!
·
2024-01-09 14:51
数据库
Hive
基础知识(三):Linux系统下的MySQL安装
1)检查当前系统是否安装过MySQL[zzdq@hadoop100
hive
]$rpm-qa|grepmariadbmariadb-libs-5.5.68-1.el7.x86_64#如果存在,就用下面这条命令卸载
依晴无旧
·
2024-01-09 13:26
hive
linux
mysql
Hive
基础知识(二):
Hive
安装部署教程
1.安装
Hive
1)把apache-
hive
-3.1.2-bin.tar.gz上传到linux的/opt/software目录下2)解压apache-
hive
-3.1.2-bin.tar.gz到/opt
依晴无旧
·
2024-01-09 13:25
大数据
hive
hadoop
数据仓库
Hive
基础知识(一):
Hive
入门与
Hive
架构原理
1.什么是
Hive
1)
hive
简介
Hive
:由Facebook开源用于解决海量、结构化日志的数据统计工具。
依晴无旧
·
2024-01-09 13:25
大数据
hive
架构
hadoop
Hive
基础知识(个人总结)
声明:1.本文为我的个人复习总结,并非那种从零基础开始普及知识内容详细全面,言辞官方的文章2.由于是个人总结,所以用最精简的话语来写文章3.若有错误不当之处,请指出一.基础
Hive
的特点:
Hive
的执行延迟比较高
hellosrc | forward
·
2024-01-09 13:54
Hive
大数据
1024程序员节
hive
大数据
hive
基础知识大全
一、
Hive
基本概念1.1
hive
是什么
hive
是基于hadoop的一个数仓分析工具,
hive
可以将hdfs上存储的结构化的数据,映射成一张表,然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567
不爱吃鱼的馋猫
·
2024-01-09 13:23
hive
数据仓库
Hive
基础知识笔记(含MySQL metastore伪分布式安装配置流程)
该笔记涉及代码:https://github.com/hackeryang/Hadoop-Exercises/tree/master/src/main/java/
Hive
一、介绍1.
Hive
是一个构建在
书忆江南
·
2024-01-09 13:52
大数据
Hive
Hive
基础知识
1.
Hive
的基本概念1.1
hive
的简介什么是
hive
?1)
Hive
是基于Hadoop的一个数据仓库工具,将结构化的数据文件映射为一张数据库的数据表,并且提供类SQL查询功能。
巷子里的猫X
·
2024-01-09 13:52
数据分析
hive
大数据
hadoop
大数据开发:
Hive
基础知识点介绍
Hadoop生态下的各个组件,
Hive
的出现是为了解决海量日志数据分析而诞生,最初出自Facebook,后来归到了Apache旗下进行开源,本质上来说,
Hive
是一个帮助提升数据处理的工具。
加米谷大数据张老师
·
2024-01-09 13:52
大数据
数据库
hive
数据仓库
Hive
基础知识
1.
Hive
和HBase的区别HBase是一个用来处理HDFS上文件的NoSQL数据库,建立于HDFS之上。
辰阳星宇
·
2024-01-09 13:22
#
Hive
hive
hadoop
big
data
基于hadoop的
hive
数据仓库基础操作知识整理
第1章
Hive
基本概念1.1什么是
Hive
hive
简介
Hive
:由Facebook开源用于解决海量结构化日志的数据统计工具。
大包丫
·
2024-01-09 13:51
hadoop
hive
大数据
hive
在mysql中总是不创建元数据库的解决办法
hive
在mysql中总是不创建元数据库的解决办法这两天打算好好捣鼓捣鼓
hive
sql。遂搞了台centos搭环境,搭环境嘛,当然是怎么简单怎么来,怎么快怎么来。
黄道婆
·
2024-01-09 13:21
bigdata
#
hive
hive
Hadoop的数据仓库
Hive
的基础知识和安装部署
1、数据仓库和
Hive
数据仓库是为了协助分析报告,支持决策,为需要业务智能的企业提供业务流程的改进和指导,从而节省时间和成本,提高质量。
姠惢荇者
·
2024-01-09 13:21
大数据
大数据
数据仓库
Hive
数据导入
Hive
基础知识(四):
Hive
元数据配置到 MySQL
1.拷贝驱动将MySQL的JDBC驱动拷贝到
Hive
的lib目录下[zzdq@hadoop100software]$cp/home/atguigu/mysql-connector-java-5.1.37
依晴无旧
·
2024-01-09 13:50
大数据
hive
mysql
hadoop
在企业网中部署SDN
2、用户名/密码:
hive
/
hive
。进入桌面以后,“Ctrl+Alt+t”打开命令终端后可以根据自己的环境,去更改为环
huangzwei
·
2024-01-09 13:16
网络
深度学习常用的下载链接/下载地址(CUDA/cuDNN)
1.CUDA各个版本的下载链接https://developer.nvidia.com/cuda-toolkit-arc
hive
2.cuDNN各个版本的下载链接https://developer.nvidia.com
Mobius8086
·
2024-01-09 12:56
深度学习
深度学习
人工智能
Spark与
Hive
的集成与互操作
ApacheSpark和Apache
Hive
是大数据领域中两个非常流行的工具,用于数据处理和分析。Spark提供了强大的分布式计算能力,而
Hive
是一个用于查询和管理大规模数据的数据仓库工具。
晓之以理的喵~~
·
2024-01-09 11:30
Spark
spark
hive
大数据
hive
sql的常用日期处理函数总结
1)date_format函数(根据格式整理日期)作用:把一个字符串日期格式化为指定的格式。selectdate_format('2017-01-01','yyyy-MM-ddHH:mm:ss'); --日期字符串必须满足yyyy-MM-dd格式 结果:2017-01-0100:00:002)date_add、date_sub函数(加减日期)作用:把一个字符串日期格式加一天、减一天。selec
*Snowgrass*
·
2024-01-09 09:43
HIVE
SQL数据分析常用案例总结
Hive
计算最大连续登陆天数3个常考的SQL数据分析题(干货建议收藏)sql数据分析案例和学习资料https://mp.weixin.qq.com/mp/appmsgalbum?
fragrans
·
2024-01-09 09:41
Hive
sql
数据分析
big
data
mysql存储引擎
主要的存储引擎包括Myisam、InooDB、BDB、MEMMORY、ARC
HIVE
、CSV等,其中InooDB和BDB引擎提供事务安全表,其他是非安全的,一般采用InooDB引擎。
程序媛-jjl
·
2024-01-09 08:56
mysql
Hive
操作命令上手手册
内容来自于《大数据
Hive
离线计算开发实战》
Hive
原理
Hive
是一个基于Hadoop的数据仓库和分析系统,用于管理和查询大型数据集。
枫叶梨花
·
2024-01-09 08:50
Hive知识圈
hive
hadoop
数据仓库
PySpark-Spark SQL基本介绍
目录SparkSQL基本介绍SparkSQL特点SparkSQL与
Hive
的异同SparkSQL的数据结构SparkSQL的入门创建SparkSession对象DataFrame详解DataFrame基本介绍
Sisi525693
·
2024-01-09 07:37
spark
大数据
分布式
Hive
查询之函数(二)
炸裂函数把一个容器的多个数据炸裂出单独展示:explode(容器)炸裂函数配合侧视图使用如下格式:select原表别名.字段名,侧视图名.字段名from原表原表别名lateralviewexplode(要炸开的字段)侧视图名as字段名;--UDTF:一进多出selectexplode(array('binzi','666','888'));selectexplode(map('a',1,'b',2
Sisi525693
·
2024-01-09 07:36
hive
hadoop
数据仓库
上一页
25
26
27
28
29
30
31
32
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他