E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hive常见异常
hive
日期函数
目录
hive
outline
hive
日期函数格式化时间函数:date_format获取当前日期:current_date获取当前时间戳:current_timestamp2011-12-0713:01:03
塞上江南o
·
2024-02-05 10:58
Hive
hive
海豚dolphinscheduler-shell 执行
hive
sql任务 Permission denied 异常
一、dolphinscheduler执行shell处理hsql任务时出现没有访问权限关键异常:/tmp/dolphinscheduler/
hive
.log(Permissiondenied)java.io.FileNotFoundException
潘永青
·
2024-02-05 10:58
log4j
apache
java
hive
code 143
ExaminingtaskID:task_1468807885116_444914_r_000469(andmore)fromjobjob_1468807885116_444914ExaminingtaskID:task_1468807885116_444914_r_000490(andmore)fromjobjob_1468807885116_444914Taskwiththemostfailu
qq_24761901
·
2024-02-05 10:27
hive
hive
【
hive
日期函数 大全】
Hive
常用日期函数整理 史上最全
【
hive
日期函数大全】
Hive
常用日期函数整理注意:1)
hive
没有to_char函数2)
HIVE
日期函数只识别年-月-日不能识别年-月,所以处理月份的时候需要特殊处理1)
hive
字符创拼接:CONCAT
数仓大山哥
·
2024-02-05 10:57
hive
hive
日期函数
日期转换
英文日期
hive
日期格式转换
固定日期转换成时间戳selectunix_timestamp('2022-05-09','yyyy-MM-dd') ;selectunix_timestamp('20220509','yyyyMMdd') ;selectunix_timestamp('2022-05-09T10:02:41Z',"yyyy-MM-dd'T'HH:mm:ss'Z'");16/Mar/2022:12:25:01+080
chimchim66
·
2024-02-05 10:26
sql
Hadoop
hive
sql
hadoop
Hive
中分区表与分桶表的操作
目录分区表一级分区表知识点示例多级分区知识点示例分区表的操作示例hadoop_
hive
文档分桶表重要参数基础分桶表知识点示例分桶表排序知识点示例分桶原理分区表和分桶表区别分区表分区表特点/好处:需要产生分区目录
Sisi525693
·
2024-02-05 10:26
hive
hadoop
数据仓库
Hive
drop 事务表 报错 flushing changes to datastore
13:01][08S01][1]Errorwhileprocessingstatement:FAILED:ExecutionError,returncode1fromorg.apache.hadoop.
hive
.ql.exec.DDLTask.MetaException
AdamShyly
·
2024-02-05 10:54
Hive
踩过的坑
hive
2024-02-04(
hive
)
1.
Hive
中的分区表可以选择字段作为表分区。分区其实就是HDFS上的不同文件夹。分区表可以极大的提高特定场景下
Hive
的操作性能。
陈xr
·
2024-02-05 10:54
随记日志
hadoop
hive
表加字段
cascade3.使用场景1.给表添加字段altertabledatabase.tablenameaddcolumns(字段名字段类型comment'字段中文含义')cascade;2.为什么使用cascade在
Hive
王一1995
·
2024-02-05 10:22
hive
hadoop
数据仓库
SparkSql读取外部Hql文件的公共类开发
SparkSql读取外部Hql文件的公共类开发SparkSQL与
Hive
的区别简介一、什么是SparkSQL?
岁月的眸
·
2024-02-05 09:27
#
Hive总结
#
Spark总结
大数据
hive
大数据
spark
在 CDH 中调优 Apache
Hive
on Spark
Spark上的
Hive
在提供相同功能的同时提供比MapReduce上的
Hive
更好的性能。在Spark上运行
Hive
不需要更改用户查询。
海阔天空&沫语
·
2024-02-05 09:27
大数据/架构
hive
hadoop
spark
ubuntu20之ROS-noetic的qt插件安装
然后把过程记录一下以免自己最后忘记1、qt5.9.9的安装:https://download.qt.io/arc
hive
/qt/5.9/5.9.9/下载完后在改文件夹打开终端,输
学习我是拒绝的
·
2024-02-05 09:56
ROS错误
qt
自动驾驶
ubuntu
flink实战--FlinkSQl实时写入hudi表元数据自动同步到
hive
简介为了实现
hive
,trino等组件实时查询hudi表的数据,可以通过使用
Hive
sync。在Flink操作表的时候,自动同步
Hive
的元数据。
阿华田512
·
2024-02-05 08:46
Flink学习必读系列
hudi
flink
hadoop
hudi
数据湖
itext pdf设置密码、权限和添加水印功能
userPassword2、ownerPassword3、permissions4、encryptionType三、添加水印1、读取pdf文件的方式创建水印2、Document创建pdf的方式添加水印四、
常见异常
一
qq_35651352
·
2024-02-05 07:41
java
maven
Hive
与PrestoSQL中的并列列转行
并列列转行1、背景描述2、
Hive
实现3、PrestoSQL实现1、背景描述通常我们在处理数据时,如果遇到一个字段存储多个值,常常需要把一行数据转换为多行数据,形成标准的结构化数据例如,将下面的两列数据并列转换为三行
对许
·
2024-02-05 07:27
#
Hive
#
Presto
hive
Java开发基础环境的搭建
JDK各版本下载:https://www.oracle.com/technetwork/java/javase/arc
hive
-139210.htmlJDK(JavaDevelopmentKit)是整个
重庆淡静
·
2024-02-05 07:18
大数据框架(分区,分桶,分片)
建议收藏目录
Hive
分区与分桶ES分片Kafka分区HBase分区Kudu分区
Hive
Hive
分区是按照数据表的某列或者某些列分为多区,在
hive
存储上是hdfs文件,也就是文件夹形式。
坨坨的大数据
·
2024-02-05 06:29
Hive
调优
Hive
调优一、SQL语句分析——EXPLAIN二、Fetch抓取三、本地模式四、表的优化1、小表大表JOIN2、大表JOIN大表3、Groupby4、Count(Distinct)去重统计5、笛卡尔积
长不大的大灰狼
·
2024-02-05 04:03
大数据
hive
大数据
hadoop
列式数据库、行式数据库简介
行式数据库3、列式数据库4、行式、列式存储对比常见的行式数据库有Mysql,DB2,Oracle,Sql-server等;列数据库(Column-Based)数据存储方式按列存储,常见的列数据库有Hbase,
Hive
长不大的大灰狼
·
2024-02-05 04:32
大数据
数据库
大数据
hive
《Qt》Qt概述(二)
之前介绍了Qt的大致历史,现在我们继续安装QT安装软件首选官方网站Qt下载官⽹:http://download.qt.io/arc
hive
/qt/国内清华源:https://mirrors.tuna.tsinghua.edu.cn
绅士·永
·
2024-02-05 02:25
QT
qt
开发语言
Tomcat环境搭建
1.关闭防火墙和selinuxsetenforce0systemctlstopfirewalld2.下载jdk和Tomcatcd/optwgethttps://arc
hive
.apache.org/dist
暗隐之光
·
2024-02-05 02:50
运维高级篇
tomcat
java
数据库与数据仓库的区别
数据库Database(Oracle,Mysql,PostgreSQL)主要用于事务处理,数据仓库Datawarehouse(AmazonRedshift,
Hive
)主要用于数据分析。
42c64edf12e9
·
2024-02-05 02:12
HIVE
--------
hive
数据仓库
hive
底层执行引擎有MapReduceTezSpark压缩GZIPLZOSnappyBZIP2等存储TextFileSequenceFileRCFileORCParquetUDF
Yagami_
·
2024-02-05 00:23
kernel里的头文件 asm 与 asm-generic
本文转载于:https://www.cnblogs.com/sammei/arc
hive
/2013/03/14/3295598.html路径asm的路径是arch/xxx/include/asm/asm-generic
最快乐的寂寞是独处
·
2024-02-04 23:08
hive
小文件合并问题
背景
Hive
query将运算好的数据写回hdfs(比如insertinto语句),有时候会产生大量的小文件,如果不采用Combine
Hive
InputFormat就对这些小文件进行操作的话会产生大量的maptask
DuLaGong
·
2024-02-04 20:16
(三)
Hive
的分桶详解
Hive
分桶通俗点来说就是将表(或者分区,也就是hdfs上的目录而真正的数据是存储在该目录下的文件)中文件分成几个文件去存储。
小猪Harry
·
2024-02-04 19:20
Fink CDC数据同步(五)Kafka数据同步
Hive
6、Kafka同步到
Hive
6.1建映射表通过flinksqlclient建Kafkatopic的映射表CREATETABLEkafka_user_topic(idint,namestring,birthstring
大数据_苡~
·
2024-02-04 16:18
mysql
数据库
Linux下 tar 命令详解
一、tar命令概述Tar(TapeARc
hive
,磁带归档的缩写,LCTT译注:最初设计用于将文件打包到磁带上,现在我们大都使用它来实现备份某个分区或者某些重要的目录)。
夜光小兔纸
·
2024-02-04 15:01
Linux
运维
linux
运维
c/c++字符串处理大集合
转自:https://blog.csdn.net/wallwind/article/details/6827863参考:https://www.cnblogs.com/xFreedom/arc
hive
/
小肥羊的慢慢科研路
·
2024-02-04 14:59
Win10下安装Anaconda(Opencv和Numpy)
注:楼主是学生所以一切版本以老师安排为主一、下载Anaconda下载网址:Indexof/anaconda/arc
hive
/|清华大学开源软件镜像站|TsinghuaOpenSourceMirrorhttps
阿阿阿阿阿阿樊
·
2024-02-04 14:41
人工智能
win10安装anaconda详细教程
下载安装包Anaconda官网:https://www.anaconda.com/download/镜像网站:https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
小张dand
·
2024-02-04 14:10
python
windows
conda
利用requests包下载音频文件
mp3_url="https://static.dedic.cn/arc
hive
/audio/e2/e27a4e2d-f7dc-442a-937e-6b10691275e5/data/95abd3e5-
二十二_0cbe
·
2024-02-04 13:18
RocketMQ安装与基本使用
而生产者和消费者实际上就是业务系统,所以这里不需要搭建,真正要搭建的就是NameServer和BrokernameServer安装启动:下载安装https://arc
hive
.apache.org/dist
Artisan_w
·
2024-02-04 11:05
分布式与微服务架构
rocketmq
实战经验分享,Python 连接 Oracle 踩坑实录
最近的一个测试任务需要测试oracle同步
hive
数据库的性能,那就需要对oracle数据库灌注测试数据。我就又打开了我的IDE,准备把我之前一下可以灌50w数据到MySQL的代码,改一改,直接用。
咖啡加剁椒.
·
2024-02-04 11:26
软件测试
python
oracle
开发语言
自动化测试
软件测试
功能测试
程序人生
大数据
Hive
--安装和配置
文章目录一、
Hive
的安装地址1.1
Hive
安装部署1.1.1安装
Hive
1.1.2启动
Hive
二、MySQL的安装地址2.1安装MySQL2.2配置MySQL2.3卸载MySQL三、配置
Hive
元数据存储到
泛黄的咖啡店
·
2024-02-04 11:44
大数据hive
大数据
hive
大数据
Hive
--函数
文章目录一、函数1.1函数简介1.2单行函数1.2.1算术运算函数1.2.2数值函数1.2.3字符串函数1.2.4日期函数1.2.5流程控制函数1.2.6集合函数1.2.7案列演示1.2.7.1数据准备1.2.7.2需求1.3高级聚合函数1.3.1案例演示1.4炸裂函数1.4.1概述1.4.2案例演示1.4.2.1数据准备1.4.2.2需求1.5窗口函数(开窗函数)1.5.1概述1.5.2常用窗口
泛黄的咖啡店
·
2024-02-04 11:44
大数据hive
hive
hadoop
大数据
Hive
--DDL(数据定义)和DML(数据操作)
文章目录一、DDL1、数据库1.1创建数据库1.2查询数据库1.3修改数据库1.4删除数据库1.5切换当前数据库2、表2.1创建表1)普通建表2)CreateTableAsSelect(CTAS)建表3)CreateTableLike语法2.2案例1)内部表与外部表2)SERDE和复杂数据类型2.3查看表2.4修改表2.5删除表2.6清空表二、DML1.1Load1.2Insert1.2.1将查询
泛黄的咖啡店
·
2024-02-04 11:43
大数据hive
大数据
hive
hadoop
(五)springboot 配置多数据源连接mysql和
hive
项目结构如下mysql执行如下建表语句,并插入一条测试数据12345CREATETABLE`user`(`id`int(11)NOTNULL,`name`varchar(255)COLLATEutf8mb4_general_ciDEFAULTNULL,PRIMARYKEY(`id`))ENGINE=InnoDBDEFAULTCHARSET=utf8mb4COLLATE=utf8mb4_genera
调试大师
·
2024-02-04 10:11
Hadoop
大数据
spring
boot
mysql
hive
Hive
SQL题——collect_set()/collect_list()聚合函数
一、collect_set()/collect_list()介绍collect_set()函数与collect_list()函数属于高级聚合函数(行转列),将分组中的某列转换成一个数组返回,常与concat_ws()函数连用实现字段拼接效果。collect_list:收集并形成list集合,结果不去重collect_set:收集并形成set集合,结果去重二、collect_set()/collec
爱吃辣条byte
·
2024-02-04 10:38
HIve
SQL
大数据
数据仓库
hive
[转]互联网企业安全建设(一)
摘自:http://www.secpulse.com/arc
hive
s/34805.html安全行业的第三流派-CSOs目前在大多数行业后加入者的眼中“二进制”和“脚本”流派广为人知,虽然他们是安全行业的主力军
angaoux03775
·
2024-02-04 08:30
Fink CDC数据同步(三)Flink集成
Hive
1目的持久化元数据Flink利用
Hive
的MetaStore作为持久化的Catalog,我们可通过
Hive
Catalog将不同会话中的Flink元数据存储到
Hive
Metastore中。
苡~
·
2024-02-04 07:20
flink
hive
大数据
hive
SQL计算有效工作日核心思路
hive
SQL计算有效工作日核心思路SQL计算是否工作日SQL计算当天是否工作日,如果不是下个工作日是哪天SQL计算工作日之间的有效工作天数
weixin_44988612
·
2024-02-04 07:20
大数据
sql
hive
Hive
主要内容一览
Hive
架构用户接口:ClientCLI(command-lineinterface)、JDBC/ODBC(jdbc访问
hive
)元数据:Metastore元数据包括:表名、表所属的数据库(默认是default
大数据左右手
·
2024-02-04 07:13
Hive
大数据
面试
大数据
Jmeter 基于Docker 实现分布式测试
制作Jmeter基础镜像下载jmeter安装包https://arc
hive
.apache.org/dist/jmeter/binaries/apache-jmete
Chengdu.S
·
2024-02-04 06:28
#
jmeter
jmeter
docker
分布式
大数据本地环境搭建03-Spark搭建
需要提前部署好Zookeeper/Hadoop/
Hive
环境1Local模式1.1上传压缩包下载链接链接:https://pan.baidu.com/s/1rLq39ddxh7np7JKiuRAhDA?
OnePandas
·
2024-02-04 06:31
Spark
大数据集群环境搭建
大数据
spark
分布式
Hadoop大数据实战系列文章之
Hive
hive
是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,并提供完整的sql查询功能,
Hive
定义了简单的类SQL查询语言,称为HQL,它允许熟悉SQL的用户查询数据可以将
测试帮日记
·
2024-02-04 05:45
spark运维问题记录
环境:spark-2.1.0-bin-hadoop2.71.Spark启动警告:neitherspark.yarn.jarsnotspark.yarn.arc
hive
isset,fallingbacktouploadinglibrariesunderSPARK_HOME
lishengping_max
·
2024-02-04 05:11
Spark
spark
当电脑gpu太强,安装最新对应的pytorch版本和对应版本的cuda
pytorch最新的cuda对应的版本为12.1,所以先要装上12.1的cuda我们去cuda官网找到12.1版本的驱动:https://developer.nvidia.com/cuda-toolkit-arc
hive
Ling_Ze
·
2024-02-04 05:05
python相关系列软件安装
pytorch
人工智能
python
大数据组件部署下载链接
Hadoop2.7下载连接:https://arc
hive
.apache.org/dist/hadoop/core/hadoop-2.7.6/
Hive
2.3.2下载连接:http://arc
hive
.apache.org
运维道上奔跑者
·
2024-02-04 05:13
大数据
zookeeper
hbase
kafka
hadoop
hive
【大数据开发运维解决方案】Hadoop+
Hive
+HBase+Kylin 伪分布式安装指南
Hadoop2.7.6+Mysql5.7+
Hive
2.3.2+Hbase1.4.9+Kylin2.4单机伪分布式安装文档注意:######################################
运维道上奔跑者
·
2024-02-04 05:43
大数据
hadoop
分布式
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他