E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive外部表
mysql 中OPTIMIZE TABLE语句用法详解
这个命令会对MyISAM、InnoDB和ARC
HIVE
存储引擎的表进行操作。
半桶水专家
·
2023-12-15 07:19
数据库
mysql
【
Hive
_01】
hive
关于数据库和表的语法
1、
Hive
常见使用技巧1.1交互式与非交互式1.2
hive
参数配置方式2、DDL数据定义2.1创建数据库(1)创建数据库(2)查询数据库(3)修改数据库(4)删除数据库(5)切换当前数据库2.2表(1
温欣2030
·
2023-12-15 06:12
【大数据】
hive
数据库
hadoop
《PySpark大数据分析实战》-03.了解
Hive
对大数据技术栈Hadoop、
Hive
、Spark、Kafka等有深入研究,对Data
wux_labs
·
2023-12-15 06:42
PySpark大数据分析实战
数据分析
数据挖掘
大数据
数据科学
hive
客户机执行sql脚本无法显示表头
hive
客户机执行sql脚本无法显示表头临时跑数在sql脚本前加以下语句set
hive
.cli.print.header=true;日常跑数不想每次跑数前都执行以下1、在home路径下创建.
hive
rc
人生苦短,我爱数据分析
·
2023-12-15 06:37
hive
sql
hadoop
hive
聚合函数之JOIN原理及案例
1.数据准备原始数据创建dept.txt文件,并赋值如下内容,上传HDFS。部门编号部门名称部门位置id10行政部170020财务部180030教学部190040销售部1700创建emp.txt文件,并赋值如下内容,上传HDFS。员工编号姓名岗位薪资部门7369张三研发800.00307499李四财务1600.00207521王五行政1250.00107566赵六销售2975.00407654侯七
Appreciate(欣赏)
·
2023-12-15 06:03
hive
hive
数据仓库
hive
聚合函数之排序
1全局排序(OrderBy)OrderBy:全局排序,只有一个Reduce。(1).使用OrderBy子句排序asc(ascend):升序(默认)desc(descend):降序(2).OrderBy子句在select语句的结尾基础案例实操(1)查询员工信息按工资升序排列select*fromemporderbysal;(2)查询员工信息按工资降序排列select*fromemporderbysa
Appreciate(欣赏)
·
2023-12-15 06:03
hive
hive
hadoop
数据仓库
hive
自定义函数及案例
一.自定义函数1.
Hive
自带了一些函数,比如:max/min等,但是数量有限,自己可以通过自定义UDF来方便的扩展。
Appreciate(欣赏)
·
2023-12-15 06:03
hive
hive
数据仓库
【
Hive
_02】查询语法
1、基础语法2、基本查询(Select…From)2.1全表和特定列查询2.2列别名2.3Limit语句2.4Where语句2.5关系运算函数2.6逻辑运算函数2.7聚合函数3、分组3.1GroupBy语句3.2Having语句3.3Join语句(1)等值与不等值Join(2)表的别名(3)内连接(4)左外连接(5)右外连接(6)满外连接(7)多表连接(8)笛卡尔集(9)联合(union&unio
温欣2030
·
2023-12-15 06:53
【大数据】
hive
hadoop
数据仓库
hive
常用SQL函数及案例
1函数简介
Hive
会将常用的逻辑封装成函数给用户进行使用,类似于Java中的函数。好处:避免用户反复写逻辑,可以直接拿来使用。重点:用户需要知道函数叫什么,能做什么。
Appreciate(欣赏)
·
2023-12-15 06:50
hive
hive
sql
hadoop
RMAN执行crosscheck arc
hive
log出现ORA-19633错误
1.错误现象RMAN>crosscheckarc
hive
logall;RMAN-03009:failureofcrosscheckcommandonORADISK1channelat12/13ORA-19633
Floating warm sun
·
2023-12-15 06:20
oracle
RMAN
故障处理
dba
Hive
安装步骤
linux自带的MariaDB数据库(3)卸载linux自带的MariaDB数据库3、安装mysql数据库(1)上传mysql安装包(2)解压安装包(3)安装依赖文件,注意先后顺序,必须按照顺序来安装4、配置
Hive
chde2Wang
·
2023-12-15 06:17
hive
hadoop
数据仓库
05 MySQL 安装
https://downloads.mysql.com/arc
hive
s/community/或者从上传资源下载。
kk_io
·
2023-12-15 06:32
数据仓库
mysql
adb
数据库
07用户行为日志数据采集
用户行为数据由Flume从Kafka直接同步到HDFS,由于离线数仓采用
Hive
的分区表按天统计,所以目标路径要包含一层日期。具体数据流向如下图所示。
kk_io
·
2023-12-15 06:22
数据仓库
flume
数据仓库
ubuntu20.04安装无线网卡驱动
个人博客本文章链接https://www.leaf-machinary.space/index.php/arc
hive
s/135/首先,纯净的ubuntu是没有gcc和make的,所以如果没有有线网,一定要先连上网络
luoye2333
·
2023-12-15 05:11
网络
linux
运维
Centos安装IoTDB(单机版)
文章目录一、下载安装文件二、环境准备三、安装一、下载安装文件本次使用V1.0.0版本https://iotdb.apache.org/Download/wgethttps://arc
hive
.apache.org
GreaterBuilder
·
2023-12-15 05:56
iotdb
centos
iotdb
服务器
win10 + ubuntu20.04 双系统卸载(删除) ubuntu20.04 (图文)
原文地址:https://zhangzhicheng.com/arc
hive
s/81.htmlwin10+ubuntu20.04双系统(UEFI+GPT)卸载(删除)ubuntu20.04看前须知win10
ZChen1996
·
2023-12-15 04:45
系统及软件安装
双系统
Hive
增强的聚合、多维数据集、分组和汇总
Hive
多维分析1、多维分析概述2、GROUPINGSETS多维分组3、GROUPING__ID函数4、ROLLUP与CUBE语法糖5、多维分析常见问题与解决春雨惊春清谷天,夏满芒夏暑相连;秋处露秋寒霜降
对许
·
2023-12-15 04:17
#
数据湖仓
#
Hive
#
Spark
hive
数据仓库
spark
hive
的load报错Error: EXECUTION FAILED: Task MOVE error
Hive
Exception: [Error 20531] Unable to move sour
文章目录一、问题描述二、解决方法一、问题描述
hive
在进行数据load的时候报错。
五月天的尾巴
·
2023-12-15 03:12
大数据
数据库
hive
load报错
task
move
error
perl使用Arc
hive
::Tar模块进行文件打包
使用perl的Arc
hive
::Tar模块打包文件夹中的指定文件,输出格式.tar.gz。下面是perl代码:#!
爱读庄子的码农
·
2023-12-15 03:05
perl
perl
shell
Linux
git
bash
Perl操作excel2007的模块
www.jianshu.com/p/84bda53827c8第一种方法:读写excel2007文档的perl模块:Spreadsheet::XLSX(读)和Spreadsheet::WriteExcel(写)一、首先安装包Arc
hive
aofu8398
·
2023-12-15 03:03
操作系统
【Flink名称解释一】什么是cataLog
元数据也可以是持久化的,例如
Hive
Metastore中的元数据。Catalog提供了一个统一的API,用于管理元数据,并使其可以从TableAPI和SQL查询语句中来访问。
周润发的弟弟
·
2023-12-15 03:18
从零开始搞大数据
flink
大数据
kyuubi整合flink yarn application model
目录概述配置flink配置kyuubi配置kyuubi-defaults.confkyuubi-env.sh
hive
验证启动kyuubibeeline连接使用
hive
catalogsql测试结束概述flink
流月up
·
2023-12-15 03:14
大数据
flink
大数据
kyuubi
yarn
application
1.8.0
kyuubi
1.8.0
Spark读写
Hive
Spark读写
Hive
文章目录Spark读写
Hive
(一)配置本地域名映射(二)创建
Hive
表(三)IDEA中编写Spark代码读取
Hive
数据(四)IDEA中编写Spark代码写入数据到
Hive
(一)
叶子上的考拉
·
2023-12-15 02:25
大数据
spark
hive
大数据
intellij-idea
2.CENTOS安装CDH和Kudu-1
企业级数据中心的安装主要分为4个步骤:集群服务器配置,包括安装操作系统、关闭防火墙、同步服务器时钟等;外部数据库安装安装Cloudera管理器;安装CDH集群;集群完整性检查,包括HDFS文件系统、MapReduce、
Hive
大勇任卷舒
·
2023-12-15 01:40
最简单的WebRTC示例
http://www.blogjava.net/linli/arc
hive
/2014/10/21/418910.html在学习WebRTC时,网上的示例大多代码较多,以下是参考那些代码简化的一个WebRTC
mengzhengjie
·
2023-12-15 01:03
webrtc
caution: filename not matched问题解决
caution:filenamenotmatched问题解决操作系统环境:linuxcentos6#unziptest3.ziptest4报错:Arc
hive
:test3.zipcaution:filenamenotmatched
骑马的蜗牛
·
2023-12-15 00:37
linux
linux
Ceph入门到精通-SSL_read() failed SSL: error SSL routines:tls 1_enc:internal error
errorSSLroutines:tls1_enc:internalerrorsubject:"Re\:openssl1.1.1dSSL_read\(\)failedinerrorlog"(mail-arc
hive
.com
瓦哥架构实战
·
2023-12-15 00:55
Ceph入门到精通
ceph
ssl
网络
【
Hive
】——DDL(CREATE TABLE)
1CREATETABLE建表语法2
Hive
数据类型2.1原生数据类型2.2复杂数据类型2.3
Hive
隐式转换2.4
Hive
显式转换2.5注意3SerDe机制3.1读写文件机制3.2SerDe相关语法3.2.1
那时的样子_
·
2023-12-14 23:57
hive
hadoop
数据仓库
【
Hive
】——DDL(DATABASE)
1概述2创建数据库createdatabaseifnotexiststest_databasecomment"thisismyfirstdb"withdbproperties('createdBy'='Allen');3描述数据库信息describe可以简写为descextended可以展示更多信息describedatabasetest_database;describedatabaseexte
那时的样子_
·
2023-12-14 23:57
hive
数据库
hadoop
【
Hive
】——CLI客户端(bin/beeline,bin/
hive
)
1
Hive
Server、
Hive
Server22bin/
hive
、bin/beeline区别3bin/
hive
客户端
hive
-site.xml配置远程MateStore地址XML
hive
.metastore.uristhrift
那时的样子_
·
2023-12-14 23:26
hive
hadoop
数据仓库
【
Hive
】——概述
1什么是
Hive
2
Hive
优点3
Hive
和Hadoop的关系4映射信息记录5SQL语法解析、编译
Hive
能将一个文件映射成为一张表,文件和表之间的关系称为映射
Hive
的功能职责是将SQL语法解析编译成为
那时的样子_
·
2023-12-14 23:15
hive
hive
hadoop
大数据
【
Hive
】——安装部署
内嵌模式3.2本地模式3.3远程模式4安装前准备hadoop.proxyuser.root.hosts*hadoop.proxyuser.root.groups*5远程模式安装5.1下载https://
hive
.apache.org
那时的样子_
·
2023-12-14 23:15
hive
hadoop
数据仓库
Hive
浅析
Hive
是一个简单的LUA沙盒,除了基本的LUA解释器的功能以外,还提供了诸如热加载等功能。了解
HIVE
的工作原理有利于了解Lua虚拟机的底层实现机理。
garagong
·
2023-12-14 23:14
大数据
hive
hadoop
数据仓库
gtest测试
环境安装1、下载gtest1.8版本wgethttps://github.com/google/googletest/arc
hive
/refs/tags/release-1.8.1.zip2、将其解压在
DreamColors
·
2023-12-14 23:43
gtest
单元测试
conda 使用教程(linux)
1.下载安装1.1下载所有版本镜像(清华大学开源镜像网站):https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/从中选择合适版本的镜像下载.如Anaconda3
休息一下接着来
·
2023-12-14 22:50
conda
linux
anaconda
hive
-3.1.2环境安装实验
1.修改hadoop相关参数1-修改core-site.xml[bigdata@master
hive
]$vim/opt/module/hadoop/etc/hadoop/core-site.xmlhadoop.proxyuser.bigdata.hosts
芝士小熊饼干
·
2023-12-14 22:09
hive
hadoop
数据仓库
mysql8.0.34的安装配置
下载资源官网下载:MySQL::DownloadMySQLInstaller(Arc
hive
dVersions)https://downloads.mysql.com/arc
hive
s/installer
CDTU iron fan
·
2023-12-14 22:17
安装配置
mysql
hive
数据仓库工具
1、
hive
是一套操作数据仓库的应用工具,通过这个工具可实现mapreduce的功能2、
hive
的语言是hql[
hive
querylanguage]3、官网
hive
.apache.org下载
hive
软件包地址
xinxinyydss
·
2023-12-14 21:38
数据仓库
hive
hadoop
HIVE
SQL 优化
1、reduce的个数:先看一下跑
hive
时出现的参数:inordertochangetheaverageloadforareducer(inbytes):set
hive
.exec.reducers.bytes.per.reducer
本凡_大数据_机器学习
·
2023-12-14 21:32
谷歌推出Gemini语言模型,碾压GPT-4!
详细信息请看:https://fostmar.online/arc
hive
s/317/谷歌推出Gemini语言模型,碾压GPT-4!
单丽尔
·
2023-12-14 21:19
前沿科技
语言模型
chatgpt
人工智能
iPhone 15 Pro Max 与华为 Mate 60 Pro:规格比较
开始之前推荐阅读:澎湃OS与HarmonyOS——主要区别是什么:https://fostmar.online/arc
hive
s/223/GooglePixel与iPhone手机:哪个更好:https:
单丽尔
·
2023-12-14 21:49
数码科技
iphone
华为
ios
Hive
--对空值和NULL的处理
问题描述
Hive
中默认将NULL存为\N,NULL类型的字符串如何检索?
撸码小丑
·
2023-12-14 20:15
【
hive
】order by、sort by、distribute by、cluster by的区别
,在
Hive
中执行脚本时,我们可以通过setmapreduce.job.reduces=10来设置reduce的个数为10。
小赵要加油
·
2023-12-14 19:54
数据仓库
hive
hive
大数据
hadoop
外部文件数据写入
hive
hive
数据库是基于HDFS的一个数据库,是对hdfs数据的一个映射关系。注意:
hive
数据库存入数据的时候不建议使用insertinto语句来进行插入,这样的的操作方式在效率上会很低效。
小赵要加油
·
2023-12-14 19:24
数据仓库
hive
Hive
:从HDFS回收站恢复被删的表
查看回收站中的数据被删除的数据会放在删除数据时使用的用户目录下,如:使用pgxl删除的,那么删除的数据会放在如下目录:/user/pgxl/.Trash该目录下会有多个文件夹,每小时删除的数据放在不同文件夹下,目录如下:3.将回收站的数据移动回表目录下
hive
有语忆语
·
2023-12-14 19:49
大数据之Hive
hive
hdfs
hadoop
hive
映射es表任务失败,无错误日志一直报Task Transitioned from NEW to SCHEDULED
一、背景要利用gpt产生的存放在es种的日志表做统计分析,通过
hive
建es的映射表,将es的数据拉到
hive
里面。
有语忆语
·
2023-12-14 19:49
大数据之Hive
hive
elasticsearch
hadoop
查看
Hive
表信息及占用空间的方法
一、
Hive
下查看数据表信息的方法方法1:查看表的字段信息desctable_name;方法2:查看表的字段信息及元数据存储路径descextendedtable_name;方法3:查看表的字段信息及元数据存储路径
有语忆语
·
2023-12-14 19:19
大数据之Hive
hive
hadoop
数据仓库
hive
-窗口函数
1窗口函数语法分析函数/专用窗口函数over(partitionby列名orderby列名rowsbetween开始位置and结束位置)常用的分析函数常用的分析函数:sum()、max()、min()、avg()、count()常用的专用窗口函数专用窗口函数:row_number()、rank()、dense_rank()窗口函数窗口函数的3个组成部分可以单独使用,也可以混合使用,也可以全部不用o
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
hive
hadoop
数据仓库
Scala-初学
前提,已经安装好Scala在Linux终端准备资料:a.txt内容
HIVE
底层是hdfs和mapreduce实现存储和计算的。
Logan_addoil
·
2023-12-14 19:07
大数据学习之旅
scala
开发语言
后端
【python】多任务编程
多任务编程有哪些编程提速的方法单线程串行:不加改造的程序多线程并发:利用CPU和IO可以同时执行的原理,让CPU不会干巴巴等待IO完成多CPU并行/多进程:利用多核CPU的能力,真正的并行执行任务多机器并行:hadoop/
hive
小赵要加油
·
2023-12-14 19:33
python
python
开发语言
上一页
44
45
46
47
48
49
50
51
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他