E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
jdbc连接hive
Hive
基础知识(十五):
Hive
中SQL排序方式全解
Reducer1)使用ORDERBY子句排序ASC(ascend):升序(默认)DESC(descend):降序2)ORDERBY子句在SELECT语句的结尾3)案例实操(1)查询员工信息按工资升序排列
hive
依晴无旧
·
2024-01-16 06:24
大数据
hive
hadoop
数据仓库
Hive
基础知识(十六):
Hive
-SQL分区表使用与优化
Hive
中的分区就是分目录,把一个大的数据集根据业务需要分割成小的数据集。在查询时通过WHERE子句中的表达式选择查询所需要的指定的分区,这样的查询效率会提高很多。
依晴无旧
·
2024-01-16 05:11
大数据
hive
hadoop
数据仓库
Clickhouse集成离线
hive
、实时kafka数据实操
Clickhouse集成
hive
一、官网介绍:1、clickhouse集成
hive
、kafka官网介绍:2、clickhouse支持的数据类型:二、创建对应
hive
的clickhouse表1、利用clickhouse
静听枫语
·
2024-01-16 05:11
大数据
hive
数据仓库
big
data
kafka
maven3.3.3安装以及lombok安装
前提条件:Windows下安装好jdk1.8一、maven安装步骤1解压下载地址:http://arc
hive
.apache.org/dist/maven/maven-3/3.3.3/binaries/
CopyLower
·
2024-01-16 05:02
Java
java
maven
jdk
大数据技术原理与应用 第三版 林子雨 期末复习(四)
Hive
大数据技术原理与应用第三版林子雨期末复习(四)
Hive
概念数据仓库层次传统数据仓库面临的挑战
Hive
简介
Hive
与传统数据库对比概念
Hive
是一个基于Hadoop的数据仓库工具。
头发多多,肆意生长
·
2024-01-16 05:22
大数据技术
数据仓库
big
data
hive
maven仓库
https://arc
hive
.apache.org/dist/maven/maven-3/https://mvnrepository.com/
vily_luky
·
2024-01-16 04:21
maven
java
Oracle11g DG实战配置(Windows版)(五)主备库DG配置
5.1DG主库配置(主库操作)5.1.1配置OracleDataGuard#登录数据库sqlplus/assysdba#查看数据库归档模式,确认Arc
hive
log已启用selectname,log_modefromv
0xfather
·
2024-01-16 03:33
数据库
windows
数据库
oracle
R语言【paleobioDB】——pbdb_subtaxa():统计指定类群下的子类群数量
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:48
paleobioDB
r语言
开发语言
R语言【paleobioDB】——pbdb_taxa():获得多个类群名的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:18
paleobioDB
r语言
windows
开发语言
R语言【paleobioDB】——pbdb_taxa_auto():根据部分名称或前缀,获得多个类群名的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:18
paleobioDB
r语言
开发语言
R语言【paleobioDB】——pbdb_taxon():通过名称或标识符,获得一个类群名的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:14
paleobioDB
r语言
windows
开发语言
ClickHouse - 01
png批处理会将源业务系统中的数据通过数据抽取工具(例如Sqoop)将数据抽取到HDFS中,这个过程可以使用MapReduce、Spark、Flink技术对数据进行ETL清洗处理,也可以直接将数据抽取到
Hive
ArthurHC
·
2024-01-16 02:17
git
//版本比较,打包差异文件gitarc
hive
HEAD-oupdate.zip$(gitdiff--name-only--diff-filter=MDHEADHEAD~1)//比较改动的文件gitdiff
马铁狗
·
2024-01-16 00:18
通过
hive
元数据查询
hive
库和表的总条数
1、传统方式获得总条数例如以下:selectcount(*)fromods.tracklog;2、通过元数据获取方式如下:A、查指定库不含分区selectFORMAT(sum(tb.PARAM_VALUE),0)fromTBLStleftjoinDBSdont.DB_ID=d.DB_IDleftjoinTABLE_PARAMStbont.TBL_ID=tb.TBL_IDwhered.NAME='h
王木头
·
2024-01-15 22:34
大数据
hive
hive
big
data
hadoop
pycharm中集成Qt desinger,并用pyqtgraph实现K线图在GUI界面中的嵌入
原文来自:https://zmister.com/arc
hive
s/187.html原文中由于缺少讲解几个import,导致代码无法跑,这里是完整的例子。
Eva215665
·
2024-01-15 22:42
python
Hive
窗口函数整理
Hive
中的窗口函数允许你在结果集的一个特定“窗口”内对行进行计算。这些窗口可以是物理的(基于行在数据中的实际位置)或逻辑的(基于行的一些排序标准)。
田晖扬
·
2024-01-15 19:21
大数据
Hive
常用函数
一、窗口函数1、窗口函数基础结构窗口函数=分析函数+over函数分析函数:sum()、max()、row_number()等等over函数:over(partitionbyuser_idorderbydatedesc/asc)按照user_id字段分区,每个分区内根据date字段排序,asc:升序desc:降序(默认升序)2、排序函数:row_number/rank/dense_ranka)row
kaiker
·
2024-01-15 18:28
find_shape_model
,-2],0.9,Row,Column,Angle,Score)*创建一个初始化矩阵hom_mat2d_identity(HomMat2D)*从点和角度计算刚性仿射变换,找出模板和卡尺工具的对应关系P
hive
ctor_angle_t
小张小迪
·
2024-01-15 17:13
笔记
开发语言
在 CentOS 中,zip 是一个常用的命令行工具,用于创建和提取 zip 归档文件。
以下是一些常见的zip命令用法创建zip归档文件:#创建包含目录或文件的zip归档文件zip-rarc
hive
.zip/path/to/directory_or_file#创建并压缩zip归档文件zip-r
二当家的素材网
·
2024-01-15 15:34
运维
运维
服务器
在 CentOS 上,tar 是一个常用的命令行工具,用于创建、查看和提取 tar 归档文件
以下是一些常见的tar命令用法:创建tar归档文件:#创建一个包含目录或文件的tar归档文件tar-cvfarc
hive
.tar/path/to/directory_or_file#创建一个gzip压缩的
二当家的素材网
·
2024-01-15 13:42
运维
centos
linux
运维
Hive
导入数据的五种方法
在
Hive
中建表成功之后,就会在HDFS上创建一个与之对应的文件夹,且文件夹名字就是表名;文件夹父路径是由参数
hive
.metastore.warehouse.dir控制,默认值是/user/
hive
/
冬瓜的编程笔记
·
2024-01-15 12:04
大数据
hive
hadoop
数据仓库
大数据开发之
Hive
(压缩和存储)
第9章:压缩和存储
Hive
不会强制要求将数据转换成特定的格式才能使用。
Key-Key
·
2024-01-15 12:34
大数据
hive
hadoop
大数据开发之
Hive
(企业级调优)
第10章:企业级调优创建测试用例1、建大表、小表和JOIN后表的语句//创建大表createtablebigtable(idbigint,tbigint,uidstring,keywordstring,url_rankint,click_numint,click_urlstring)rowformatdelimitedfieldsterminatedby'\t';//创建小表createtable
Key-Key
·
2024-01-15 12:34
大数据
hive
hadoop
大数据开发之
Hive
(统计影音视频网站的常规指标)
第11章:
Hive
实战11.1数据结构1、视频表字段备注详细描述videoId视频唯一id(String)11位字符串uploader视频上传者(String)上传视频的用户名Stringage视频年龄
Key-Key
·
2024-01-15 12:34
大数据
hive
hadoop
大数据开发之
Hive
(基本概念、安装、数据类型、DDL数据定义、DML数据操作)
第1章:
Hive
基本概念1.1
Hive
1.1.1
Hive
产生背景HDFS来存储海量的数据、MapReduce来对海量数据进行分布式并行计算、Yarn来实现资源管理和作业调度。
Key-Key
·
2024-01-15 12:04
大数据
hive
hadoop
大数据开发之
Hive
(查询、分区表和分桶表、函数)
第6章:查询6.1基本语法及执行顺序1、查询语句语法select_expr,select_expr,...FROMtable_reference[WHEREwhere_condition][GROUPBYcol_list][ORDERBYcol_list][CLUSTERBYcol_list|[DISTRIBUTEBYcol_list][SORTBYcol_list]][LIMITnumber]2
Key-Key
·
2024-01-15 12:04
大数据
hive
hadoop
大数据开发之
Hive
(详细版,最后有实战训练)
第1章:
Hive
基本概念1.1
Hive
1.1.1
Hive
产生背景HDFS来存储海量的数据、MapReduce来对海量数据进行分布式并行计算、Yarn来实现资源管理和作业调度。
Key-Key
·
2024-01-15 12:29
hive
hadoop
大数据
dpkg-deb: error: paste subprocess was killed by signal (Broken pipe)
:pastesubprocesswaskilledbysignal(Brokenpipe)Errorswereencounteredwhileprocessing:/var/cache/apt/arc
hive
s
joker-wt
·
2024-01-15 12:11
Ubuntu系统跳坑指南
ubuntu
linux
运维
在Ubuntu中安装node.js工具
2.更新系统的软件包列表:sudoaptupdate3.安装Node.js的PPA(PersonalPackageArc
hive
):sudoaptinstall-ycurlsoftware
~半城
·
2024-01-15 12:36
ubuntu
node.js
linux
dpkg-deb: error: paste subprocess was killed by signal
但最有效)sudodpkg-i--force-overwrite"报错的package路径"sudoapt-finstall其中,我电脑报错package的路径是:/var/cache/apt/arc
hive
s
秋雨梧桐落满阶
·
2024-01-15 12:34
linux
运维
服务器
dpkgdeb: error: paste subprocess was killed by signal (Broken pipe) 错误解决方法
错误描述dpkg:errorprocessingarc
hive
/var/cache/apt/arc
hive
s/mongodb-org-server_4.2.19_amd64.deb(--unpack):
astronautyi
·
2024-01-15 12:34
ubuntu
linux
运维
sudo apt-get -f install报错dpkg-deb: error: subprocess paste was killed by signal (Broken pipe) wine
终端执行:sudodpkg-i--force-overwrite相关路径如:sudodpkgautoremove/var/cache/apt/arc
hive
s/wine1.6_1%3a1.6.2-0ubuntu14.2
今年不吃饭...
·
2024-01-15 12:33
ubuntu
报错显示:dpkg-deb: error: paste subprocess was killed by signal (Broken pipe)
deb.nodesource.com/setup_18.x|sudo-Ebash-结果出现报错显示Errorswereencounteredwhileprocessing:/var/cache/apt/arc
hive
s
~半城
·
2024-01-15 12:02
linux
运维
服务器
Datax同步(高可用HDFS版本)
这是一个mysql同步到
hive
的json脚本,
hive
的底层使用的是HDFS存储,同步到
hive
,只能用hdfswritermysql->
hive
{"job":{"setting":{"speed":
暴走的贼宇
·
2024-01-15 12:59
hdfs
hadoop
大数据
postgresql12 客户端命令浅析
这里写自定义目录标题potgresql12客户端命令参数浅析pg_arc
hive
cleanuppg_configpg_dumpallpg_dumppg_restorepg_basebackuppg_resetwalpg_test_fsyncpg_controldatapg_recvlogicalpg_isreadypg_test_timingpgbenchpg_rewindpg_upgradeva
不上进的菜鸟
·
2024-01-15 10:03
postgresql
Zookeeper教程1
Zookeeper翻译过来就是动物园管理员,他是用来管Hadoop(大象)、
Hive
(蜜蜂)、Pig(小猪)的管理员。简称zkZookeeper是一个分布式的、开源的分布式应用程序的协调服务。
暗雪之格
·
2024-01-15 09:56
Zookeeper
zookeeper
分布式
云原生
Cloudera公司的CDH与HDP均无法下载问题(403 Forbidden (varnish) the provided credentials were incorrect)
2.解决方法使用开源的Apache的相关软件包http://arc
hive
.apache.org/dist/CDH&Ambari安装包百度云
小宇0926
·
2024-01-15 07:41
大数据平台搭建
cloudera
pipeline制品 arc
hive
Artifacts
脚本pipeline{agentanyoptions{timestamps()}stages{stage('getcode'){steps{checkout([$class:'GitSCM',branches:[[name:'*/master']],doGenerateSubmoduleConfigurations:false,extensions:[],submoduleCfg:[],userR
野猪佩挤
·
2024-01-15 06:54
Jenkins
Hadoop2.9.2在windows上的安装
1、下载hadoop-2.9.2.tar.gz官网下载地址:http://arc
hive
.apache.org/dist/hadoop/common/hadoop-2.9.2/hadoop-2.9.2.
懵懂无知的蜗牛
·
2024-01-15 06:30
hadoop
Android Studio 历史版本下载
AndroidStudiodownloadarc
hive
s|AndroidDevelopers官网提供的历史版本下载
阿启
·
2024-01-15 05:39
android
studio
android
ide
Hive
的Join操作
JOINON和WHERE条件区别7.其他常用SQL操作7.1不同数据类型判断空7.2排序或JOIN或Groupby字段空值导致结果问题7.3JOIN操作导致数据膨胀8.SemiJoin和AntiJoin9.
Hive
黄土高坡上的独孤前辈
·
2024-01-15 04:23
Hive/Kylin数据仓库
Mysql
Utils
sql
Hive
mapreduce的map与reduce个数由什么决定?
3.ReduceTask的数量决定3.1在执行
hive
shell的时候可以看到下列日志3.2官网对这三个
黄土高坡上的独孤前辈
·
2024-01-15 04:22
Hive/Kylin数据仓库
hive
项目实战-知行教育大数据分析平台-01
什么是事实表与维度表3、事实表与维度表的分类4、维度建模的三种模型5、缓慢渐变维七、本项目数仓架构八、HUE的使用九、自动化调度工具介绍十、通过HUE操作oozie本文将利用前面所学的Linux,Hadoop,
Hive
吆喝的翅膀
·
2024-01-15 04:22
python+大数据学习
数据仓库
教育电商
hive
hadoop
cloudera
Hive
QL快速使用
hive
命令包括
Hive
cli和
hive
QL命令
Hive
clicli就是命令行界面,可以通过cli创建表,检查模式和查询表。
Tim在路上
·
2024-01-15 02:31
clickhouse常规的优化方法
一、建表优化1.1日期字段避免使用String存储建表时能用数值型或日期时间型表示的字段就不要用字符串,全String类型在以
Hive
为中心的数仓建设中常见,但ClickHouse环境不应受此影响。
运维仙人
·
2024-01-15 01:08
大数据
clickhouse
大数据
大数据StarRocks(六) :Catalog
外部数据:指保存在外部数据源(如Apache
Hive
™、ApacheIceberg、ApacheHudi、DeltaLake、JDBC)中的数据。2.Catalog当前StarRocks提供两
运维仙人
·
2024-01-15 01:07
大数据
大数据
starrocks
Oracle—数据恢复
文档结构1、恢复原理1.1、recyclebin(回收站)相关操作1.2、arc
hive
dredo(归档日志)1.3、supplementallog(补充日志)2、恢复场景2.1、定义删除2.2、记录删除
蓝魔Y
·
2024-01-15 01:46
数据库
Oracle
数据恢复
附加日志
【大数据进阶第三阶段之Hue学习笔记】Hue简介和架构介绍
通过使用Hue我们可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据,例如操作HDFS上的数据、运行MapReduceJob、执行
Hive
的SQL语句
Allen_lixl
·
2024-01-15 00:56
大数据
Hue
大数据
学习
笔记
hadoop
hue
iOS工具--解压缩
搜索了一下发现有一个压缩与解压zip文件的第三方“SSZipArc
hive
”:https://github.com/ZipArc
hive
/ZipArc
hive
是用C语言实现的,包装用于OC与swift.
半缘魔君
·
2024-01-14 22:03
大数据-
hive
函数与mysql函数的辨析及练习-将多行聚合成一行
目录1.collect_list:聚合-不去重2.collect_set(col):聚合-去重3.mysql的聚合函数-group_concat4.leetcode练习题1.collect_list:聚合-不去重将组内的元素收集成数组不会去重2.collect_set(col):聚合-去重函数只接受基本数据类型,它的主要作用是将某字段的值进行去重汇总,产生Array类型字段。//创建一张实验用表,
王哪跑nn
·
2024-01-14 21:29
大数据
hive
hadoop
数据仓库
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他