E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hive运行日志
Spark详解
其他Spark的库都是构建在RDD和SparkCore之上的SparkSQL提供通过Apache
Hive
的SQL变体
Hive
查询语言(Hi
武昌库里写JAVA
·
2024-01-16 21:15
高手面试
spark
大数据
分布式
MYSQL数据库引擎笔记随笔
InnoDB事务安全数据库默认引擎MyISAMinsertselect速度较快MEMORY内存数据库临时数据用完即删不适合用做静态变量的稍大数据Arc
hive
就简称日志引擎吧只有insertselect
时秋
·
2024-01-16 21:49
随笔杂
随笔杂
Hudi0.14.0最新编译(修订版)
1编译环境Java1.8maven3.9.3hadoop3.3.4
hive
3.1.3spark3.2.1flink1.16.0hudi0.14.02hudi准备2.1源码$gitclonehttps:/
跟着大数据和AI去旅行
·
2024-01-16 20:40
大数据企业级实战
hudi
network
TCP/IP、UDP/IPTCP、UDP详解https://www.cnblogs.com/visily/arc
hive
/2013/03/15/2961190.htmlDNSDNS原理入门http://
寻亦追忆
·
2024-01-16 19:44
ubuntu_16_04_64系统下载很多工具都会报错
错误:W:Can'tdropprivilegesfordownloadingasfile'/var/cache/apt/arc
hive
s/partial/atop_1.26-2build1_amd64.
一叶知秋96
·
2024-01-16 19:53
linux
运维
服务器
R语言【paleobioDB】——pbdb_strata_auto():通过部分名称或前缀返回多个地质地层的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 19:16
paleobioDB
r语言
开发语言
OpenVPN一键Linux安装脚本
/open-install.ziphttps://gitee.com/mzllon/open-install/repository/arc
hive
/v20230728unzipopen-
ststcheung
·
2024-01-16 18:33
linux
服务器
运维
hive
:创建自定义python UDF
Java-UDFvs.Python-UDFJava实现UDF,需要引用包含
Hive
API的外部jar包,而Python无需引起其他外部包;Java实现UDF后,需要打包后才可被Hi
-柚子皮-
·
2024-01-16 16:35
Database
hive
python
udf
hive
:创建自定义python UDF
addfilehdfs://home/user/py3_script/;setspark.yarn.dist.arc
hive
s=hdfs://home/user/py3.tar.gz;setspark.shuffle.hdfs.enabled
青盏
·
2024-01-16 16:35
other
hive
hadoop
数据仓库
2017年高考英语北京卷 - 阅读理解A
NorthCarolina.ThegirlsontheWesleyanAcademysoftballwerewaitingfortheirnextturnsatbatduringpractice,stampingtheirfeettostaywarm,Eighth-graderTaylorBisbees
hive
redalittleassh
让文字更美
·
2024-01-16 16:36
78、Spark SQL之延伸知识之
Hive
On Spark
SparkSQL与
Hive
OnSpark区别
Hive
是目前大数据领域,事实上的SQL标准。
ZFH__ZJ
·
2024-01-16 15:10
apt-get install 出现错误的解决办法
我遇到的错误信息如下:dpkg:errorprocessingarc
hive
/var/cache/apt/arc
hive
s/mongodb-database-tools_100.2.0_amd64.deb
ztenv
·
2024-01-16 14:30
linux
apt-get
install
Three.js基础入门介绍——Three.js学习五【让模型沿着轨迹移动】
流程基本流程添加模型增加运动轨迹让模型沿轨迹运动工程文件结构如下图:static:存放静态资源文件three.js-master:为官网下载的代码包,包含所有需要用到的资源包,链接:https://github.com/mrdoob/three.js/arc
hive
小猪猪哟
·
2024-01-16 14:21
Three.js
前端
Linux离线安装MySQL5.7
Linux离线安装MySQL5.7准备tar包官方链接:MySQL::DownloadMySQLCommunityServer(Arc
hive
dVersions)将MySQLtar包上传至服务器内部解压并重命名
神志不清.
·
2024-01-16 11:37
MySQL
运维
mysql
linux
centos
linux安装mysql5.7教程
目录一、下载安装包(推荐第二种)二、安装mysql三、设置密码和开启远程连接一、下载安装包(推荐第二种)1.官网下载:https://downloads.mysql.com/arc
hive
s/community
这人很懒没留下什么
·
2024-01-16 11:06
安装教程
linux
mysql
DataX&数据同步(全量)
1.DataX简介1.1DataX概述 DataX是阿里巴巴开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、
Hive
、ODPS、HBase、FTP
韩顺平的小迷弟
·
2024-01-16 11:29
大数据
数据同步
R语言【paleobioDB】——pbdb_scale():通过ID选择,返回一个时间刻度的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 10:46
paleobioDB
r语言
windows
开发语言
R语言【paleobioDB】——pbdb_scales():返回多个时间刻度的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 10:13
paleobioDB
r语言
开发语言
HIVE
总结
HIVE
总结一、创建数据库CREATEDATABASEIFNOTEXISTSTEST;数据库在HDFS的默认位置为:/user/
hive
/warehouse/test.dbCREATEDATABASEIFNOTEXISTSTESTLOCATION
天选之子123
·
2024-01-16 10:52
大数据
hive
hadoop
数据仓库
添加Anaconda国内镜像
Anaconda安装包可以到https://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
/下载。
TR老于
·
2024-01-16 09:11
HIve
项目入门 环境部署遇到的问题及解决方案
环境布置的步骤建议是jdk,hadoop
hive
这几个分别去下载,参考以下几个安装教程:【主要参考:傻瓜式教程】Windows下安装
Hive
MySQL版【附安装Hadoop教程】全网最详细的图文教程【有一些补充的内容
Manchesterr
·
2024-01-16 09:47
数据分析岗位
hive
hadoop
数据仓库
R语言【paleobioDB】——pbdb_strata():通过名称、等级和/或 地理位置选择,返回地质地层的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 09:07
paleobioDB
r语言
开发语言
R语言【paleobioDB】——pbdb_richness():绘制指定类群的数量丰度
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 09:01
paleobioDB
r语言
开发语言
jupyter lab 安装与远程使用(并配置C/C++ kernel)
服务器是新建议一个用户xxx,并切换到相应的用户sudoxxx;2、在/home/xxx/下载安装脚本wgethttps://mirrors.tuna.tsinghua.edu.cn/anaconda/arc
hive
jxncxgx
·
2024-01-16 08:21
Jupyter
Notebook
Hive
数据迁移
一、需求同步集团的数据到断直连环境。二、思路三、同步数据(方案)1、环境:断直连模拟环境2、操作机器:ETL机器XX.14.36.2163、工作路径:cd/usr/local/fqlhadoop/hadoop/bin4、执行命令:命令格式:./hadoopdistcphdfs://${NameNode_IP}:${NameNode_RPC_IP}/${源文件}hdfs://${NameNode_I
bigdata-余建新
·
2024-01-16 07:14
Hive
hive
hadoop
数据仓库
SparkSQL和
Hive
语法差异
SparkSQL和
Hive
语法差异1、仅支持
Hive
SparkSQL关联条件on不支持函数rand()创建零时表时,Spark不支持直接赋值nullSpark无法读取字段类型为void的表SparkSQL
中长跑路上crush
·
2024-01-16 07:28
Spark阶段
hive
hadoop
数据仓库
spark
分布式
Hive
知识点
之上的数据仓库,数据计算是mapreduce,数据存储是HDFS目的是构建面向分析的集成的数据环境,为企业提供决策支持(面向分析的存储系统)主要特征:面向主题的,集成的,非易失的和时变的数据集合,用以支持管理决策
HIve
꧁༺朝花夕逝༻꧂
·
2024-01-16 07:25
hive
hadoop
数据仓库
Hive
(二)
修改表的结构:重命名:altertabletable_1renametotable_2;增加列信息:altertabletable_1addcolumns(mycolstring,myscostring);更新列:altertabletable_1changecolumnmycolint;删除表:droptabletable_1;数据查询:查询所有列(全表查询):select*fromscore;
꧁༺朝花夕逝༻꧂
·
2024-01-16 07:25
hive
hadoop
数据仓库
Hive
使用shell调用命令行特殊字符处理
1.场景分析数据处理常用
hive
-e的方式,通过脚本操作数仓,过程中常常遇到特殊字符的处理,如单双引号、反斜杠、换行符等,现将特殊字符用法总结使用如下,可直接引用,避免自行测试的繁琐。
tuoluzhe8521
·
2024-01-16 07:17
Hive相关
hive
hadoop
数据仓库
将Sqoop与
Hive
集成无缝的数据分析
将Sqoop与
Hive
集成是实现无缝数据分析的重要一步,它可以将关系型数据库中的数据导入到
Hive
中进行高级数据处理和查询。
晓之以理的喵~~
·
2024-01-16 06:44
sqoop
hive
sqoop
数据分析
免费的域名要不要?
-雪饼前言eu.org的免费域名相比于其他免费域名注册服务,https://xue6ing.cn/arc
hive
s/free-yu-ming-yao-bu-yao注册账号EU.org注册页面填写必要
xB77
·
2024-01-16 06:06
服务器
域名
免费
Hive
基础知识(十五):
Hive
中SQL排序方式全解
Reducer1)使用ORDERBY子句排序ASC(ascend):升序(默认)DESC(descend):降序2)ORDERBY子句在SELECT语句的结尾3)案例实操(1)查询员工信息按工资升序排列
hive
依晴无旧
·
2024-01-16 06:24
大数据
hive
hadoop
数据仓库
Hive
基础知识(十六):
Hive
-SQL分区表使用与优化
Hive
中的分区就是分目录,把一个大的数据集根据业务需要分割成小的数据集。在查询时通过WHERE子句中的表达式选择查询所需要的指定的分区,这样的查询效率会提高很多。
依晴无旧
·
2024-01-16 05:11
大数据
hive
hadoop
数据仓库
Clickhouse集成离线
hive
、实时kafka数据实操
Clickhouse集成
hive
一、官网介绍:1、clickhouse集成
hive
、kafka官网介绍:2、clickhouse支持的数据类型:二、创建对应
hive
的clickhouse表1、利用clickhouse
静听枫语
·
2024-01-16 05:11
大数据
hive
数据仓库
big
data
kafka
maven3.3.3安装以及lombok安装
前提条件:Windows下安装好jdk1.8一、maven安装步骤1解压下载地址:http://arc
hive
.apache.org/dist/maven/maven-3/3.3.3/binaries/
CopyLower
·
2024-01-16 05:02
Java
java
maven
jdk
大数据技术原理与应用 第三版 林子雨 期末复习(四)
Hive
大数据技术原理与应用第三版林子雨期末复习(四)
Hive
概念数据仓库层次传统数据仓库面临的挑战
Hive
简介
Hive
与传统数据库对比概念
Hive
是一个基于Hadoop的数据仓库工具。
头发多多,肆意生长
·
2024-01-16 05:22
大数据技术
数据仓库
big
data
hive
maven仓库
https://arc
hive
.apache.org/dist/maven/maven-3/https://mvnrepository.com/
vily_luky
·
2024-01-16 04:21
maven
java
Oracle11g DG实战配置(Windows版)(五)主备库DG配置
5.1DG主库配置(主库操作)5.1.1配置OracleDataGuard#登录数据库sqlplus/assysdba#查看数据库归档模式,确认Arc
hive
log已启用selectname,log_modefromv
0xfather
·
2024-01-16 03:33
数据库
windows
数据库
oracle
R语言【paleobioDB】——pbdb_subtaxa():统计指定类群下的子类群数量
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:48
paleobioDB
r语言
开发语言
R语言【paleobioDB】——pbdb_taxa():获得多个类群名的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:18
paleobioDB
r语言
windows
开发语言
R语言【paleobioDB】——pbdb_taxa_auto():根据部分名称或前缀,获得多个类群名的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:18
paleobioDB
r语言
开发语言
R语言【paleobioDB】——pbdb_taxon():通过名称或标识符,获得一个类群名的基本信息
可以选择在Indexof/src/contrib/Arc
hive
/paleobioDB(r-project.org)下载安装包后,执行本地安装。
ALittleHigh
·
2024-01-16 03:14
paleobioDB
r语言
windows
开发语言
ClickHouse - 01
png批处理会将源业务系统中的数据通过数据抽取工具(例如Sqoop)将数据抽取到HDFS中,这个过程可以使用MapReduce、Spark、Flink技术对数据进行ETL清洗处理,也可以直接将数据抽取到
Hive
ArthurHC
·
2024-01-16 02:17
git
//版本比较,打包差异文件gitarc
hive
HEAD-oupdate.zip$(gitdiff--name-only--diff-filter=MDHEADHEAD~1)//比较改动的文件gitdiff
马铁狗
·
2024-01-16 00:18
通过
hive
元数据查询
hive
库和表的总条数
1、传统方式获得总条数例如以下:selectcount(*)fromods.tracklog;2、通过元数据获取方式如下:A、查指定库不含分区selectFORMAT(sum(tb.PARAM_VALUE),0)fromTBLStleftjoinDBSdont.DB_ID=d.DB_IDleftjoinTABLE_PARAMStbont.TBL_ID=tb.TBL_IDwhered.NAME='h
王木头
·
2024-01-15 22:34
大数据
hive
hive
big
data
hadoop
pycharm中集成Qt desinger,并用pyqtgraph实现K线图在GUI界面中的嵌入
原文来自:https://zmister.com/arc
hive
s/187.html原文中由于缺少讲解几个import,导致代码无法跑,这里是完整的例子。
Eva215665
·
2024-01-15 22:42
python
Hive
窗口函数整理
Hive
中的窗口函数允许你在结果集的一个特定“窗口”内对行进行计算。这些窗口可以是物理的(基于行在数据中的实际位置)或逻辑的(基于行的一些排序标准)。
田晖扬
·
2024-01-15 19:21
大数据
Hive
常用函数
一、窗口函数1、窗口函数基础结构窗口函数=分析函数+over函数分析函数:sum()、max()、row_number()等等over函数:over(partitionbyuser_idorderbydatedesc/asc)按照user_id字段分区,每个分区内根据date字段排序,asc:升序desc:降序(默认升序)2、排序函数:row_number/rank/dense_ranka)row
kaiker
·
2024-01-15 18:28
find_shape_model
,-2],0.9,Row,Column,Angle,Score)*创建一个初始化矩阵hom_mat2d_identity(HomMat2D)*从点和角度计算刚性仿射变换,找出模板和卡尺工具的对应关系P
hive
ctor_angle_t
小张小迪
·
2024-01-15 17:13
笔记
开发语言
在 CentOS 中,zip 是一个常用的命令行工具,用于创建和提取 zip 归档文件。
以下是一些常见的zip命令用法创建zip归档文件:#创建包含目录或文件的zip归档文件zip-rarc
hive
.zip/path/to/directory_or_file#创建并压缩zip归档文件zip-r
二当家的素材网
·
2024-01-15 15:34
运维
运维
服务器
上一页
20
21
22
23
24
25
26
27
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他