E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HIVE安装配置
持续集成工具Jenkins的使用之配置篇(二)
上一篇:持续集成工具Jenkins的
安装配置
之安装篇(一)-CSDN博客接上文三.Jenkins配置Jenkins配置主要是针对创建构建任务前做的一些基本配置,这些配置有些是必须的,有些是可以帮我们提高效率的
雨滴测试
·
2024-01-23 09:29
持续集成
接口自动化
功能测试
自动化
功能测试
持续集成
安装nvm后
安装配置
npm、cnpm。之前安装的nodejs的配置是否要删掉
文章目录nvm安装nvm配置环境安装全局npm安装cnpm安装/管理nodejsnvmnvm是让你在同一台机器上安装和切换不同mode版本的管理工具,为了解决node各种版本存在不兼容现象安装nvm注意:如果你之前下载过nodeJs,要先卸载干净,再来安装nvm下载下载地址—选择nvm-setup.zip》双击安装文件》选择nvm的本地安装目录,这里注意,nvm的安装路径名称中最好不要有空格(最好
梁什么鸭,
·
2024-01-23 08:55
npm
nodejs
node.js
Hadoop基本介绍
1、Hadoop的整体框架Hadoop由HDFS、MapReduce、HBase、
Hive
和ZooKeeper等成员组成,其中最基础最重要元素为底层用于存储集群中所有存储节点文件的文件系统HDFS(HadoopDistributedFileSystem
w蕾丝
·
2024-01-23 08:53
DATAX的架构和运行原理
一.概念DATAX呢就是把各个不同构的数据库进行同步的过程,具体有hdfs
hive
Oracle等等吧。二.架构1.设计原理显而易见从强连通图到星形图,大大的简化了工作量。
加林so cool
·
2024-01-23 08:37
架构
20.云原生之GitLab CICD实战
GitlabRunner工作流程Gitlab集成GitlabRunnerGitLabRunner版本选择GitlabRunner部署docker-compose方式安装kubesphere中可视化方式安装helm方式
安装配置
野心与梦
·
2024-01-23 08:31
私有云+云原生实战
云原生
gitlab
Sqoop数据导入到
Hive
表的最佳实践
将数据从关系型数据库导入到
Hive
表是大数据领域中的常见任务之一,Sqoop是一个强大的工具,可以帮助实现这一目标。
晓之以理的喵~~
·
2024-01-23 07:35
sqoop
hive
sqoop
hadoop
HIVE
中关联键类型不同导致数据重复,以及数据倾斜
比如左表关联键是string类型,右表关联键是bigint类型,关联后会出现多条的情况解决方案:关联键先统一转成string类型再进行关联原因:根据
HIVE
版本不同,数据位数上限不同,低版本的超过16位会出现这种情况
帅成一匹马
·
2024-01-23 07:34
hive
hadoop
数据仓库
cdh6.3.2的
hive
配udf
之后就可以永久使用了,重启hs2也可以调研先查的
hive
官网https://cwiki.apache.org/confluence/display/
Hive
/LanguageManual+UDF#La
zdkdchao
·
2024-01-23 07:02
hive
hadoop
数据仓库
究极保姆式教你如何在Ubuntu上源码安装Qt5.15.2
**Ubuntu下Qt5.15.2源码安装环境:Ubuntu18.04(qt5.15.2要求最少也得在18.04以上)一.下载源码1.打开官网:https://download.qt.io/arc
hive
程序小白的成长旅程
·
2024-01-23 06:17
c++
Qt
linux
qt
c++
linux
ubuntu
centos
Hive
拉链表详解及实例
拉链表版本迭代:
hive
0.14slowlychangingdimension=>
hive
2.6.0merge事务管理原来采用分区表,用户分区存储历史增量数据,缺点是重复数据太多定义:数仓用于解决持续增长且存在一定时间时间范围内重复的数据存储
Byyyi耀
·
2024-01-23 06:45
hive
hadoop
数据仓库
拉链表
Hive
数仓及数仓设计方案
数仓(DataWarehouse)数据仓库存在的意义在于对企业的所有数据进行汇总,为企业各个部门提供一个统一、规范的出口。做数仓就是做方案,是用数据治理企业的方案。数据仓库的特点面向主题集成公司中不同的部门都会去数据仓库中拿数据,把独立从数据仓库中拿数据的单元,称为一个主题。数据仓库中的数据是从各个分散的数据库中抽取出来的,需要进行完整集合,还要进行数据处理。涉及的数据操作主要是查询数仓的本质能够
Byyyi耀
·
2024-01-23 06:34
hive
hadoop
数据仓库
zeppelin部署文档
后台支持接入多种数据处理引擎,如spark,
hive
等。
不加班程序员
·
2024-01-23 06:54
Hadoop相关
elasticsearch
spark
spark
大数据
开发工具
hbase
数仓建设 - 维度建模 - DIM维度
表结构设计3.2ETL任务脚本四、地区维度表4.1表结构设计4.2ETL任务脚本五、日期维度表六、用户维度表6.1表结构设计6.2ETL任务脚本前置:准备数据库[hadoop@hadoop102apache-
hive
m0_46218511
·
2024-01-23 05:14
大数据基础设施搭建
维度建模
数据仓库
jenkins ios 配置
结果登录打包机看了一下发下是硬盘空间还有80G后来想想证书好像换了,所以就去检查了一下打包机的证书,果然,证书不对,导入新的证书后,发现打包还是不对,然后重新核对导出文件,结果发现导出文件也是各种对不上,所以本地又arc
hive
张_何
·
2024-01-23 05:10
Spring源码解读,基础环境搭建以及准备
知识要点:
安装配置
GradleSpring源码准备
安装配置
Gradle下载GradleSpring是基于Gradle构建的,所以本地需安装Gradle。
javap
·
2024-01-23 03:27
Presto
完全基于内存的并行计算的分布式SQL查询引擎,是一种Massivelyparallelprocessing(MPP)架构,多个节点管道式执行,适用于交互式分析查询,数据量支持GB到PB字节,presto的查询速度比
hive
Cool_Pepsi
·
2024-01-23 02:43
大数据
big
data
presto
Hadoop --
Hive
文章目录1.什么是
hive
?1.1基本思想1.2为什么使用
hive
?
Cool_Pepsi
·
2024-01-23 02:12
大数据
hive
Hadoop -- ZooKeeper
ZooKeeper就是动物园管理员,他是用来管hadoop(大象)、
Hive
(蜜蜂)等的管理员。
Cool_Pepsi
·
2024-01-23 02:42
大数据
zookeeper
本地
安装配置
禅道BUG管理系统并结合内网穿透实现公网访问管理界面
文章目录前言1.本地
安装配置
BUG管理系统2.内网穿透2.1安装cpolar内网穿透2.2创建隧道映射本地服务3.测试公网远程访问4.配置固定二级子域名4.1保留一个二级子域名5.1配置二级子域名6.使用固定二级子域名远程正文开始前给大家推荐个网站
不是笨小孩i
·
2024-01-23 02:51
cpolar
bug
Hive
自定义函数
系统内置函数查看系统内置函数
hive
>showfunctions;显示内置函数用法
hive
>descfunction函数名;详细显示内置函数用法
hive
>descfunctionextended函数名;
歌哥居士
·
2024-01-23 01:41
【gstreamer】Windows VS2022+gstreamer
安装配置
主要分为以下几个步骤:1)gstreamer安装选gstreamer版本官网作者使用的版本是MSVC64-bit(VS2019,ReleaseCRT)先安装gstreamer-1.0-msvc-x86_64-1.22.3.msi,choosesetuptype时选择Complete,完整安装然后gstreamer-1.0-devel-msvc-x86_64-1.22.3.msi也选择Complet
Z_shsf
·
2024-01-22 22:08
multi-media
windows
c++
linux
gstreamer
CDH6.2 集群离线部署
免密码登录认证在cm-server服务器上下载CDH6.2相关的安装包安装nginx做cm本地yumrepo服务器安装postgressql安装和配置cm-server配置CDH集群CDH集群配置lzo压缩
hive
那些、快乐。
·
2024-01-22 21:44
大数据
hadoop
linux
CentOS7
安装配置
Tomcat环境并开机启动
一、检查Java环境是否安装[root@localhost~]#java-version安装Java-->CentOS7安装Java并配置环境-CSDN博客二、安装Tomcat1、下载Tomcat软件包(1)官网下载ApacheTomcat®-ApacheTomcat8SoftwareDownloadsLinux中浏览器打开网址下载(2)终端命令下载#在CentOS7上创建一个目录用于存放Tomc
颓特别我废
·
2024-01-22 20:51
Linux
centos
tomcat
linux
Xcode 清理缓存,瘦身
路径:1~/Library/Developer/Xcode/DerivedData释放空间:0~xxGB移除APP打包的ipa历史版本(Arc
hive
s)删除后不可恢复,文件夹是按照日期排列的,
西充小凡哥
·
2024-01-22 19:57
一个golang小白使用vscode搭建Ununtu20.04下的go开发环境
文章目录前言搭建go环境下载go安装包解压go压缩包完成
安装配置
环境变量编写一个helloword程序安装VSCode插件安装智能提示插件安装go依赖包修改代理并重新安装依赖包go.mod和go.workgo.modgo.work
AlbertS
·
2024-01-22 18:34
Go
golang
vscode
开发语言
gowork
ubuntu
Impala:基于内存的MPP查询引擎
Impala查询引擎1、Impala概述1.1、Impala简介1.2、Impala的特点1.3、Impala与
Hive
1、Impala概述1.1、Impala简介Impala是Cloudera公司主导研发的高性能
对许
·
2024-01-22 17:26
Java大数据
#
Hadoop及生态圈
#
数据湖仓
大数据
Apache doris Datax DorisWriter扩展使用方法
DataX实现了包括MySQL、Oracle、SqlServer、Postgre、HDFS、
Hive
、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres
张家锋
·
2024-01-22 15:27
树莓派使用命令sudo apt-get update报错
问题描述报错内容为:Hit:1http://arc
hive
.raspberrypi.com/debianbookwormInReleaseHit:2http://raspbian.raspberrypi.com
观北海
·
2024-01-22 15:41
linux
python+selenium实现web自动化(基础入门)
相关文档:https://python-selenium-zh.readthedocs.io/zh-cn/latest/https://www.selenium.dev/documentation/
安装配置
环境依赖
John_rush
·
2024-01-22 15:36
自动化测试
python
selenium
自动化
Eighth C++基础之C++与C语言的区别及细节
原文链接(点击原文链接获取更多学习干货):http://blog.bools.cn/arc
hive
s/1335C语言与C++在之前学习当中,我们知道C语言是面向过程的,而C++是面向对象的。
布尔青年-斯利普
·
2024-01-22 15:18
基础知识
c语言
c++
r语言
CentOS7下Hadoop2.9.2、
Hive
2.3.6安装与实践
参考的安装文章地址:https://blog.csdn.net/pengjunlee/article/details/81607890实际安装的版本为:hadoop2.9.2,
hive
2.3.6;操作系统
流火星空
·
2024-01-22 14:58
大数据
hive
大数据
hive
java大数据hadoop2.9.2 Linux安装mariadb和
hive
一、安装mariadb版本centos71、检查Linux服务器是否已安装mariadbyumlistinstalledmariadb*2、如果安装了,想要卸载yumremovemariadbrm-rf/etc/my.cnfrm-rf/var/lib/mysql才能完全删除3、安装mariadb在线网络安装yuminstall-ymariadb-server开启服务systemctlstartma
crud-boy
·
2024-01-22 14:26
java大数据
大数据
linux
mariadb
EPICS Arc
hive
r Appliance的定制部署1
/details/112116112简单部署试了一下之后,又试了下Sitespecificinstalls,从下面链接开始:http://slacmshankar.github.io/epicsarc
hive
r_docs
USTC-lup
·
2024-01-22 14:24
EPICS
mysql
LNMP安装composer install时出现Warning: putenv()
hasbeendisabledforsecurityreasonsin…的问题date:2020-03-29tags:["Laravel"]原文地址:https://www.wjcms.net/arc
hive
s
wjcms
·
2024-01-22 13:41
spark web框架--play framework 安装与运行
目前网上关于playframework框架的
安装配置
都是低版本的,现就高版本问题进行编写:1、下载https://www.playframework.com/(1)play2.3之前的版本都是压缩包zip
huazi99
·
2024-01-22 13:37
大数据
java
spark
scala
关于
Hive
架构原理,尚硅谷
最近学习
hive
时候,在做一个实操案例,具体大概是这样子的:我在dataGip里建了一个表,然后在hadoop集群创建一个文本文件里面存储了数据库表的数据信息,然后把他上传到hdfs后,dataGrip
大数据SQLboy
·
2024-01-22 11:41
Hive
hive
架构
hadoop
Centos部署Yum、JDK、Nginx、Tomcat、MySQL、Emqx、FTP及配置(超详细)
本说明文档针对centos最小安装操作系统整理,建议指定一个统一目录进行
安装配置
,便于后续管理。
不愿减肥的小胖子
·
2024-01-22 11:20
centos
jdk
mysql
tomcat
nginx
数据库架构
中间件
【译】优化CSS 性能的20个技巧
根据最新的HTTPArc
hive
报告,在Web中,存在大量的中断网站,它们要求在80个HTTP请求中分配1700KB的数据,并需要17秒才能完全加载到移动设备上。本
依然还是或者其他
·
2024-01-22 11:57
Impala
最大的特点就是速度快Impala优势Impala的诞生
Hive
与MR适合离线批处理,但是对交互式查询的场景无能为力(快速响应),所以为了积极查询速度问题开发了Impala,Impala抛弃了MR,使用了类似传统的
奋斗的蛐蛐
·
2024-01-22 10:42
Ranger概述及
安装配置
一、前序希望拥有一个框架,可以管理大多数框架的授权,包括:hdfs的目录读写权限各种大数据框架中的标的权限,列级(字段)权限,甚至行级权限,函数权限(UDF)等相关资源的权限是否能帮忙做书库脱敏Ranger框架应运而生。二、Ranger2.1、什么是rangerApacheRanger是一个用来在Hadoop平台上进行监控,启动服务,以及全方位数据安全访问管理的安全框架。Ranger愿景是在Apa
小枫@码
·
2024-01-22 09:39
大数据运维
安全
运维
如何解决
Hive
数据倾斜的问题
⾸先要知道的是数据倾斜的本质是数据分配不均匀,那么造成不均匀的原因有很多,⽐如热点key,⾮热点key分布不均匀等。那么需要定位到具体发⽣原因,才能对症下药。从技术层⾯来说(1)⾸先怀疑的是数据热点key,这⾥可以根据采样统计来判断是否有部分key记录过多(2)如果是热点key,则可以采⽤单独处理或者⼆次聚合等⽅法来处理(3)如果不是热点key,那么有可能是key本身分布不均匀导致的,那么可以采⽤
不良人-程序星
·
2024-01-22 09:02
hive
hadoop
数据仓库
Apache
Hive
(二)
一、Apache
Hive
1、
Hive
SQLDML语法之加载数据2、
Hive
SQLDML语法之查询数据3、
Hive
SQLJoin关联查询4、
Hive
SQL中的函数使用数据仓库&Apache
Hive
请记住,
杀神lwz
·
2024-01-22 09:16
数据分析
大数据
apache
hive
hadoop
Docker
安装配置
OnlyOffice
OnlyOffice是一款强大的办公套件,你可以通过Docker轻松安装和部署它。本文将指导你完成安装过程。步骤1:拉取OnlyOfficeDocker镜像首先,使用以下命令从DockerHub拉取OnlyOfficeDocumentServer镜像:sudodockerpullonlyoffice/documentserver步骤2:运行OnlyOfficeDocker容器创建挂载目录sudom
不掉头发的阿水
·
2024-01-22 09:15
Docker
云原生
docker
容器
oracle如何定期备份数据库sql文件
可以使用RMAN备份的命令来备份数据库,例如:RMAN>BACKUPASBACKUPSETDATABASEPLUSARC
HIVE
LOG;这将
酷爱码
·
2024-01-22 08:54
经验分享
编程学习
数据库
oracle
sql
re:从0开始的HTML学习之路 0.编辑器
安装配置
、HTML标准结构生成
写在前面感觉学AI好痛苦,还是学点别的吧hh1.安装一个自己会用的编辑器此时选择了VSCode安装一些插件:汉化(可有可无),LiveServerLiveServer的作用:可以不需要在文件里双击运行(HTML的运行就是在浏览器打开啦)直接右键openwithLiveServer就可以运行写好的HTML文件了或者点点右下角的GOLive多尝试尝试。PS:使用的主题是onedarkpro,字体是fi
扶摇|
·
2024-01-22 08:43
从0开始的HTML之旅
学习
html5
前端
hive
sql转换成MR任务过程
hive
sql转换成MR任务过程1)用户接口:ClientCLI(command-lineinterface)、JDBC/ODBC(jdbc访问
hive
)、WEBUI(浏览器访问
hive
)2)元数据:Metastore
上官沐雪
·
2024-01-22 08:08
hive
hive
kotlin $ (字符串模版)的使用
作用就是在字符串里面识别自己定义的字符例如打印一个字符这个时候编译就提示我们使用字符串模版的是个$的作用就是识别字符串里面的i字数有点少了,在写一个demoprivatefunString.appendArc
hive
胡小牧
·
2024-01-22 08:07
Kotlin知识总结
kotlin
开发语言
android
大数据开发之电商数仓(hadoop、flume、
hive
、hdfs、zookeeper、kafka)
第1章:数据仓库1.1数据仓库概述1.1.1数据仓库概念1、数据仓库概念:为企业制定决策,提供数据支持的集合。通过对数据仓库中数据的分析,可以帮助企业,改进业务流程、控制成本,提高产品质量。数据仓库并不是数据的最终目的地,而是为数据最终的目的地做好准备,这些准备包括对数据的:清洗、转义、分类、重组、合并、拆分、统计等。2、数据仓库的数据通常包括:业务数据、用户行为数据和爬虫数据等3、业务系统数据库
Key-Key
·
2024-01-22 07:29
大数据
hadoop
flume
kafka
hive
hdfs
MySQL去重3种方法,还有谁不会?
在MySQL中通常是使用distinct或groupby子句,但在支持窗口函数的sql(如
Hive
SQL、Oracle等等)中还可以使用row_number窗口函数进行去重。
程序员大咖
·
2024-01-22 07:58
mysql
数据库
oracle
sql
Qt的安装流程
安装Qt1.下载2.双击安装文件3.注册登录,选择文件安装位置4.选择安装组件5.安装完毕,点击完成总结主要内容一.安装Qt1.下载QT软件下载地址:http://download.qt.io/arc
hive
K要努力
·
2024-01-22 07:52
算法与数据结构
qt
开发语言
运维开发
上一页
25
26
27
28
29
30
31
32
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他