E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH
记录一次TDH的inceptor导出建表语句和数据
TDH是星环公司的一款大数据组件聚合平台,类似于
CDH
,但是TDH将一些组件自己做了封装,比如hive重新封装成了inceptor,公司的TDH测试环境要下线,需要备份inceptor中的数据,现在分步做一次记录
天吻蓝了海海染蓝了天_6e66
·
2020-12-22 11:48
sqoop建表_Sqoop基础教程
实现互相传输的工具另外注意的是,上面文字最后一行,Sqoop1(1.4X)和Sqoop2(1.99X)完全不兼容,生产上建议Sqoop1,Sqoop2有点不稳定2,Sqoop的安装下载好Sqoop之后,我的是
Cdh
weixin_39625305
·
2020-12-20 14:49
sqoop建表
电商数仓——项目需求及架构设计
➢2、框架版本如何选型(Apache、
CDH
、HDP)➢3、服务器使用**物理机还
bzxb1188
·
2020-12-19 13:59
flink
kafka
spark
mapreduce
hadoop
环境篇:Atlas2.1.0兼容
CDH
6.3.2部署
环境篇:Atlas2.1.0兼容
CDH
6.3.2部署Atlas是什么?
咘雷扎克
·
2020-12-16 13:00
Apache Impala 的安装部署
cd/cloudera_datatar-zxvf
cdh
5.14.0-centos6.tar.gz4.2.配置本地yum源信息安装ApacheServer服务器yum-yinstallhttpdservicehttpdstartchkconfighttpdon
ChinaManor
·
2020-12-07 17:50
#
Impala
CMake入门-01-从HelloWorld开始
开始(1)新建hello目录,创建文件CMakeLists.txt、main.cpp$mkdirhello$
cdh
ello$touchCMakeLists.txtmain.cpp$ll-rw-r--r-
binglingziyu
·
2020-12-05 13:03
mysql5.6安装sys库_Cloudera Manager 完整安装教程----2 (含大数据完整进阶教程)
大数据完整进阶资料(免费课程)无套路第3章CM安装部署CM下载地址:http://archive.cloudera.com/cm5/cm/5/离线库下载地址:http://archive.cloudera.com/
cdh
5
最暖最珍贵
·
2020-12-04 20:54
mysql5.6安装sys库
CDH
6.3 大数据平台搭建
一.
CDH
概述Cloudera版本(Cloudera’sDistributionIncludingApacheHadoop,简称“
CDH
”),基于Web的用户界面,支持大多数Hadoop组件,包括HDFS
只是甲
·
2020-12-04 18:18
CMake入门-03-还是HelloWorld
扩展-math目录里的文件编译成静态库再由main函数调用(0)初始化项目$mkdirhello$
cdh
ello$mkdirmathbuild$touchCMakeLists.txtmain.cppmath
binglingziyu
·
2020-12-04 01:38
c++
cmake
git操作记录
创建本地仓库//创建文件夹mkdirhello-git//改变工作目录到hello-git
cdh
ello-git//初始化Git相当将文件夹升级为仓库gitinit//此时,git命令会在文件夹下创建一个
黑天鹅
·
2020-11-25 20:22
git
二叉树的层次遍历
二叉树除了先序遍历、中序遍历、后序遍历以外还有层次遍历,比如说下面这颗二叉树的层次遍历的结果为:ABG
CDH
EF我们可以使用一个队列来对它进行层次遍历,根据队列先进先出的特点,可以有如下所示的过程来对一颗二叉树进行层次遍历
旺财要加油
·
2020-11-24 21:58
旺财的菜鸡篇
CDH
6.3.1离线部署
本文主要记录
CDH
的离线部署,不对
CDH
中的概念做解释,所以阅读本文之前,需要对
CDH
有一定的了解。
QuoVadis_k
·
2020-11-22 01:34
CDH
6.2.0 安装指导
1说明该操作书适用于
CDH
6.X+CentOS7.X。
tmljob
·
2020-11-13 18:31
spark 合并github (pull request)pr 的正确姿势
最近在做内部spark版本升级的工作,涉及到github上合并pr的工作,具体的是spark2.x升级到spark3.0.1时兼容hdfs
cdh
-2.6.0-5.13.1,报编译错误[INFO]Compiling25Scalasourcesto
鸿乃江边鸟
·
2020-11-13 11:58
spark
Kettle连接Hadoop配置过程
②hadoopversion,获取hadoop版本③打开kettle8.1,hadoop-configurations文件夹,将文件夹名改为hadoop的版本
cdh
632④将第二步中下载的文件替换到第三步文件夹中
嘀老年卡
·
2020-11-12 11:40
动脉组织-细胞类型markers
image.png##6.s根据经典markers鉴定细胞类型Fibroblasts<-c("Pdgfra")VSMC<-c("Cnn1","Myh11")EC<-c("
Cdh
5")Monocytes<
信你个鬼
·
2020-11-09 23:06
Centos7部署大数据
CDH
6.2.1集群
1、集群集群准备阿里云按需付费云主机即可,或者自己配置三台服务器,2C16G服务器操作系统:Centos7.2642、安装包JDK:jdk-8u181-linux-x64.tar.gz连接:https://www.oracle.com/technetwork/java/javase/downloads/java-archive-javase8-2177648.html下载地址:https://ar
qq_42869878
·
2020-10-30 15:49
大数据
cloudera
hdfs
spark
习题课4-1(hash、回文串问题)
判断第二个矩阵在第一个矩阵哪些位置出现过输出位置的左上角有多个答案,按字典序输出解法1一行行一列列依次比较枚举两个矩阵,n的4次方,,50的4次方是1亿以内的解法2将一个矩阵转化成一个数字哈希字符串eba
cdh
ash
Markland_l
·
2020-10-25 15:32
数据结构
字符串
二叉树的之字形层次遍历
目录1、之字形层序遍历2、代码实现2.1两个栈实现二叉树的层次遍历1、之字形层序遍历如上如二叉树,之字形层序遍历:第一层:从左至右打印A第二层:从右至左打印GB第三层:从左至右打印
CDH
第四层:从右至左打印
像狗的猫
·
2020-10-20 14:43
数据结构
二叉树
Cloudera官方文档整理
要评估集群的硬件和资源分配,需要分析要在集群上运行的工作负载类型,以及将用于运行这些工作负载的
CDH
组件。
whzatsh
·
2020-10-18 23:35
大数据
Cloudera
《Centos7——playbook快速入门》
临时任务,不复杂任务1.mkdirhttpd&&
cdh
ttpd&&vimhttpd.yml-----创建目录,进
逻辑思维菜鸟
·
2020-10-12 10:03
ansible
centos
1024程序员节
CDH
离线安装攻略
环境准备因为环境不允许连接互联网所以要采用离线安装的形式,这也是大多数企业需要采用的安装形式cloudera-manager下载地址根据不同的服务器类型下载不同的文件配置Linux集群无密码访问,这个地方有坑,需要注意很多细节先复习一下设置ssh免密码操作的步骤:进入主目录cd生成公钥ssh-keygen-trsa-P''(注:最后是二个单引号,表示不设置密码)然后分发公钥到目标机器ssh-cop
yizhihu
·
2020-10-11 09:18
livy 安装并集成kerberos
版本说明:Livy版本0.7spark版本
CDH
6.2-spark2.4安装(1)下载apachelivy下载地址:https://github.com/apache/incubator-livy/archive
w972779876
·
2020-10-10 12:10
hadoop
livy
大数据
spark
CDH
新增计算节点,并对新增的计算节点,添加服务角色的详细具体步骤
前言最近发现,公司的的大数据环境,空间有不足的情况,集群的计算能力也下降,此时需要对将大数据的集群环境进行扩容增加计算节点。操作步骤集群示意图:准备好linux环境配置hadoop账号,ssh免密,关掉防火墙,磁盘挂载1:创建hadoop账号useraddhadoop2:ssh无密码登陆suhadoopssh-keygen-trsa#复制到所有datanode,并测试ssh登陆cpid_rsa.p
阿啄debugIT
·
2020-10-07 22:39
#
调优
cdh
#
hadoop
CDH新增计算节点
对新增的计算节点添加服务角色
新增服务自定义分配角色
新增CDH节点的详细步骤
测试CDH新增主机节点的样例
大数据介绍和集群安装--hadoop
7、Hadoop详解8、Hadoop三大公司发型版本介绍9、Hadoop的架构模型(1.x,2.x的各种架构模型介绍)10、
CDH
版本Hadoop重新编译11、
CDH
分布式环境搭建浏览器查看启动页面1、
bigdatahyy
·
2020-10-07 21:12
大数据介绍
集群安装部署
hadoop
hadoop
中秋节:感恩今生相遇的每个人
文|韩九叔来源|国学文化堂(ID:
CDH
GXZH)天上明月如盘,又到一年中秋。归家的游子,享受着片刻温存,此夜过后,或许又要分隔一方,可即便如此,仍要感谢上苍,感恩我们生命中遇见的每个人。
围炉夜读
·
2020-09-30 00:00
Hadoop 完美解决start-all.sh不能启动resourcemanager的问题
一、集群描述主机:CentOS7.8jdk1.8hadoop、hive、hbase、zookeeper:
CDH
5.14.2namenodedatanode1datanode2NameNode✔(主)✔(
Pineapple_C
·
2020-09-26 17:32
Hadoop生态
hadoop
linux
大数据
CDH
6.3.1集群安装
前言:本文主要记录
CDH
6.3.1集群安装记录。总共在虚拟机上实践了2次,第二次增加了MySQL的双主服务和keepalived服务。后续会实体机实操,和记录正式服务器的。
kevin_0120
·
2020-09-23 16:02
如何 node 调试 2020-09-22
如何node调试1、node-inspect2、npmlink$#先去到模块目录,把它link到全局$
cdh
tml2img$npmlink$#再去项目目录通过包名来link$cdbeidian_m$npmlinkhtml2img3
Allan要做活神仙
·
2020-09-22 13:21
Hadoop伪分布式简明安装操作说明
Hadoop伪分布式简明安装操作说明1)cd/usr/local/切换到安装目录2)mvhadoop-2.6.0-
cdh
5.7.0/hadoop-2.6.0-
cdh
5.7.0.bak备份掉之前的Hadoop
whvcse_hlzhang
·
2020-09-21 10:07
Hadoop演进与Hadoop生态
(1)0.20.0~0.20.2:Hadoop的0.20分支非常稳定,虽然看起来有些落后,但是经过生产环境考验,是Hadoop历史上生命周期最长的一个分支,
CDH
3、
CDH
4虽然包含了0.21和0.22
Lonely-lie
·
2020-09-20 10:00
Linux用户权限详解
(注:字母L的小写)3.修改group名称:groupmod-n[newGroupName][presentGroupName]4.查看前登录用户使用users[gs@
cdh
208~]$user
LawsonAbs
·
2020-09-17 14:24
Linux
Hadoop2.3.0-
CDH
5.1.3的eclipse插件编译
最近在使用
CDH
5,想找个eclipse插件用用。无奈万般百度而不得,最后发现只能自己编译。可是作为萌新从来没有编译过啊。网上找到的帖子又各不相同,只能自己摸索啦。
咔_咔
·
2020-09-17 14:22
hadoop
The current epoch, 79 is less than the accepted epoch, 5b
zookeeper.out文件发现日志报错Thecurrentepoch,79islessthantheacceptedepoch,5b删除/export/servers/zookeeper-3.4.5-
cdh
5.14.0
大数据狂人
·
2020-09-17 14:51
ZooKeeper
expected key exchange group packet from server错误解决过程
添加到/etc/ssh/
[email protected]
,e
cdh
-sha2-nistp256,e
cdh
-sha2-nistp384
weixin_30284355
·
2020-09-17 13:26
运维
TLS/SSL 协议详解(12) server key exchange
对于使用DHE/E
CDH
E非对称密钥协商算法的SSL握手,将发送该类型握手。RSA算法不会继续该握手流程(DH、E
CDH
也不会发送serverkeyexchange)。
sosfnima
·
2020-09-17 13:34
SSL/TLS
[整理][个人学习笔记] Linux 新手(我) 常用命令
目录切换lsls来查看当前目录下有什么东西lsllll-hpwd查看当前所在目录cd路径切换到用户Home目录位置cd~//切换到用户Home目录cd/usr--切换到/usr目录cd…切换到上级目录
cdh
ello
ffiing
·
2020-09-17 12:28
Linux学习笔记
zookeeper 的安装及 启动和关闭脚本
的配置文件创建zkdata文件夹把zookeeper分发到其它节点考虑到zookeeper启动和关闭比较麻烦,附带zookeeper启动和关闭脚本前言为了文章的通用性全篇使用的都是环境变量下载地址:点击下载
CDH
红尘丶世界
·
2020-09-17 11:47
#
zookeeper
zookeeper
hadoop编译问题
DetectedJDKVersion:1.8.0-231isnotintheallowedrange[1.7.0,1.7.1000}].jdk:1.8.0-231hadoop版本:hadoop2.5.0-
cdh
5.3.2
chao1118
·
2020-09-17 11:02
hadoop学习
【Hi3516A_SDK】单独编译kernel
单独编译内核源码步骤:1.进入kernel目录,解压内核源码
cdH
i3516A_SDK_V1.0.5.0/osdrv/opensource/kerneltar-zxvflinux-3.4.y.tgz解压后进入
C晨海
·
2020-09-17 10:51
Hi3516A
hive在YARN下执行mr任务问题
错误和解决方案都可以参加该链接:http://grokbase.com/p/cloudera/
cdh
-user/126wqvfwyt/hive-refuses-to-work-with-yarn现象就是
mrking0105
·
2020-09-17 09:13
hive
yarn
第三方厂商发行的 Hadoop
如
CDH
、HDP、MapR等优点:基于Apache协议,100%开源版本管理清晰。
chouganyi5747
·
2020-09-17 08:36
Yarn遭到挖矿病毒攻击
测试环境在阿里云上暴露出了公网端口,前一段时间
CDH
集群原本是开启了Kerberos认证,但是因为大家反映使用麻烦,所以就又关闭了Kerberos。
weixin_30485291
·
2020-09-17 07:58
ui
java
添加新maven 公共repository
需要依赖一些新的公共jar包,比如:hadoop-annotations-2.0.0-
cdh
4.6.0.jarhadoop-auth-2.0.0-
cdh
4.6.0.jarhadoop-common-2.0.0
posa88
·
2020-09-17 07:34
Maven
VS2017激活码
Enterprise:NJVYC-BMHX2-G77MM-4XJMR-6Q8QFProfessional:KBJFW-NXHK6-W4WJM-CRMQB-G3
CDH
Kenall
·
2020-09-17 07:39
其他
VS2017
CDH
Hadoop HDFS EOFException异常的问题
CDH
hadoopHDFS系统中,看了下出现异常的DataNode节点日志018-09-0423:24:38,446WARNorg.apache.hadoop.hdfs.server.datanode.DataBlockScanner
大树叶
·
2020-09-17 06:10
hadoop
hadoop
hive on tez踩坑记1-hive0.13 on tez
最近集群准备升级到
cdh
5.2.0,并使用tez,在测试集群
cdh
5.2.0已经稳定运行了很长时间,因此开始折腾hiveontez了,期间遇到不少问题,这里记录下。
weixin_33696106
·
2020-09-17 05:47
大数据
java
[
CDH
5]
CDH
5.13.1 hue服务红色警告,启动失败
CentOS7,安装
CDH
5.13.1集群完成后,hue上面红色感叹号,日志提示[Errno2]Nosuchfileordirectory:'/data/log/hue-httpd/error_log'
cindysz110
·
2020-09-17 05:33
CDH5
linux-报错-Input/output error
问题描述在
cdh
安装进行到复制agent包的步骤时,某个节点报错无法创建临时文件,在这个节点进入到cd/tmp后,ll发现报错Input/outputerror,然后df-Th发现/tmp挂载的是/dev
zdkdchao
·
2020-09-17 05:52
CDH
CDH
集群开启kerberos认证后,所有服务无法使用,报错信息均为GSS initiate failed ,求各位大佬帮忙看下啊
CDH
集群开启kerberos认证后,所有服务无法使用,报错信息均为nerror:(java.security.PrivilegedActionException:javax.security.sasl.SaslException
qq_24439569
·
2020-09-17 05:41
linux
服务器
centos
cloudera
上一页
24
25
26
27
28
29
30
31
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他