E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cdh5.16.1
CDH5到CDH6都更新了些什么?
为了方便比较,本文内容主要基于
CDH5.16.1
和CDH6.1.1进行说明。
ClouderaHadoop
·
2023-12-30 14:18
0592-5.16.1-如何配置Kerberos高可用
本文主要讲述如何在
CDH5.16.1
中配置Kerberos服务的高可用。
Hadoop_SC
·
2023-11-28 23:54
Hadoop实操
CDH5.16.1
安装kafka
CDH5.16.1
安装kafka1.简介:CDH的parcel包中是没有kafka的,需要从新下载parcel包安装。或者在线安装,但是在线安装都很慢,这里使用下载parcel包离线安装的方式。
丿灬逐风
·
2023-07-26 06:35
hadoop
hadoop
kafka
cdh
大数据之
CDH5.16.1
集成Tez0.9.2
俗话说:磨刀不误砍柴工。。上两篇中,我们介绍完了CDH环境的基本搭建。在这篇中,我们讲述对hive的一个优化措施之一:执行引擎tez。在HDP中hive的执行引擎默认是tez,而在CDH中默认则是mr,大家都知道mr效率是比较低的,tez则相对比较高。tez官网地址为:http://tez.apache.org/tez是在hadoop2才引入的,如图所示:tez.png图片来源:https://z
LearnBigData
·
2023-03-28 12:50
大数据之
CDH5.16.1
集成Phoenix
CDH中预装的hbase是没有Phoenix的,需要我们手动来集成,下面我们就简单的记录一下笔者集成的流程。1下载parcelshttp://archive.cloudera.com/cloudera-labs/phoenix/parcels/latest/下载如下三个文件:CLABS_PHOENIX-4.7.0-1.clabs_phoenix1.3.0.p0.000-el7.parcelCLAB
LearnBigData
·
2023-01-30 21:59
大数据实战第十八课 -
CDH5.16.1
离线部署
第一章:
CDH5.16.1
导读及前置准备工作1.1CDH离线部署的三种方式1.2阿里云购买三台按量付费的机器1.3事先准备好所有的软件包1.4节点初始化工作概览1.5hosts文件配置1.6云主机和内网机器的防火墙抉择
zhikanjiani
·
2020-09-16 06:32
高级班-CDH三次课程
05.HADOOP
CDH5.16.1
详细搭建流程
在这里我使用了
CDH5.16.1
版本,那么与其对应的软件包也需要相应下载。1.安装前的准备工作1)需要用的软件包CDH是不需要提
杰弗里 Zhang
·
2020-09-16 06:34
CDH5.16.1
集群企业真正离线部署
一.准备工作1.离线部署主要分为三块a.MySQL离线部署b.CM离线部署c.Parcel文件离线源部署2.规划3.下载源CMhttp://archive.cloudera.com/cm5/cm/5/cloudera-manager-centos7-cm5.16.1_x86_64.tar.gzParcelhttp://archive.cloudera.com/cdh5/parcels/5.16.1
钻石大门
·
2020-09-16 06:01
CDH
视频教程-
CDH5.16.1
全网最细的企业级离线部署-大数据
CDH5.16.1
全网最细的企业级离线部署大数据架构师,负责海量日志数据处理等方面的技术研究与管理工作。
学院导师-余思隽
·
2020-09-16 06:35
CDH5.16.1
安装Spark2.x,简称CDS安装(图解官网安装)
CDH的官网都写的很详细,我们要学会看官网的步骤去安装,是最权威的文章目录一找到Spark在哪里二安装CDS2.1安装ServiceDescriptor步骤a步骤b步骤c步骤d2.2添加包裹仓库(parcelrepository)2.3CMS配置ParcelURL2.4下载,分发,激活2.5添加Spark2服务三运行example一找到Spark在哪里官网的文档地址:https://docs.cl
阿顾同学
·
2020-09-16 06:52
CDH
spark2
CDH5.16.1
离线安装部署
三种部署方式Bin在线部署Rpm离线部署下载相应的rpm包Tar包部署CDH真正离线部署1:MySQL离线部署2:CM离线部署tar3:Parcel文件离线源部署hfsyarnhivebasezk准备三台阿里云按量付费机器准备好软件包[
[email protected]
]#lltotal3605076-rw-r--r--1rootroot2127506677May2321:39CDH-
袁河之滨
·
2020-09-16 06:20
大数据集群
cdh
cdh5.16.1
cdh离线部署
CDH5.16.1
离线安装 Kafka
1.环境CDH5.16.1CentOS7.62.安装前准备1.查看Kafka与CDH版本对应https://docs.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#pcm_kafka2.下载Kafka的parcel包http://archive.cloudera.com/kaf
脚丫先生
·
2020-09-16 06:56
Hadoop运维
CentOS7搭建
CDH5.16.1
教程
简介因为之前我搭建的是Apache原生的,维护起来很麻烦,重启什么的都需要写脚本,太麻烦了,所以这次公司需要搭建集群,我就选择了
CDH5.16.1
的进行搭建。
马尔东风
·
2020-09-16 06:46
CDH5.16.1
安装SPARK2.3
概述:经查阅官方文档,发现spark1.6和2.x是可以并行安装的,也就是说可以不用删除默认的1.6版本,可以直接安装2.x版本,它们各自用的端口也是不一样的。1.安装准备1.1Spark2.3安装需求●CDHVersions●ClouderaManagerVersions●JDK1.8+●Scala2.11,Python2.7orhigher,Python3.4orhigher1.2所需软件①c
hrzgj
·
2020-09-16 05:05
cdh
cdh
spark2
CDH5.16.1
部署spark2.4
CDH管理集群中带的默认的spark服务为1.x,想要给集群中安装或者升级至2.x思路同CDH集群部署时一样,默认服务的包都封装在parcel包中,以部署集群时的步骤,分配,解压,激活再添加spark服务即可。一.下载需要的包实际情况是现在的很多CDH集群都处在未开放公网的环境当中,可在本地下载然后上传至Linux上wgethttp://archive.cloudera.com/spark2/cs
綮地
·
2020-09-16 05:09
大数据
CDH5.16.1
安装过程
感谢若泽数据J哥附上包有需自提:链接:https://pan.baidu.com/s/1CQbeMkj9osR9ooqFEZK43A提取码:b173复制这段内容后打开百度网盘手机App,操作更方便哦1.修改主机名:以hadoop3为例:[root@localhost~]#echo“hadoop003”>/etc/hostname[root@localhost~]#vim/etc/hostname[
綮地
·
2020-09-16 05:05
大数据
cloudera
CDH 5.16.1集群环境搭建
CDH5.16.1
集群环境搭建集群节点192.168.10.1hadoop01235G+4T192.168.10.2hadoop02235G+4T192.168.10.3hadoop03235G+4T192.168.10.4hadoop04235G
Mars_sock
·
2020-09-16 05:57
hadoop
spark
hadoop
spark
cloudera
大数据
离线搭建
CDH5.16.1
大数据平台
市场上免费大数据框架主要有三个版本,原生的Apache版本,Cloudera公司研发的(ClouderaDistributionHadoop,简称“CDH”)CDH版本(最新6.1),也是市场上使用最多的,Hortonworks版本(HortonworksDataPlatform,简称“HDP”)ClouderaManager相关介绍cloudera公司开源大数据框架管理集群的使用CM可以对大数据
tianqin_data
·
2020-09-16 05:05
学习经历
CDH5.16.1
安装 Spark2
https://docs.cloudera.com/documentation/index.htmlhttp://archive.cloudera.com/spark2/parcels/2.4.0.cloudera2/下载包裹[
[email protected]
]#mkdirspark2-parcels[root@hadoop001spark2-parcels]#wgethttp://
袁河之滨
·
2020-09-16 05:48
大数据入门实践
大数据环境准备
CDH
Spark2
CDH5.16.1
集群企业真正离线部署
⼀.准备⼯作1.离线部署大纲MySQL离线部署CM离线部署Parcel⽂件离线源部署2.规划linux版本:CentOS7.2节点MySQL组件Parcel⽂件离线源CM服务进程⼤数据组件hadoop001MySQLParcelAlertPublisherEventServerNNRMDNNMZKhadoop002AlertPublisherEventServerDNNMZKhadoop003Ho
b10l07
·
2020-09-13 20:55
java
数据库
开发工具
CDH 离线安装Kafka
前面已经介绍过了离线部署
CDH5.16.1
企业真正离线部署
CDH5.16.1
准备工作:先选择好自己对应的CDK版本,然后下载好然后上传到cdh集群parcels安装文档cdk安装官方文档和下载跳转界面el7
冬瓜螺旋雪碧
·
2020-07-29 20:14
CDH
Kafka
0641-5.16.1-如何禁用
CDH5.16.1
的Kerberos
Fayson的github:https://github.com/fayson/cdhproject推荐关注微信公众号:“Hadoop实操”,ID:gh_c4c535955d0f1文档编写目的Fayson在前面的文章介绍了如何为CDH集群启用Kerberos,在集群启用Kerberos后,会对现有环境的部分代码做改造,有些人觉得使用起来不方便,想取消Kerberos。本篇文章Fayson主要介绍如
Hadoop_SC
·
2020-07-29 15:07
Hadoop实操
离线部署
CDH5.16.1
及各种坑
所需安装包及版本说明:由于我们的操作系统为CentOS7,需要下载以下文件:cloudera-manager-centos7-cm5.16.1_x86_64.tar.gzCDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcelCDH-5.16.1-1.cdh5.16.1.p0.3-el7.parcel.sha1manifest.jsonClouderaManager下载目录ht
草宝虫
·
2020-07-12 15:15
hadoop
hadoop相关
cdh
hadoop
hive
oozie
mysql
CM+CDH5.16.1 平台搭建(二)
接着上一篇继续安装CDH环境三、安装CM和CDH3.1CDH下载以CentOS7.5和
CDH5.16.1
举例3.1.1cm的tar包下载下载地址:http://archive.cloudera.com/
Freedom3568
·
2020-06-30 13:37
Spark
HDFS文件系统JAVA api访问接口(基于hadoop大数据平台)
在搭建完hadoop大数据系统(我是使用
CDH5.16.1
进行安装)后,如何访问hdfs文件系统上的数据呢?那当然是通过构建maven项目使用javaapi接口进行文件了。
独立小桥风满袖
·
2020-06-28 02:56
hadoop
大数据之CM+CDH5.16.1(二)
接着上一篇继续安装CDH环境三、安装CM和CDH3.1CDH下载以CentOS7.5和
CDH5.16.1
举例3.1.1cm的tar包下载下载地址:http://archive.cloudera.com/
LearnBigData
·
2020-06-26 09:10
CDH5.16.1
完全离线部署
目录CDH下载配置hostname及hosts关闭所有节点的防火火墙及清空规则关闭所有节点的selinux设置所有节点的时区一一致及时钟同步设置时区时间同步部署集群的JDK离线部署MySQL5.7CDH部署创建CDH的元数据库和⽤户、amon服务的数据库及⽤户hadoop001节点部署mysqljdbcjar离线部署cmserver及agenthadoop001节点部署离线parcel源hadoo
好笨的菜鸟
·
2020-06-25 15:14
Hadoop
CDH
0481-如何从HDP2.6.5原地升级到CDH6.0.1
https://github.com/fayson/cdhproject提示:代码块部分可以左右滑动查看噢1文档编写目的编写本文主要是因为Fayson在上篇文章《0480-如何从HDP2.6.5原地迁移到
CDH5.16.1
Hadoop_SC
·
2020-06-21 21:56
Hadoop实操
CDH5到CDH6都更新了些什么
为了方便比较,本文内容主要基于
CDH5.16.1
和CDH6.1.1进行说明。
ClouderaHadoop
·
2020-03-10 11:01
Cloudera
Hadoop
CDH
CDH5到CDH6都更新了些什么
为了方便比较,本文内容主要基于
CDH5.16.1
和CDH6.1.1进行说明。
ClouderaHadoop
·
2020-03-10 11:46
Cloudera
Hadoop
CDH
CDH5.16.1
离线安装 Kafka
1.环境CDH5.16.1CentOS7.62.安装前准备1.查看Kafka与CDH版本对应https://docs.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#pcm_kafka2.下载Kafka的parcel包http://archive.cloudera.com/kaf
大数据小码农
·
2019-12-11 14:00
Phoenix从4.7升级到4.14
之前有过一篇文章讲述
CDH5.16.1
如何整合phoenix,但是,但是,但是,这个版本整合的是phoenix4.7,这个版本无法使用分页查询,所以必须升级为phoenix4.8及其以上。
LearnBigData
·
2019-10-28 17:46
CDH Hive执行聚合函数报错return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask脱坑指南
一、组件版本我用的是
CDH5.16.1
,Hive版本是1.1.0二、出现问题1.问题一普通查询很正常但是聚合查询就会报错,然后去查找日志发现在本地没有\tmp\logs文件,这个文件是用来存放Yarn的
妖精小狗
·
2019-08-23 16:40
Hadoop
Hive
CDH5(CDH 5.16.1)安装
CDH6系列(CDH6.0.0、CDH6.1.0、CDH6.2.0等)安装和使用CDH5(
CDH5.16.1
)安装linux配置1.第一种方式:rsa算法加密,非对称加密的方式基于私钥登陆的方式:(ssh
日萌社
·
2019-06-29 19:14
大数据
CDH
大数据
CDH
大数据
CDH5.16.1
集群企业真正离线部署
⼀.准备⼯作1.离线部署大纲MySQL离线部署CM离线部署Parcel⽂件离线源部署2.规划linux版本:CentOS7.2节点MySQL组件Parcel⽂件离线源CM服务进程⼤数据组件hadoop001MySQLParcelAlertPublisherEventServerNNRMDNNMZKhadoop002AlertPublisherEventServerDNNMZKhadoop003Ho
Stitch_x
·
2019-05-28 21:30
CDH
Hadoop
Spark
hadoop
离线安装
cdh5.16.1
前置说明:集群之间的机器时间需要一致,本文是基于阿里云ecs安装测试,故省去安装ntp步骤。安装jdk过于简单,本文也略过该步骤,本文是基于jdk1.8。机器配置:机器名配置说明hadoop0012cpu8G内存centos7.6cloudera-managermysqlhttpdhadoop0022cpu8G内存centos7.6hadoop0032cpu8G内存centos7.61.安装apa
catcher92
·
2019-05-11 21:40
大数据
0470-如何在Redhat7.4安装
CDH5.16.1
1.文章编写目的Cloudera在2018年11月29日发布了
CDH5.16.1
,新功能介绍可以参考Fayson之前的文章《0466-CDH5.16.1和CM5.16.1的新功能》。本文档主要描述如何
Hadoop_SC
·
2018-12-03 09:19
Hadoop实操
0466-CDH5.16.1和CM5.16.1的新功能
Fayson在2018年的6月15日介绍了《CDH5.15和CM5.15的新功能》,今天11月29日,Cloudera正式发布
CDH5.16.1
。从5.15到5.16,差不多等待了5个月,当然Clou
Hadoop_SC
·
2018-11-30 22:29
Hadoop实操
上一页
1
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他