E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cdh6.2
CDH6.2
集群离线部署
文章目录
CDH6.2
集群离线部署服务器集群节点角色规划系统环境准备cm-server配置ssh免密码登录认证在cm-server服务器上下载
CDH6.2
相关的安装包安装nginx做cm本地yumrepo
那些、快乐。
·
2024-01-22 21:44
大数据
hadoop
linux
0628-6.2-如何在
CDH6.2
中启用Kerberos
/cdhproject推荐关注微信公众号:“Hadoop实操”,ID:gh_c4c535955d0f1文档编写目的在前面的文章中,Fayson介绍了《0610-6.2.0-如何在Redhat7.4安装
CDH6.2
Hadoop_SC
·
2023-08-08 13:52
Hadoop实操
大数据技术(入门篇) --- centos7安装
CDH6.2
集群
随着信息化时代的进步,业务系统的数据量出现了爆发式的增长,带来的不良结果就是数据库的数据量剧增,而部分业务系统需要实时数据,有些业务系统需要离线计算后的数据,所以就产生了大数据技术,因此最近在学习大数据相关的知识点,先从最简单的,搭建开始下载相关资源文件CDH-6.2.0-1.cdh6.2.0.p0.967373-el7压缩包,内含JDK链接:https://pan.baidu.com/s/13y
北漂的菜小白
·
2023-04-16 01:19
大数据
java
学习
cloudera
linux 下 kettle(pdi)将 mysql 数据导入 hive parquet 表中
背景linux下使用kettle(pentahodataintegration)将mysql数据,通过ParquetOutput导入
CDH6.2
集群hive的parquet表中。
cooooper
·
2023-04-07 14:27
一、
CDH6.2
大数据平台安装手册
一、集群规划实际工作中搭建CDH集群的话,原则上来说,机子越多越好,如果资源有限的话,建议前期最好4台机子,4台机子的话,针对hadoop集群而言可以设置为1主3从,如果考虑到HA的话,就需要最少5台机子,本案例采用的服务器配置如下IP主机名CPU内存硬盘角色172.20.9.1hadoop18h64g50gcm-server、NameNode、SecondaryNameNode、YarnReso
阿靖哦
·
2023-03-28 16:25
大数据平台安装部署--
CDH6.2
版本【集群】
1:CDH介绍CDH是Cloudera的100%开源平台发行版,包括ApacheHadoop,专为满足企业需求而构建。CDH提供开箱即用的企业使用所需的一切。通过将Hadoop与十几个其他关键的开源项目集成,Cloudera创建了一个功能先进的系统,可帮助您执行端到端的大数据工作流程。简单来说:CDH是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具(软件),使得集群的安装可以从几
大自然的农民工
·
2022-02-28 11:37
big
data
hadoop
hdfs
大数据平台安装部署--
CDH6.2
版本单机
一、CDH介绍CDH是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具(软件),使得集群的安装可以从几天的时间缩短为几个小时,运维人数也会从数十人降低到几个人,极大的提高了集群管理的效率。二、本地单机安装测试,资源有限操作系统:CentOS7.5内存:8g硬盘:80Gcpu:2core三、安装包下载下载地址:链接:https://pan.baidu.com/s/1udJ5Z0wFW
大自然的农民工
·
2022-02-28 11:36
big
data
hdfs
hadoop
CDH6.2
安装教程(详细步骤)
一.安装介绍本文介绍CDH安装,安装版本以当前最新版
CDH6.2
为例。
绿叶悠
·
2022-02-06 21:24
Flink 1.9.1 安装及启动(
CDH6.2
集成flink)
这里部署环境为
CDH6.2
集群,三个节点,Flink版本为编译的Flink1.9.1版本。Flink集群有两种部署的模式,分别是Standalone以及YARNCluster模式。
脚丫先生
·
2020-09-15 14:15
Flink
CDH6 配置Flink1.10(编译安装)
以下包含了
CDH6.2
整合Flink1.10编译安装的过程以及趟过的坑,供大家参考、避坑。
光光刘321
·
2020-09-15 13:24
大数据-CDH
flink
cloudera
CDH6.2
安装 Pheonix
官方文档:phoenix_installationParcel下载地址:https://archive.cloudera.com/phoenix/6.2.0/parcels/csd下载地址:https://archive.cloudera.com/phoenix/6.2.0/csd/PHOENIX-1.0.jar1.Parcel配置在线方式CDH-Parcel-配置-远程Parcel存储库URL-
心有余力
·
2020-08-26 13:27
Hbase
CDH节点宕机恢复记录
背景:安装的
cdh6.2
,使用cm界面进行管理流程:1.从集群中删除节点,删除的时候,勾选解除授权。2.从主机管理中删除节点3.走集群添加新节点流程节点上的一些对应安装配置(
再难也要坚持
·
2020-08-17 06:03
大数据酱油码生
CDH6.2
中使用parcel离线安装Phoenix5.0.0
最新的
CDH6.2
开始就支持Phoenix5的parcel版本了,记录一下安装和使用,我这里使用本地离线安装的方式。
王义凯_Rick
·
2020-07-31 11:21
#
Phoenix
使用Phoenix映射hbase表创建表和视图
之前的文章介绍了如何在CDH5和CDH6中分别安装phoenix4和phoenix5:
CDH6.2
中使用parcel离线安装Phoenix5.0.0CDH5.14集群下Phoenix4.14.0安装及性能对比
王义凯_Rick
·
2020-07-31 11:21
#
Phoenix
0671-6.2.0-如何将CDH5.12的Hive元数据迁移到
CDH6.2
//github.com/fayson/cdhproject推荐关注微信公众号:“Hadoop实操”,ID:gh_c4c535955d0f1文档编写目的这里我们假定一个场景,你需要迁移CDH5.12到
CDH6.2
Hadoop_SC
·
2020-07-30 23:20
Hadoop实操
cdh
hive
Kafka学习笔记(1) -
CDH6.2
集群安装Kafka服务步骤以及问题解决方法
1.修改配置[重点!]进入CDH的安装包仓库进入Kafka的配置文件目录修改server.properties配置文件.路径参考如下:/opt/cloudera/parcels/KAFKA/etc/kafka/conf.dist修改其中的broker.id的配置,注意:你需要使用的kafka所有节点都需要配置!注意:每个节点的id不能一样!2.添加服务安装时选择第一个配置即可,第二个不用选选择节点
Killbus
·
2020-07-30 04:04
大数据学习笔记
Kafka学习笔记
0596-6.2.0-如何在
CDH6.2
中禁用Kerberos
Fayson的github:https://github.com/fayson/cdhproject推荐关注微信公众号:“Hadoop实操”,ID:gh_c4c535955d0f1文档编写目的Fayson在前面的文章介绍了如何为CDH集群启用Kerberos,在集群启用Kerberos后,会对现有环境的部分代码做改造,有些人觉得使用起来不方便,想取消Kerberos。本篇文章Fayson主要介绍如
Hadoop_SC
·
2020-07-29 15:07
Hadoop实操
CDH 6.x 安装 Phoenix 服务
最近有个新项目启动,版本升级到6.3,发现
CDH6.2
版本已经支持Phoenixparcel安装一、准备文件下载https://archive.cloudera.com/phoenix/6.2.0/csd
jast_zsh
·
2020-07-15 16:15
phoenix
#
Hbase二级索引
CDH6.2
安装 ES集群 7.6.2
三台机器cdh1,cdh2,cdh3Es版本为elasticsearch-7.6.2解压到opt/software/ESES不能在root用户启动groupaddelsearchuseraddelsearch-gelsearchchown-Relsearch:elsearch/opt/software/ES使用root用户创建ES数据文件和日志文件mkdir/datachown-Relsearch
旭旭宝宝
·
2020-07-08 20:51
cdh6.2
离线安装(傻瓜式安装教程)
CDH6.2
离线安装流程1安装准备1.1cdh6.2下载方式一:官网下载https://archive.cloudera.com/cm6/6.2.0/redhat7/yum/RPMS/x86_64/都下载下来
少蓬
·
2020-07-06 06:20
大数据
CDH6.2
/6.3 集成安装Flink 简明教程
CDH6系列并不自带Flink,目前此类教程比较少,特此分享出来一个最简单的集成方式。第一步:下载需要的jar,parcel等文件wgethttps://archive.cloudera.com/csa/1.0.0.0/csd/FLINK-1.9.0-csa1.0.0.0-cdh6.3.0.jarwgethttps://archive.cloudera.com/csa/1.0.0.0/parcel
勇敢的俍心
·
2020-06-30 07:03
Hadoop
CDH
Flink
flink
cloudera
大数据
基于CDH6.2kylin2.6.2安装部署
kylin安装前提是
CDH6.2
需要正常安装,hbase、hive、hdfs、spark(虽然官网是说spark可选安装,但是在kylin启动脚本中包含对spark环境的检测,所以建议CDH添加spark
颠沛流漓
·
2020-06-28 22:03
CDH
kylin
028-解决
cdh6.2
报 Failed to install Oozie ShareLib
本文主要参考0590-6.1.0-C6升级过程中Oozie共享库的问题分析,这个问题是,
cdh6.2
的通病,只要安装oozie就会出现(无论是升级,还是新装)。
weixin_33881140
·
2020-06-28 07:42
cdh版本升级(5.14 -> 6.2)
我们的ClouderaManager和cdh版本是5.14,现在公司需要升级到
cdh6.2
需要先升级ClouderaManager,然后升级cdh。
weixin_33852020
·
2020-06-28 06:01
基于Contos7.X+CDH6.2.0大数据平台搭建(上)
目录一、CDH6.2.0官网介绍二、CDH6.2.0安装前环境的部署三、CDH6.2.0安装一、
CDH6.2
官网介绍:CDH(Cloudera'sDistribution,includingApacheHadoop
潘永青
·
2020-06-27 09:53
大数据开发
CDH6.2
搭建之安装
环境准备:宿主机CentosLiunxrelease7.6.1810128G内存2T硬盘VirtualBox6.0.x86_64虚拟机:3台;用户cdh配置内存:32G存储:200G系统:CentosLiunxrelease7.6.1810网络:一、准备工作1、网络设置,要求每台机器可以访问互联网,并且可以互通;这里我的VirtualBox设置是:网卡一设置为:网络地址转换(NAT)网卡二设置为:
字符规划局
·
2020-06-27 08:48
大数据
CDH
CDH6.2
集成Sentry,Hive,Hue,Impala权限控制
Hadoop使用的CDH集成环境,从CDH5.3跨越到
CDH6.2
之前在CDH5.3上将hive从0.13升级到1.2.1。
简单的心1
·
2020-06-27 03:20
Hive
CDH6.2
离线安装(整理版)
1.概述CDH,全称Cloudera'sDistribution,includingApacheHadoop。是Hadoop众多分支中对应中的一种,由Cloudera维护,基于稳定版本的ApacheHadoop构建,提供了Hadoop的核心(可扩展存储、分布式计算),最为重要的是提供基于web的用户界面。CDH的优点:版本划分清晰,更新速度快,支持Kerberos安全认证,支持多种安装方式(如Yu
Swordfall
·
2020-06-26 11:58
在docker的centos7.6上安装
cdh6.2
最后想到用cdh吧,然后看了一下,
cdh6.2
的配套版本用的是hadoop3.0和hive2.1.1和hbase2.1.2。这个时候想的就是能配完整一套就行了。
sardtass
·
2020-06-26 07:25
hadoop
Flink 1.9.1 安装及启动
这里部署环境为
CDH6.2
集群,三个节点,Flink版本为编译的Flink1.9.1版本。Flink集群有两种部署的模式,分别是Standalone以及YARNCluster模式。
心有余力
·
2020-06-24 05:24
Flink
Flink 编译 Flink1.9.1-CDH6.2 对应版本
这里编译Flink1.9.1,
CDH6.2
平台Hadoop版本是hadoop-3.0.0-cdh6.2.0。
心有余力
·
2020-06-24 05:24
Flink
0590-6.1.0-C6升级过程中Oozie共享库的问题分析
1问题现象升级CDH6.1至
CDH6.2
的过程中,当升级过程执行到安装Oozie共享库时,在成功创建OozieShareLib根目录之后上载Oozei共享库的过程中报错了,报错信息如下:异常提示:“java.lang.ClassNotFoundException
Hadoop_SC
·
2020-06-21 21:24
Hadoop实操
kylin搭建
现在KYLIN的最新版本支持CDH6.0/6.1咨询kylin用户,
CDH6.2
也是支持。所以,我下载的kylin3.0.1kylin官网:http://kylin.apache.org/d
Ayub
·
2020-06-21 17:11
大数据集群搭建
CDH6.2
配置flink服务
现有的
cdh6.2
平台,通过cm管理,无法直接添加flink服务,如下图显示,并没有flink选项。
ww51pp
·
2020-04-01 13:47
flink
cdh6.2
flink
CDH6.2
安装配置第三篇:前台页面配置讲解
在第二篇中,我们介绍完了cdh左右的配置工作,如果没有配置的同学,请回去查看第二篇内容。本篇将继续介绍cdh前台的一些配置,如果后台配置都能顺利通过,那么前台配置会相对顺利。1.第一步第二步:第三步:接下来就是最关键的7步了,能不能成功就看这里的配置了。如下图:第一步:输入集群的名称,随便起一个就好了第二步:在扫描框里面写上你要加的机器,你想加的都放里面第三步:这边自定义存储库,如果有本地yum源
冷幽篁
·
2020-02-12 22:00
CDH6.2
安装配置第二篇:CDH安装的前期配置
本篇介绍cdh安装之前需要的一些必要配置,当然这些配置也可以用shell脚本来配置。在安装之前请先配置好yum源,在文中用的统一都是阿里源。CDH版本:6.2系统:centos7主机3台:master.com.cn192.168.1.110salver1.com.cn192.168.1.111salver2.com.cn192.168.1.112yum服务器:yum.com.cn192.168.1
冷幽篁
·
2020-02-12 15:00
CDH6.2
安装配置第一篇:CDH配置本地http服务
在我们安装cdh的时候,避免不了要安装一大堆软件,包括cm的服务器,hadoop的各种组件。这些组件的文件都比较大,所以我们会在本地配置一个http服务,以便于在安装cdh服务的时候能快速的安装完。本文主要介绍http服务的安装。1.如果没有配置yum源,那么可以去下载个阿里的centos源,我这里的系统是centos7。阿里源http://mirrors.aliyun.com/repo/Cent
冷幽篁
·
2020-02-11 19:00
0593-CDH5与CDH6对比
1文档编写目的Cloudera于2018年8月30日正式发布CDH6.0.0,至2019年2月19日,最新的迭代版本为CDH6.1.1,可能马上就会发布
CDH6.2
。
Hadoop_SC
·
2019-11-08 22:05
Hadoop实操
0621-6.2.0-如何卸载
CDH6.2
Fayson的github:https://github.com/fayson/cdhproject推荐关注微信公众号:“Hadoop实操”,ID:gh_c4c535955d0f1文档编写目的Fayson在两年前的文章中介绍过CDH的卸载,参考《0008-如何卸载CDH(附一键卸载github源码)V1.2》和《0609-6.1.0-如何卸载CDH6.1》。除非你是使用Cloudera官方提供的一
Hadoop_SC
·
2019-10-04 17:47
Hadoop实操
CDH6.2
环境中启用Kerberos
一、Kerberos概述:Kerberos是一个用于安全认证第三方协议,并不是Hadoop专用,你也可以将其用于其他系统,它采用了传统的共享密钥的方式,实现了在网络环境不一定保证安全的环境下,client和server之间的通信,适用于client/server模型,由MIT开发和实现。而使用ClouderaManager可以较为轻松的实现界面化的Kerberos集成,Kerberos协议:Ker
常飞梦
·
2019-06-27 11:48
Hadoop
cdh版本升级(5.14 -> 6.2)
我们的ClouderaManager和cdh版本是5.14,现在公司需要升级到
cdh6.2
需要先升级ClouderaManager,然后升级cdh。
choulanlan
·
2019-05-27 18:54
CDH
hadoop
升级
大数据
上一页
1
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他