E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cloudera
8.迁移CM和数据库-1
8.1实验内容环境介绍将
Cloudera
Manager在Kerberos环境下迁移至新的CM节点。
大勇任卷舒
·
2023-08-19 14:49
linux 安装hue
http://archive.
cloudera
.com/cdh5/cdh/5/hue-3.7.0-cdh5.3.6/Hue的版本:cdh5.3.6-hue-3.7.0->需要编译才能使用->联网pingwww.baidu.com
小赖同学啊
·
2023-08-19 05:49
BigDate
hue
hue集成
hdfs
cloudera
-manager-agent-5
在配置cdh集群时候,以rpm包的方式安装
cloudera
-manager-agent-5....的时候一直报错无法安装,网上找了很多方法我自己的办法是:在后面加上"--nogpgcheck"参数,以强制安装
在朝阳寺树下
·
2023-08-19 02:31
CDH6.3配置安装实操
CDH6与CDH5的安装步骤一致,主要包括以下四部分:1.安全前置准备,包括安装操作系统、关闭防火墙、同步服务器时钟等;2.外部数据库如MySQL安装3.安装
Cloudera
Manager;4.安装CDH
MrGrant
·
2023-08-18 06:57
大数据
运维
hadoop
cloudera
CDH Hadoop 3.0 使用OSS作为储存 2021-09-07
简介:CDH和CM(
Cloudera
Manager)CDH(
Cloudera
’sDistribution,includingApacheHadoop)是众多Hadoop发行版本中的一种,由
Cloudera
迷藏_
·
2023-08-17 16:41
使用FIFO的文件控制shell的线程数
/bin/bashdate+'%Y/%m/%d%H:%M:%S'HADOOP_CONF_DIR=/opt/
cloudera
/parcels/SPARK2-2.1.0.
cloudera
1-1.cdh5.7.0
飞天大漠
·
2023-08-17 12:17
Cloudera
管理Hadoop API 依赖
翻译:https://www.
cloudera
.com/documentation/enterprise/release-notes/topics/cdh_vd_hadoop_api_dependencies.html
金刚_30bf
·
2023-08-17 10:25
Distributed systems theory for the distributed systems engineer 翻译 中英对照
Distributedsystemstheoryforthedistributedsystemsengineer适合分布式系统工程师的分布式系统理论GwenShapira,whoatthetimewasanengineerat
Cloudera
andnowisspreadingtheKafkagospel
tsogvilin
·
2023-08-16 21:29
Hue 之 SparkSql interpreters的配置及使用
1、环境说明:HDP2.4V3sandboxhue4.0.02、hue4.0.0编译及安装地址:https://github.com/
cloudera
/hue/releases/tag/release-
zxfBdd
·
2023-08-16 19:15
大数据
hadoop
java
hdfs
Hadoop是什么
Apache下开源的分布式系统基础框架,主要解决海量数据的存储和分析计算问题广义指Hadoop生态圈,包含大量用于大数据储存,管理,传输,分析计算的框架Hadoop生态圈Hadoop的三大发行版本Apache、
Cloudera
Rayfun
·
2023-08-16 14:30
Centos 7 离线安装
Cloudera
Manager6 和CDH6.3.1
零、前言之前写过一篇CDH5的,本文是在之前操作基础上进行的Centos7离线安装
Cloudera
Manager5和CDH5.13.0CDH6与CDH5安装的整体流程基本一致,而且简单了不少。
LY丶Smile
·
2023-08-13 19:59
hadoop与第三方(CDH等)的比较
文章来源:https://blog.csdn.net/wdr2003/article/details/80248147CDH:全称
Cloudera
’sDistributionIncludingApacheHadoopCDH
你的努力时光不会辜负
·
2023-08-11 11:52
centos6 启动
cloudera
-scm-agent失败
背景:最近准备在自己的虚拟机上搭一个cdh的集群,在启动
cloudera
-scm-agent失败排查思路:进去log日志查看报错信息:/usr/bin/env:python2.7:没有那个文件或目录参考技术链接
安申
·
2023-08-11 06:46
千云物流 -安装企业CM&CDH6.3.2
基础环境准备
cloudera
官网下载需要的包自2021年1月31日起,所有
Cloudera
软件都需要订阅https://www.
cloudera
.com/downloads.htmlhttps://www.
cloudera
.com
青0721松
·
2023-08-10 21:39
千云物流
hadoop
spark
hdfs
CM
CDH
CDH测试环境搭建
://mirror.nsc.liu.se/centos-store/7.3.1611/isos/x86_64/CDH5.15.1-1parcel及parcel.shal:http://archive.
cloudera
.com
圈半球
·
2023-08-09 02:11
Flink Kafka Doris实战demo
:https://github.com/apache/incubator-doris/wiki/Doris-Install1.1注意问题:需要把fe/pom.xml中下载的Repository地址改下
cloudera
-thirdpa
奈文摩尔ST
·
2023-08-05 09:53
Fink
大数据
Doris
flink
kafka
CDH6.1安装部署
CDH6.1安装部署一、安装前的准备二、
Cloudera
Manager安装三、安装CDH6.1.0一、安装前的准备虚拟机的创建及centos7的安装克隆虚拟机:采用完整克隆模式对克隆的虚拟机进行必要的修改
若兰幽竹
·
2023-08-05 08:34
大数据
cloudera
Parquet文件详解
ApacheParquet是由Twitter和
Cloudera
最先发起并合作开发的列存项目,也是2010年Google发表的Dremel论文中描述的内部列存格式的开源实现。和一些传统的列式存储(C
FlyWIHTSKY
·
2023-08-04 16:57
JAVA
hadoop
大数据
java
CDH集群日志清理
/*|sort-nr1.2还有一个是
Cloudera
ManagementService服务产生的日志,存在/var/lib/...cd/dat
csdn-延
·
2023-08-03 20:52
数仓
大数据
linux
java
linux
cdh
大数据
清理日志
大数据课程E1——Flume的概述
[email protected]
地址:广东惠州▲本章节目的⚪了解Ganglia的概念;⚪了解Ganglia的拓扑结构和执行流程;⚪掌握Ganglia的安装操作;一、简介1.概述1.Flume原本是由
Cloudera
伟雄
·
2023-08-01 03:33
flume
大数据
大数据开发学习笔记——HA简介
单点故障---解决hahadoop2.x之后,
Cloudera
提出了QJM/QuromJournalManager,这是一个基于Paxos算法实现的HDFSHA方案,它给出了一种较好的解决思路和方案,示意图如下
卿卿老祖
·
2023-08-01 02:11
Apache Impala教程_编程入门自学教程_菜鸟教程-免费教程分享
教程简介Impala是由
Cloudera
开发,一个开源的MassivelyParallelProcessing(MPP)查询引擎。
IT民工爱搬砖
·
2023-07-30 01:44
笔记
CHD6.2.1集群 Hive开启Iceberg
maven.org/maven2/org/apache/iceberg/iceberg-hive-runtime/1.0.0/iceberg-hive-runtime-1.0.0.jar存放在/opt/
cloudera
行路见知
·
2023-07-29 10:27
hive
hadoop
数据仓库
CDH5.16.1安装kafka
kafka有很多版本,CDH也有很多版本,所以需要确定自己所需要的对应版本,下面的链接可以查看自己cdh的对应kafka版本:https://www.
cloudera
.com/documentation
丿灬逐风
·
2023-07-26 06:35
hadoop
hadoop
kafka
cdh
HTrace 与 Zipkin 简单教程
HTrace是一款由
Cloudera
开发的分布式追踪框架,在设计上借鉴了Google的Dapper论文,虽然HTrace已经停止了更新,在Apache里面孵化失败了,但是
SmithCruise
·
2023-07-25 21:10
Hadoop安装(CentOS7版)
2)
Cloudera
Hadoop(
Cloudera
’sDistributionIncludingApacheHadoop,简称:CDH)3)HortonworksHadoop(Hortonworks
Stackflowed
·
2023-07-25 14:59
Hadoop
hadoop
如何在RELS8.4上安装CDP-PvC Base 7.1.8并启用Auto-TLS
文档编写目的CDPPVCBASE7.1.8是
Cloudera
与Hortonworks合并后,第一个融合CDH和HDP所有组件的on-premise并且可用于生产环境的新功能版本,CDPPvCBase主要由
大数据杂货铺
·
2023-07-25 14:28
大数据
hadoop
分布式
HDP安装教程笔记
ambari安装教程,大数据平台安装教程1.环境准备1.安装centos7系统1.使用vmware安装centos系统,略HDP环境安装配置HDP:HortonworksDataPlatformCDH:
Cloudera
DistributionHadoop
weixin_42781936
·
2023-07-25 14:57
HDP
ambari
hadoop
hadoop
大数据
ambari
hdfs
big
data
一、大数据技术之Flume(简介)
第1章Flume概述1.1Flume定义Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统。Flume基于流式架构,灵活简单。
@我不是大鹏
·
2023-07-25 08:33
大数据技术
大数据
flume
信创-大数据平台CPU架构支持
CDPCDP数据中心类似于CDH和HDP,直接安装在硬件服务器上,目前支持市面上主流的X86服务器,包括国内海光服务器,CDH不支持ARM以上两种大数据平台都仅支持x86架构,早在几年期RedHat联手
cloudera
四月天03
·
2023-07-24 07:46
信创
架构
Spark Sql日志分析项目实战
课程环境安装CDH相关软件下载地址Spark环境搭建Spark源码编译(以spark2.1.0为例)spark编译官方文档1、官网下载相应版本源码包参考编译过程2、spark源码编译中的坑pom.xml添加
cloudera
https
kangapp
·
2023-07-24 06:17
04Hadoop分布式文件系统HDFS(入门)
第1章Hadoop概述1.1Hadoop是什么1.2Hadoop发展历史(了解)1.3Hadoop三大发行版本(了解)Hadoop三大发行版本:Apache、
Cloudera
、Hortonworks。
香帅_WQW
·
2023-07-23 14:13
大数据
HIVE
hdfs
hadoop
big
data
Linux_NTP 网络同步 -> ntpd / CDH6
_27754983/article/details/69386408Linux配置ntp时间服务器(全)https://www.cnblogs.com/quchunhui/p/7658853.html
Cloudera
高达一号
·
2023-07-22 08:08
大数据
Linux
[Hive]创建UDF不重启集群解决方案
最近遇到一个问题,上一次没有解决,㝼时间关系没有研究,这次逮着机会了,就回了几个小时研究了一下,现把这个过程整理出来,以备后查创建Maven项目,并在pom文件中添加如下的依赖
cloudera
https
帅可儿妞
·
2023-07-22 00:52
安装 CDH执行scm_prepare_database.sh报错,java.sql.SQLException: Access denied for user ‘scm‘@‘localhost‘
1、安装CDH报错CDH是
Cloudera
DistributionforHadoop的缩写,是一套由
Cloudera
提供的面向企业的开源Hadoop生态系统解决方案。
申子辰林
·
2023-07-19 02:40
数据库
BigData
数据库
java
开发语言
大数据
解决问题:解除HUE下载10万行的限制
解决问题:解除HUE下载10万行的限制这个目录下的vim/opt/
cloudera
/parcels/CDH/lib/hue/apps/beeswax/src/beeswax/conf.py可以调整数量也可以更改为
墨卿风竹
·
2023-07-16 00:27
hadoop
hue
35.安装CDH环境准备
测试环境CentOS6.5使用root用户操作操作系统CentOS6.535.1环境前置节点数量最小规模,建议最少4台服务器,一台用作管理节点
Cloudera
Manager和NameNode等,另外三台用作工作节点
大勇任卷舒
·
2023-07-14 13:39
Apache Kudu 学习总结
AnewadditiontotheopensourceApacheHadoopecosystem,ApacheKuducompletesHadoop’sstoragelayertoenablefastanalyticsonfastdata.ApacheKudu概述产生背景
Cloudera
Seniscz
·
2023-07-14 13:36
kudu
数据库
CDH更换logo:更换CDH自带logo
文件find/-namelogo.svg2、进入对应目录,备份原始logo.svg文件并上传新文件到本目录下3、重启CM的agent和serverserver节点操作:systemctlrestart
cloudera
-scm-server
BarryAllenx
·
2023-07-14 07:48
Couudea
Manager
大数据
大数据
集群搭建
centos7
hadoop
cloudera
Hue创建oozie workflow调度,Hue创建workflow,HUE配置邮件告警
sqoop驱动注:配置此驱动,解决在workflow中sqoop无法找到mysql驱动报错(1)上传mysql-connector-xxx.jarcpmysql-connector-java*/opt/
cloudera
BarryAllenx
·
2023-07-14 07:48
Couudea
Manager
大数据
mysql
java
hadoop
cloudera
flume快速上手
Flume定义Flume最初是
Cloudera
公司推出的一个高可用、高可靠的,分布式的海量日志采集、聚合和传输的系统,于2009年被捐赠给了Apche基金会,成为Hadoop相关组件之一Flume支持在日志系统中定制各类数据发送方
书香恋仁心
·
2023-06-23 20:03
flume
flume
hdfs ha脚本邮件预警failover
SERVICEID=""NN2_SERVICEID=""NN1_SERVICESTATE=""NN2_SERVICESTATE=""
[email protected]
#CDH_BIN_HOME=/opt/
cloudera
cllblogs
·
2023-06-23 00:37
最新版Ambari2.75安装及HDP3.1.5集群搭建
最近打算使用ambari搭建集群,却突然发现
Cloudera
相关软件包括HDP、CDH都收费了,都需要有效的订阅,并且只能通过付费墙进行访问(官宣地址:关于
Cloudera
软件的访问获取)。
码道功成
·
2023-06-20 16:37
大数据
项目部署与配置
ambari
大数据
ambari
centos
kafka
hadoop
Centos7离线部署CDH6.3.2集群
一、CDH6要求和支持的版本官方指导:https://docs.
cloudera
.com/documentation/enterprise/6/release-notes/topics/rg_hardware_requirements.html
小KKKKKKKK
·
2023-06-20 14:18
Kafka与Flume比较
在企业中必须要清楚流式数据采集框架flume和kafka的定位是什么:1Flumeflume:
cloudera
公司研发1.适合多个生产者;多数据源数据汇总可以参考Flume采集案例:https://blog.csdn.net
月正明
·
2023-06-20 00:52
Kafka
Flume
kafka
flume
区别
Kafka与Flume之集成比较
Kafka与Flume之集成比较一、Kafka与Flume比较在企业中必须要清楚流式数据采集框架flume和kafka的定位是什么:flume:
cloudera
公司研发:适合多个生产者;适合下游数据消费者不多的情况
李波涛i
·
2023-06-20 00:17
kafka基础
kafka
flume
大数据
分布式
java
Kafka(七) Kafka与Flume比较及集成
Kafka与Flume比较及集成7.1Kafka与Flume比较在企业中必须要清楚流式数据采集框架flume和kafka的定位是什么:flume:
cloudera
公司研发:适合多个生产者;适合下游数据消费者不多的情况
plenilune-望月
·
2023-06-20 00:17
消息中间件(KAFKA
ActiveMQ
RabbitMQ)
任务调度框架之oozie
一个基于工作流引擎的开源框架,由
Cloudera
公司贡献给Apache,提供对HadoopMapreduce、PigJobs的任务调度与协调。Oozie需要部署到JavaServlet容器中运行
陈朝辉_39f7
·
2023-06-19 20:17
Hue:Hadoop 图形化用户界面
特性:一个HDFS的文件浏览器,一个MapReduce/YARN的Job浏览器,一个HBas的浏览器,Hive,Pig,
Cloudera
Impala和Sqoop2的查询编辑器。
victory0508
·
2023-06-17 06:07
hadoop/hive
此 DataNode 未连接到其一个或多个 NameNode
cloudera
managerhadoop调整参数重启后失败,datanode日志全是info,卡在副本文件不存在,过一会儿状态变红,提示此DataNode未连接到其一个或多个NameNode经过一顿重启调整不行
熟悉开机关机重启
·
2023-06-15 20:21
linux
运维
服务器
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他