E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
parcels
69.Kudu、Spark2、Kafka安装—CDH
管理员为:admin用户操作系统用户为:root用户69.2操作演示Kudu安装Kudu的Parcel部署下载Kudu的Parcel包:http://archive.cloudera.com/kudu/
parcels
大勇任卷舒
·
2024-02-09 14:55
CDH添加新节点小记
记录下过程及相关疑问安装CM基本配置:host,SSH免密,jdk,防火墙及时间同步安装配置CM子节点,创建
parcels
,后续安装的软件都会分发到该文件夹下启动当前节点的CM,转到CDH管理界面,可以看到节点已添加到主机列表中选择该节点
sx_1706
·
2024-02-05 09:59
大数据
大数据
CDH6.3.2 多 Spark 版本共存
一部署Spark客户端1.1部署spark3客户端tar-zxvfspark-3.3.1-bin-3.0.0-cdh6.3.2.tgz-C/opt/cloudera/
parcels
/CDH/libcd/
大数据AI
·
2024-02-05 09:56
大数据从入门到精通
spark
cdh
shell spark-submit提交之后获取appid,并在程序中扫描状态
首先看一下提交脚本#/sbin/bash/opt/cloudera/
parcels
/SPARK2/bin/spark2-submit\exportJAVA_HOME=/opt/jdk1.8.0_31TASK_TYPE
南修子
·
2024-01-18 22:16
[CDH5] Oozie web console is disabled 问题解决
http://archive.cloudera.com/gplextras/misc/ext-2.2.zip上传到服务器并解压[root@hadoop1libext]#cd/opt/cloudera/
parcels
尼小摩
·
2024-01-17 19:12
hive问题记录
com.ctc.wstx.exc.WstxParsingException:Unexpectedclosetag;expected.at[row,col,system-id]:[48,15,"file:/opt/cloudera/
parcels
李小晨同学
·
2024-01-05 08:02
hive
hadoop
数据仓库
ERROR sqoop.Sqoop: Got exception running Sqoop: java.lang.RuntimeException: Could not load db driver
java.lang.RuntimeException:Couldnotloaddbdriver问题产生原因缺少oracle驱动解决方案#需要在安装sqoopserver的节点上放oracle的驱动包cpojdbc6.jar/opt/cloudera/
parcels
即墨澈
·
2023-12-16 05:19
sqoop
kafka 常用命令【学习笔记】
Kafka环境变量配置exportKAFKA_HOME=/opt/cloudera/
parcels
/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/kafkaexportPATH
专注代码七年
·
2023-12-15 21:24
kafka
学习
笔记
cdh6.0安装部署
1.环境准备1.1.安装包下载地址:https://archive.cloudera.com/cdh6/6.0.1/
parcels
/https://archive.cloudera.com/cm6/6.0.1
bigdata_gjb6666
·
2023-11-06 05:59
3.
大数据
cdh6.0安装部署
Flink问题总结
Failedtovalidateanyoftheconfigureddirectoriestomoniflink1.9关联hadoop配置需要上传flink-shaded-hadoop-3-uber-3.1.1.7.0.3.0-79-7.0.jar包到/opt/cloudera/
parcels
勇者1108
·
2023-10-30 04:16
flink
CDH重新初始化Hive元数据库
初始化元数据需要使用cdhhive中的schematool脚本工具进行初始化,初始化脚本位置为cloudera/
parcels
/CDH/lib/hive/bin/接下来执行初始化命令.
头顶榴莲树
·
2023-09-23 04:11
大数据
hive
big
data
hadoop
python2访问CDH HBase Thrift2
启动HBaseThrift2执行命令,启动thrift2/opt/cloudera/
parcels
/CDH/lib/hbase/bin/hbase-daemon.sh--co
凡尔Issac
·
2023-09-18 04:45
CDH6.3 添加 Flink1.9 服务
csa1.0.0.0-cdh6.3.0.jar并放到CDH安装的服务器上的/opt/cloudera/csd路径下2、到https://archive.cloudera.com/csa/1.0.0.0/
parcels
章光辉_数据
·
2023-09-08 15:28
CDK &CDS 安装
一、下载安装包http://archive.cloudera.com/kafka/
parcels
/4.1.0/http://archive.cloudera.com/spark2/csd/SPARK2_
吃货大米饭
·
2023-09-02 15:28
使用FIFO的文件控制shell的线程数
/bin/bashdate+'%Y/%m/%d%H:%M:%S'HADOOP_CONF_DIR=/opt/cloudera/
parcels
/SPARK2-2.1.0.cloudera1-1.cdh5.7.0
飞天大漠
·
2023-08-17 12:17
CDH测试环境搭建
mirror.nsc.liu.se/centos-store/7.3.1611/isos/x86_64/CDH5.15.1-1parcel及parcel.shal:http://archive.cloudera.com/cdh5/
parcels
圈半球
·
2023-08-09 02:11
CHD6.2.1集群 Hive开启Iceberg
maven2/org/apache/iceberg/iceberg-hive-runtime/1.0.0/iceberg-hive-runtime-1.0.0.jar存放在/opt/cloudera/
parcels
行路见知
·
2023-07-29 10:27
hive
hadoop
数据仓库
解决问题:解除HUE下载10万行的限制
解决问题:解除HUE下载10万行的限制这个目录下的vim/opt/cloudera/
parcels
/CDH/lib/hue/apps/beeswax/src/beeswax/conf.py可以调整数量也可以更改为
墨卿风竹
·
2023-07-16 00:27
hadoop
hue
Hue创建oozie workflow调度,Hue创建workflow,HUE配置邮件告警
配置此驱动,解决在workflow中sqoop无法找到mysql驱动报错(1)上传mysql-connector-xxx.jarcpmysql-connector-java*/opt/cloudera/
parcels
BarryAllenx
·
2023-07-14 07:48
Couudea
Manager
大数据
mysql
java
hadoop
cloudera
hdfs ha脚本邮件预警failover
SERVICEID=""NN1_SERVICESTATE=""NN2_SERVICESTATE=""
[email protected]
#CDH_BIN_HOME=/opt/cloudera/
parcels
cllblogs
·
2023-06-23 00:37
CDSW添加节点异常解决记录
BUG1添加CDSW节点报错启动时刷以下异常日志:+exec/opt/cloudera/
parcels
/CDSW-1.2.0.p1.183075/docker/bin/dockerd--log-driver
Anan9527
·
2023-06-13 15:55
CDH常见错误之主机添加
无法安装cloudera-manager-agent包详细信息(错误)1:/tmp/scm_prepare_node.4jhFYJdohttp://192.168.101.105/cdh6/6.3.1/
parcels
啊 这
·
2023-04-17 00:39
CDH
linux
运维
大数据
Kafka如何彻底删除topic及数据
我的kafka是CDH安装的默认目录/opt/cloudera/
parcels
/KAFKA-4.1.0-1.4.1.0.p0.41、停止生产和消费程序。
寞逍遥
·
2023-04-16 12:15
kafka
java
大数据
CDH6.3.2版本pyspark-sql通过hive访问hbase
1、添加所需要包环境cp/opt/cloudera/
parcels
/CDH-6.3.2-1.cdh6.3.2.p0.1605554/lib/hive/lib/hive-hbase-handler-2.1.1
sunnyboy_4
·
2023-04-13 19:17
hadoop
hive
hbase
sql
arcgis python脚本筛选与线共边的面_ArcGIS公共函数Python脚本,Arcgis,常用,功能
1.根据属性值删除行arcpy.MakeFeatureLayer_management(outputpath,"
parcels
_lyr")#根据输入要素类或图层创建临时图层,如果不将此图层保持到磁盘或地图文档
weixin_39877182
·
2023-04-09 17:17
arcgis
CDH集群安装
CDH下载CMhttp://archive.cloudera.com/cm5/->cm->5->选择自己要下载的版本下载parcelshttp://archive.cloudera.com/cdh5/->
parcels
_未知数
·
2023-04-01 18:36
hadoop 找不到或无法加载主类org.apache.hadoop.mapreduce.v2.app.MRAppMaster
这个是因为在yarn执行MapReduce的使用找不到hadoop的classpath一般在shell中输入hadoopclasspath输出为/etc/hadoop/conf:/opt/cloudera/
parcels
Helen_Cat
·
2023-04-01 01:42
使用parquet-tools工具查看parquet文件
我安装6.2下面对应的路径是/opt/cloudera/
parcels
/CDH-6.2.0-1.cdh6.2.0.p0.967373/bin/parquet-tools如果找不到使用以下命令查看一下具体位置
代码足迹
·
2023-03-24 17:21
Flink CDC + Hudi + Hive + Presto构建实时数据湖最佳实践
PrestoDB0.256Mysql5.72.集群服务器基础环境2.1Maven和JDK环境版本2.2Hadoop集群环境版本2.3HADOOP环境变量配置exportHADOOP_HOME=/opt/cloudera/
parcels
大数据技术架构
·
2023-03-19 11:26
hadoop
数据库
mysql
java
大数据
kafka管理工具 | 监控 | 偏移量 | 堆积 | offset,必备技能
Kafka内部提供了许多管理脚本,这些脚本都放在$KAFKA_HOME/bin目录下,CDH版本放在/opt/cloudera/
parcels
/KAFKA-3.1.0-1.3.1.0.p0.35/lib
数据仓库与Python大数据
·
2023-02-01 00:05
CDH 升级SPARK2 与 问题
以下操作基于主节点:也就是CHDSERVER节点1,关闭集群,关闭CMS,关闭CDHAGENT与SERVER2,下载文件下载仓库:http://archive.cloudera.com/spark2/
parcels
会长大的幸福_8bf9
·
2023-01-31 00:02
大数据之CDH5.16.1集成Phoenix
1下载parcelshttp://archive.cloudera.com/cloudera-labs/phoenix/
parcels
/latest/下载如下三个文件:CLABS_PHOENIX-4.7.0
LearnBigData
·
2023-01-30 21:59
CDH-节点扩展
扩展步骤:准备环境:jdk-1.8、python-2.7、修改hosts环境、安装ntp、关闭防火墙建目录,并将parcel-repo的包拷贝过来|--/opt|--/cloudera|--/
parcels
Grey____
·
2023-01-28 14:52
基于CM管理的CDH集群集成Phoenix
前提:已经基于CM安装搭建CDH集群,本文采用
parcels
包的方式集成Phoenix到CDH集群。下载Phoe
百夜﹍悠ゼ
·
2022-12-17 10:57
大数据
hadoop
CDH6.3.2集成spark-sql完整版本
archive.apache.org/dist/spark/spark-2.4.0/spark-2.4.0-bin-hadoop2.7.tgz解压spark-4.0-bin-hadoop2.7.tgz到/opt/cloudera/
parcels
奇科.zhang
·
2022-12-15 11:50
CDH
spark
sql
hadoop
spark-submit解读
本文基于spark1.6-CDH5.7.2讨论当执行spark-submit时,会产出如下操作:1、设置HADOOP_HOME=/opt/cloudera/
parcels
/CDH-5.7.2-1.cdh5.7.2
凡尔Issac
·
2022-02-08 22:56
CDH6.3.3 paywall版之前自定义http服务器放置
parcels
安装数据
当前大数据集群的工具选型上,巨头们都是自研大数据工具,中小微企业都是开源大数据组件搭积木,中间层级的厂商或买商业软件(MaxCompute/腾讯云/华为云)或在CDH基础上再集成商业套件(Dataphin之类).cloudera公司是在2021年2月份启动付费墙后,之前无论是cdh集群官网archive资源,还是通过yum方式安装cdh组件,均会被付费墙拦截,需要缴费后拿到下载账户才可以执行下载操
江畔独步
·
2021-11-09 18:14
cdh集群管理
http
服务器
apache
CDH6.2.0添加Phoenix服务(CentOS6)
下载包https://archive.cloudera.com/phoenix/6.2.0/
parcels
/https://archive.cloudera.com/phoenix/6.2.0/csd/
代码足迹
·
2021-06-07 00:26
Hadoop实战(9)_Hive进阶及UDF开发
Hive目录及配置文件#配置文件/etc/hive/conf#根目录/opt/cloudera/
parcels
/CDH/lib/hive当cm界面里执行部署客户端配置时,如上两个conf目录都会覆盖。
padluo
·
2021-05-02 20:13
CDH开始收费之后,下载方法!
最近自己安装CDH5.X版本时发现,CM包和
parcels
包无法下载了。
怒上王者
·
2021-02-20 18:01
CDH
大数据
mysql5.6安装sys库_Cloudera Manager 完整安装教程----2 (含大数据完整进阶教程)
免费课程)无套路第3章CM安装部署CM下载地址:http://archive.cloudera.com/cm5/cm/5/离线库下载地址:http://archive.cloudera.com/cdh5/
parcels
最暖最珍贵
·
2020-12-04 20:54
mysql5.6安装sys库
CDH5.16.1集群企业真正离线部署
archive.cloudera.com/cm5/cm/5/cloudera-manager-centos7-cm5.16.1_x86_64.tar.gzParcelhttp://archive.cloudera.com/cdh5/
parcels
钻石大门
·
2020-09-16 06:01
CDH
Cloudera CDH5.16安装
1.安装文件下载**CDH下载地址:**http://archive.cloudera.com/cdh5/
parcels
/**ClouderaManage下载:**http://archive.cloudera.com
奥特慢-QM
·
2020-09-16 05:38
软件安装
CDH5.16.1 安装 Spark2
https://docs.cloudera.com/documentation/index.htmlhttp://archive.cloudera.com/spark2/
parcels
/2.4.0.cloudera2
袁河之滨
·
2020-09-16 05:48
大数据入门实践
大数据环境准备
CDH
Spark2
CDH5.16.2安装Phoenix
1、下载所需的包http://archive.cloudera.com/cloudera-labs/phoenix/
parcels
/latest/2、上传至/cloudera/parcel-repo/3
hyunbar
·
2020-09-16 05:16
报错:(未解决)Opening socket connection to server master/192.168.52.26:2181. Will not attempt to authentic...
报错现象:DH-5.15.1-1.cdh5.15.1.p0.4/lib/hadoop/lib/native:/opt/cloudera/
parcels
/CDH-5.15.1-1.cdh5.15.1.p0.4
weixin_30307267
·
2020-09-15 15:01
大数据
java
CDH6.X问题总结
进入Zookeeper中将之前的脏数据删掉再重启即可进入zookeeper的bin目录:/opt/cloudera/
parcels
/CDH-****/lib/zookeeper/bin/zk
songlllovescoding
·
2020-09-15 12:54
问题总结
CDH
Kafka
Hive
Zookeeper
hadoop 找不到或无法加载主类org.apache.hadoop.mapreduce.v2.app.MRAppMaster
这个是因为在yarn执行MapReduce的使用找不到hadoop的classpath一般在shell中输入hadoopclasspath输出为/etc/hadoop/conf:/opt/cloudera/
parcels
JIU_9527
·
2020-09-15 03:12
hadoop
HPLSQL(Hadoop存储过程实现)的安装和简单应用
下载安装包并授权Chmod+x/hplsql2.环境变量设置vihplsql配置Hadoop环境变量和hadoopjar包的环境变量export"HADOOP_CLASSPATH=/opt/cloudera/
parcels
CaseyChen5213
·
2020-09-14 11:54
hadoop
CDH集成Phoenix组件
Phoenix组件下载相关文件Parcel包安装登录Phoenix集成Phoenix组件下载相关文件下载网址:http://archive.cloudera.com/cloudera-labs/phoenix/
parcels
麻雀加
·
2020-09-14 09:14
CDH
上一页
1
2
3
4
5
6
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他