E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH大数据环境搭建
3.CENTOS安装
CDH
和Kudu-2
版本:CENTOS7.2
CDH
5.10Kudu1.23.1Kudu安装
CDH
从5.10开始,打包集成Kudu1.2,并且Cloudera正式提供支持。
大勇任卷舒
·
2023-11-26 07:24
java hdfs kerberos 认证超时 Receive timed out
背景
cdh
6集群为阿里服务器,三台机器搭建而成,并且开启了kerberos,现在想尝试一下用javaapi读取hdfs数据。
KK架构
·
2023-11-26 00:53
开发问题汇总
spark
大数据
big
data
HBase探索篇 _ OpenJdk15编译并部署
CDH
版HBase
文章目录1.前言2.准备工作3.项目配置3.1项目导入3.2编译配置3.3程序包javax.annotation不存在3.4maven-shade-plugin升级版本3.5程序包javax.xml.ws.http不存在3.6SomeEnforcerruleshavefailed.3.7hbase-spark模块编译报错3.8处理一些编译时的警告信息4.本地启动和功能测试4.1HMasterApp
大猿小猿向前冲
·
2023-11-25 14:20
HBase专题
hbase
CDH
-6.3.2完整安装附带资源包
#########创建文件夹############mkdir-p/opt/softwearmkdir-p/opt/module所有服务器都需要创建############安装百度网盘##############1、centos服务器安装百度云盘pipinstallbypy2、输入bypyinfo链接:https://pan.baidu.com/s/1ANDiUQIuZCgYiZOeFpFbxg提
sunnyboy_4
·
2023-11-25 14:49
hadoop
linux
运维
服务器
基于CentOS7的
CDH
6.3.2完全分布式集群搭建【上】
第一次搭建
CDH
,留个文档记录下出现的问题和学到的东西。
HansBigData
·
2023-11-25 14:18
分布式
linux
hadoop
cdh
亲测2022/11/12
一、Hadoop大数据平台1、Hadoop发行版(1)完全开源的原生的ApacheHadoop(2)Cloudera与Hortonworks公司的
CDH
和HDP:在Cloudera和Hortonworks
Tian.Mrs
·
2023-11-25 14:18
大数据
hadoop
spark
第一步
CDH
6.3.2集成自制Flink1.12.7
一共分两步走:第一步:
CDH
制作Flink1.12.7第二步:
CDH
集成Flink1.12.7前提说明早期
CDH
6.3.2集成的Flink1.12存在log4j漏洞,所以需要重新编译这是之前Flink1.12
secretWHD
·
2023-11-25 14:18
CDH
Flink
apache
docker
flink
大数据
cloudera
CDH
6安装教程(亲自测试越坑版)
一、Hadoop大数据平台1、Hadoop发行版(1)完全开源的原生的ApacheHadoop(2)Cloudera与Hortonworks公司的
CDH
和HDP:在Cloudera和Hortonworks
inrgihc
·
2023-11-25 14:14
Hadoop
big
data
hadoop
spark
Hadoop发行版 Cloudera
CDH
6.3.2及CM 安装包下载(阿里云盘 不限速)
CDH
(全称Cloudera’sDistribution,includingApacheHadoop)是由Cloudera公司构建的Hadoop稳定发行版,不仅含有ApacheHadoop,还整合了Hive
风情客家__
·
2023-11-25 14:11
大数据框架
CDH
6.3.2
ARCH新装过程
wiki.archlinux.org/index.php/Fdiskmount:https://wiki.archlinux.org/index.php/Mount2.出现网络问题时,需要配置###Basi
cDH
CPnetworkThissetupwille
半步江南
·
2023-11-24 13:50
HBase本地安装Snappy
环境HBase
cdh
5-1.2.0_5.12.1环境特别重要。它直接关系到需要使用的Snappy以及Hadoop的版本。如果版本对不上,很可能出现链接本地动态链接库时的错误。操作操作其
AlstonWilliams
·
2023-11-24 09:08
如何优雅地使用 java 连接 HBase 客户端
放弃不难,但坚持很酷~HBase版本:1.2.0-
cdh
5.7.0一、客户端的长短连接java远程连接HBase客户端,大体分为两种方式。一种是长连接,一种是短连接。
create17
·
2023-11-23 20:37
java
hive
设计模式
redis
epoll
CDH
之HIVE-ON-SPARK、Spark配置
原:
CDH
之HIVE-ON-SPARK、Spark配置_小基基o_O的博客-CSDN博客_
cdh
hiveonsparkHIVEONSPARK配置
CDH
6.3.2的HIVE版本为:2.1.1+
cdh
6.3.2HIVE
javastart
·
2023-11-23 12:00
hadoop
spark
hive
大数据
spark
一文流:hive使用 bulk load 批量导入数据到 hbase
本文主要参考了hbase和hive官方文档的说明,并结合
cdh
和hdp的一些教程以及个人在生产中的实践进行记录。
if200
·
2023-11-23 09:31
大数据
hbase
hive
bulkload
bulk
导入数据
CDH
6.2.1 集群在线安装kafka 和 brokerid报错 以及 连接超时报错 总结
进入clouderamanager点击添加服选择kafka然后点击选择主机本教程选择了三台机器点击继续进入ReviewChanges页面配置zookeeper的目录配置JavaHelpSizeofBroker(一定要大于512)点击继续,运行完成后安装成功(如果是首次安装)因为不是首次安装所以就出现了报错此时我们点击角色日志查看报错日志通过日志可以看出是brokerid不匹配的问题这个时候我们有两
安心做个小废物
·
2023-11-22 09:35
hadoop
python
kafka
python
kafka
大数据
linux
java
hugegraph图数据库环境搭建
centos7版本:1.4.0server和studio:https://pan.baidu.com/s/1nMvbaXcAHHcUvZDok-upkg提取码:71t9修改hugegraph-0.10.4配置文件
cdh
ugegraph
11111kgd
·
2023-11-21 03:46
知识图谱
数据库
linux
知识图谱
kafka_consumer不消费数据的问题排查
背景:初始的时候,在
cdh
中部署了kafka集群后来方案改为kafka消息平台和
cdh
中的hive,spark等计算平台分离由于之前的kafka部署配置,污染到后面的apache的kafka集群,使得其消费不到消息我们查看
都教授2000
·
2023-11-20 23:32
大数据
kafka
zookeeper
argocd
部署argo
cdh
ttps://github.com/argoproj/argo-cd/releaseskubectlcreatenamespaceargocdkubectlapply-nargocd-fhttps
inner222
·
2023-11-19 19:19
argocd
HDFS 使用Hadoop 中自带的词频统计程序,对数据集进行词频统计
一、准备工作:1.按
CDH
环境说明文档配置相对目录转到/user/hdfs,那么新创建的用户文件夹bigdata***就在/user/hdfs目录之下。
码猿小菜鸡
·
2023-11-19 16:28
大数据
人工智能
hadoop
big
data
词频统计
hdfs
CDH
6.3.2集成Apache Flink1.12.0
目录一、编译Flink1下载flink源码2增加maven镜像3执行编译命令二、编译parcel1下载flink-parcel2修改参数3复制安装包4编译parcel5编译csd6上传文件三、
CDH
集成
终回首
·
2023-11-19 14:19
大数据
#
Apache
Flink
apache
flink
大数据
CDH
3.Apache Hive 查询报错 FAILED: org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
版本
CDH
6.2.0Hive2.1.1-
cdh
6.2.0一、问题执行查询视图的sql报错:FAILED:ExecutionError,returncode3fromorg.apache.hadoop.hive.ql.exec.mr.MapredLocalTask
终回首
·
2023-11-19 14:18
大数据
#
Apache
Hive
hive
大数据
Apache Hive源码阅读环境搭建
前置软件:JDK1.8Maven3.3.91下载源码#下载源码gitclonehttps://github.com/apache/hive.git
cdh
ive#查看标签gittag#切换到要阅读的指定版本的
终回首
·
2023-11-19 14:08
#
Apache
Hive
大数据
apache
hive
hadoop
开源大数据组件
utm_source=alading&utm_campaign=repoBI报表:DataEasehttps://github.com/dataease/dataease集群管理HDP/
CDH
/CDP–Todo
刘金宝_Arvin
·
2023-11-19 01:33
大数据
开源软件
Hive在SQL标准权限模式下创建UDF失败的问题排查
环境:
CDH
5.16Hive1.1.0已开启KerberosHive授权使用SQLStandardsBasedAuthorization模式(以下简称SSBA模式)症状表现:在编译好UDF的jar包之后
咕噜咕噜大数据
·
2023-11-19 00:48
大数据安全
Hive
CDH
大数据
hive
cdh
不在 sudoers 文件中。此事将被报告。
之前重装linuxcentos系统后,建立用户
cdh
。在进行sudoyuminstallXXX时,报如下错误。
cdh
不在sudoers文件中。此事将被报告。
DSP_G
·
2023-11-17 03:46
问题集合
经验分享
yum
权限
sudo
centos
【KeyarchOS】安装部署CM5.13.0和
CDH
5.13.0实践
目录1概述2安装准备2.1操作系统环境2.2CM版本3安装3.1安装CM5.13.04运行CM安装
CDH
4.1启动CM服务4.2初始化CM并安装
CDH
5.13.01概述浪潮信息KOS是浪潮信息基于LinuxKernel
KeyarchOS
·
2023-11-16 10:03
软件兼容性
linux
ZooKeeper安装部署和客户端连接
安装zookeeper的注意事项:安装前需要安装好jdk检测集群时间是否同步检测防火墙是否关闭检测主机ip映射有没有配置##下载安装包、解压下载地址:
CDH
版本:http://archive.cloudera.com
a大数据yyds
·
2023-11-15 21:35
ZooKeeper
企业入门实战--k8s之helm图形化
图形化helm图形化添加仓库并拉取helmrepoaddapphubhttps://apphub.aliyuncs.comhelmsearchrepokubeapps拉取bitnami/kubeapps
cdh
elm
鱼子酱048
·
2023-11-15 19:00
企业入门实战
helm
运维
k8s
FBTFT驱动移植
移植fbtft到荔枝派Nano1.3inchL
CDH
ATfbtft的官方wikiFBTFTdriverSt7789vLCD移植简介基于AM335X和Linux的LCDLM6069驱动移植Liunx驱动学习
zm.sun
·
2023-11-15 19:11
软件
Rust图形界面:从零开始创建eGUi项目
文章目录创建组件show函数egui系列:初步创建首先,用cargo创建一个新项目,并添加eframecargonewhello
cdh
ellocargoaddeframecargorun尽管默认创建的项目只实现了输出
微小冷
·
2023-11-13 08:02
Rust
rust
egui
组件
GUI
widget
label
1.安装flink-1.12.2
FLINKonYARN模式解压安装包:tar-zvxfflink-1.12.2-bin-scala_2.11.tgz/opt/修改yarn配置,设置applicationmaster重启时尝试的最大次数(
cdh
数据湖填坑
·
2023-11-12 22:02
大数据实战
flink
Flume写入hive错误记录
Flume1.9
cdh
5.16.2错误1、Failedtostartagentbecausedependencieswerenotfoundinclasspath.Errorfollows.具体错误:24Mar202210
蜗牛@漫步
·
2023-11-12 16:59
Flume
flume
hive
flume
sink
flume
hive
CDH
6.3.1安装指南
CDH
安装指南!!!!
H.20
·
2023-11-12 03:27
大数据
大数据
cloudera
linux
服务器
河北省技能大赛-大数据赛项环境搭建
河北省技能大赛
大数据环境搭建
环境准备映射(在每个节点操作)vi/etc/hosts#进入文件#在文件最后面添加以下内容192.168.88.154master192.168.88.156slave1192.168.88.155slave2
阿龙的代码在报错
·
2023-11-11 23:11
大数据
Hadoop实战(6)_搭建Apache Hadoop的Eclipse开发环境
系列目录:Hadoop实战(1)_阿里云搭建Hadoop2.x的伪分布式环境Hadoop实战(2)_虚拟机搭建Hadoop的全分布模式Hadoop实战(3)_虚拟机搭建
CDH
的全分布模式Hadoop实战
padluo
·
2023-11-10 20:22
Hadoop
hadoop
Flink on yarn模式部署
目录1.基于docker部署
cdh
2.遇到的异常2.1flink下缺少hadoop相关依赖2.2jdk7造成的错误3.启动flinkonyarn模式<
fragrans
·
2023-11-09 10:03
CDH和大数据组件
Flink
flink
yarn
java
CentOS7安装部署
CDH
6.2.1
文章目录CentOS7安装部署
CDH
6.2.1一、前言1.简介2.架构3.环境二、环境准备1.部署服务器2.安装包准备3.修改机器名4.关闭防火墙5.关闭SELinux6.Hosts文件7.limits
趴着喝可乐
·
2023-11-08 18:19
#
DataWarehouse
CDH
hadoop
数据仓库
Hadoop从入门到入土(第三天)
>cdmadule>
cdh
adoop-3.1.3(自己hadoop的文件名)\ll>pwd(复制下面的连
南城守护
·
2023-11-07 22:56
hadoop
hdfs
mapreduce
制作deb包
1.安装dh-makesudoaptinstalldh-make2.创建工程mkdirhello3.创建Debian目录
cdh
ellomkdir-pDebian/hello4.编辑源码...5.生成debian
飞天遇见妞
·
2023-11-06 21:46
debian
linux
服务器
cdh
6.0安装部署
1.环境准备1.1.安装包下载地址:https://archive.cloudera.com/
cdh
6/6.0.1/parcels/https://archive.cloudera.com/cm6/6.0.1
bigdata_gjb6666
·
2023-11-06 05:59
3.
大数据
cdh6.0安装部署
CDH
集群6.3.2 + CM6.3.1离线安装部署实操保姆级详细教程
目录一、序
CDH
简介CM简介为什么选择
CDH
而不是ApacheHadoop
CDH
安装说明二、准备工作前置条件测试服务器准备软件环境准备
CDH
安装包准备查看
CDH
6.3.2安装包查看CM6.3.1安装包查看
猫吃了源码
·
2023-11-06 05:44
大数据
hadoop
hive
spark
hdfs
hbase
大数据
cloudera
CDH
命令行部署Spark History Server
翻译:https://www.cloudera.com/documentation/enterprise/latest/topics/admin_spark_history_server.html#spark_history_server_cmdline版本:5.14.2Spark历史记录服务器显示有关完成的Spark应用程序的历史记录的信息有关更多信息,请参阅监控Spark应用程序。有关配置Sp
金刚_30bf
·
2023-11-05 05:54
Phoenix编译支持
cdh
5.10.2
前言由于Phoenix还没有发布支持
cdh
5.10以上的版本,这里在在4.9-HBase-1.2-
cdh
5.9的基础上修改
cdh
版本为
cdh
5.10.2,我这边分别编译了Phoenix支持
cdh
5.9.3
荒野雄兵
·
2023-11-04 19:25
数据仓库Hive安装部署与测试练习
环境说明10.176.2.101(10.176.2.121)master10.176.2.103zjx0310.176.2.105zjx05cent-os6.5zookeeper
cdh
3.4.5hadoopapache2.7.7jdk1.8.191mysql5.17sqoop1.4.7hbase1.2.7hiveapache2.3.4
zwb_jianshu
·
2023-11-04 15:21
该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系
项目场景:通过
CDH
集群对大数据集群实行监控管理问题描述:某台服务器主机与ClouderaManagerServer失去联系的时间过长,到时候该主机相关实例角色(组件实例)停止,严重影响集群稳定性以及任务执行
海边捡贝壳的老头
·
2023-11-04 15:18
集群运维
cloudera
hadoop
hdfs
大数据
【
CDH
】该主机与 Cloudera Manager Server 失去联系的时间过长。该主机未与 Host Monitor 建立联系。
clouderamanager运维【出现问题】:该主机与ClouderaManagerServer失去联系的时间过长。该主机未与HostMonitor建立联系。【解决办法】问题节点上的代理Agent未启动,即servicecloudera-scm-agentstatus显示active(running)未启动,执行:servicecloudera-scm-agentstart,解决。
暖暖_Christine
·
2023-11-04 15:18
Linux
cloudera
cdh
监控mysql_clouderaManager出现HostMonitor异常,监控无法展示
我在把错误信息帖下,大家看下2015-04-0702:09:59,453WARN929083949@scm-web-73:com.cloudera.server.cmf.tsquery.TimeSeriesQueryService:com.cloudera.server.cmf.tsquery.TimeSeriesQueryService@3c01063afailedonnozzleHOST_MO
聂家麒
·
2023-11-04 15:16
cdh监控mysql
CentOS7+
CDH
5.14.0安装
CDH
错误排查:该主机与 Cloudera Manager Server 失去联系的时间过长。 该主机未与 Host Monitor 建立联系...
主机错误:该主机与ClouderaManagerServer失去联系的时间过长。该主机未与HostMonitor建立联系解决办法:首先查看该主机NTP服务是否启动:https://www.cnblogs.com/sisimi/p/7698452.html如果已经启动,请查看客户端服务是否启动:/opt/cm-5.14.0/etc/init.d/cloudera-scm-agentstart启动之后
weixin_34146410
·
2023-11-04 15:16
运维
大数据
CDH
6:该主机已与 Cloudera Manager Server 建立联系。 该主机未与 Host Monitor 建立联系
问题导致原因:
CDH
6修改了hive会话超时参数hive.server2.session.check.interval5分钟改为2分钟hive.server2.idle.session.timeout5
killwolf0
·
2023-11-04 15:16
CDH集群运维记录
大数据
hive
hadoop
hdfs
cloudera
代理与cloudera Management Service 的host monitor 未建立连接。
cdh
中由于其中一台从节点的应用更改导致代理与clouderaManagementService的hostmonitor未建立连接。
赤子juan
·
2023-11-04 15:15
hadoop
CDH
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他