E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
cloudera
manager5.12版本更新信息
具体请参考:ConfiguringADLSConnectivity2.
Cloudera
Manager现在集成了Hive的sc
@black
·
2020-09-16 02:47
cm
cm
CDH5 安装过程中的一些问题总结
在安装过程中出错,或者中断,想从头再来安装的,可执行下面的一些操作:master节点:关闭server、agent/opt/cm-5.5.0/etc/init.d/
cloudera
-scm-serverstop
撸依天
·
2020-09-15 19:57
hadoop
hadoop-CDH5.3 集群搭建(详细)
yum源服务[root@JXQ-23-27-48~]#yuminstallhttpd配置yum源(需要开通网络80端口)[root@JXQ-23-27-38~]#cat/etc/yum.repos.d/
cloudera
-cdh5
撸依天
·
2020-09-15 19:56
hadoop
cdh集群的重启过程
/
cloudera
-scm-serverstatus重启server./
cloudera
-scm-serverrestart查看server状态.
十色花
·
2020-09-15 18:03
集群部署
迁移学习让深度学习更容易
在
Cloudera
FastForward实验室,我们对能解决这些问题的创新特别兴奋。我们最新的研究报
weixin_34203426
·
2020-09-15 18:06
Hadoop学习笔记 --- 深入理解 parquet 列式存储格式
Parquet是面向分析型业务的列式存储格式,由Twitter和
Cloudera
合作开发,2015年5月从Apache的孵化器里毕业成为Apache顶级项目列式存储列式存储和行式存储相比有哪些优势呢?
杨鑫newlfe
·
2020-09-15 18:46
大数据挖掘与大数据应用案例
安装CM+CDH 主机运行状况不良完美解决方案
官方参考文档参考官网说明:https://www.
cloudera
.com/documentation/enterprise/releasenotes/topics/cm_rn_known_issues.html
Kaka架构
·
2020-09-15 18:54
CDH
主机运行状况不良
ubuntu 12.04 安装
Cloudera
Manager 4.8.2
Cloudera
可以简化Hadoop的安装配置过程,自动在集群节点上安装hadoop相关组件,创建用户。
aliushuo
·
2020-09-15 16:13
linux运维
报错:(未解决)Opening socket connection to server master/192.168.52.26:2181. Will not attempt to authentic...
报错现象:DH-5.15.1-1.cdh5.15.1.p0.4/lib/hadoop/lib/native:/opt/
cloudera
/parcels/CDH-5.15.1-1.cdh5.15.1.p0.4
weixin_30307267
·
2020-09-15 15:01
大数据
java
cdh6集成streamsets3详解
httpd-server#查看启动状态servicehttpdstatus#启动servicehttpdstart三、配置本地parcel包四、配置csd#复制jar包cpSTREAMSETS-3.6.1.jar/opt/
cloudera
光光刘321
·
2020-09-15 14:12
Streamsets
其他
win10上通过VMwarePro15安装CentOS-7镜像后搭建cdh6.3.2集群
背景:随着
Cloudera
Enterprise6.3.3发布再也没有免费版了,于是我便萌生在win10上通过VMwarePro15安装CentOS-7-x86_64-DVD-1810镜像后搭建cdh6.3.2
benpaodexiaowoniu
·
2020-09-15 13:00
cdh
在IDEA14中使用代码连接Hbase
工程,如图:什么都不勾选,直接选next,然后根据自己的喜好写一个名字:next,然后给工程起一个名字,finish好,工程创建完成接下来,打开pom.xml添加hbase需要的依赖,添加如下三段代码:
cloudera
https
T_world
·
2020-09-15 13:34
云
idea
hbase
maven
CDH6.X问题总结
进入Zookeeper中将之前的脏数据删掉再重启即可进入zookeeper的bin目录:/opt/
cloudera
/parcels/CDH-****/lib/zookeeper/bin/zk
songlllovescoding
·
2020-09-15 12:54
问题总结
CDH
Kafka
Hive
Zookeeper
hadoop 找不到或无法加载主类org.apache.hadoop.mapreduce.v2.app.MRAppMaster
这个是因为在yarn执行MapReduce的使用找不到hadoop的classpath一般在shell中输入hadoopclasspath输出为/etc/hadoop/conf:/opt/
cloudera
JIU_9527
·
2020-09-15 03:12
hadoop
Hadoop web端打开hdfs上的文件问题
op=GET_BLOCK_LOCATIONS:NoTransportHadoopweb端上一直不能openhdfs上的文件,去
Cloudera
Community仍没有找到确切的答案。
Airprince03
·
2020-09-15 03:11
ZooKeeper报错:Unable to access datadir, exiting abnormally
:18:41,425INFOorg.apache.zookeeper.server.quorum.QuorumPeerConfig:Readingconfigurationfrom:/var/run/
cloudera
-scm-agent
pre_tender
·
2020-09-15 02:33
CDH
CDH报错解决:该主机与
Cloudera
Manager Server 失去联系的时间过长。该主机未与 Host Monitor 建立联系。
概述说明下,qichu这里是由于集群资源有限,在最初配置如下:Master172.20.10.100Slave1172.20.10.10Slave2172.20.10.20 问题描述如下图所示,该主机与
Cloudera
ManagerServer
pre_tender
·
2020-09-15 02:33
CDH
大数据+零基础+大数据入门(一)
搜藏网站:1.阿帕奇官网:www.apache.org2.cdhhadoop:http://archive.
cloudera
.com/cdh5/cdh/5/CDH:每个组件都会对应一个用户组件用户hdfshdfsyarnyarnzookeeperzookeeperhbasehbase
running_water
·
2020-09-15 02:53
零基础
Hadoop-02
(分布式和集群,想想)2、hadoop的apache和
cloudera
公司目录结构apache目录结构:bin:对集群操作的命令hdfsdfs和hadoopfssbin:对集群的启动和关闭的命令etc/
张大坏
·
2020-09-15 02:20
Hadoop
启用Oozie Web Console
由于
Cloudera
Manager安装的Oozie默认不包含ext包,所以要启动OozieWebConsole要增加以下步骤:1.开启web控制台2.下载ext-2.2.zip包,拷贝至/var/lib
a39324584
·
2020-09-15 00:17
非root用户安装
Cloudera
Manager
在
Cloudera
Manager进行Setup的时候,可以选择安装用户,如果需要选择其他用户安装,可按以下步骤操作:1.用root操作:chmod+w/etc/sudoers2.vim/etc/sudoers
a39324584
·
2020-09-15 00:46
大数据
开发工具
HUE的简单介绍
HUE是什么HUE=HadoopUserExperienceHue是一个开源的ApacheHadoopUI系统,由
Cloudera
Desktop演化而来
wheel_Y
·
2020-09-14 23:59
BigData
hadoop
cloudera
hue
Hue概述,核心功能,架构说明
特性:一个HDFS的文件浏览器,一个MapReduce/YARN的Job浏览器,一个HBas的浏览器,Hive,Pig,
Cloudera
Impala和Sqo
小哇666
·
2020-09-14 23:40
#
Hue
cloudera
-scm-server dead but pid file exists 问题分析和解决
启动服务
cloudera
-scm-server时会遇到过一段时间自己挂掉,并返回
cloudera
-scm-serverdeadbutpidfileexists的问题。
屠龙宝刀一秒刷爆
·
2020-09-14 22:01
cloudera
HUE介绍及使用功能
HUE是什么Hue是一个开源的ApacheHadoopUI系统,由
Cloudera
Desktop演化而来,最后
Cloudera
公司将其贡献给Apache基金会的Hadoop社区,它是基于PythonWeb
专注于大数据技术栈
·
2020-09-14 21:43
Cloudera
Manager集群(CDH6.2.0.1)完整搭建指南
目录引子下载所有安装包准备离线安装大数据安装前的环境规划基础环境准备host名与ip绑定各主机间设成免密登录安装openjdk各节点间关selinux关firewalld然后使用以下命令在各个节点禁firewalld普通用户(appadmin)sudosu提权时的免密设置大数据集群的文件打开数设置大数据使用系统最大物理内存安装离线安装时的Yum源先设nginx开始设置离线Yum源设置mysql导入
TGITCIC
·
2020-09-14 19:09
架构师修练之道
cdh安装
cdh6离线安装
cdh6.2.0安装
hadoop集群
cdh6.2.0教程
利用sqoop将mysql数据同步到hive
1.下载http://archive.
cloudera
.com/cdh/3/sqoop-1.2.0-CDH3B4.tar.gz2.下载http://archive.
cloudera
.com/cdh/3/
whxhz80
·
2020-09-14 16:01
hadoop
CDH大数据平台内存交换,警告问题
前言博主在使用CDH大数据平台时发现,CDH长时间运行,
Cloudera
Manager管理页面在运行Spark任务时候经常会出现组件大量内存交换警告,前期博主直接忽略,毕竟不是什么大问题,后期发现如果长时间黄色警告不处理
wunanliu
·
2020-09-14 12:09
大数据
linux
hadoop
spark2
1停掉集群运行/opt/cm-5.13.0/etc/init.d/
cloudera
-scm-serverstop/opt/cm-5.13.0/etc/init.d/
cloudera
-scm-agentstop2
浮生若梦1379
·
2020-09-14 11:07
spark
cdh5.13.1 升/降级SPARK2 (parcel安装的同理)
注意:重启
cloudera
-scm-server从parcel里删除旧包,启用新包csd目录里其它JAR包要删除转载于:https://www.cnblogs.com/net2817/p/9120870
weixin_30340819
·
2020-09-14 11:28
HPLSQL(Hadoop存储过程实现)的安装和简单应用
x.and2.x1.下载安装包并授权Chmod+x/hplsql2.环境变量设置vihplsql配置Hadoop环境变量和hadoopjar包的环境变量export"HADOOP_CLASSPATH=/opt/
cloudera
CaseyChen5213
·
2020-09-14 11:54
hadoop
CDH 5.13.0安装Spark 2.2
1.将CDH环境安装好2.在CDH的主节点和备节点创建目录[root@yp-test-3/]#mkdir/opt/
cloudera
/csd/3.下载Spark2.2软件包下载csd地址:http://archive.
cloudera
.com
cny0120
·
2020-09-14 10:40
Maven项目中引入CDH jar包
1、CDH的中央仓库CDH提供了中央仓库,官方文档参考:https://docs.
cloudera
.com/documentation/enterprise/release-notes/topics/cdh_vd_cdh5
天一涯
·
2020-09-14 09:56
大数据学习之路
java
CDH5.14操作指南
1、Cdh5.14介绍2、版本发布概要3、安装要求4、
Cloudera
Manager介绍5、
Cloudera
安装6、
Cloudera
管理7、
Cloudera
Navigator
Cloudera
Navigator
weixin_30950237
·
2020-09-14 09:37
CDH版本的Maven依赖
之前一直使用http://mvnrepository.com/查找maven依赖,但这类网站只能查到通用的maven依赖,没有包含CDH依赖,还好
Cloudera
提供了CDH的
alphabeta12345
·
2020-09-14 09:49
Hadoop
解决maven仓库默认不支持cdh
cloudera
自己建立了一个相关的仓库。要想利用maven添加相关依赖,则必须单独添加
cloudera
仓库。
洛离烟
·
2020-09-14 09:17
Team
Work
maven
cdh
cloudera
配置仓库
CDH集成Phoenix组件
文章目录集成Phoenix组件下载相关文件Parcel包安装登录Phoenix集成Phoenix组件下载相关文件下载网址:http://archive.
cloudera
.com/
cloudera
-labs
麻雀加
·
2020-09-14 09:14
CDH
CDH集成kafka组件
:https://blog.csdn.net/qq_40887813/article/details/80512434CDH集成kafka组件下载相关文件Csd下载地址:http://archive.
cloudera
.com
麻雀加
·
2020-09-14 09:14
CDH
CDH集成spark2组件
重启CM和集群添加服务配置设置CDH集成spark2组件参考网站:https://www.jianshu.com/p/6acd6419f697下载相关文件Csd下载地址:http://archive.
cloudera
.com
麻雀加
·
2020-09-14 09:14
CDH
maven构建CDH开发环境
使用
cloudera
hadoop开发hadoop程序,官方文档上有两种方法。第一种即把相应jar包拷贝到工程目录中去,另一种即使用maven管理依赖jar包。
楚汐
·
2020-09-14 08:46
大数据
Cloudera
配置开发环境
HADOOP集群,以及其它相关的集群如HBase是用
Cloudera
搭建的,那么就要配置相应的
Cloudera
的开发环境,接下来会以开发HBase的Coprocessor为例:其部署集群使用的
Cloudera
doegoo
·
2020-09-14 08:02
cloudera
hbase
maven
CDH版本java开发环境搭建
cloudera
,!
weixin_30657999
·
2020-09-14 08:56
HDFS故障:Namenode安全模式:The reported blocks 12xx needs additional xx blocks to reach the threshold 0.999
2查看HDFS实例,红色警告,不能创建/tmp/.
cloudera
.....3查看namenode日志:/var/log/hadoop-hdfs/hadoop-cmf-hdfs-NAMENODE-cdh00
peidezhi
·
2020-09-14 07:58
HDFS故障
Impala实践之三:详解invalidate metadata
分析目前主要定位到三个类,com.
cloudera
.impala.service.JniCatalog,com.
cloudera
.impala.service.CatalogOpExecutor和com
木东居士
·
2020-09-14 05:53
Impala实践
Cloudera
Manager agent无法启动,拒绝链接 Failed! trying again in 2 second(s): [Errno 111] Connection refuse
提示拒绝连接,百度一下很多人说解决方式是用ps-ef|grepsupervisord查看是否有进程,有的话kill掉(使用kill-9会自动拉起进程,使用kill),然后重启即可,kill掉后依然无法启动
cloudera
-scm-agent.log
jast_zsh
·
2020-09-14 05:52
CDH
Hadoop
CDH-5.14.2集群启动异常记录
1、CDH服务启动不了:命令行查看
cloudera
-scm-agent服务已挂。
1057718341_h
·
2020-09-14 04:58
hadoop
大数据-hadoop
【HBase数据开发】开发环境CDH问题-主机运行状况不良
如图cd到每台主机的目录/var/lib/
cloudera
-scm-agent下,把cm_guid文件删除。然后重启代理服务节点命令:service
cloudera
-scm-ag
大壮vip
·
2020-09-14 04:22
大数据
CDH
大数据
CDH
CDH5.16.2下载安装
1,CM和CDH下载以及JDK和java驱动(手动安装)
Cloudera
Manager下载地址:http://archive.
cloudera
.com/cm5/cm/5/
cloudera
-manager-centos7
ywl470812087
·
2020-09-14 01:54
大数据
hadoop
hdfs文件存放路径
hdfs文件的存放位置位于节点的datanode下:/home/data/
cloudera
/dfs/dn/current/BP-1257321995-10.160.15.162-1557753630034
weixin_30485291
·
2020-09-14 01:26
Hadoop-2.x 学习笔记(8) —— 集群基准测试
基本测试服务启动,是否可用,简单的应用测试hdfs-hdfsdfs-mkdir-p/user/tmpyarn:runjarmapreduce:yarnjar1.2基准测试测试集群的性能hdfs读、写数据监控集群
Cloudera
Manager
一角残叶
·
2020-09-14 01:34
#
Hadoop2.X
学习笔记
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他