E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
数据开发面试题2020总结
(C)C.
Cloudera
ManagerD.Zookeeper1.1.3下列哪个是Hadoop运行的模式?(A
布小昕
·
2020-08-04 12:31
面试
cloudera
-manager-el6-cm5.7部署流程,及踩坑过程和解决方案
概述CDH(
Cloudera
'sDistribution,includingApacheHadoop),是Hadoop众多分支中的一种,由
Cloudera
维护,基于稳定版本的ApacheHadoop构建
阿啄debugIT
·
2020-08-04 10:34
安装配置
#
搭建
cdh
Spark基本操作WordCountDemo编写 打包 提交 运行
采用此方式)bin/spark-submit\--classorg.apache.spark.examples.SparkPi\--masteryarn\--deploy-modeclient\/opt/
cloudera
Lan_xuaner
·
2020-08-04 07:19
spark
spark
Hadoop笔记——技术点汇总
Hadoop笔记——技术点汇总目录·概况·Hadoop·云计算·大数据·数据挖掘·手工搭建集群·引言·配置机器名·调整时间·创建用户·安装JDK·配置文件·启动与测试·
Cloudera
Manager·原理
weixin_30809173
·
2020-08-04 04:53
streamsets简介
streamsets(官网地址:https://streamsets.com/)由Informatica前首席产品官GirishPancha和
Cloudera
前开发团队负责人ArvindPrabhakar
安静的数据流
·
2020-08-04 02:33
cdh5.14 sqoop 问题记录
sqoop1client报错:Warning:/opt/
cloudera
/parcels/CDH-5.12.0-1.cdh5.12.0.p0.29/bin/../lib/sqoop/..
阿坚86
·
2020-08-03 17:15
大数据
大数据分析平台哪个好?
以下为大家介绍几个代表性数据分析平台:1、
Cloudera
Cloudera
提供一个可扩展、灵活、集成的平台,可用来方便的管理您的企业中快速增长的多种多样的数据,从而部署和管理Hadoop和相关项目、操作和分析您的数据以及保护数据的安全
明月说数据
·
2020-08-03 15:54
BI
大数据分析
Hadoop2.X开源软件及生态系统的最新发展综合分析(个人整理)
Hadoop2.X开源软件及生态系统的最新发展综合分析一、Hadoop版本概述目前Hadoop的发行版除了Apache的开源版本之外,还有华为发行版、Intel发行版、
Cloudera
发行版(CDH)、
未忘绘梨衣
·
2020-08-03 08:27
Hadoop
云计算
springboot整合mybatis采用druid连接池对mysql,hive双数据源整合并打包
公共配置类MySQL配置类Hive配置类DAO层Mapper接口类Mapper.xmlService层准备maven依赖,包括mybatis,springboot,大数据连接,MySQL依赖,druid等
cloudera
https
飘满红楼
·
2020-08-03 03:33
java
kylin2.1.0_CDH5.9.3实现streaming CUBE
cloudera
manage官方文档说明了CDH集成kafka的版本ProductCompatibilityMatrixforCDKPoweredByApacheKafkaCDKPoweredByApacheKafkaiscurrentlydistributedasapackageandinaparcelthatisindependentoftheCDHparcel.Theparcelintegr
fangqingchen
·
2020-08-02 23:34
YARN动态资源池配置案例
1.开启HDFS权限检查(默认是开启的)"CheckHDFSPermissions"选中2.在集群中创建新用户,以
cloudera
-dev为例#增加用户组[root]$
Junjie_M
·
2020-08-02 22:08
CM
CDH
Hadoop
CDH激活分发parcel时因为意外错误卡住不能修改问题解决方案
问题背景:今天因为业务需求需要在CDH集群上安装StreamSets,结果因为权限的原因,之前我把这个parcel文件的权限变更为
cloudera
-scm,结果后面遇到这个问题了,问了之前部署CDH的人才知道他那时候用的权限是
青山孤客
·
2020-08-02 16:36
遇到的问题与解决方案
hue学习
CDH
parcel
激活分发
CDH5.16.2-Flink1.10.1-parcel制作
二.cm_exturl:https://github.com/
cloudera
/cm_ext.gitvalidato
李孟lm
·
2020-08-01 14:11
cdh
大数据
centos7.3-cdh5.14-
cloudera
-manager-installer.bin方式离线安装
环境要求系统:centos7.3系统,要求主机之间时间同步
Cloudera
cyclone_29
·
2020-08-01 13:21
Hadoop体系整体概况(系列文章之一)
1.Hadoop三大发行版本Hadoop三大发行版本:Apache、
Cloudera
、Hortonworks。Apache版本最原始(最基础)的版本,对于入门学习最好。
架构小兵
·
2020-08-01 12:33
大数据学习笔记:大数据技术框架和Hadoop生态系统
大数据技术框架Hadoop生态系统Hadoop是目前得到企业界验证的大数据框架,包括以下特点:源代码开源社区活跃、参与者众多涉及分布式存储和计算的方方面面Flume(非结构化数据收集)
Cloudera
开源的日志收集系统
GaryBigPig
·
2020-08-01 12:43
Hadoop
Hadoop大数据面试--Hadoop篇
本篇大部分内容参考网上,其中性能部分参考:http://blog.
cloudera
.com/blog/2009/12/7-tips-for-improving-mapreduce-performance
fansy1990
·
2020-08-01 12:39
hadoop
hadoop
mapreduce
centos7下安装flume
在安装之前了解一下flume是干什么的:flume(日志收集系统)Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海量日志采集、聚合和传输的系统,Flume支持在日志系统中定制各类数据发送方
何英健
·
2020-08-01 12:10
各种Hadoop软件集成包 其它Apache项目
另一些开发人员使用私有扩展增强Hadoop,使其既可以成为免费开源产品也可以成为商业产品
Cloudera
开发的Hadoop版本http://www.
cloudera
.com/hadoop,它是目前使用最广泛的
hennybatter
·
2020-08-01 09:28
Distributed
Filesystem
Hadoop基本框架介绍
Hadoop的三大发行版本Hadoop的三大发行版本包括:Apache、
Cloudera
、Hortonworks。其中:Apache版本是最原始(最基础)的版本对于入门学习的新手比较推荐。
渌玦Leo_J
·
2020-08-01 09:45
Hadoop
大数据
Hadoop框架
Apache Hadoop与第三方Hadoop(CDH、HDP等)的比较
故而目前Hadoop发行版非常的多,有华为发行版(收费)、Intel发行版(收费)、
Cloudera
发行版CDH(免费)、Hortonworks版本HDP(免费),这些发行版都是基于ApacheHadoop
本宝宝天然萌
·
2020-08-01 08:40
flume 日志收集单节点
flume是
cloudera
公司研发的日志收集系统,采用3层结构:1.agent层,用于直接收集日志;2.connect层,用于接受日志;3.数据存储层,用于保存日志。
starfe-geek
·
2020-08-01 07:56
flume
Sentry手动安装、使用手册
1Sentry简介ApacheSentry是
Cloudera
公司发布的一个Hadoop开源组件,截止目前还是Apache的孵化项目,它提供了细粒度级、基于角色的授权以及多租户的管理模式。
wandy0211
·
2020-08-01 06:28
sentry
Cloudera
Manager 基于 Parcel&CSD 安装、监控自定义服务
背景因业务需求,想通过
Cloudera
Manager(以下简称CM)管理、监控自定义服务准备工作安装CM扩展工具工具地址https://github.com/
cloudera
/cm_ext安装时需跳过单元测试
Theobob
·
2020-07-31 22:47
Spark Yarn Client模式spark.driver.host导致 Cannot assign requested address: Service 'sparkDriver' failed
1.背景[deploy@fideploycheetah-node]$/opt/
cloudera
/parcels/SPARK2/bin/spark2-submit--keytab/etc/security
九师兄
·
2020-07-31 21:03
大数据-spark
Cloudera
管理集群,spark集群运行wordcount示例
Cloudera
启动、管理集群这里由于是直接接手
Cloudera
,并没有进行
Cloudera
的一键化安装。
njupt_bigdata
·
2020-07-31 20:24
spark
intellj
idea
cloudera
spark-submit
spark
cloudera
intellij
idae
弃暗投明,
Cloudera
承诺100%开源
旧的
Cloudera
使用开源、专有方法和许可的混合方式来开发和分发其Hadoop堆栈,新的
Cloudera
将是100%开源的(就像它1月份收购的竞争对手Hortonworks一样)。
开源云中文社区
·
2020-07-31 19:09
高并发MPP查询引擎Impala初识
Impala是
Cloudera
公司主导开发的新型查询系统,它提供SQL语义,能查询存储在Hadoop的HDF
fjssharpsword
·
2020-07-31 17:04
Big
data
Hadoop专栏
CentOS7安装
Cloudera
Manager
Cloudera
Manager的安装需要先修改机器的三个配置:关闭防火墙:停止:#systemctldisablefirewalld禁用:#systemctlstopfirewalld关闭selinux
ola_js
·
2020-07-31 16:38
【CDH】centos6 下离线安装CM5.16和CDH5.16完全教程
centos6下离线安装CM5.16和CDH5.16完全教程关于CDH和
Cloudera
Manager一、安装前准备1、系统环境2、安装包准备相关包下载:3、网络配置(所有节点)4、打通ssh,设置ssh
帅胖子
·
2020-07-31 15:05
大数据
Linux
hadoop
解决DataNode Volume Failures故障
一、概述hadoop集群有一台DataNode节点发生硬件故障,由于后需需要长时间的处理,所以从
Cloudera
集群中剔除了该节点,在重新将该节点添加到集群时候发现DataNode节点爆DataNode
DV2
·
2020-07-31 14:36
Hadoop-HDFS
tableau怎么连接hadoop
tableau连接服务器
Cloudera
Hadoop,直接打开tableau连接肯定不行啦工具/原料Tableau2018.3.1(64位)VMwareWorkstationUbuntuhadoop2.5.0hive0.13.1
Saropetry
·
2020-07-31 14:24
数据分析
使用IDEA编写Spark程序(4)
pom.xml4.0.0cn.itcastSparkDemo1.0-SNAPSHOTaliyunhttp://maven.aliyun.com/nexus/content/groups/public/
cloudera
https
KO哥
·
2020-07-31 13:18
Spark
Oozie安装及安装过程中存在的问题
1.从网上下载oozie安装包,下载路径为http://archive.
cloudera
.com/cdh5/cdh/5/oozie-4.0.0-cdh5.0.1.tar.gz,上传文件到服务器,例如上传到
笔尖的痕
·
2020-07-31 11:53
oozie
CDH6.2中使用parcel离线安装Phoenix5.0.0
如果需要在CDH5版本安装phoenix4请参考我之前的文章:CDH5.14集群下Phoenix4.14.0安装及性能对比phoenix/impala/hive官方文档:https://docs.
cloudera
.com
王义凯_Rick
·
2020-07-31 11:21
#
Phoenix
CDH6官方文档中文系列(8)----
Cloudera
升级指南
Cloudera
升级指南最近在学习cdh6的官方文档,网上也比较难找到中文的文档。
天南第一剑修
·
2020-07-30 23:40
手撕官方文档系列
大数据
cloudera
运维
CDH集群更换IP处理方法
注:该文档适用于CDH集群中,节点IP地址发生变化,集群无法正常启动的场景解决方法首先停止CDH集群在各个节点上,停止尚在运行的CDH服务1、master节点上停止以下服务systemctlstop
cloudera
-scm-serversystemctlstop
cloudera
-scm-agent2
再难也要坚持
·
2020-07-30 20:40
大数据酱油码生
Ubuntu安装
Cloudera
Manager以及CDH5.15.2
一、机子分配注意,本安装教程是在真机上进行,而非虚拟机。另,此次搭建主要的目的是搭建测试环境,让Hadoop各组件能够运作起来即可,完成搭建后,将用小数据量进行相关数据的计算与测试。线上环境将会使用阿里云主机。以下是四台真机配置:机子内网IP地址主机名内存大小磁盘大小CPU192.168.0.29bigdata01(主)8GB2T1个物理CPU,4核192.168.0.133bigdata02(从
GetMyCode
·
2020-07-30 19:00
Ubuntu安装
Cloudera
Manager以及CDH5.15.2
一、机子分配注意,本安装教程是在真机上进行,而非虚拟机。另,此次搭建主要的目的是搭建测试环境,让Hadoop各组件能够运作起来即可,完成搭建后,将用小数据量进行相关数据的计算与测试。线上环境将会使用阿里云主机。以下是四台真机配置:机子内网IP地址主机名内存大小磁盘大小CPU192.168.0.29bigdata01(主)8GB2T1个物理CPU,4核192.168.0.133bigdata02(从
GetMyCode
·
2020-07-30 19:00
CDH
操作步骤1.概述CM:
Cloudera
Manager(
Cloudera
公司专有的Hadoop集群管控平台)。CDH
bingoabin
·
2020-07-30 19:52
大数据
hadoop
修改集群ip
1停止CDHManager相应的管理进程(Server进程及所有节点的Agent进程)service
cloudera
-scm-agentstopservice
cloudera
-scm-serverstop2
佑熙
·
2020-07-30 19:06
MR清洗IP数据
pom文件4.0.0com.ccj.pxjIPETL1.0-SNAPSHOTUTF-81.81.82.6.0-cdh5.16.21.1.0-cdh5.16.2
cloudera
http://repository.
cloudera
.com
pxjwfy
·
2020-07-30 18:23
flume入门级
flume一、下载[pxj@pxj/opt]$sudowgethttp://archive.
cloudera
.com/cdh5/cdh/5/flume-ng-1.6.0-cdh5.16.2.tar.gz
pxjwfy
·
2020-07-30 18:23
mr实现count
4.0.0com.cc.pxj.wfyphoneWcRuoZe1.0-SNAPSHOTUTF-81.81.82.6.0-cdh5.16.2
cloudera
https://repository.
cloudera
.com
pxjwfy
·
2020-07-30 18:22
cloudera
中启动HA报这个错误
2018-08-0318:30:23,003ERROR249990141@scm-web-1947:com.
cloudera
.server.web.cmf.wizard.service.GenericAddRoleWizardController
iot1994
·
2020-07-30 18:31
cloudera安装问题
flume往hbase或kafka写入数据
flume1.flume介绍flume作为
cloudera
开发的实时日志收集系统,受到了业界的认可与广泛应用。
阿拉吴悠
·
2020-07-30 18:08
SparkStreaming 消费 Kafka 数据保存 Offset 到 Zookeeper
Sparkstreaming程序:packagecom.
cloudera
.saveoffsettoZkimportcom.
cloudera
.utils.KafkaZkUtilsimportkafka.utils.ZkUtilsimportorg.apache.kafka.clients.consumer.ConsumerConfigimportorg.apache.kafka.common.ser
storm_fury
·
2020-07-30 17:32
Spark
使用自签名证书进行TLS
创建证书的目录$mkdir-p/opt/
cloudera
/security/x509//opt/
cloudera
/security/jks/访问该目录,并设置正确的权限,然后切换到jks目录下:$sudochown-R
cloudera
-scm
storm_fury
·
2020-07-30 17:32
CDH
cloudera
-scm-server启动出现Error creating bean with name 'entityManagerFactoryBean'与HHH010003: JDBC Driv.
问题详情2017-07-3122:19:40,342INFOmain:com.
cloudera
.server.cmf.Main:StartingSCMServer.JVMArgs:[-Dlog4j.configuration
weixin_34241036
·
2020-07-30 17:01
Zeppelin安装指南
复制zeppelin-env.sh.template重命名为zeppelin-env.sh,编辑文件,指定sparkhomeexportSPARK_HOME=/opt/
cloudera
/parcels/
润土1030
·
2020-07-30 17:01
上一页
20
21
22
23
24
25
26
27
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他