E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
cloudera
hadoop搭建四个配置文件(core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml )的简单介绍
hadoop下载地址http://archive.
cloudera
.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.15.0.tar.gz解压后设置环境变量一、core-site.xmlfs.defaultFShdfs
蜗牛!Destiny
·
2020-07-15 01:02
Hadoop
CDH
Flume 1.6.0 cdh 环境搭建
localhost:softwarehadoop$wgethttp://archive.
cloudera
.com/cdh5/cdh/5/flume-ng-1.6.0-cdh5.7.0.tar.gzlocalhost
袁河之滨
·
2020-07-15 00:41
大数据入门实践
大数据环境准备
flume
cdh
flume
config
大数据技术生态体系组件概述
2)Flume:Flume是
Cloudera
提供的一个高可用的,高可靠的,分布式的海
奔跑的乌班
·
2020-07-15 00:14
大数据
CDH安装SQOOP错误:Caused by: java.sql.SQLException: No suitable driver found for jdbc:derby:/var/lib/sqoo
在使用
Cloudera
Manager安装sqoop时出现:org.apache.sqoop.common.SqoopException:JDBCREPO_0007:Unabletoleaselinkatorg.apache.sqoop.repository.JdbcRepositoryTransaction.begin
奔跑的小象
·
2020-07-15 00:22
CDH
Hive数据库客户端界面工具SQL Developer
1.下载驱动:
Cloudera
HiveJDBC-2.6.10.1012地址:https://www.
cloudera
.com/downloads/connectors/hive/jdbc/2-6-10.
Lightning-py
·
2020-07-14 22:54
Hive
【Kafka】Leader丢失导致的Consumer挂起故障解决
而
Cloudera
Manager在重启之前,我们发现三台broker中并没有KakfaController。让人很是不解。
lubinsu
·
2020-07-14 22:07
Cloudera
Manager 简介
Cloudera
Manager简称CM,是企业级的大数据集群安装/升级/管理平台,帮助用户通过网页上的简单操作控制整个集群.其功能如下:1.提供一个softwarerepository,方便在各个节点上安装大数据的组件
爱知菜
·
2020-07-14 21:35
杂类
Cloudera
Manager是什么?
Cloudera
Manager是什么?官方解释:
Cloudera
Manager是业界公认的用于管理生产中Hadoop的工具。
Cloudera
Manager是一个管理CDH的端到端的应用。
乔治大哥
·
2020-07-14 20:27
#
bigdata_CDH
idea导入hive源码,编译后运行本地窗口
1.编译源码下载Hive源码:http://archive.
cloudera
.com/cdh5/cdh/5/hive-1.1.0-cdh5.16.2-src.tar.gz在IDEA打开项目,配置选择命令窗口
qq_32667911
·
2020-07-14 17:50
hive
大数据生产环境部署 CDH5
大数据平台生产环境部署CDH(
Cloudera
'sDistribution,includingApacheHadoop),是Hadoop众多分支中的一种,由
Cloudera
维护,基于稳定版本的ApacheHadoop
qiaoqiaoqiaozh
·
2020-07-14 16:58
大数据
在linux执行java程序报错:Exception in thread "main" java.lang.NoSuchMethodError:
maven工程打包成jar(不包含第三方jar包),放到linux主机上执行,指定第三方jar路径,命令如下:nohupjava-Djava.ext.dirs=/usr/java/jdk1.8.0_181-
cloudera
我心明月
·
2020-07-14 16:47
Java
Centos7在线安装CDH6
mysql-connector-java-5.1.42-bin.jar
cloudera
-manager-agent-6.3.1-1466458.el7.x86_64.rpm(https://archive.
cloudera
.com
李奇峰1998
·
2020-07-14 15:14
大数据
hive中导入json格式的数据(hive分区表)
json格式的数据表不必含有分区字段,只需要在hdfs目录结构中体现出分区就可以了Thisisallaccordingtothisguide:http://blog.
cloudera
.com/blog/
lvtula
·
2020-07-14 14:34
Hive
Host Health Tests
Documentation
Cloudera
Operation
Cloudera
ManagerHealthTestsNextTopicPreviousTopicPrintHostHealthTestsHostAgentLogDirectoryThisisahosthealthtestthatchecksthatthefilesystemcontainingthe
Cloudera
ManagerAgent
javastart
·
2020-07-14 12:49
clouderamanger
cloudera
cdh中hadoop-client包的作用
hadoop-client是为了让开发者可以很方便的使用当前节点hadoop的jar包,ch4版本的hadoop将目录分为“/usr/lib/hadoop-hdfs”、“/usr/lib/hadoop-mapreduce”,“/usr/lib/hadoop-yarn”等多个目录,这样引用jar包也会比较麻烦。通过yum安装hadoop-client后会生成软链接:MRv1:/usr/lib/had
iteye_20817
·
2020-07-14 12:57
hadoop
Hadoop集群添加磁盘步骤
2、系统:均为CentOS6.33、hadoop版本:CDH4.5,选用的mapreduce版本不是yarn,而是mapreduce1,整个集群在
cloudera
manager的监控下,配置时也是通过manager
huyuxiang999
·
2020-07-14 11:07
Hadoop
sqoop的安装、配置及使用简介
Sqoop的安装和配置下载sqoop和hadoop:wgethttp://archive.
cloudera
.com/cdh/3/sqoop-1.3.0-cdh3u1.tar.gzwgethttp://archive.
cloudera
.com
快乐程序员
·
2020-07-14 11:50
sqoop
搭建
Cloudera
Manager环境管理大数据集群
本文主要介绍如何搭建
Cloudera
Manager环境来管理大数据集群。
象在舞
·
2020-07-14 10:29
大数据
Cloudera
Manager
Hive中添加自定义函数(UDF)方法及实践
环境介绍:CentOS7+hive-1.1.0-cdh5.7.0+Maven3.3.91、下载源码hive-1.1.0-cdh5.7.0-src.tar.gzhttp://archive.
cloudera
.com
cqra94148
·
2020-07-14 09:45
How to Install Hadoop on Windows
IntroductionTherearemultiplewaysyoucaninstallHadooponWindowsbutmostofthemrequireinstallingavirtualmachineorusingdockercontainerstorun
Cloudera
orHDPimagesonthem.Althoughthesemethodsareeffectivetheyrequi
chuzhenjia9849
·
2020-07-14 09:31
Hadoop生态圈之Kudu(一)
ApacheKuduApacheKudu是由
Cloudera
开源的存储引擎,可以同时提供低延迟的随机读写和高效的数据分析能力。
chipeize
·
2020-07-14 08:18
Kudu
大数据
Hadoop生态圈之Hue(一)
ApacheHueHUE=HadoopUserExperienceHue是一个开源的ApacheHadoopUI系统,由
Cloudera
Desktop演化而来,最后
Cloudera
公司将其贡献给Apache
chipeize
·
2020-07-14 08:18
Hue
大数据
Hadoop生态圈之Oozie(一)
由
Cloudera
公司贡献给Apache。Oozie是运行于Javaservlet容器上的一个javaweb应用。
chipeize
·
2020-07-14 08:18
Oozie
大数据
Impala SQL 语言元素(翻译)[转载]
原ImpalaSQL语言元素(翻译)本文来源于http://my.oschina.net/weiqingbin/blog/189413#OSC_h2_2摘要http://www.
cloudera
.com
aoquan8892
·
2020-07-14 07:39
IDEA使用Springboot整合SparkStreaming的环境搭建及pom.xml
sparkstreaming需要的依赖注意:这里需要注意版本要相对应,不然编写代码会出现很多版本冲突、类找不到等问题2.11.80.9.0.02.2.02.6.0-cdh5.7.01.2.0-cdh5.7.0
cloudera
https
隔壁老王ing
·
2020-07-14 06:48
TotalOrderPartitioner Cannot Find _partition.lst File
Question:I'musingthe
Cloudera
'sVM(
cloudera
-demo-vm-cdh3u3-vmware)toruntheTotalOrderPartitionerclassforaspecificproblem.WhenIrunthecode
迷途小码
·
2020-07-14 05:42
hadoop开发
hive自定义函数之java代码
文章目录创建maven项目,导入jar包创建一个java类将项目打包,上传到集群上在hive里添加jar包使用自定义函数创建maven项目,导入jar包
cloudera
https://repository.
cloudera
.com
Hxm6440
·
2020-07-14 04:10
Hadoop之Hive
使用
Cloudera
部署,管理Hadoop集群
使用
Cloudera
部署,管理Hadoop集群[日期:2016-08-02]1.
Cloudera
介绍Hadoop是一个开源项目,
Cloudera
对Hadoop进行了商业化,简化了安装过程,并对hadoop
这次靠你了
·
2020-07-14 02:20
大数据
使用HbaseAPI 在指定的命名空间下创建表和列族
提供maven依赖:
cloudera
https://repository.
cloudera
.com/artifactory/
cloudera
-repos/org.apache.hadoophadoop-client2.6.0
红尘丶世界
·
2020-07-14 01:25
Hbase
CENTOS 7.4 64Bit下 使用
Cloudera
Manager 安装 CDH 5.14.3
1.概述本文根据官方安装文档的PathB整理CDH的搭建有多种方法,一般来说,都是先搭建
Cloudera
Manager,然后利用
Cloudera
Manager搭建CDH,如果是测试环境,可以直接利用
Cloudera
Manager
worldchinalee
·
2020-07-13 21:16
cloudera
manager
Cloudera
Manager及CDH最新版本安装全程记录
大家都知道,ApacheHadoop的配置很繁琐,而且很零散,为此
Cloudera
公司提供了ClouderManager工具,而且还封装了ApacheHadoop,flume,spark,hive,hbase
weixin_34362790
·
2020-07-13 19:07
Flume + Solr + log4j搭建web日志采集系统【转】
Cloudera
官方的教程也是基于这个例子开始的,get-started-with-hadoop-tutorial并且假设我们已经了解Flume(agent,Source,Channel,Sink),Morphline
weixin_33949359
·
2020-07-13 18:14
离线安装
Cloudera
Manager 5和CDH5(最新版5.9.3) 完全教程(七)界面安装
一、安装过程1.1登录1.2接受许可协议1.3选择免费版本1.4选择下一步1.5选择当前管理的主机1.6选择使用Parcel安装,选择CDH版本,点击继续1.7等待安装此处安装需要等待一段时间,请耐心等待,安装过程可能需要30分钟时间,这和物理机器的磁盘读写速度和机器性能有关,如果中断请继续之前的步骤重新操作,下图是安装成功界面1.8集群检测检测全部通过1.9选择自定义服务,选择要安装的组件1.1
weixin_30851867
·
2020-07-13 17:59
离线安装
Cloudera
Manager 5和CDH5(最新版5.1.3) 完全教程
关于CDH和
Cloudera
ManagerCDH(
Cloudera
'sDistribution,includingApacheHadoop),是Hadoop众多分支中的一种,由
Cloudera
维护,基于稳定版本的
weixin_30823833
·
2020-07-13 17:50
Cloudera
-Manager修改集群的IP
修改完后,本以为完事儿了,启动
Cloudera
ManagementService时,发现启动失败,无法启动。那么问题就来了,如何通过
cloudera
-manager来修改
weixin_30664539
·
2020-07-13 17:25
CDH 修改ip 和主机名---详细
一、修改集群ip1、首先在安装
cloudera
-manager的主机上(集群主节点),停止所有的
cloudera
管理进程service
cloudera
-scm-agentstopservice
cloudera
-scm-serverstop2
空用
·
2020-07-13 16:06
大数据
安装方式B--使用
Cloudera
Manager的Parcels包进行安装
安装方式B–使用
Cloudera
Manager的Parcels包进行安装安装方式B使用从
Cloudera
Manager依赖库下载的包进行安装。
时光漫步2015
·
2020-07-13 16:45
Cloudera官方
Linux系列之Kafka单机搭建
目前越来越多的开源分布式处理系统如
Cloudera
、ApacheStorm、Spark都支持与Kafka集成。
smileNicky
·
2020-07-13 16:47
Linux文库
CDH5.12.0安装部署
一准备1.离线部署MySQL部署CM离线部署Parcel部署2.规划节点MySQLParcel源文件cm服务进程大数据组件3.下载源CMhttp://archive.
cloudera
.com/cm5/cm
潇洒-人生
·
2020-07-13 10:35
cdh
大数据
cdh5安装报错解决
1、Exhaustedavailableauthenticationmethodsubuntu未激活root用户,或者激活root用户后未允许可远程登录root用户参考stackoverflow:
Cloudera
ManagerFailedtoauthenticate
weiqing687
·
2020-07-13 09:16
分布式
CDH 升级到5.12 /etc/alternatives 仍然指向旧版本的CDH
解决方案直接强制更新软连接:查看原始的连接ll/etc/alternatives|grepCDH|grep-vconf例如lrwxrwxrwx1rootroot66Nov1811:13avro-tools->/data/
cloudera
mtj66
·
2020-07-13 08:50
CDH
Storm over Gearpump & StreamingSQL on Spark解析
在第二次上海大数据流处理聚会上,来自Intel,大众点评与
Cloudera
的大数据工程师与大家分享时下大数据流处理最火热的话题。
腾讯开发者
·
2020-07-13 06:26
Solr 运维管理监控
需要借助一个工具
Cloudera
Manager。
cloudera
manager四大功能(1)管理:对集群进行管理,如添加、删除节点等操作。
cj96248
·
2020-07-13 06:42
Solr
使用
Cloudera
-CDH部署Hadoop大数据集群
最近一直在研究HadoopEcology,但是愁于没有虚拟主机或者云主机来搭建自己的集群,还好,我会Docker。偶然间,我看到了优达学城的Hadoop课程,讲的不错,视频很短,能够听懂和看懂英文,惊讶的是他们还请来了Hadoop的创始人DougCutting来讲述他自己的故事,建议各位大佬有空或者有兴趣的话可以去看看:https://classroom.udacity.com/courses/u
行书以鉴
·
2020-07-13 05:48
python大数据基础知识点(Hadoop+HDFS+MapReduce+Hive+Hbase)
BigTableDougCutting写HadoopHDFS-GFS,MapReduce--MapReduce,HBase---BigTablehadoop主要分类:1.apache组织的开源版互联网2.
cloudera
CDH
JUN.jun
·
2020-07-13 05:02
大数据(python)
依赖开源项目的公司离不开强有力的行为准则
诸如Docker,Hortonworks和
Cloudera
这些鲜活的例子,证明了与开发者社区合作能够使公司茁壮成长,社区贡献者们能够帮助其核心技术跟上时代,应用最新的功能特性。
chongzhouqi9927
·
2020-07-13 03:37
Flume + Solr + log4j搭建web日志采集系统
Cloudera
官方的教程也是基于这个例子开始的,get-started-with-hadoop-tutorial并且假设我们已经了解
benxiaohai529
·
2020-07-13 03:16
hadoop
CENTOS6.5安装CDH5.12.1
本安装文档主要分为4个步骤:1.前期准备(包括hostname、关闭防火墙、关闭SELinux、时钟同步等)2.安装
Cloudera
ManagerServer3.安装CDH集群4.集群完整性检查(包括HDFS
菜鸟级的IT之路
·
2020-07-13 01:32
大数据~集群
修改HDFS文件所有者
前言想把HDFS上的mysql驱动文件,所有者由
cloudera
改为oozie,我的操作:hadoopfs-chownoozie/user/oozie/share/lib/lib_20191203182652
SunnyRivers
·
2020-07-12 23:16
大数据
离线安装
Cloudera
Manager 5和CDH5(最新版5.12.0) 完全教程
关于CDH和
Cloudera
ManagerCDH(
Cloudera
'sDistribution,includingApacheHadoop),是Hadoop众多分支中的一种,由
Cloudera
维护,基于稳定版本的
Simon_Sun_1984
·
2020-07-12 22:14
linux
上一页
24
25
26
27
28
29
30
31
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他