E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CDH3
Hadoop Kerberos安全机制
HadoopKerberos安全机制1.背景在Hadoop1.0.0或者
CDH3
版本之前,hadoop并不存在安全认证一说。默认集群内所有的节点都是可靠的,值得信赖的。
chenglinhust
·
2014-06-15 12:00
Spark1.0.0 on Standalone 运行架构实例解析
1:实验配置虚拟机cdh1(4G内存,1CPU*2CORE)虚拟机cdh2(4G内存,1CPU*2CORE)虚拟机
cdh3
(4G内存,1CPU*2CORE)spark配置:conf/spark-env.shexportSPARK_MASTER_IP
book_mmicky
·
2014-05-13 15:00
spark
解析
standalone
运行架构
安装hive0.12
1.下载解压hive0.12 tar-zxvfhive-0.12.0.tar.gz2.在.bashrc下添加 exportHIVE_HOME=/home/hadoop/
cdh3
/hive-0.7.1-cdh3u1
雨一直下
·
2014-04-26 22:00
hive安装
安装hive0.12
1.下载解压hive0.12 tar-zxvfhive-0.12.0.tar.gz2.在.bashrc下添加 exportHIVE_HOME=/home/hadoop/
cdh3
/hive-0.7.1-cdh3u1
雨一直下
·
2014-04-26 22:00
hive安装
hadoop
cdh3
下载地址备忘
原创文章,转载请注明: 转载自董的博客 本文链接地址: http://dongxicheng.org/mapreduce-nextgen/hadoop-distribution-selection/ 作者:Dong,作者介绍:http://dongxicheng.org/about/ http://archive.cloudera.com/cdh/3/
aubdiy
·
2014-03-10 11:00
hadoop
hadoop cdh3下载
hadoop cdh3
hadoop
cdh3
下载地址备忘
原创文章,转载请注明: 转载自董的博客 本文链接地址: http://dongxicheng.org/mapreduce-nextgen/hadoop-distribution-selection/ 作者:Dong,作者介绍:http://dongxicheng.org/about/ http://archive.cloudera.com/cdh/3/
aubdiy
·
2014-03-10 11:00
hadoop
hadoop cdh3下载
hadoop cdh3
hadoop版本总结
其中从0.20.x分支发展出来的是:hadoop1.0,
CDH3
从0.23.x分支发展出来的是:hadoop-alpha,CDH4下面具体说hadoop1.0、2.0和
CDH3
、CDH4:ApacheHadoop
David_Tio
·
2014-03-06 16:00
第10周 hadoop与关系型数据库交换数据
SqoopSQL-to-HDFS工具利用JDBC连接关系型数据库Sqoop的获取Hadoop-0.20.2下使用SqoopSQOOP不支持此版本,可使用
CDH3
。
zq9017197
·
2014-01-15 10:00
Hadoop(
cdh3
)+HBase+ZooKeeper伪分布式部署
在网上搜了很多很多关于hadoop的安装部署说明,但针对
CDH3
版本的部署却很少说明,结合很多前辈的安装部署说明,终于还是把它给部署起来了,过程很曲折,现在终于完成了,将此过程记录下来,做个总结!
xmanliang
·
2014-01-08 14:00
hadoop
hbase
cdh3
集群 distcp 数据到 cdh4集群
从
cdh3
集群 distcp 数据到 cdh4集群上面详见: http://cloudera.com/content/cloudera-content/cloudera-docs
bupt04406
·
2013-09-26 21:00
tcp
cdh4 vs
cdh3
client处理DataNode异常的不同
cdh3
在处理pipeline的错误时,假设当前pipeline有3个datanode,如果一个有问题,那么通过移除掉坏的datanode,重新建立只有2个datanode的pipeline
bupt04406
·
2013-09-13 21:00
datanode
hdfs 升级,
cdh3
升级 cdh4
Step 1: 做下saveNamespace操作,停掉集群,并备份下 HDFS 的 Metadata 1.1 让namenode进入safe mode状态 $ bin/hadoop dfsadmin -safemode enter 1.2 执行saveNamespace操作 $ bin/hadoop
bupt04406
·
2013-08-05 18:00
hdfs
Enabling Oozie Web Console in
CDH3
, CDH4 with/without Cloudera Manager
If you use
CDH3
, you must do: D
sunwinner
·
2013-07-16 23:00
console
Hadoop kerberos security配置
在hadoop 1.0和
CDH3
中新加上了kerberos安全机制来控
zhan8610189
·
2013-06-27 11:00
Security
编译
CDH3
eclipse插件
编译CDHeclipse插件我下载的CDH版hadoop hadoop-0.20.2-cdh3u6.tar.gz由于ClouderaCDH默认没有提供eclipse插件,需要自己编译,而且它的插件和Apachehadoop插件不兼容。所以得在网上找有没有人编译好的对应插件版本如下:http://download.csdn.net/detail/aichaoguy/5544483,但后来发现不能使用
huoyunshen88
·
2013-06-21 12:00
Hadoop mapreduce单元测试工具MRUnit简单使用
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-06-06 15:00
mapreduce
Hadoop mapreduce单元测试工具MRUnit简单使用
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-06-06 15:00
mapreduce
Hadoop的文件输入输出Format的几个separator属性参数
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-06-05 16:00
hadoop
Hadoop的文件输入输出Format的几个separator属性参数
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-06-05 16:00
hadoop
查看Hbase表空间方法
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-09 16:00
hbase
查看Hbase表空间方法
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-09 16:00
hbase
Hadoop在reduce中Iterable对应的值不变原因
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-08 12:00
Iterable
Hadoop在reduce中Iterable对应的值不变原因
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-08 12:00
Iterable
Hadoop工具类之WritableUtils
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-07 16:00
hadoop
Hadoop工具类之WritableUtils
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-07 16:00
hadoop
Hadoop执行Job时报DiskChecker$DiskErrorException异常原因
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-07 15:00
exception
Hadoop执行Job时报DiskChecker$DiskErrorException异常原因
Hadoop 0.20.2-cdh3u4 Subversion git://ubuntu-slave01/var/lib/jenkins/workspace/CDH3u4-Full-RC/build/
cdh3
小网客
·
2013-05-07 15:00
exception
flume搭建调试
Date: 2012-03-06> <Author: medcl> <Category: 日志分析> 查看评论 flume搭建调试 Installing
CDH3
caodaoxi
·
2013-05-03 10:00
Flume
Ubuntu 11.4 安装 Cloudera
CDH3
PartIHadoop Clickoneofthefollowing:thislinkforaMavericksystem. 安装一个最近的吧Installthepackage.Dooneofthefollowing:Choose Openwith inthedownloadwindowtousethepackagemanager, or Choose SaveFile,savethepackag
wliufu
·
2013-05-01 01:00
hadoop
ubuntu
hadoop版本总结
其中从0.20.x 分支发展出来的是:hadoop1.0,
CDH3
从0.23.x 分支发展出来的是:hadoop-alpha,CDH4 下面具体说hadoop1.0、2.0 和
CDH3
、CDH4
bigsea
·
2013-04-11 17:00
hadoop
debian 安装cloudera
CDH3
1.安装jdk(略) 2.蒋下面两行加到文件/etc/apt/sources.list.d/cloudera.list 查看debian 的 name of your distributio lsb_release -c deb http://archive.cloudera.com/debian squeeze-cdh3 contrib deb
lelglin
·
2013-04-10 19:00
Debian
hadoop版本及cloudera的
CDH3
CDH4
其中从0.20.x 分支发展出来的是:hadoop1.0,
CDH3
从0.23.x 分支发展出来的是:hadoop-alpha,CDH4 下面具体说hadoop1.0
lelglin
·
2013-04-10 18:00
hadoop
hadoop版本总结
其中从0.20.x 分支发展出来的是:hadoop1.0,
CDH3
从0.23.x 分支发展出来的是:hadoop-alpha,CDH4 下面具体说hadoop1.0
java_doom
·
2013-04-04 00:00
hadoop
hadoop版本总结
其中从0.20.x分支发展出来的是:hadoop1.0,
CDH3
从0.23.x分支发展出来的是:hadoop-alpha,CDH4下面具体说hadoop1.0、2.0和
CDH3
、CDH4:ApacheHadoop
xuechongyang
·
2013-03-20 13:00
Hadoop Kerberos安全机制介绍
1.背景在Hadoop1.0.0或者
CDH3
版本之前,hadoop并不存在安全认证一说。默认集群内所有的节点都是可靠的,值得信赖的。用户与HDFS或者M/R进行交互时并不需要进行验证。
macyang
·
2013-02-11 14:00
CDH3
Installation Guide
来源: https://ccp.cloudera.com/display/CDHDOC/CDH3+Installation+GuideAboutthisGuideThis CDH3InstallationGuide isforApacheHadoopdevelopersandsystemadministratorsinterestedinHadoopinstallation.Thefollowin
laiahu
·
2012-07-25 10:00
apache
maven
hadoop
System
download
Deployment
CDH3
Installation Guide
来源:https://ccp.cloudera.com/display/CDHDOC/CDH3+Installation+Guide AboutthisGuide ThisCDH3InstallationGuideisforApacheHadoopdevelopersandsystemadministratorsinterestedinHadoopinstallation.Thefollowi
laiahu
·
2012-07-25 10:00
hadoop
hbase
CDH3
Hadoop集群摘除节点
首先要明确一点,整个过程都是在NameNode上进行的1.在NN上的mapred-site.xmlhdfs-site.xml中分别取配置mapred.hosts,mapred.hosts.exclude,dfs.hosts,dfs.hosts.exclude;没有exclude的配置所指向的文件中先写入所有的TT,DN节点,而有exclude的配置文件中写入要摘除的节点;写法都是一行一个节点(机器
tinyid
·
2012-03-28 15:33
Hadoop
Hadoop Kerberos安全机制介绍
但必须以超链接形式标明文章原始出处和作者信息及版权声明网址:http://dongxicheng.org/mapreduce/hadoop-kerberos-introduction/1.背景在Hadoop1.0.0或者
CDH3
Dong
·
2012-03-18 16:00
Hadoop
Kerberos
在
CDH3
上运行mahout的random forest算法时的异常处理
阅读更多在应用apachemahout中的randomforest分类的时候,报java.lang.IllegalStateException:java.io.EOFException异常。具体如下图:这个错误发生是在训练出模型后,将模型存储的时候。原因是cloudera的hadoop版本在mapreduce任务运行完后,会生成一个_SUCCESS目录,这将导致如上异常。解决的办法是在配置文件ma
085567
·
2011-11-30 14:00
在
CDH3
上运行mahout的random forest算法时的异常处理
在应用apachemahout中的randomforest分类的时候,报java.lang.IllegalStateException:java.io.EOFException异常。具体如下图: 这个错误发生是在训练出模型后,将模型存储的时候。原因是cloudera的hadoop版本在mapreduce任务运行完后,会生成一个_SUCCESS目录,这将导致如上异常。 解决的办法是在配置文件map
085567
·
2011-11-30 14:00
Mahout
sqoop 配置及导入导出操作
1、下载相应软件下面是
CDH3
和SQOOP1.2.0的下载地址http://archive.cloudera.com/cdh/3/hadoop-0.20.2-CDH3B4.tar.gzhttp://archive.cloudera.com
tylgoodluck
·
2011-11-16 21:00
mysql
数据库
hadoop
jdbc
hbase
import
安装Hive
在安装了Hadoop的namenode上解压Hive: $tar zxvf hive-0.7.1-cdh3u1.tar.gz -C /home/hadoop/
cdh3
修改hive安装目录下
wadefall
·
2011-10-20 17:00
hadoop
hive
设置Cloudera
CDH3
源镜像(Redhat)
1.获取镜像,保存到/opt/mirror/
cdh3
/目录wget-mirrorhttp://archive.cloudera.com/redhat/cdh/3/删除掉其中无用的网页信息。
ArthurBryant
·
2011-08-08 18:00
apache
hadoop
redhat
hbase
CDH3
Install Guide
CDH3InstallGuide1 InstallHadoop1.1 Adduserhadoop[root@gd02~]#adduserhadoop使用vim在/etc/group中将hadoop用户添加到mapred和hdfs组;将mapred和hdfs用户添加到hadoop组。hadoop:x:105:mapred,hdfshdfs:x:106:hadoopmapred:x
ArthurBryant
·
2011-08-08 18:00
hive和hbase的整合
jinghong.iteye.com/blog/1051732[/url],解压hive到/home/hadoop/cdh3tarzxvfhive-0.7.0-cdh3u0.tar.gz-C/home/hadoop/
cdh3
jinghong123456
·
2011-07-19 14:58
hadoop/hbase
hive和hbase的整合
安装 使用cloudera的cdh3u0版本,hbase安装见 http://jinghong.iteye.com/blog/1051732, 解压hive到/home/hadoop/
cdh3
jinghong
·
2011-07-19 14:00
hive
hbase
cdh3u0
基于CentOS安装CDH3Beta4版的Hadoop和HBase
一、背景因为最近使用hadoop发现了一些问题,而且也没有太多的时间去对其本身进行修改,所以,在朋友的建议下采用了cloudera的
CDH3
版本。
dajuezhao
·
2011-04-26 15:00
hadoop
centos
服务器
防火墙
hbase
raid5
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他