E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop-2.2.0
hadoop-2.2.0
分布式安装
hadoop安装包:hadoop-2.2.0.tar.gz操作系统: CentOS6.4jdk版本: jdk1.7.0_211.配置namenode和datanode配置成功的关键在于确保各机器上的主机名和IP地址之间能正确解析。修改每台机器的/etc/hosts文件,如果该台机器作namenode用,则需要在文件中添加集群中所有机器的IP地址及其对应主机名;如果该台机器仅作为dat
myboyliu2007
·
2014-02-02 18:00
hadoop2.2.0
Eclipse 安装
Hadoop-2.2.0
插件
1. 安装准备1.1 Eclipse下载最新的EclipseLinux版本,这里主要介绍Linux环境下的安装。64位Linux版本下载,点击eclipse-jee-kepler-R-linux-gtk-x86_64.tar.gz。解压缩,安装指令省略。1.2hadoop2x-eclipse-plugin在github托管门户中下载hadoop2x-eclipse-plugin。解压缩
GreatElite
·
2014-01-25 15:00
cloud
Ubuntu系统(64位)下安装并配置
Hadoop-2.2.0
集群
原文出处接上篇编译完
Hadoop-2.2.0
,下面详细的介绍下如何在ubuntu12.04-64server安装并配置Hadoop集群。
canlets
·
2014-01-24 00:00
安装
ubuntu
配置
64位
HADOOP集群
Kettle(Pentaho DataIntegration)实现
Hadoop-2.2.0
文件复制
这个实例很简单,难点在于你的Hadoop2.20插件的安装(我的上一篇博文)。实现的步骤如下: 1.创建job 创建一个Kettle的job,实现如下效果。 2.配置Hadoop复制文件 配置hadoopCopyFiles组件,实现如下效果: 3.测试 点击运行按钮,得到的效果如下所示,说明你的配置成功了。 转载,请写明出处:http://blog.csdn.
GreatElite
·
2014-01-22 22:00
cloud
Kettle(Pentaho DataIntegration) 安装
Hadoop-2.2.0
插件
1 安装前的准备工作 1.1 PentahoDataIntegration当前的CE 版本PentahoDataIntegration 是5.0.1,下载地址:http://www.pentaho.com/download/。你也可以尝试企业版EE,这里不做介绍了。下载完成后,压缩到指定的目录下。 1.2Hadoop2.2.0下载最新稳定版本的Hadoop2.2.0,下载地址:https:
GreatElite
·
2014-01-22 22:00
hadoop
cloud
hadoop2.2.0伪分布式安装
安装前解决的问题: 1、hadoop官网下载的hadoop二进制文件是在32位环境下编译的(地址:http://mirrors.cnnic.cn/apache/hadoop/common/
hadoop
退役的龙弟弟
·
2014-01-20 16:00
hadoop2
Hadoop-2.2.0
学习之三YARN简介
MapReduce在hadoop-0.23版本中进行了完全的检查修改,并发展为了现在称之为的MapReduce2.0(MRv2)或者YARN。YARN的基本想法是将JobTracker的两个主要功能资源管理和作业调度监控分开为独立的后台进程,目标是拥有一个全局ResourceManager(RM)和每个应用程序一个的ApplicationMaster(AM)。一个应用程序或者是从经典MapRedu
sky_walker85
·
2014-01-13 10:00
yarn
调度器
ResourceManager
nodemanager
hadoop-2.2.0
Hadoop-2.2.0
学习之二HDFS联盟
在学习Hadoop-2.x版本中的HDFS之前先看一下目前普遍使用中的Hadoop-1.x版本的HDFS结构,有助于更好地理解2.x版本中HDFS的变化所带来的好处。先看看2.x版本之前的HDFS结构图,如下所示。从上面的结构可以看出,HDFS主要包括两层:Namespace(命名空间)和块存储(BlockStorage)。命名空间由目录、文件和块组成,支持文件系统相关的所有命名空间操作,比如创建
sky_walker85
·
2014-01-08 10:00
block
pool
hadoop-2.2.0
HDFS联盟
命名空间卷
Centos6.5编译64位hadoop2.2.0
hadoop源码:http://mirror.bit.edu.cn/apache/hadoop/common/
hadoop-2.2.0
/hadoop-2.2.0-src.tar.gzjdk:http:/
inDestiny
·
2014-01-07 23:00
hadoop
centos
编译
64
2.2.0
Hadoop-2.2.0
学习之一
Hadoop-2.2.0
变化简介
Hadoop-2.2.0
在Hadoop-1.x的基础上进行了重大改进,主要体现在HDFS和MapReduce上。下面大体介绍HDFS和MapReduce改进的地方。首先是HDFS联合。
sky_walker85
·
2014-01-06 13:00
yarn
hadoop-2.2.0
HDFS联盟
Hadoop2.2.0版本多节点集群及eclipse开发环境搭建
环境:1、虚拟机:VMware®Workstation,版本:10.0.02、操作系统:ubuntu-13.103、hadoop版本:
hadoop-2.2.0
下载地址4、jdk1.6.0_455、本文所用两台机器分工如下
s060403072
·
2013-12-31 16:00
hadoop-2.2.0+zookeeper-3.4.5+hbase-0.96.1单机安装指南
一配置
hadoop-2.2.0
1.配置
hadoop-2.2.0
/etc/hadoop/hadoop-env.sh文件,添加如下配置: exportJAVA_HOME=/home/username
meilong_whpu
·
2013-12-29 17:00
hadoop
zookeeper
hbase
分布式hadoop集群安装
阅读更多1.Hadoop2.2.0下载下载地址:http://archive.apache.org/dist/hadoop/core/
hadoop-2.2.0
/2.集群环境搭建设置CentOS静态IP地址的步骤
wang_2011_ying
·
2013-12-27 15:00
分布式hadoop集群安装
Hadoop2.2.0 下载 下载地址: http://archive.apache.org/dist/hadoop/core/
hadoop-2.2.0
/ 2.
wang_2011_ying
·
2013-12-27 15:00
hadoop
Ubuntu 编译安装
Hadoop-2.2.0
MapReduce什么的我是不懂啊。今天是帮马同学搭建hadoop。用的2.2.0版本,结果运行时发现提示“libhadoop.so.1.0.0whichmighthavedisabledstackguard”的警告。Google了一下发现是因为hadoop2.2.0提供的是libhadoop.so库是32位的,而我们的机器是64位。解决的办法就是重新在64位的机器上编译hadoop。恰好马同学刚
twlkyao
·
2013-12-24 10:00
hadoop
大数据
云计算
环境搭建
Hadoop-2.2.0
Linux 64位系统本地库编译
Hadoop2.2.0提供了YARN,相信很多朋友都跃跃欲试。但是Apache下载的版本默认只提供32位的。启动时有这样一个警告:NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswhereapplicable 64位的朋友都需要把Hadoop2.2.0的源码重新编译
震秦
·
2013-12-11 13:00
hadoop
yarn
hadoop-2.2.0+hbase-0.96.0测试集群搭建
1、环境介绍:ubuntu13.04虚拟机3台:master、s1、s2;jdk1.7.0_40;
hadoop-2.2.0
;hbase-0.96.0;2、分别配置好三台机器的JAVA_HOME,hosts
Java_KFC
·
2013-12-11 10:00
hadoop
linux
集群
hbase
NameNode
hadoop-2.2.0+hbase-0.96.0测试集群搭建
1、环境介绍:ubuntu13.04虚拟机3台:master、s1、s2;jdk1.7.0_40;
hadoop-2.2.0
;hbase-0.96.0;2、分别配置好三台机器的JAVA_HOME,hosts
Java_KFC
·
2013-12-11 10:00
hadoop
linux
集群
hbase
NameNode
Hadoop2.2.0安装配置手册
下载地址:http://apache.claz.org/hadoop/common/
hadoop-2.2.0
/如下图所示,下载红色标记
cnxk
·
2013-12-06 01:00
集群间 Hive 数据 迁移 问题
2、将本地数据上传另一个集群的hdfs /usr/local/
hadoop-2.2.0
/bin/hdfs
Desilting
·
2013-11-28 14:00
HBase错误总结
1、出现版本不一致错误如果启动时出现版本不一致的错误,如下所示:ServerIPCversion10cannotcommunicatewithclientversion.........为了兼容
Hadoop
iAm333
·
2013-11-16 17:00
centos集群上安装ganglia-3.6.0监控
hadoop-2.2.0
和hbase-0.96.0
Ganglia是UCBerkeley发起的一个开源监视项目,设计用于测量数以千计的节点。每台计算机都运行一个收集和发送度量数据(如处理器速度、内存使用量等)的名为gmond的守护进程。它将从操作系统和指定主机中收集。接收所有度量数据的主机可以显示这些数据并且可以将这些数据的精简表单传递到层次结构中。正因为有这种层次结构模式,才使得Ganglia可以实现良好的扩展。gmond带来的系统负载非常少,这
iAm333
·
2013-11-16 17:00
Ubuntu和CentOS中分布式配置
Hadoop-2.2.0
一、准备工作首先在每台Linux电脑上面安装好JDK6或其以上版本,并设置好JAVA_HOME等,测试一下java、javac、jps等命令是否可以在终端使用,具体可参考《Linux中单机配置Hadoop》中的配置过程二、设置静态IP注:如果是在虚拟中建立分布式环境,这一步就可以跳过了。(1)CentOS静态IP地址设置:$sudovim/etc/sysconfig/network-scripts
iAm333
·
2013-11-16 15:00
大数据系列12:Hadoop2 – 全新的Hadoop
mirrors.hust.edu.cn/apache/hadoop/common/stable2/hadoop-2.2.0.tar.gz tar -xzvf hadoop-2.2.0.tar.gz cd
hadoop
yangshangchuan
·
2013-11-01 00:00
搜索引擎
大数据
网络爬虫
hadoop2
hadoopV2
大数据系列12:Hadoop2 – 全新的Hadoop
mirrors.hust.edu.cn/apache/hadoop/common/stable2/hadoop-2.2.0.tar.gz tar -xzvf hadoop-2.2.0.tar.gz cd
hadoop
yangshangchuan
·
2013-11-01 00:00
搜索引擎
大数据
网络爬虫
hadoop2
hadoopV2
大数据系列12:Hadoop2 – 全新的Hadoop
mirrors.hust.edu.cn/apache/hadoop/common/stable2/hadoop-2.2.0.tar.gz tar -xzvf hadoop-2.2.0.tar.gz cd
hadoop
yangshangchuan
·
2013-11-01 00:00
搜索引擎
大数据
网络爬虫
hadoop2
hadoopV2
大数据系列12:Hadoop2 – 全新的Hadoop
mirrors.hust.edu.cn/apache/hadoop/common/stable2/hadoop-2.2.0.tar.gz tar -xzvf hadoop-2.2.0.tar.gz cd
hadoop
yangshangchuan
·
2013-11-01 00:00
搜索引擎
大数据
网络爬虫
hadoop2
hadoopV2
hadoop2.2.0安装中遇到的错误:mapreduce.shuffle set in yarn.nodemanager.aux-services is invalid
mapreduce.shufflesetinyarn.nodemanager.aux-servicesisinvalid启动:[hadoop@hadoop02hadoop]$yarn-daemon.shstartnodemanagerstartingnodemanager,loggingto/app/hadoop/
hadoop
tanqingru
·
2013-10-24 11:00
hadoop-2.2.0
NameNode启动源码注释
/***入口*/publicstaticvoidmain(Stringargv[])throwsException{if(DFSUtil.parseHelpArgument(argv,NameNode.USAGE,System.out,true)){System.exit(0);}try{StringUtils.startupShutdownMessage(NameNode.class,argv,
heipacker
·
2013-10-23 20:34
hadoop-2.2.0
NameNode启动源码注释
/** *入口 */ publicstaticvoidmain(Stringargv[])throwsException{ if(DFSUtil.parseHelpArgument(argv,NameNode.USAGE,System.out,true)){ System.exit(0); } try{ StringUtils.startupShutdownMessage(NameNode.cl
fupacker
·
2013-10-23 20:00
java
源码
hadoop
注释
NameNode
hadoop-2.2.0
编译import eclipse
编译
hadoop-2.2.0
下载hadoop-2.2.0-src包,解压 安装好maven2 执行 mvn clean install -DskipTests 运行报错: [ERROR]
lookqlp
·
2013-10-22 17:00
hadoop-2.2.0
编译import eclipse
编译
hadoop-2.2.0
下载hadoop-2.2.0-src包,解压 安装好maven2 执行 mvn clean install -DskipTests 运行报错: [ERROR]
lookqlp
·
2013-10-22 17:00
hadoop-2.2.0
单点安装
解压hadoop-2.2.0.tar.gz 目录说明: drwxr-xr-x 2 qiulp qiulp 4096 Oct 22 11:37 bin/ ......hadoop命令及yarn命令 drwxr-xr-x 3 qiulp qiulp 4096 Oct 7 14:38 etc/ 
lookqlp
·
2013-10-22 15:00
hadoop
hadoop-2.2.0
单点安装
解压hadoop-2.2.0.tar.gz 目录说明: drwxr-xr-x 2 qiulp qiulp 4096 Oct 22 11:37 bin/ ......hadoop命令及yarn命令 drwxr-xr-x 3 qiulp qiulp 4096 Oct 7 14:38 etc/ 
lookqlp
·
2013-10-22 15:00
hadoop
上一页
1
2
3
4
5
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他