E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.2.0)
如何在Centos6.5下部署hadoop2.2单机伪分布式
,散仙一直都用的hadoop1.x的版本,最近有项目用到hadoop2.x,所以就开始折腾hadoop2.x了,在hadoop2.x的版本里,目前最新版本已经到hadoop2.4了,但散仙在这里用的是
hadoop2.2.0
qindongliang1922
·
2014-06-10 20:00
java
hadoop
centos
hadoop2.2
如何在Centos6.5下部署hadoop2.2单机伪分布式
,散仙一直都用的hadoop1.x的版本,最近有项目用到hadoop2.x,所以就开始折腾hadoop2.x了,在hadoop2.x的版本里,目前最新版本已经到hadoop2.4了,但散仙在这里用的是
hadoop2.2.0
qindongliang1922
·
2014-06-10 20:00
java
hadoop
centos
hadoop2.2
如何在Centos6.5下部署hadoop2.2单机伪分布式
,散仙一直都用的hadoop1.x的版本,最近有项目用到hadoop2.x,所以就开始折腾hadoop2.x了,在hadoop2.x的版本里,目前最新版本已经到hadoop2.4了,但散仙在这里用的是
hadoop2.2.0
qindongliang1922
·
2014-06-10 20:00
java
hadoop
centos
hadoop2.2
如何在Centos6.5下部署hadoop2.2单机伪分布式
,散仙一直都用的hadoop1.x的版本,最近有项目用到hadoop2.x,所以就开始折腾hadoop2.x了,在hadoop2.x的版本里,目前最新版本已经到hadoop2.4了,但散仙在这里用的是
hadoop2.2.0
qindongliang1922
·
2014-06-10 20:00
java
hadoop
centos
hadoop2.2
如何在Centos6.5下部署hadoop2.2单机伪分布式
,散仙一直都用的hadoop1.x的版本,最近有项目用到hadoop2.x,所以就开始折腾hadoop2.x了,在hadoop2.x的版本里,目前最新版本已经到hadoop2.4了,但散仙在这里用的是
hadoop2.2.0
qindongliang1922
·
2014-06-10 20:00
java
hadoop
centos
hadoop2.2
如何在Centos6.5下部署hadoop2.2单机伪分布式
,散仙一直都用的hadoop1.x的版本,最近有项目用到hadoop2.x,所以就开始折腾hadoop2.x了,在hadoop2.x的版本里,目前最新版本已经到hadoop2.4了,但散仙在这里用的是
hadoop2.2.0
qindongliang1922
·
2014-06-10 20:00
java
hadoop
centos
hadoop2.2
hadoop2.2.0
安装,完全分布式安装
第一部分Hadoop2.2下载 Hadoop我们从Apache官方网站直接下载最新版本Hadoop2.2。官方目前是提供了linux32位系统可执行文件,所以如果需要在64位系统上部署则需要单独下载src 源码自行编译(10楼评论中提供了一个解决方法链接)。下载地址:http://apache.claz.org/hadoop/common/hadoop-2.2.0/如下图所示,下载红色标记
wenyusuran
·
2014-06-10 10:00
【伊利丹】Hadoop2.0 NN HA实验记录
/blog.csdn.net/fulongfbi/article/details/28418393-----------------------------------------------1.关于
Hadoop2.2.0
u010967382
·
2014-06-05 13:00
centos6.4 32/64位机
hadoop2.2.0
集群安装
1、准备环境 安装VMware10,三台centos6.4版本,安装在VMware虚拟机下。 1)安装中文输入法: 1、需要root权限,所以要用root登录,或suroot 2、yuminstall"@ChineseSupport" 2)安装ssh或者vsftp 使用chkconfig--list来查看是否装有vsftpd服务; 使用yum命令直接安装: yu
kt431128
·
2014-06-03 11:00
hadoop2.2.0
源码编译 常见错误
ps:
hadoop2.2.0
的源码有个bug:修改/hadoop-common-project/hadoop-auth/pom.xml中添加如下依赖: org.mortbay.jetty jetty-util
Mrknowledge
·
2014-05-19 17:00
如何编译Apache
Hadoop2.2.0
源代码
hadoop2的学习资料很少,只有官网的少数文档。如果想更深入的研究hadoop2,除了仅看官网的文档外,还要学习如何看源码,通过不断的调试跟踪源码,学习hadoop的运行机制。 1.安装CentOS我使用的是CentOS6.5,下载地址是http://mirror.neu.edu.cn/centos/6.5/isos/x86_64/,选择CentOS-6.5-x86_64-bin-DVD1.is
myboyliu2007
·
2014-05-17 21:00
hadoop2.2.0
Hadoop2.2.0
启动异常 - Incompatible clusterIDs
今天启动
Hadoop2.2.0
集群后,发现datanode进程没启动,查看日志发现如下报错:2014-05-1514:46:50,788FATALorg.apache.hadoop.hdfs.server.datanode.DataNode
u010967382
·
2014-05-15 15:00
hadoop
cluster
incompatible
Hadoop 2.2.0 (YARN)搭建笔记
最近工作需要,摸索着搭建了
Hadoop2.2.0
(YARN)集群,中间遇到了一些问题,在此记录,希望对需要的同学有所帮助。
蓝狐乐队
·
2014-05-15 10:00
Hadoop2.2.0
集群在RHEL6.2下的安装实战
题记本文介绍了一个
Hadoop2.2.0
集群的搭建过程,在2台4G内存的酷睿双核PC机上,使用VMWareWorkStation虚拟了4个RHEL6.2(1G内存、单核CPU、10G硬盘),总计用10个小时的时间
wenyusuran
·
2014-05-15 09:00
[置顶] Hadoop2.x的学习路线
从接触hadoop2.x开始,已经有很长一段时间,总结一下自己的学习路线:1:原理篇HDFS原理(计划中)MapReduce原理(计划中)YARN原理(计划中)2:运维
hadoop2.2.0
测试环境搭建
book_mmicky
·
2014-05-13 15:00
Windows下开发
Hadoop2.2.0
程序
在windows使用eclipse开发
hadoop2.2.0
程序的时候,会提示没有winutils.exe的错误,需要在windows端编译源代码才能解决。
book_mmicky
·
2014-05-13 15:00
hadoop2.2.0
源码编译(CentOS6.4)
由于测试所用虚拟机都是使用CentOS6.4,所以在Ubuntu上成功编译
hadoop2.2.0
之后就开始在CentOS上编译,花了不少时间,总是有错,最后发现原来是Maven版本的问题。
book_mmicky
·
2014-05-13 15:00
Hadoop2.2.0
生产环境模拟
1:规划centOS6.4上搭建
hadoop2.2.0
环境,java版本7UP21192.168.100.201product201.product(namenode)192.168.100.202product202
book_mmicky
·
2014-05-13 15:00
hadoop2.2.0
源码编译(eclipse)
测试是在完成
hadoop2.2.0
源码编译(ubuntu)之后做的,其实在eclipse里编译和在ubuntu编译原理是一样的,只不过一个是图形界面,一个是命令行而已。
book_mmicky
·
2014-05-13 15:00
sqoop1.4.4 for mysql
软件版本:
hadoop2.2.0
(参见
hadoop2.2.0
测试环境搭建 )hbase0.96(参见Hbase0.96.0+hadoop2.2.0安装)MySQL5.6.12(参见mysql5.6.12forLinux
book_mmicky
·
2014-05-13 15:00
HBase0.96.0 for
Hadoop2.2.0
编译
笔者部署的是
Hadoop2.2.0
集群,所支持的HBase0.96.0安装包并没有带
Hadoop2.2.0
的jar包,虽然可以通过在
Hadoop2.2.0
的安装目录中找到相应的2.2.0版本jar包进行替换
book_mmicky
·
2014-05-13 15:00
Hbase0.96.0 +
hadoop2.2.0
安装
安装重点:A:使用虚拟机如果时区没设置好,容易不一致,所以最好校对一下时间B:每个RegionServer需要打开region*ColumnFamily*StoreFiles个文件数,所以需要系统打开一定数量的文件,而Linux系统对已一个进程课打开的文件最大个数是有限制,默认的是1024个,所以需要到调高运行Hbase的用户的允许打开文件最大个数C:虽然Hbase已经带有了hadoop的jar包
book_mmicky
·
2014-05-13 15:00
zookeeper3.4.5安装笔记
计划安装在
hadoop2.2.0
集群的5台虚拟机上,用hadoop:hadoop身份安装,虚拟机的配置:hadoop1 192.168.100.171hadoop2 192.168.100.172hadoop3
book_mmicky
·
2014-05-13 15:00
hadoop
zookeeper
HDFS HA系列实验之一:基础环境搭建
本系列实验主要测试
hadoop2.2.0
的新特性NameNodeHA和Federation,本篇为基础环境搭建。
book_mmicky
·
2014-05-13 15:00
hadoop
hdfs
HA
hadoop2.2.0
源码编译(ubuntu)
1:下载相关的软件A:预安装相关软件包:mmicky@wyy:/app$sudoapt-get-yinstallmavenbuild-essentialautoconfautomakelibtoolcmakezlib1g-devpkg-configlibssl-devB:下载需要的软件* hadoop2.2.0_src http://hadoop.apache.org*JDK1.6以上 http:
book_mmicky
·
2014-05-13 15:00
hadoop
ubuntu
编译
hadoop2.2.0
测试环境搭建
近几日,
hadoop2.2.0
稳定版发布,立即下载先搭建测试环境。
book_mmicky
·
2014-05-13 15:00
hadoop
安装
Hadoop YARN常见问题以及解决方案
本文汇总了几个hadoopyarn中常见问题以及解决方案,注意,本文介绍解决方案适用于
hadoop2.2.0
以及以上版本。
蓝狐乐队
·
2014-05-12 18:00
【甘道夫】Win7环境下Eclipse连接
Hadoop2.2.0
准备:确保
hadoop2.2.0
集群正常运行1.eclipse中建立java工程,导入
hadoop2.2.0
相关jar包2.在src根目录下拷入log4j.properties,通过log4j查看详细日志
u010967382
·
2014-05-09 09:00
【甘道夫】Win7x64环境下编译Apache
Hadoop2.2.0
的Eclipse插件
目标:编译ApacheHadoop2.2.0在win7x64环境下的Eclipse插件环境:win7x64家庭普通版eclipse-jee-kepler-SR1-win32-x86_64.zipApacheAnt(TM)version1.8.4compiledonMay222012javaversion"1.7.0_45"参考文章:http://kangfoo.u.qiniudn.com/arti
u010967382
·
2014-05-09 09:00
编写简单的MapReduce程序(
Hadoop2.2.0
)
我们以简化版的气温统计为例,演示如何开发一个MapReduce程序。 Eclipse中新建一个MapReduce项目,命名为MaxTemperature。源代码文件新建以下3个类文件,代码依次如下:MaxTemperatureDriver.javapackagecom.oss.maxtemperature; importorg.apache.hadoop.conf.Configuration;im
颜建海
·
2014-05-07 16:00
配置hadoop开发环境(eclipse,
hadoop2.2.0
)
通常我们可以用Eclipse作为Hadoop程序的开发平台。1) 下载Eclipse下载地址:http://www.eclipse.org/downloads/根据操作系统类型,选择合适的版本下载并安装。2) 下载并编译Hadoop的Eclipse插件网上可直接下载到Hadoop1.x的Eclipse插件,但是该插件和Hadoop2.2不兼容,所以无法使用。Hadoop2.2的Eclipse插件正
颜建海
·
2014-05-06 12:00
第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
hadoop2.2.0
中HDFS的高可靠指的是可以同时启动2个NameNode。其中一个处于
蓝狐乐队
·
2014-05-05 00:00
hadoop2.2.0
yarn-site.xml--Map Reduce configuration
yarn.nodemanager.aux-services.mapreduce.shuffle.classorg.apache.hadoop.mapred.ShuffleHandler注释:mapreduce.job.jar注释:mapreduce.job.hdfs-servers${fs.defaultFS}注释:
weian404
·
2014-05-03 14:02
hadoop 2.2.0安装开发环境单机版本以及集群版本
*********************单机版版 1、环境:VMware虚拟机、LINUX 64位系统、搭建单机版
hadoop2.2.0
2、新建hadoop用户、组,用于安装部署
hadoop2.2.0
andyniu
·
2014-05-03 12:00
hadoop
第一章--hadoop2.1.0和
hadoop2.2.0
编译安装教程
由于现在hadoop2.0还处于beta版本,在apache官方网站上发布的beta版本中只有编译好的32bit可用,如果你直接下载安装在64bit的linux系统的机器上,运行会报一个INFOutil.NativeCodeLoader-Unabletoloadnative-hadooplibraryforyourplatform...usingbuiltin-javaclasseswherea
ly5156
·
2014-04-29 22:00
hadoop2.2.0
源代码编译
一、环境说明虚拟软件:VMwareWorkstation10虚拟机配置:RHELServerrelease6.5(Santiago)2.6.32-431.el6.x86_64cpu:4核心,内存:4G,硬盘:50G二、前提条件:1:将rhel6.5的iso文件作为yum源2:hadoop-2.2.0-src.tar.gz3:安装JDK1.6.0_434:安装并配置apache-maven3.0.5
ly5156
·
2014-04-29 22:00
hadoop2.2.0
完全分布式安装
所需环境Ubuntu11.10(32位)hadoop2.2.0jdk1.8集群为3台机器(都是从虚拟机里虚拟出来的)各机器参数如下hadoop01 192.168.0.30 sun(计算机名) sun(用户名) hadoop02 192.168.0.31 worker01 sunhadoop03 192.168.0.32 worker02 sun这里计算机名之所以叫worker
混绅士
·
2014-04-29 09:14
hadoop
部署
hadoop2.2.0
完全分布
hadoop2.2.0
集群的HA高可靠的最简单配置
图1
hadoop2.2.0
中HDFS的高可靠指的是可以同时启动2个NameNode。其中一个处
蓝狐乐队
·
2014-04-28 14:00
hadoop 2.2.0集群安装
相关阅读:hbase0.98.1集群安装本文将基于
hadoop2.2.0
讲解其在linux集群上的安装方法,并对一些重要的设置项进行解释,本文原文链接:http://blog.csdn.net/bluishglc
bluishglc
·
2014-04-27 16:46
大数据专题
hadoop 2.2.0集群安装
相关阅读:hbase0.98.1集群安装本文将基于
hadoop2.2.0
讲解其在linux集群上的安装方法,并对一些重要的设置项进行解释,本文原文链接:http://blog.csdn.net/bluishglc
bluishglc
·
2014-04-27 16:00
linux
hadoop
安装
集群
2.2.0
Spark Standalone 安装与测试
我下载Spark0.9.1版(目前最新版,和之前的0.8.1目录中有些差别),因为环境为
Hadoop2.2.0
所以下载的Spark版本为spark-0.9.1-bi
混绅士
·
2014-04-27 13:37
spark
library
load
hadoop2.2.0
native-hadoop
Spark Standalone 安装与测试
我下载Spark0.9.1版(目前最新版,和之前的0.8.1目录中有些差别),因为环境为
Hadoop2.2.0
所以下载的Spark版本为spark-0.9.1-bin-ha
混绅士
·
2014-04-27 13:37
spark
hadoop2.2.0
lo
Spark
基于
Hadoop2.2.0
版本分布式云盘的设计与实现
基于
Hadoop2.2.0
版本分布式云盘的设计与实现一、前言在学习了hadoop2.2一个月以来,我重点是在学习hadoop2.2的HDFS。
zhu_9527
·
2014-04-25 22:00
hadoop
分布式
web服务器
云存储
网盘
hive0.13整合hbase 0.96.2
hadoop2.2.0
最近研究了一下hive与hbase的整合,使用的都是各自的最新release, hive0.13, hbase0.96.2,整合的过程其实挺简单的,大致需要注意的地方如下: 1. hive的配置文件hive-site.xml需要添加的内容: <property> <name>hive.aux.jars.path</name> <
wingerli
·
2014-04-25 15:00
hadoop命令无法识别
考虑到
hadoop2.2.0
官方文档提及其他变量,如下补充。
joy_91
·
2014-04-23 18:17
Hadoop
hadoop2.2.0
hadoop-auth pom文件中的一个 bug
编译
hadoop2.2.0
源码,会发现一个包依赖异常。修复一个bug,文件hadoop-common-project/hadoop-auth/pom.xml。
GreatElite
·
2014-04-23 15:00
sqoop2 1.99.3安装
HADOOP环境为
hadoop2.2.0
下载的sqoop包为sqoop-1.99.3-bin-hadoop200,下载地址:http://apache.fayea.com/apache-mirror/sqoop
xiaofengge315
·
2014-04-22 15:53
sqoop
sqoop安装
sqoop语法
sqoop用法
sqoop2
Hadoop-2.2.0使用lzo压缩文件作为输入文件
在《
Hadoop2.2.0
安装和配置lzo》文章中介绍了如何基于
Hadoop2.2.0
安装lzo。里面简单介绍了如果在Hive里面使用lzo数据。
蓝狐乐队
·
2014-04-22 14:00
Hadoop2.x在Ubuntu系统中编译源码
本文主要记录Hadoop2.x在Ubuntu 12.04下编译源码的主要步骤和注意点: [一]、基础环境 Ubuntu 12.04 LTS 64 位
Hadoop2.2.0
sjsky
·
2014-04-22 14:00
hadoop
ubuntu
Build
micmiu
Hadoop2.x在Ubuntu系统中编译源码
本文主要记录Hadoop2.x在Ubuntu 12.04下编译源码的主要步骤和注意点: [一]、基础环境 Ubuntu 12.04 LTS 64 位
Hadoop2.2.0
sjsky
·
2014-04-22 14:00
hadoop
ubuntu
Build
micmiu
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他