Hadoop 2.4.1安装小记

Centos 6.4   这是6系列的一个稳定版

JDK 7版本，hadoop许多组件是基于7开发的~ 6就跑不起来了~

Vmware。网卡设置VMNET8(NAT)

启动后，配置网络setup，然后重启网络service network restart

关闭图形界面init 3

设置securecrt文字风格

让系统默认不启动图形界面，修改/etc/inittab将启动级别改为3

修改主机名/etc/sysconfig/network

技巧：securecrt下alt+p打开sftp，命令put上传文件

 

1、安装jdk

2、安装hadoop

目录结构：

lib：本地库

share:hadoop的jar包

share\doc 帮助文档，可以删除

注意

share\hadoop\hdfs\hadoop-hdfs-2.4.1.jar hdfs核心包

share\hadoop\hdfs\lib\ hdfs依赖

例如hdfs开发导包时，注意导入这两个部分即可。

修改配置文件etc/：

hadoop-env.sh，hadoop的环境变量配置

　　改JAVA_HOME即可

core-site.xml 核心配置

　　fs.defaultFS 默认的文件系统的uri(因为hadoop各组件是松耦合的)，比如hdfs://hadoop1:9000

　　hadoop.tmp.dir hadoop的工作目录，例如/usr/local/hadoop/data/

hdfs-site.xml 配置几个即可，其他都有默认值。blocksize默认128M，老版本64M

　　dfs.replication 副本数

mapred-site.xml

yarn-site.xml