hadoop 单机伪分布式搭建 hadoop-2.5.1

下载 hadoop-2.5.1
http://archive.apache.org/dist/hadoop/core/hadoop-2.5.1/hadoop-2.5.1.tar.gz
创建安装目录:
    mkdir -p /home/hadoop
    解压 tar xzvf hadoop-2.5.1.tar.gz

第一步:
    切换到 hadoop-2.5.1/etc/hadoop
    以下三个文件配置JAVA_HOME  根据自己安装目录来设置; #JAVA_HOME=/usr/java/jdk1.8.0_71
    hadoop-env.sh
    mapred-env.sh
    yarn-env.sh    

第二步:hadoop 配置
    core-site.xml

	fs.defaultFS
	hdfs://192.168.1.36:8020


	hadoop.tmp.dir
	/opt/data/tmp

hdfs-site.xml

       dfs.replication
       1
       存储时备份数量,伪分布式,所以1

mapred-site.xml

mapreduce.framework.name
yarn

yarn-site.xml

  yarn.nodemanager.aux-services
  mapreduce_shuffle


    yarn.resourcemanager.hostname
    master
 

切换到 hadoop-2.5.1/bin 目录
 ./hdfs namenode -format

 NameNode 启动 
 sbin/hadoop-daemon.sh start namenode
 
 DataNode 启动
 sbin/hadoop-daemon.sh start datanode
 
 SecondaryNameNode 启动
 sbin/hadoop-daemon.sh start secondarynamenode
 
 启动 ResourceManager
 sbin/yarn-daemon.sh start resourcemanager
 
 启动NodeManager
 sbin/yarn-daemon.sh start nodemanager 
 jps 查看启动结果
 
  在hdfs上创建目录
  hdfs dfs -mkdir /demo1
  上传本地文件到hdfs
  hdfs dfs -put /home/hadoop/hadoop-2.5.1/etc/hadoop/hdfs-site.xml /test
  读取文件
  hdfs dfs -cat /test/hdfs-site.xml

参考链接:https://blog.csdn.net/hliq5399/article/details/78193113