Mac 安装Hadoop-2.6.0-cdh5.7.0伪分布式

下载Hadoop-2.6.0-cdh5.7.0 单机下载自己需要的版本，我下载的是hadoop-2.6.0-cdh5.7.0

一. 解压

tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz  -C  xxxxxxxx(自己想放的路径)

二 . 配置

进入etc/hadoop

core-site.xml

    
        fs.defaultFS
        hdfs://localhost:8020
    
         
                hadoop.tmp.dir
                /Users/mac/xxxx/app/hadoop-2.6.0-cdh5.7.0/tmp
        

hdfs-site.xml

	






    
        dfs.replication
        1
    
   
        dfs.namenode.name.dir
        /Users/mac/xxxx/data/hadoop/hdfs/name
         namenode 存放name table(fsimage)本地目录（需要修改）
    

    
        dfs.namenode.edits.dir
        ${dfs.namenode.name.dir}
        namenode粗放 transaction file(edits)本地目录（需要修改）
    

   
        dfs.datanode.data.dir
        /Users/mac/zhangchun/data/hadoop/hdfs/data
        datanode存放block本地目录（需要修改）
    

mapred-site.xml

    
        mapreduce.framework.name
        yarn
    

yarn-site.xml

    
        yarn.nodemanager.aux-services
        mapreduce_shuffle
    

三 . 格式化

 bin/hdfs namenode -format

四. 启动

sbin/start-dfs.sh

jps

5154 NameNode
5517 Jps
5230 DataNode
5327 SecondaryNameNode

访问hdfs

http://localhost:50070/