搭建Hadoop环境之伪分布式

搭建好单机模式的Hadoop环境以后就可以搭建伪分布式的Hadoop环境了,接下来数据存储在HDFS上进行测试,首先就要对HDFS进行配置。

配置HDFS

配置/opt/app/hadoop2.7/etc/hadoop/core-site.xml


	
        fs.defaultFS
        
        hdfs://hadoop01:8020
        
    
    
     
        hadoop.tmp.dir
        
        /var/hadoop/data
        
    

配置/opt/app/hadoop2.7/etc/hadoop/hdfs-site.xml


    
        dfs.replication
        
        1
        
    

	 
        dfs.namenode.secondary.http-address
        
        hadoop01:50090
        
	 

配置从节点/opt/app/hadoop2.7/etc/hadoop/slaves也就是datanode,单机版写自己就行。
都配置好以后执行 bin/hadoop namenode -format 来格式化namenode节点,然后执行start-dfs.sh 来启动集群。启动集群后可以通过jps查看启动节点的信息,前面是id号。

你可能感兴趣的:(搭建Hadoop环境之伪分布式)