Linux安装hadoop

1、安装jdk

     上传并解压jdk

2、配置环境变量

    (1)  vim /etc/profile

    (2)

     

    (3)source /etc/profile

3、查看jdk版本

    java -version

4、上传并解压hadoop

5、配置hadoop-env.sh

    

6、配置core-site.xml

        

        

                

                fs.default.name

                hdfs://hadooplx:9000

       

        

                

                

                hadoop.tmp.dir

                /home/software/hadoop-2.7.1/tmp

        

    

        注意:  hdfs://hadooplx:9000中的hadooplx为配置的主机名,操作方法如下:

                    #vim /etc/sysconfig/network

                    改成hadooplx需要重启,但是在做一个临时更改

                    #hostname hadooplx

                    注意主机名称中不能有空格和特殊符号识别

    

 

7、配置hdfs-site.xml    

        

        

                

                dfs.replication

                1

        

        

                

                dfs.permissions

                false

        

    

    

 

8、mapred-site.xml

    

        

                mapreduce.framework.name

                yarn

        

    

 

9、yarn-site.xml

        

            

                

                yarn.resourcemanager.hostname

                hadooplx

            

            

                

                yarn.nodemanager.aux-services

                mapreduce_shuffle

            

        

        

10、slaves

        slaves文件里面记录的是集群里所有DataNode的主机名

        

 

11、hadoop的环境变量

        

 

12、格式化namenode

        

        

        

 

13、启动hadoop

    

 

        

你可能感兴趣的:(储备资料)