Hadoop单机伪分布式搭建

1：首先去下载Hadoop安装包

2：安装hadoop

          tar -zxvf hadoop-2.7.5.tar.gz -C /opt

3:配置/etc/hosts

        vim /etc/hosts

注：要保证IP在同一个网段

4:配置hadoop

       cd /opt/hadoop-2.7.5/etc/hadoop

      vim hadoop-env.sh

       export JAVA_HOME=${JAVA_HOME}      //此处填java的安装路径

5:修改hadoop配置文件

      vim core-site.xml

     

       

           fs.defaultFS

           hdfs://singlenode:9000

       

       
            hadoop.tmp.dir

            /opt/hadoop-2.7.5/tmp

       

   

 

     vim hdfs-site.xml

    

        

            dfs.replication

            1

         

    

6:配置ssh免密登陆

      ssh-keygen -t rsa -P '' -f ~/.ssh/id_rsa          

      cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys

      chmod 0600 ~/.ssh/authorized_keys

7:hdfs的启动及停止

    首次启动需要格式化

    ./bin/hdfs namenode -format

    启动hdfs

    ./sbin/start-dfs.sh

    jps 出现如下几个进程则证明启动成功。

   

    ./sbin/stop-dfs.sh关闭hdfs.

打开浏览器输入网址singlenode:50070