Hadoop 2.7.7部署(一)——部署HDFS

系统:Centos7

JDK:v 1.8

在master上操作:

  1. 添加Hadoop环境,修改/etc/profile文件

    添加:

    HADOOP_HOME=/usr/local/src/hadoop

    PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin

    export PATH HADOOP_HOME

  2. 给添加JAVA路径,修改…/hadoop/etc/hadoop/hadoop-env.sh文件

    找到:

    export JAVA_HOME=${JAVA_HOME}

    修改为:

    export JAVA_HOME=/usr/local/src/java

    /usr/local/src/java是具体的JDK路径

  3. 指定HDFS的主节点namenode,修改文件…/hadoop/etc/hadoop/core-site.xml

    在标签中添加:

    <configuration>
      
      <property>
        <name>hadoop.tmp.dirname>
        <value>/usr/local/src/hadoop/tmpvalue>
      property>
      
      <property>
        <name>fs.defaultFSname>
        <value>hdfs://master:9000value>
      property>
    configuration>
    
  4. 配置slave节点,修改文件…/hadoop/etc/hadoop/slaves

    将localhost修改为slave1-slave3

    slave1

    slave2

    slave3

  5. 将已经配置好的hadoop文件夹,拷贝至其他slave节点

    scp ./hadoop root@slave1:/usr/local/src/hadoop

  6. 格式化主节点,命令:hdfs namenode -format

  7. 启动HDFS,命令:sbin/start-dfs.sh

  8. 查看进程是否启动,命令jps:

    master上有:

    Namenode

    SecondaryNameNode

    slave上有:

    DataNode

  9. 查看HDFS的web界面:访问http://master:50070

你可能感兴趣的:(大数据组件)