hadoop02

一、安装hadoop

1.配置hadoop的Java环境支持

在${  HADOOP_HOME }/etc/hadoop目录下

hadoop-env.sh

mapred-env.sh

yarn-env.sh

在这三个文件中均配置

export JAVA_HOME=/opt/modules/jdk1.7.0_67

参考：http://hadoop.apache.org/docs/r2.6.5/hadoop-project-dist/hadoop-common/SingleCluster.html#Pseudo-Distributed_Operation

core-default.xml

hadoop/slaves文件中配置主机名

使用bin/hdfs、bin/hdfs dfs查看命令

bin/hdfs namenode -format进行格式化

启动hdfs相关进程

启动namenode：sbin/hadoop-daemon.sh start namenode

启动datanode：sbin/hadoop-daemon.sh start datanode

命令：jps

NameNode

DataNode

浏览器：hadoop01.com:50070

上传文件至linux根目录

hdfs：bin/hdfs dfs -put test.txt /

查看：hdfs：bin/hdfs dfs -cat test.txt /

下载：hdfs：bin/hdfs dfs -get test.txt /opt/

HDFS文件系统常用命令

$ bin/hdfs dfs //可以查看所有的dfs相关的操作命令

$ bin/hdfs dfs -mkdir -p /input/test

$ bin/hdfs dfs -rmkdir -p /input/test

$ bin/hdfs dfs -put -p /opt/software.jdk-7u67-linux-x64.tar.gz  /input/test