Hadoop伪分布式安装步骤之hdfs

本篇是hdfs的安装

所用版本:hadoop-2.6.0-cdh5.7.0.tar.gz


1)jdk安装

解压:tar -zxvf jdk-7u79-linux-x64.tar.gz -C ~/app
添加到系统环境变量: ~/.bash_profile
export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79
export PATH=$JAVA_HOME/bin:$PATH
使得环境变量生效: source ~/.bash_profile

验证java是否配置成功: java -version

2)安装ssh
sudo yum install ssh
ssh-keygen -t rsa
cp ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys


3)下载并解压hadoop
下载:直接去cdh网站下载
解压:tar -zxvf hadoop-2.6.0-cdh5.7.0.tar.gz -C ~/app

4)hadoop配置文件的修改(hadoop_home/etc/hadoop) ,core-site里面默认存储在临时文件夹,重启后会被删除,所以需要设置hadoop.tmp.dir目录
hadoop-env.sh
export JAVA_HOME=/home/hadoop/app/jdk1.7.0_79


core-site.xml

       fs.defaultFS
       hdfs://hadoop000:8020
   



   
       hadoop.tmp.dir
       /home/hadoop/app/tmp
   



hdfs-site.xml

       dfs.replication
       1
   


slaves:hadoop000



5)启动hdfs
格式化文件系统(仅第一次执行即可,不要重复执行),在bin目录下面执行:hdfs/hadoop namenode -format
启动hdfs: sbin/start-dfs.sh
验证是否启动成功:
jps
DataNode
SecondaryNameNode
NameNode


浏览器访问方式: http://hadoop000:50070

我自己用的是http://192.168.0.105:50070/dfshealth.html#tab-overview

Hadoop伪分布式安装步骤之hdfs_第1张图片



6)停止hdfs
sbin/stop-dfs.sh 



你可能感兴趣的:(大数据)