Hadoop2.7.3单机伪分布

1. 官网:http://hadoop.apache.org/
2. 下载版本hadoop 2.7.3(http://hadoop.apache.org/releases.html)
3. 预准备环境:
a. Centos7
b. Java8
4. 创建目录 software :mkdir /software
5. 上传hadoop到software
6. tar -xvf hadoop*
7. Vi core-site.xml
a. 在configuration标签中添加以下配置:

fs.defaultFS
hdfs://192.168.70.111:9000



hadoop.tmp.dir
/software/hadoop/tmp


8. Vi hdfs-site.xml


dfs.replication
1
数据冗余度


dfs.permissions
false



9. Vi mapred-site.xml


mapreduce.framework.name
yarn



10. Vi yarn-site.xml


yarn.resourcemanager.hostname
centos111



yarn.nodemanager.aux-services
mapreduce_shuffle



11. Vi .bash_profile(注意=左右不可以有空格)
HADOOP_HOME=/software/hadoop-2.7.3
export HADOOP_HOME

PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
export PATH
12. source ~/.bash_profile
13. 格式化namenode
a. hdfs namenode -format
14. 执行start-all.sh
15. 开放端口:firewall-cmd --zone=public --add-port=0-65535/tcp --permanent
firewall-cmd --reload

你可能感兴趣的:(bigdata系列-实践1)