hadoop单节点搭建

一、操作环境

1.ssh

生成公钥:

ssh-keygen -t dsa -P '' -f /root/.ssh/id_dsa

hadoop单节点搭建_第1张图片

追加公钥:

cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

hadoop单节点搭建_第2张图片

2.jdk

cat /etc/profile

hadoop单节点搭建_第3张图片

source /etc/profile

3.hosts和hostname修改

 

hadoop单节点搭建_第4张图片

 

 

二、hadoop部署

1. 解压包

tar xf hadoop-2.6.5.tar.gz

2.配置path

hadoop单节点搭建_第5张图片

3.修改配置文件

修改如下文件java_home:

修改core-site.xml

hadoop单节点搭建_第6张图片

修改core-hdfs.xml

hadoop单节点搭建_第7张图片

修改slaves

修改临时文件目录:

hadoop单节点搭建_第8张图片

修改second-namenode配置

4.格式化

hdfs namenode -format

5.启动

start-dfs.sh

hadoop单节点搭建_第9张图片

6.WebUI

hadoop单节点搭建_第10张图片

7.HDSF指令

创建目录

 hdfs dfs -mkdir -p /user/root

上传文件

hdfs dfs -put /usr/local/software/hadoop/hadoop-2.6.5.tar.gz /user/root

 

你可能感兴趣的:(hadoop)