欢迎使用CSDN-markdown编辑器

Hadoop集群安装

下载压缩包

wget “http://uri”

安装并配置zookeeper

dataDir=/data1/data/zookeeper
clientPort=2181
server.1=host1:2888:3888
server.2=host2:2888:3888
server.3=host3:2888:3888
增加myid文件
echo 1 >/data1/data/zookeeper/myid

./bin/zkServer.sh start

格式化zookeeper

hdfs zkfc –formatZK

修改hadoop 配置文件

具体内容不再详细罗列,主要修改以下配置文件:
core-site.xml
hdfs-site.xml
mapred-site.xml
yarn-site.xml
fair-scheduler.xml
slaves
.....

启动journalnode

在其中三台服务器上启动journalnode:

./sbin/hadoop-daemon.sh start journalnode

格式化namenode

hdfs namenode -format
hdfs namenode -bootstrapStandby

启动集群:

sbin/start-dfs.sh
sbin/start-yarn.sh

你可能感兴趣的:(大数据)