使用docker搭建hadoop分布式集群

本文档作为简单笔记。详细操作参见:

一、环境准备

1:首先要有一个Centos7操作系统,可以在虚拟机中安装。

2:在centos7中安装docker,docker的版本为1.12

二、镜像制作

1、centos-ssh-root镜像

2、centos-ssh-root-jdk镜像

3、centos-ssh-root-jdk-hadoop镜像

三、搭建hadoop分布式集群

1:集群规划

准备搭建一个具有三个节点的集群,一主两从

主节点:hadoop0 ip:192.168.2.10

从节点1:hadoop1 ip:192.168.2.11

从节点2:hadoop2 ip:192.168.2.12

2:启动三个容器,分别作为hadoop0 hadoop1 hadoop2

3:给这三台容器设置固定IP

4:配置hadoop集群

主机名配置

设置ssh免密码登录

在hadoop0上修改hadoop的配置文件

格式化

启动伪分布hadoop

你可能感兴趣的:(使用docker搭建hadoop分布式集群)