《菊花》
秋丛绕舍似陶家,遍绕篱边日渐斜。
不是花中偏爱菊,此花开尽更无花
说明:此系列文章是为了记录本人学习Hadoop过程,以此来加深对Hadoop的理解,本系列教程完全是入门系列,希望无意阅读到的道友莫要嘲讽!!!
基础环境搭建主要分为三部分说明:
一、Linux系统安装
二、VMware与Linux环境配置
三、Hadoop环境搭建
三、Hadoop环境搭建
说明:经过前面两步的努力,现在可以通过我们创建的Linux系统部署我们想要发布的任何服务,接下来就让我们一起进入Hadoop环境的搭建吧!!!
>> 创建Hadoop用户
1.为了避免ROOT用户删库跑路事件,我们首先创建独立用户hadoop(注:此步骤非必需)
登录ROOT用户后执行如下命令:useradd hadoop
2.设置新建用户hadoop密码-执行如下命令:passwd hadoop
3.设置新建用户hadoop执行权限-执行如下命令:
说明:此处修改文件是通过VI命令,不熟悉的道友请自行百度
4.切换Hadoop用户-执行如下命令:
>> su hadoop -- 切换hadoop用户
>> cd -- 进入hadoop用户家目录
5.创建Hadoop安装目录-执行如下命令:
>> mkdir my_install_software
6.配置JDK环境-执行如下命令:
>> 下载JDK : JDK下载地址 可以执行命令:wget http://download.oracle.com/otn-pub/java/jdk/8u181-b13/96a7b8442fe848ef90c96a2fad6ed6d1/jdk-8u181-linux-x64.tar.gz?AuthParam=1532349899_0dee65e7970f1e0829d9ec59ec20798d
>> 解压JDK压缩包-执行如下命令 :tar -zxvf jdk-8u162-linux-x64.tar.gz
>> 配置JAVA环境变量并刷新配置文件-执行如下命令 :
>> 安装SSH客户端-执行如下命令 :
>> Hadoop环境配置-执行如下命令 :
6.1.下载Hadoop安装包: Hadoop下载地址 可以通过命令 wget http://archive.apache.org/dist/hadoop/common/hadoop-2.8.3/hadoop-2.8.3.tar.gz
6.2.解压Hadoop压缩包-命令:tar -zxvf hadoop-2.8.3/hadoop-2.8.3.tar.gz
6.3.Hadoop配置文件- hadoop-env.sh -JAVA_HOME 修改:
>> cd /home/hadoop/my_install_software/hadoop-2.8.3/etc/hadoop -- Hadoop配置文件目录
>> vi hadoop-env.sh
6.4.Hadoop配置文件- core-site.xml - 修改:vi core-site.xml
6.5.Hadoop配置文件- hdfs-site.xml - 修改:vi hdfs-site.xml
6.6.Hadoop配置文件- mapred-site.xml - 修改:vi mapred-site.xml
说明:由于 mapred-site.xml 默认是不存在的我们需要执行如下命令创建
6.7.Hadoop配置文件- yarn-site.xml - 修改:vi yarn-site.xml
7.格式化Hadoop环境-执行如下命令:
8.启动Hadoop-执行如下命令:
9.查看Hadoop是否启动成功-执行如下命令:JPS
说明:如果出现如下五个服务即表示启动成功
10.Hadoop服务验证:访问 192.168.2.14:8088 如果出现如下界面表示服务启动成功