基础环境搭建(三)-Hadoop环境搭建

基础环境搭建(三)-Hadoop环境搭建_第1张图片
金菊

《菊花》

秋丛绕舍似陶家,遍绕篱边日渐斜。 

不是花中偏爱菊,此花开尽更无花


说明:此系列文章是为了记录本人学习Hadoop过程,以此来加深对Hadoop的理解,本系列教程完全是入门系列,希望无意阅读到的道友莫要嘲讽!!!

基础环境搭建主要分为三部分说明:

一、Linux系统安装

二、VMware与Linux环境配置

三、Hadoop环境搭建

三、Hadoop环境搭建

说明:经过前面两步的努力,现在可以通过我们创建的Linux系统部署我们想要发布的任何服务,接下来就让我们一起进入Hadoop环境的搭建吧!!!

>> 创建Hadoop用户

        1.为了避免ROOT用户删库跑路事件,我们首先创建独立用户hadoop(注:此步骤非必需)

        登录ROOT用户后执行如下命令:useradd hadoop

基础环境搭建(三)-Hadoop环境搭建_第2张图片
添加用户-1

        2.设置新建用户hadoop密码-执行如下命令:passwd hadoop

基础环境搭建(三)-Hadoop环境搭建_第3张图片
设置密码-2

        3.设置新建用户hadoop执行权限-执行如下命令:

命令-3

        说明:此处修改文件是通过VI命令,不熟悉的道友请自行百度

基础环境搭建(三)-Hadoop环境搭建_第4张图片
修改权限-4

        4.切换Hadoop用户-执行如下命令:

             >> su hadoop  -- 切换hadoop用户

             >> cd  -- 进入hadoop用户家目录

基础环境搭建(三)-Hadoop环境搭建_第5张图片
切换Hadoop用户-5

        5.创建Hadoop安装目录-执行如下命令:

                >> mkdir my_install_software

基础环境搭建(三)-Hadoop环境搭建_第6张图片
创建安装目录-6

        6.配置JDK环境-执行如下命令:

            >> 下载JDK : JDK下载地址 可以执行命令:wget http://download.oracle.com/otn-pub/java/jdk/8u181-b13/96a7b8442fe848ef90c96a2fad6ed6d1/jdk-8u181-linux-x64.tar.gz?AuthParam=1532349899_0dee65e7970f1e0829d9ec59ec20798d

基础环境搭建(三)-Hadoop环境搭建_第7张图片
JDK下载-7

            >> 解压JDK压缩包-执行如下命令 :tar -zxvf jdk-8u162-linux-x64.tar.gz

基础环境搭建(三)-Hadoop环境搭建_第8张图片
JDK解压-8


            >> 配置JAVA环境变量并刷新配置文件-执行如下命令 :

基础环境搭建(三)-Hadoop环境搭建_第9张图片
配置JAVA环境变量-9

            >> 安装SSH客户端-执行如下命令 :

基础环境搭建(三)-Hadoop环境搭建_第10张图片
安装SSH客户端-10

            >> Hadoop环境配置-执行如下命令 :

               6.1.下载Hadoop安装包: Hadoop下载地址 可以通过命令 wget http://archive.apache.org/dist/hadoop/common/hadoop-2.8.3/hadoop-2.8.3.tar.gz

基础环境搭建(三)-Hadoop环境搭建_第11张图片
Hadoop下载-11

                6.2.解压Hadoop压缩包-命令:tar -zxvf hadoop-2.8.3/hadoop-2.8.3.tar.gz

基础环境搭建(三)-Hadoop环境搭建_第12张图片
Hadoop解压-12

                6.3.Hadoop配置文件- hadoop-env.sh -JAVA_HOME  修改:

                        >> cd /home/hadoop/my_install_software/hadoop-2.8.3/etc/hadoop  -- Hadoop配置文件目录

                        >> vi hadoop-env.sh

基础环境搭建(三)-Hadoop环境搭建_第13张图片
Hadoop-JAVA_HOME-13

                6.4.Hadoop配置文件- core-site.xml - 修改:vi core-site.xml

基础环境搭建(三)-Hadoop环境搭建_第14张图片
core-site-14

                6.5.Hadoop配置文件- hdfs-site.xml - 修改:vi hdfs-site.xml

基础环境搭建(三)-Hadoop环境搭建_第15张图片
hdfs-site-15

                6.6.Hadoop配置文件- mapred-site.xml - 修改:vi mapred-site.xml

                    说明:由于 mapred-site.xml 默认是不存在的我们需要执行如下命令创建

创建mapred-site-17
基础环境搭建(三)-Hadoop环境搭建_第16张图片
mapred-site-18

                    6.7.Hadoop配置文件- yarn-site.xml - 修改:vi yarn-site.xml

基础环境搭建(三)-Hadoop环境搭建_第17张图片
 yarn-site-19

        7.格式化Hadoop环境-执行如下命令:

Hadoop格式化-20

        8.启动Hadoop-执行如下命令:

启动Hadoop-21

       9.查看Hadoop是否启动成功-执行如下命令:JPS 

                说明:如果出现如下五个服务即表示启动成功

基础环境搭建(三)-Hadoop环境搭建_第18张图片
启动验证-22

        10.Hadoop服务验证:访问 192.168.2.14:8088 如果出现如下界面表示服务启动成功 

基础环境搭建(三)-Hadoop环境搭建_第19张图片
Hadoop服务访问

你可能感兴趣的:(基础环境搭建(三)-Hadoop环境搭建)