Linux环境下Hadoop开发环境的安装

@[TOC]实验内容
#1)JAVA jdk8.0环境安装与配置;
##2)SSH环境安装与配置
###3)Hadoop伪分布式模式安装与配置

一、 实验过程(步骤、记录、数据、程序等)

参照实验指导书和大数据软件安装和编程实践指南网站,在Linux系统下完成JAVA环境、SSH以及Hadoop平台的安装和配置任务,并在下方描述和记录安装过程,提供JAVA、SSH及Hadoop安装配置完成后正常运行的界面截图证明。

1.我的用户名一开始就是hadoop,所以不必再ubuntu里面去创建hadoop用户。
![在这里插入图片描述](https://img-blog.csdnimg.cn/20200410220933792.png

2.更新apt
Linux环境下Hadoop开发环境的安装_第1张图片

  1. 安装vimLinux环境下Hadoop开发环境的安装_第2张图片

4.安装SSH
Linux环境下Hadoop开发环境的安装_第3张图片5.配置SSH无密码登陆Linux环境下Hadoop开发环境的安装_第4张图片
再输入ssh ,下图得到了验证无密码登录成功:

Linux环境下Hadoop开发环境的安装_第5张图片

6.安装java环境:
Linux环境下Hadoop开发环境的安装_第6张图片Linux环境下Hadoop开发环境的安装_第7张图片

Linux环境下Hadoop开发环境的安装_第8张图片

7.安装hodoop2

安装包在下载里面:

Linux环境下Hadoop开发环境的安装_第9张图片

Linux环境下Hadoop开发环境的安装_第10张图片

8.Hodoop单机配置(非分布式):
Linux环境下Hadoop开发环境的安装_第11张图片

Linux环境下Hadoop开发环境的安装_第12张图片

删除./output
Linux环境下Hadoop开发环境的安装_第13张图片

9.hodoopwei伪分布式布置:

修改配置文件 core-site.xml (通过 gedit 编辑会比较方便: gedit
./etc/hadoop/core-site.xml:

同样的,修改配置文件 hdfs-site.xml:

Linux环境下Hadoop开发环境的安装_第14张图片
这里配置文件里的内容,可参考http://dblab.xmu.edu.cn/blog/install-hadoop/(比较简单)

配置完成后,执行 NameNode 的格式化:

成功的话,会看到 “successfully formatted” 和 “Exitting with status 0” 的提示,若为
“Exitting with status 1” 则是出错。

下图运行,可以以发现运行成功了:
Linux环境下Hadoop开发环境的安装_第15张图片
Linux环境下Hadoop开发环境的安装_第16张图片

Linux环境下Hadoop开发环境的安装_第17张图片
注意打开是在Ubuntu里面的浏览器里面打开

实验中遇到的问题和解决办法,实验总结:
Linux环境下Hadoop开发环境的安装_第18张图片

Linux环境下Hadoop开发环境的安装_第19张图片
Linux环境下Hadoop开发环境的安装_第20张图片

解决:参考了博客:

https://blog.csdn.net/fcb_campnou/article/details/44851691

依次执行以下命令行:
Linux环境下Hadoop开发环境的安装_第21张图片

得到了解决。
Linux环境下Hadoop开发环境的安装_第22张图片

安装SSH时又遇到了问题:

参考了网址:

https://www.360kuai.com/pc/923c5f98e3bb34546?cota=4&kuai_so=1&tj_url=so_rec&sign=360_a9931de8&refer_scene=so_1

Linux环境下Hadoop开发环境的安装_第23张图片

你可能感兴趣的:(大数据,hodoop)