centos7搭建hadoop

前言

hadoop是其他大数据框架的基础运行环境,尤其是hdfs,是其他大数据框架的基础存储载体,因此学习和掌握hadoop对学习大数据很有必要

haddop常用的3种运行模式包括:

  • 本地模式 ,单机运行,只是用来演示一下官方案例。生产环境不用
  • 伪分布式模式,也是单机运行,但具备Hadoop集群所有功能,一台服务器模拟一个分布式的环境
  • 完全分布式模式:多台服务器组成分布式环境。生产环境使用

本篇将基于centos7系统,在腾讯云环境快速搭建一个单节点的haddop运行环境

前置准备

  • 一台配置好网络连接(可ping通宿主机和外网)的CentOS 7系统的虚拟机 【本篇使用腾讯云服务器】
  • 连接宿主机和虚拟机的Xftp
  • JDK 1.8版本或1.8版本以上的安装包
  • hadoop 3.1.3 版本的安装包,hadoop: http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-3.0.0/

一、安装JDK

这个想必大家都会吧,将下载好的linux版的JDK上传到服务器的指定的目录下,解压,然后配置下即可

在这里插入图片描述
配置到 profile文件中即可

vi /etc/profile

export JAVA_HOME

你可能感兴趣的:(hadoop,大数据,centos7搭建hadoop,centos7安装hadoop,hadoop单节点搭建,腾讯云搭建hadoop)