Hadoop安装

hadoop 安装配置以及初级入门

，下载地址：hadoop资料汇总；下文里出现的maltose01、maltose02、maltose03…是作者的主机名，大家换为自己的linux主机名即可；为了方便大家离线学习，整理了一份pdf版：hadoop
麦芽糖0219·2020-09-15 02:18

Hadoop安装 -- CDH分布式环境搭建

目标:搭建基于CDH的分布式集群安装环境服务部署计划准备工作1.关闭防火墙/etc/init.d/iptablesstopchkconfigiptablesoff2.关闭selinux3.修改主机名vi/etc/sysconfig/network主节点为:node01从节点分别为:node02node034.ssh无密码拷贝数据特别说明（在主节点无密码访问到从节点）ssh-keygenssh-co
潘书鹏的BigData·2020-09-14 16:46

hadoop集群搭建--伪分布式

我直接以此为基础扩展到伪分布式集群目录一、hadoop伪分布式操作系统软件要求三、配置详情1.安装虚拟机和配置网络2.上传jdk和hadoop安装VMwaretools设置共享文件夹3.安装jdk和hadoop
MengShi_·2020-09-14 10:41

windows下安装spark运行环境

scala运行环境安装jdk安装jdk安装1.8，详细安装过程省略，路径最好不带空格，不然会导致后面hadoop安装失败scala安装安装scala2.11（2.12spark包maven仓库中找不到）
ambitionless·2020-09-14 05:24

hdfs文件操作命令

在hadoop安装目录下执行以下命令：说明：/user/fl/是hdfs的默认路径，fl是用户名在hdfs上创建文件夹input：bin/hadoopfs-mkdir-p/user/fl/input
fan504·2020-09-14 00:06

Hadoop笔记——Hadoop集群安装与部署

文章目录一、Hadoop安装（一）两种主流Hadoop版本（二）环境准备（三）Hadoop安装步骤二、Hadoop的三种运行模式（一）本地运行模式（二）伪分布式运行模式（三）完全分布式运行模式三、Hadoop
Bessenn·2020-09-14 00:24

hdfs目录文件操作

Hadoop安装目录下的conf是hadoop存放配置文件的目录，里面有一些XML文件需要配置。conf/hadoop-defaults.xml文件包含了hadoop的任何参数的默认值。这个文件
xuyuanshu123·2020-09-14 00:48

Hadoop安装包目录下几个比较重要的目录及其作用

1、sbin目录：存放启动或停止hadoop相关服务的脚本2、bin目录：存放对hadoop相关服务（HDFS,YARN）进行操作的脚本3、etc目录：hadoop的配置文件目录，存放hadoop的配置文件4、share目录：存放hadoop的依赖jar包和文档，文档可以被删除掉5、lib目录：存放hadoop的本地库（对数据进行压缩解压缩功能）
nana-li·2020-09-13 22:06

hadoop的HA安装

下载安装的hadoop安装包地址：https://archive.apache.org/dist/hadoop/common/1.将下载的安装包解压;tar-zxvfhadoop-2.7.5.tar.gz2
我在呢呵呵·2020-09-13 22:54

hadoop安装前准备环境

1.hadoop3.0新特性1）classpathisolation----防止不同jar包冲突2）shell重写3）支持hdfs中的擦出编码erasureencoding恢复数据，节省50%的存储空间，可以承受更多的故障4）datanode内部添加了负载均衡diskbalance5）MR存储参数自动推断6）端口的变化：HDFS的HA，指的是在一个集群中存在两个NameNode，分别运行在独立的物
我在呢呵呵·2020-09-13 22:54

Hadoop伪分布式模式搭建

1：进入Hadoop安装目录/etc/hadoop/[[email protected]]#lsbinetcincludeliblibexecLICENSE.txtNOTICE.txtREADME.txtsbinshare
余生思念你的瞳_·2020-09-13 20:49

《云计算导论》阿里云ECS服务器hadoop安装教程（单机）

经过自己不断实战，写下自己的一些经验，希望对大家有所帮助。废话不多讲，我们开始…环境配置信息：jdk1.8.0_181（必须提前在centos7中安装openjdk，Hadoop的安装依赖于openjdk的相关环境，其安装教程自行百度。）系统：GentOs7.x前期准备工作修改系统hostname（修改主机名称）修改主机名称（hostname）[root@aliyunhostsysconfig]#
余生思念你的瞳_·2020-09-13 20:17

Hadoop集群安装配置教程_Hadoop2.6.0/Ubuntu 14.04

尽管安装其实很简单，书上有写到，官方网站也有Hadoop安装配置教程，但由于对Linux环境不熟悉，书上跟官网上简略的安装步骤新手往往Hold不住。
chijiaodaxie·2020-09-13 18:37

linux下主机的一系列配置（hadoop安装的主机配置）

hadoop的安装的主机配置，可按以下配置进行操作修改主机的ip地址vim/etc/sysconfig/network-scripts/ifcfg-eth0#修改ip地址centos6DEVICE=eth0TYPE=EthernetONBOOT=yesNM_CONTROLLED=yesBOOTPROTO=staticIPADDR=192.168.139.12NETMASK=255.255.255.
不爱学习的小枫·2020-09-13 12:28

hadoop1.0在linux下安装

hadoop安装路径：/usr/local/src集群的三台linux主机（主机配置是本博客的所使用的）master：192.168.139.10slave1：192.168.139.11slave2：
不爱学习的小枫·2020-09-13 12:28

Hadoop的安装与配置——设置单节点群集

本篇博客将主要介绍如何设置和配置单节点Hadoop安装，以便我们可以使用Hadoop的MapReduce与HDFS快速执行简单的操作。
栗筝i·2020-09-13 03:09

如何在VirtualBox虚拟机中搭建Hadoop单节点集群

安装增加盘片(ubuntu-16.04.5-desktop-amd64.iso)清华大学开源软件镜像站优化配置安装增强功能共享剪贴板设置最优下载源Terminal设置默认输入法设置安装zsh/语法高亮/命令提示hadoop
hgySandy·2020-09-13 03:09

Mac virtualbox linux 单节点hadoop安装

这里搭建的是慕课网大数据课程中的版本1、下载hadoopwgethttp://archive.cloudera.com/cdh5/cdh/5/hadoop-2.6.0-cdh5.7.0.tar.gz2、解压hadooptar-zxvfhadoop-2.6.0-cdh5.7.0.tar.gz-C~/app/3、修改配置文件配置文件1、/home/hadoop/app/hadoop-2.6.0-cdh
starkpan·2020-09-13 02:32

hadoop安装，并配置单节点hadoop集群

二、安装hadoop1.创建用于hadoop安装的系统帐户hadoop[root@loc
amateur_RD·2020-09-13 00:15

Windows下使用hadoop-common-2.2.0-bin-master插件

1.下载hadoop-eclipse-plugin-2.5.2.jarhadoop安装包下载放到windows本机某目录下2.放置将hadoop-eclipse-plugin-2.5.2.jar放到eclipse
-soman-·2020-09-13 00:12

大数据之hadoop安装

hadoop的具体概念就不多说了，这里采用简单的集群安装，对于使用zookeeper工具进行高可用的部署后续再说三台机器masterslave0slave2全部采用root权限安装下载hadoop安装包
dengjiaqun·2020-09-12 10:24

Hadoop安装-jdk替换

首先创建Java的目录，然后将下载下来的文件解压到该目录中：$sudocpjdk-6u27-linux-i586.bin/usr/lib/jvm$cd/usr/lib/jvm$sudo./jdk-6u27-linux-i586.bin$sudomvjdk1.6.0_27/java-1.6.0_27-sun/$sudoln-sjava-1.6.0_27-sunjava-6-sun$sudormjdk
cruiseisme·2020-09-12 05:41

Hadoop安装-常见问题

1.NameNode和JobTracker可以放在一起吗？TypicallyonemachineintheclusterisdesignatedastheNameNodeandanothermachinetheasJobTracker,exclusively（官方建议是分开）。Therealkickerisgoingtobememoryconsumptionofoneorbothofthesese
cruiseisme·2020-09-12 05:41

Hadoop安装-安装步骤

0.机器规划masterNameNode:cloud0920398.1,92.39执行start-dfs.sh也就是执行hdfsdemon的机器JobTracker/SecondaryNameNode:cloud0920408.1,92.40执行start-mapred.sh，也就是执行mapreducedemon的机器slaveDataNode/TaskTracker1:cloud0920418
cruiseisme·2020-09-12 05:41

怎么在windows本地配置pyspark和jupyter notebook开发环境

目录安装Scala安装spark安装Hadoop安装anaconda配置环境变量创建notebook并findspark安装Scala安装对应版本的scala安装spark到官网http://spark.apache.org
JayXu6888·2020-09-12 02:44

hadoop安装配置

hadoop安装配置（来自http://naojuan.com/review/20）一、准备工作：软件：VMware虚拟机软件，linux系统为：ubuntu-10.10-desktop-i386。
dragon_fire·2020-09-12 00:40

Hadoop安装与集群配置

Hadoop安装与集群配置环境准备环境准备JDK卸载安装hadoop安装集群环境配置集群启动集群测试环境准备主机服务器CentOS7.xX3Hadoop7.2JDK1.8环境准备主机teacher1192.168.52.133teacher2192.168.52.135teacher3192.168.52.136
fw19940314·2020-09-11 21:18

Hadoop安装

1.安装vmware2.新建虚拟机3.安装Linux4.初步配置5.克隆6.完善配置下载iso镜像文件CentOS-6.5-x86_64-minimal。下载VMware，安装过程中客户机操作系统选择linux，网络连接选“使用网络地址转换”，默认下一步。使用iso镜像文件中选择下载的镜像文件。Hostname是创建的主机名，地址选shanghai。下一步创建用户名和密码，下一步选择createC
weixin_47465994·2020-09-11 18:52

最详细介绍之Hadoop安装方法及配置教程

文章目录一、JDK二、Cygwin的安装（在线安装）三、安装Hadoop参照Hadoop的伪分布式安装步骤的说明文档,在自己电脑上进行伪分布式安装。安装步骤如下：一、JDK1.安装JDK：将jdk1.8.0_121文件安装到目录C:/Java。安装完成后进行环境变量的配置。2.环境变量的配置：%JAVA_HOME%\bin;%JAVA_HOME%\jre\bin3.测试环境变量配置成功：二、Cyg
Mr.Ma-master·2020-09-11 17:57

Hadoop安装教程

单节点安装教程http://www.bubuko.com/infodetail-1268255.html环境说明创建Hadoop用户更新apt下载工具配置ssh免密码登录安装Java环境安装Hadoop2.XHadoop单机配置Hadoop伪分布式配置运行Hadoop为分布式实例启动yarnHadoop开发环境搭建http://blog.csdn.net/sdksdk0/article/detai
Bai_Yin·2020-09-11 15:36

hadoop3.x教程_Hadoop安装教程（Hadoop 1.x）

请检查较新的版本：Hadoop安装教程（Hadoop2.x）。Hadoopmainlyconsistsoft
cuma2369·2020-09-11 14:31

【python】python本地windows调试spark安装配置及代码示例

安装要想在windows下搭建Spark(python版本)主要分为：JDK安装配置Scala安装配置（可不安装）Spark安装配置Hadoop安装配置Python安装配置PyCharm运行JDK安装配置
zkq_1986·2020-09-11 12:29

VM虚拟机安装+Hadoop+Scala+Spark

虚拟机安装1.1VMWorksation安装1.2配置虚拟机网络1.3clone虚拟机1.4SSH免密登录2.JDK+Hadoop+Scala+Spark安装2.1JDK安装2.2Scala安装2.3Hadoop
不二东·2020-09-11 10:02

解决 Linux-Ubuntu 报错E212: Can't open file for writing

照着帖子中指示安装JDKing（如下图）随附链接：http://dblab.xmu.edu.cn/blog/install-hadoop/Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0
SophiaSSSSS·2020-09-11 05:58

Could not locate executable null\bin\winutils.exe in the Hadoop binaries解决方式

都是运行在Linux系统下的，在windows下eclipse中运行mapreduce程序，要首先安装Windows下运行的支持插件（我的是hadoop2.7.4）3.安装并配置插件(我这里还是Linux版的hadoop
zxzLife·2020-09-11 05:55

hbase安装过程

安装环境：centos7.3_x86_64一、hadoop安装过程1.1安装jdkhadoop是需要依赖java环境的，所以需要安装jdkjdk官网下载地址mkdir/usr/local/javatar-xvfjdk1.8.0
舍得斋·2020-09-11 04:27

Hadoop之MapReduce过程，单词计数WordCount

简介单词计数是最简单也是最能体现MapReduce思想的程序之一，可以称为MapReduce版“HelloWorld”，该程序的完整代码可以在Hadoop安装包的src/example目录下找到。
fanren224·2020-09-11 01:39

Hadoop 2.6.5完全分布式安装

下载Hadoop安装包下载地址：http://archive.apache.org/dist/hadoop/core/hadoop-2.6.5.tar.gzJDK安装Hadoop2.7以及之后的版本需要装
姜子牙疼·2020-09-10 23:02

hadoop2.2.0安装-完整版

hadoop2.2.0集群-环境准备及centos7安装hadoop2.2.0集群-软件安装中讲过从最开始的环境准备及软件安装，从设置hostname到jdk的安装都没有问题，只是在这里重新回顾一下完整版的hadoop
weixin_30902675·2020-08-26 23:48

ubuntu下的hadoop安装

1.环境ubuntu14.0464位java1.8.0_45（1.7即可）ssh（sshd运行）2.安装版本hadoop2.7.2（http://hadoop.apache.org/releases.html）3.安装过程1.下载hadoop2.7.2的binary版本http://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.7.2/h
treasuresss·2020-08-26 14:14

配置伪分布式时的问题”JAVA_HOME is not set and could not be found“解决方法

亲试有效Hadoop安装完后，启动时报Error:JAVA_HOMEisnotsetandcouldnotbefound.解决办法：修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME
年轻的树·2020-08-25 17:58

Hadoop安装完后，启动时报Error: JAVA_HOME is not set and could not be found

解决办法：修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME。应当使用绝对路径。exportJAVA_HOME=$JAVA_HOME//错误，不能这么改exportJAVA_HOME=/usr/java/jdk1.6.0_45//正确，应该这么改
amanikong·2020-08-25 17:20

伪分布式启动Error: JAVA_HOME is not set and could not be found解决办法

/etc/hadoop/hadoop-env.sh（注：这里的etc是hadoop安装目录里面的，不是系统的）中设JAVA_HOME。应当使用绝对路径。
Lionel_Medoo·2020-08-25 17:53

Hadoop启动报Error: JAVA_HOME is not set and could not be found解决办法

Hadoop安装完后，启动时报Error:JAVA_HOMEisnotsetandcouldnotbefound.解决办法：修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME。
csdn_huangyumin·2020-08-25 17:57

Hadoop安装后 启动时报Error: JAVA_HOME is not set and could not be found

Hadoop安装完后，启动时报Error:JAVA_HOMEisnotsetandcouldnotbefound.解决办法：在/etc/hadoop/hadoop-env.sh中加入JAVA_HOME的值
大爵爷·2020-08-25 17:42

localhost: Error: JAVA_HOME is not set and could not be found.

JAVA_HOMEisnotsetandcouldnotbefound.1但是JAVA环境变量已经配好了，终端输入java-version也会显示版本信息解决方案如下修改hadoop-env.sh(我的hadoop
Alexwym·2020-08-25 16:48

localhost: Error: JAVA_HOME is not set and could not be found.

JAVA_HOMEisnotsetandcouldnotbefound.但是JAVA环境变量已经配好了，终端输入java-version也会显示版本信息解决方案如下修改hadoop-env.sh(我的hadoop
仰望神的光·2020-08-25 16:52

Hadoop基础知识面试题整理

安装JDK并配置环境变量（/etc/profile）关闭防火墙配置hosts文件，方便hadoop通过主机名访问（/etc/hosts）设置ssh免密码登录解压缩hadoop安装包，并配置环境变量修改配置文件
吴国友·2020-08-25 15:25

hadoop程序员用自己5年的实战经验告诉你大数据是这样搭建环境

安装前设置在将Hadoop安装到Linux环境之前，我们需要使用ssh（SecureShell）来设置Linux。按照以下步骤设置Linux环境。创建用户在开始时，
铁拳虎·2020-08-25 06:01

大数据学习——jdk安装和hadoop安装

1、centos7修改主机文件：masterslave1slave2vim/etc/hosts192.168.58.10master192.168.58.11slave1192.168.58.12slave2检测是否能ping通：pingmasterpingslave1pingslave1(三台机子分别执行)2、centos7SSH互信配置：masterslave1slave2ssh-keygen
Junh.K·2020-08-25 04:43
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他