E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop安装
Hadoop安装
与集群配置
1.下载软件a.下载VirtualBoxhttp://download.virtualbox.org/virtualbox/5.1.18/VirtualBox-5.1.18-114002-Win.exeb.下载CentOShttp://isoredirect.centos.org/centos/7/isos/x86_64/CentOS-7-x86_64-DVD-1611.isoc.下载XShell
landy8530
·
2019-11-05 18:14
MapReduce的jobHistory(工作日志)介绍
JobHistoryServer,我们可以启动一个进程,专门用于查看我们的任务提交的日志以下的操作都是在主节点(服务器)中第一步:node01修改mapred-site.xml1.进入到hadoop配置文件目录
hadoop
王傲旗的大数据之路
·
2019-11-01 17:58
MapReduce
MapReduce
jobHistory
hadoop环境搭建
可在apache官网下载
hadoop安装
包本文档hadoop版本为2.8.5,可与2.1.7版本hbase适配请提前安装java环境,建议jdk1.8版本本环境主机名为test01,配置在/etc/hostname
普度众生的面瘫青年
·
2019-10-31 12:27
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:22
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:19
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:15
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:12
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:10
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:09
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:06
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:04
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:03
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:01
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:59
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:57
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:53
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:48
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:41
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:39
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:35
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:34
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:32
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2019-10-31 02:31
CDH版Hadoop云服务器的单节点和集群安装(附CDH自编译版本)
上一篇写过Apache版的
Hadoop安装
,https://blog.csdn.net/beishanyingluo/article/details/101938568这里写一下CDH版重新编译后的Hadoop
北山璎珞
·
2019-10-16 21:23
大数据
【Hadoop开发环境搭建】三、Hadoop集群搭建
三、Hadoop集群搭建在上篇中记录了
Hadoop安装
与配置,在本篇中,介绍一下Hadoop集群的搭建1.现有环境三台云服务器(Linux系统、JDK1.8、Hadoop2.2.7)2.关闭防火墙、修改
Nelson_hehe
·
2019-09-30 21:48
Hadoop环境配置
【Hadoop开发环境搭建】二、
Hadoop安装
与配置
在上篇中介绍了Linux环境下JDK的安装与环境配置,本篇记录了Hadoop的安装配置过程二、
Hadoop安装
与配置1.现有工具及文件①XmanagerEnterprise5(其中的Xftp可用于实现不同
Nelson_hehe
·
2019-09-30 21:25
Hadoop环境配置
CentOS7环境下安装配置Hadoop教程
准备工作1.VMware虚拟机2.Linux环境:CentOS73.远程登陆:Xshell6&Xftp64.
Hadoop安装
包百度网盘【t0vz】5.Vim命令操作描述vi文件名打开文件i编辑esc退出编辑
AtlantisChina
·
2019-09-25 17:48
大数据技术原理及应用
hadoop集群配置与MapReduce性能调优
阅读更多
Hadoop安装
1.安装前的准备安装hadoop首先需要在机器上安装合适版本的java(最新版本肯定没问题),并从Apache镜像中下载稳定版本的
hadoop安装
包。
wx1568908808
·
2019-09-20 00:00
hadoop集群配置与MapReduce性能调优
阅读更多
Hadoop安装
1.安装前的准备安装hadoop首先需要在机器上安装合适版本的java(最新版本肯定没问题),并从Apache镜像中下载稳定版本的
hadoop安装
包。
wx1568908808
·
2019-09-20 00:00
学习Hadoop03——Windows10下eclipse链接虚拟机Hadoop及Error:Call From ×× to ××:9000 failed on connection expection:java.net.ConnectExcepttion:Connection refused:no further information问题解决
Linux虚拟机下的
Hadoop安装
成功后,下一步就要进行Hadoop链接eclipse了,可以在虚拟机里下载eclipse进行连接,我选择连接Windows下的eclipse,你需要进行一些配置eclipse
金猫大帝
·
2019-09-19 17:00
CentOS7上安装Hadoop2.9.2集群
安装位置推荐:/opt/
hadoop安装
方法:安装shell6操作虚拟机,打开到/opt/hadoop文件下,使用shell6的rz命令进行下载,把本地的安装包导入虚拟机中,注意如果不去克隆操作那么每个虚拟机都需要导入
风吟丶
·
2019-09-19 11:58
大数据
CentOs7
Hadoop2.9.2
大数据平台搭建流程
Hadoop集群
Spark集群安装部署
部署顺序:环境准备
Hadoop安装
Spark安装一、环境准备参考:https://blog.csdn.net/lixinkuan328/article/details/100856388安装软件版本为:
Jeremy_Lee123
·
2019-09-17 20:37
Spark详解
[转]大数据环境搭建步骤详解(Hadoop,Hive,Zookeeper,Kafka,Flume,Hbase,Spark等安装与配置)
Hadoop2.7.7,Hive2.3.4,Zookeeper3.4.10,Kafka2.1.0,Flume1.8.0,Hbase2.1.1,Spark2.4.0等)系统说明搭建步骤详述一、节点基础配置二、
Hadoop
JackieZhengChina
·
2019-09-16 09:45
Hadoop
Hive
Zookeeper
Kafka
Flume
机器学习
大数据
Hadoop2-8-0的环境搭建
阅读更多此文为在centos7下安装Hadoop集群前期准备Hadoop下载Hadoop的下载本文下载的是2.8.0版本的
Hadoop安装
3个虚拟机并实现ssh免密码的登录安装3个centos7虚拟机安装方法
wx1567764797
·
2019-09-06 18:00
Hadoop
Hadoop2-8-0的环境搭建
阅读更多此文为在centos7下安装Hadoop集群前期准备Hadoop下载Hadoop的下载本文下载的是2.8.0版本的
Hadoop安装
3个虚拟机并实现ssh免密码的登录安装3个centos7虚拟机安装方法
wx1567764797
·
2019-09-06 18:00
Hadoop
架构师之大数据
hadoop的介绍及基本概念.mp43、Hadoop的必要性-1.mp44、Hadoop的必要性-2.mp45、Hadoop集群安装部署-linux服务器环境准备.mp46、Hadoop集群安装部署-
hadoop
kkwant
·
2019-09-04 15:00
大数据之一:
Hadoop安装
一、安装Hadoop1.先解压hadoop到相关的文件夹中2.进入到解压好的文件夹以后,对相关文件进行修改3.配置hadoop-env.shvihadoop-env.sh:export=JAVA_HOME=/opt/inst/jdk1814.配置core-site.xmlvicore-site.xmlfs.defaultFShdfs://bigdata:9000hadoop.tmp.dir/opt
wx5d66921cb1eb1
·
2019-08-31 16:36
大数据
hadoop安装
Hadoop 安装
Hadoop安装
打开xshell连接Linux系统,1.查看Java版本:Java-version2.查看mysql:mysql-uroot-proot//打开mysqlmysql>usemysqlReadingtableinformationforcompletionoftableandcolumnnamesYoucanturnoffthisfeaturetogetaquickerstartup
风雨佟洲
·
2019-08-30 09:39
Hadoop
安装
厦门大学林子雨老师大数据实验环境搭建索引
博客首页在Windows中使用VirtualBox安装UbuntuJava和SSH的安装配置Hadoop2.7分布式集群环境搭建
Hadoop安装
教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04Spark
学习真是太快乐了呀
·
2019-08-26 22:39
大数据学习
大数据
Ubuntu
sqoop------安装、导入导出命令
hdfs中export:将hadoop中的数据导出到关系数据库关系型数据库hdfs关系型数据库----->hive、hbasesqoop安装1.解压配置环境变量2.配置文件sqoop-env.sh//
hadoop
luoyunfan6
·
2019-08-19 16:18
Sqoop
Hadoop安装
序言:本文介绍
Hadoop安装
,文中部分需要使用到wget等工具,请自行下载。
时年、
·
2019-08-16 16:49
Hadoop
大数据学习之旅2——从零开始搭hadoop完全分布式集群
同时建议,
hadoop安装
版本不宜很高。第一次写这么长的博客,希望对大家有所帮
萌新瑟瑟发抖
·
2019-08-15 13:00
CentOS7 Hbase 安装(完全分布式)
安装前准备
hadoop安装
zookeeper安装安装步骤1.下载$wgethttp://mirror.bit.edu.cn/apache/hbase/2.0.5/hbase-2.0.5-bin.tar.gz2
cao_xiaobo
·
2019-08-14 14:00
Hadoop2.x的集群搭建与配置(七)——
Hadoop安装
配置
终于进入了最核心,同样也是为以后打的最基础的操作——hadoop的集群安装与配置要问那之前的算什么emmm充其量算是虚拟机啦,linux啦,基础环境什么的准备工作话不多说,正式开始。首先,我们需要去官网下载个hadoop的包,要linux版本的压缩包,应该是以tar.gz为结尾的,至于版本,不要最新的,因为最新的话很可能会出现生态圈开发不完全,与低版本不匹配等情况,我们这里以2.5.2为例我们将下
铭chen
·
2019-08-13 14:23
编程语言
感悟
随笔
Hadoop
Hadoop学习笔记2
3.1.2Hosts文件设置3.1.3安装JDK3.2克隆虚拟系统3.3配置免密登录3.3.1免密登录机制3.3.2Master主机生成密钥3.3.3Master主机发送数据3.4安装Hadoop3.4.1下载
Hadoop
ChengZi~
·
2019-08-12 23:14
Hadoop
hadoop安装
解决之道
壹、故障现象MicrosoftWindows[版本10.0.18362.239](c)2019MicrosoftCorporation。保留所有权利。C:\Users\Chirius>hadoopversion系统找不到指定的路径。Error:JAVA_HOMEisincorrectlyset.PleaseupdateC:\dhc_hlk\hadoop-2.8.5\etc\hadoop\hadoo
南国薏米
·
2019-08-12 00:00
hadoop
hadoop安装
解决之道
壹、故障现象MicrosoftWindows[版本10.0.18362.239](c)2019MicrosoftCorporation。保留所有权利。C:\Users\Chirius>hadoopversion系统找不到指定的路径。Error:JAVA_HOMEisincorrectlyset.PleaseupdateC:\dhc_hlk\hadoop-2.8.5\etc\hadoop\hadoo
wx5d4ece0dab0a6
·
2019-08-10 23:13
java
springboot
hadoop笔记之部署hadoop集群(完全分布式)
有以下条件配置网络设置USEDNS为no关闭防火墙关闭SELinux配置免秘钥登录安装JDK服务器nameNodedateNodenode1✔node1✔node3✔node4✔安装hadoop1.上传
hadoop
aniyah
·
2019-07-31 11:20
hadoop
环境部署
hadoop笔记之部署hadoop集群(伪分布式)
部署hadoop集群(伪分布式)前提条件需要一台机器node1配置有以下条件配置网络设置USEDNS为no关闭防火墙关闭SELinux配置免秘钥登录安装JDK安装hadoop1.上传
hadoop安装
包2
aniyah
·
2019-07-31 11:00
hadoop
环境部署
Hadoop集群搭载经历之hadoop配置
tps:同样方式上传
hadoop安装
包并且解压到/opt/同样方式配置hadoop环境Hadoop环境配置效果1.各个服务器节点之间配置免密码登录(对自己也要配置)修改vi/etc/hosts添加自己三台服务器的
GetIdea
·
2019-07-31 08:29
上一页
18
19
20
21
22
23
24
25
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他