Hadoop2 第36页

Ubuntu+Hadoop+Mysql+Hive+Sqoop

环境配置说明：软件版本VirtualBox6.1Ubuntu16.04Hadoop2.7.7MySql5.7.29MySql驱动5.1.46Hive2.3.6sqoop1.4.7一、hadoop集群配置以及

weixin_43931044·2020-08-03 11:24

搭建Hadoop2.7.3+Hive2.1.1及MySQL(配置Hive+MySQL+Connector）(三)

续上一篇：搭建Hadoop2.7.3+Hive2.1.1及MySQL(配置Hive+Hadoop）(二)准备工作下载最新连接器地址https://dev.mysql.com/downloads/connector

中国风·2020-08-03 11:22

ubuntu安装sqoop2

sqoop1其他环境：hadoop：2.7.2mysql：5.7.15sqoop：1.99.51.下载并解压sqoop源程序sqoop下载地址sudotar-zvxfsqoop-1.99.5-bin-hadoop200

薛倩·2020-08-03 10:22

基于Hadoop2.2.0版本分布式云盘的设计与实现

基于Hadoop2.2.0版本分布式云盘的设计与实现一、前言在学习了hadoop2.2一个月以来，我重点是在学习hadoop2.2的HDFS。

zhu_9527·2020-08-03 09:10

rpc实例

使用的是hadoop2.7.3，csdn上有这个版本，我没传上来。大家自己下载，JDK8。那些jar包我就不贴了，太多了。反正都导进去就对了。

又见藤蔓·2020-08-03 09:28

hadoop2.5.2 eclipse 插件编译

ubuntu14.0464位（虚拟机）eclipse:eclipse-jee-luna-SR1-linux-gtk-x86_64.tar.gz1.下载源码：https://github.com/winghc/hadoop2x-eclipse-plugin2

清风自来0203·2020-08-03 09:23

CentOS分布式部署HBase

继上篇《CentOS分布式部署Hadoop》介绍分布式部署Hadoop2.8.5，本篇在上篇基础上介绍CentOS7下HBase2.2.3的分布式部署。

贲_WM·2020-08-03 08:58

Hadoop2.X开源软件及生态系统的最新发展综合分析（个人整理）

Hadoop2.X开源软件及生态系统的最新发展综合分析一、Hadoop版本概述目前Hadoop的发行版除了Apache的开源版本之外，还有华为发行版、Intel发行版、Cloudera发行版(CDH)、

未忘绘梨衣·2020-08-03 08:27

spring boot 2.0.2 集成hbase

RELEASEorg.springframework.dataspring-data-hadoop-boot2.5.0.RELEASEjavax.servletservlet-apiorg.springframework.dataspring-data-hadoop2.5

weixin_33725126·2020-08-03 06:40

Caused by: java.net.ConnectException: Connection refused: master/192.168.3.129:7077

启动SparkShell，出现的错误如下所示：1[[email protected]hadoop2.6]#bin/spark-shell--masterspark://master:

weixin_33671935·2020-08-03 06:59

Spark Hadoop集群部署与Spark操作HDFS运行详解---Spark学习笔记10

目前spark的Runon的hadoop版本大多是hadoop2以上，但是实际上各个公司的生产环境不尽相同，用到2.0以上的公司还是少数。

OopsOutOfMemory·2020-08-03 05:24

模拟实现一个基于zookeeper怎么解决单点故障

单点故障问题，在分布式系统中是一个很有可能发生的场景，比如说在Hadoop2.x之前的HDFS的NameNode和MapReduce的JobTracker的单点故障，当然这个问题已经在Hadoop2.x

tao_wei162·2020-08-03 04:30

跟我一起云计算（2）——YARN

在Hadoop2.0中，各个客户端会向运行在YARN上的MapReducev2框架提交种种MapReduce应用。而

舒琪·2020-08-03 04:14

大数据hadoop学习【5】-----通过JAVA编程，实现对HDFS文件的过滤与合并

大数据hadoop学习【5】-----通过JAVA编程，实现对HDFS文件的过滤与合并目录一、创建文件数据1、切换到hadoop账户，并运行hadoop2、在路径为[/user/hadoop]下创建file

陈一月的编程岁月·2020-08-03 03:54

复习：用Eclipse上传文件到hdfs集群的常见问题

，eclipse;第一步：首先把压缩包解压；第二步：配置环境变量添加一个HADOOP_HOME=E:\hadoop2.6.4（填你自己的路径）；把%HADOOP_HOME%\bin添加到Path中二、程序代码我就不解释了

一溪云~·2020-08-03 03:53

Hadoop环境部署

apache/hadoop/common/2、scala-2.10.4.tgzhttp://www.scala-lang.org/download/2.10.4.html3、spark-2.0.0-bin-hadoop2.7

CrazyAlisca·2020-08-03 01:27

springboo2 集成 hbase 2

文章目录环境说明：springboo2集成hbase2环境说明：hbase：2.1.5springboot：2.1.1.RELEASEhadoop:2.8.5java:8+hadoop环境：Hadoop2.8.5

快乐崇拜234·2020-08-02 23:53

Hadoop基础教程-第7章 MapReduce进阶（7.2 MapReduce工作机制）（草稿）

注意，在Hadoop2.x中，MapReduce的工作机制已经被YARN的工作机制所替代。YARN框架下的Mapreduce工作流程

程裕强·2020-08-02 23:21

Spark SQL and DataFrame for Spark 1.3

SparkSQLandDataFrameGuide启动StartShell[[email protected]hadoop2.4]$.

wind520·2020-08-02 21:25

springboot和hadoop2.7.7集成开发

1、本人在腾讯云安装hadoop2.7.7，详细安装请看以前的博客2、pom.xml文件4.0.0org.springframework.bootspring-boot-starter-parent2.1.7

weixin_30852451·2020-08-02 21:08

hadoop在windows平台下的本地模式配置

我使用的是hadoop2.6.1,编

Sakura，·2020-08-02 15:52

伪分布Hadoop2.7.6 hbase2.1.8升级到Hadoop3.1.3 hbase2.1.10

如果Hadoop集群配置了高可用，则可以进行不停服的滚动升级。但现在是伪分布的单节点集群，因此需要停止Hadoop及相关的应用，包括hbase、zookeeper等。Hadoop升级因为目前有跑flink作业，checkpoint是放在hdfs上的，因此先停掉对应的job（只需要停job，不用关flink集群）停止hbase集群：stop-hbase.sh停止Hadoop集群：stop-all.s

ASN_forever·2020-08-02 15:04

Nacos注册中心高可用集群搭建及开机启动

服务器规划:本次搭建一个使用了3台机器主机ip地址内存centoshadoop2192.168.227.1418Gcentoshadoop3192.168.227.1428Gcentoshadoop4192.168.227.1438G

蜗牛杨哥·2020-08-02 12:14

SpringBoot整合Hbase

这里我是用本地Windows的IDEA，与局域网的伪分布Hbase集群做的连接，其中Hbase集群包括的组件有：Jdk1.8、Hadoop2.7.6、ZooKeeper3.4.

小夏陌·2020-08-01 14:48

CentOS 7.0安装flume

环境CentOS7.0hadoop2.7.3CentOS7.0+hadoop2.7搭建集群flume1.8.0下载并安装下载下载地址：http://flume.apache.org/download.html

iccool-cc·2020-08-01 14:55

Hadoop2.7.3源码编译

环境：CentOSrelease6.5jdk1.8maven3.5.0Hadoop2.7.3protocbuf2.5.0这里选择的Linux环境下面编译，因为这个Windows下面出现了很多问题1、环境安装这里

Xlucas·2020-08-01 13:32

Hadoop2之YARN介绍

Hadoop2之YARN介绍一、简介二、ResourceManager三、NodeManager四、ApplicationMaster五、ApplicationManager六、Container七、YARN

olifchou·2020-08-01 13:52

hadoop初识之四：HDFS、Yarn及mapreduce 回顾，配置文件的补充及yarn日志聚集功能配置

--==========================Hadoop2.x回顾======================>common=>HDFS存储数据NameNode:存储文件系统的元数据，命名空间

风行天下Num1·2020-08-01 13:10

【Hadoop】hadoop 2.7.3上安装Hbase1.2.4

首先，去apache看官方的支持版本可以看到hadoop2.4.X以后的版本基本都支持hbase1.2.4。接下来开始安装。

乐扣老师lekkoliu·2020-08-01 13:19

hadoop 2.x简单介绍

hadoop2x的核心模块HadoopComon:为其他Hadoop模块提供基础设施HadoopHDFS一个高可靠，高吞吐量的

漫长学习路·2020-08-01 13:37

hadoop2.7.3编译和安装

环境：Ubuntu14.4jdk1.8maven3.3.9Hadoop2.7.3protocbuf2.5.0--------hadoop编译------1、安装jdk配置环境变量1.1解压文件，修改文件名

jiangnankid·2020-08-01 12:30

hbase 启动失败，Please check the config value of 'hbase.procedure.store.wal.use.hsync'

环境：JDK1.8Hadoop2.7.1Zookeeper3.4.6Hbase2.0.0ApachePhoenix-5.0.0-Hbase-2.0.0从hadoop到hbase的环境搭建一切正常，可直接参照网上教程

松林羊·2020-08-01 12:54

Hadoop学习笔记（一）---Linux基本知识说明

Hadoop的生成环境都是在linux下面，不过呢hadoop2.x已经开始支持windows平台，但是支持并不是很好，因此熟悉linux的命令是很重要的，需要熟悉linux的基本命令和环境的基本配置：

garychenqin·2020-08-01 12:15

fly_sky333·2020-08-01 12:26

Hadoop大数据面试--Hadoop篇

tips-for-improving-mapreduce-performance/、http://www.idryman.org/blog/2014/03/05/hadoop-performance-tuning-best-practices/原理篇：1.Hadoop2

fansy1990·2020-08-01 12:39

Hadoop 的核心（2）—— MapReduce & YARN

YARN概念YARN是Hadoop2.0版本以后的资源管理器，即MapReduce2.0，相比于1.0版本，架构中的各个模块分工明确，在性能和稳定性上都有所提升。

王大鱼·2020-08-01 11:09

089-BigData-17ZooKeeper秒杀和hadoop高可用

3）Hadoop2.0之前，在HDFS集群中NameNode存在单点

AncientMing·2020-08-01 11:04

Hadoop知识点归纳1

应用领域：农业、地震台监测、医疗、可穿戴设备、无人驾驶汽车2.课程目标•了解YARN的基本工作原理•了解Hadoop2.0的两大核心模块的工作原理•熟悉Hadoop2.0环境搭建、配置与管理•熟练向Hadoop

PP_zi·2020-08-01 11:56

Hadoop2.0架构

打开Hadoop的官网，我们可以看到Hadoop2.0包括两个module：HDFS–HadoopFileSystem。

OnlyQi·2020-08-01 10:23

spark集群搭建并配置hive on spark

hive-versionspark-versionmaster2.3.03.0.x2.3.02.3.x2.0.02.2.x1.6.02.1.x1.6.02.0.x1.5.01.2.x1.3.11.1.x1.2.01、准备工作1、java1.8安装及配置2、hadoop2.7.7

Iwg1021767001·2020-08-01 10:10

Hadoop基本原理

Hadoop的组成Hadoop目前主要包括Hadoop1.x和hadoop2.x，两种版

鬼～离未罔两·2020-08-01 09:10

hadoop之旅5-idea通过maven搭建hdfs环境

hadoop集群start-dfs.sh或者start-all.sh//一键启动hadoop集群和yarn集群打开idea在pom.xml文件里加入hadoop的依赖，我这里使用的是我搭建的一样版本的依赖hadoop2.7.32.7.3org.apache.hadoophado

尔以凡·2020-08-01 09:49

hadoop2.7.3在集群中配置多个namenode(federation cluster)

hadoop2.7.3在集群中配置多个namenode(federationcluster)首先需要说明的是，在集群中配置多个namenode和在集群中使用secondaryNamenode是完完全全的两码事

0day__·2020-08-01 06:44

PysparkNote001---Mac下JupyterNoteBook配置pyspark

1.环境Mac:macOSHighSierra10.13.4Spark:spark-2.3.0-bin-hadoop2.62.Spark安装2.1java安装比较坑爹

维格堂406小队·2020-08-01 06:51

Spark Standalone模式与测试

版本配置：spark-2.1.1-bin-hadoop2.7.tgzhadoop2.7.3Standalone模式概述构建一个由Master+Slave构成的Spark集群，Spark运行在集群中。

滑冰选手库里·2020-08-01 05:31

hadoop修改HDFS默认块大小的配置

首先叙述一下：1.hadoop1.x的HDFS默认块大小为64MB；hadoop2.x的默认块大小为128MB。

飘羽·2020-08-01 01:29

Hadoop2.6.1安装

JDK下载地址：jdk-8u66-linux-x64.tar.gzLinux安装JDK及环境变量配置，参见：http://blog.csdn.net/yuan_xw/article/details/499482852、Hadoop下载：hadoop-2.7.1.tar.gz3、Zookeeper下载：zookeeper-3.4.5.tar.gz首先安装JDK安装好jdk之后vim~/.bashrc

暗夜困觉觉·2020-08-01 01:11

HDFS 系列三：HDFS 数据流

文章目录3.HDFS数据流3.1HDFS写数据流程3.1.1剖析文件写入3.1.2网络拓扑概念3.1.3机架感知（副本节点选择）3.1.3.1低版本Hadoop副本节点选择3.1.3.2Hadoop2.9.2

super_man_0820·2020-08-01 00:30

Big Data （二）：Spark入门教程

一、准备工作详见《Spark处理框架搭建【VM15+CentOS7+Hadoop2.7.2+Scala2.12.7+Spark2.3.1】》二、示例运行在.

流浪中的UncleLivin·2020-08-01 00:35

vmware配置hadoop 实现伪分布式

vmware配置hadoop实现伪分布式一、实验环境编号项目软件及版本1操作系统CentOS62环境软件VMware123jdk环境jdk1.8.0_1814HadoopHadoop2.8.55本机操作系统

lily_cai·2020-07-31 23:44

推荐频道

Hadoop2