hadoop2.6.0

HBase+ZooKeeper+Hadoop2.6.0的ResourceManager HA集群高可用配置

问题导读：0、了解常规JDK安装以及Linux系统配置1、了解集群规划以及集群场景2、熟悉HBase的集群搭建3、熟悉ZooKeeper集群搭建4、熟悉Hadoop2.6.0版本HA集群搭建5、验证HBase
jerry_jiang2017·2023-11-26 19:42

hadoop环境搭建———Hadoop安装教程_伪分布式配置_CentOS6.4/Hadoop2.6.0【转载搬运】

最近开始学习大数据，想自己在虚拟机上搭建个伪分布，在网上也找了很多教程，踩了很多坑，最后发现了厦门大学大数据实验室林子雨老师的这个教程，按着步骤终于成功搭建，所以想分享一下，大家可以少踩一些坑，还有就是林子雨老师在慕课上的课程也都很有趣，在这里我也推荐有兴趣的可以去看看，以下均为转载内容，如有侵权，可以联系我删除。本Hadoop教程由厦门大学数据库实验室出品，转载请注明。本教程适合于在CentOS
JYeontu·2023-10-09 00:09

Eclipse创建包含Scala的Maven工程_Spark学习demo

1.1hadoop安装安装hadoop2.6.0，参考博客1.2spark下载下载spark-1.6.0-bin-hadoop2.6.tgz，在官网下载，在chooseadownloadtype中建议选择
DevinShuai·2023-06-21 12:53

hadoop2.6.0（单节点）下Sqoop-1.4.6安装与配置（数据读取涉及hadoop、hbase和hive）

下载Sqoophttp://sqoop.apache.org/或http://archive-primary.cloudera.com/cdh5/cdh/5/（这个就是版本已经对应好了，不需去弄版本兼容问题了）或通过CM、Ambari很多同行，也许都知道，对于我们大数据搭建而言，目前主流，分为Apache和Cloudera和Ambari。后两者我不多说，是公司必备和大多数高校科研环境所必须的！分别
weixin_33921089·2022-12-05 17:03

Hadoop3 - HDFS 文件存储策略

异构存储异构存储是Hadoop2.6.0版本出现的新特性,可
小毕超·2022-10-17 11:23

Wrong FS: hdfs:, expected:file:///

这是在对hdfs进行写入操作时发现的错误，最终解决了，给大家分享一下，希望对遇到同样问题的朋友有所帮助，我使用的是hadoop2.6.0版本。
yxdydSky·2022-02-09 16:13

Hbase跨集群数据迁移-快照方式

说明：原集群为散装集群，hbase版本为1.1.1，hadoop2.7.2；目标集群通过CDH5搭建，hbase版本为1.2.0，hadoop2.6.0。
粮忆雨·2021-06-08 04:33

Hadoop 3.2.1‖联邦模式下突破router的性能瓶颈的实践

上两集回顾：在第一集（点击可参阅详情）中，我们通过性能故障排查解决了Hadoop2.6.0版本的瓶颈问题；在第二集（点击可参阅详情）中，我们将集群由Hadoop2.6.0版本升级到Hadoop3.2.1
·2021-03-12 01:31

数据库‖上千节点Hadoop集群升级过程分享

在上一次我进行了超万亿规模的HadoopNameNode问题的排查，通过为时四天的努力，终于解决了Hadoop2.6.0版本的瓶颈问题，但是生活往往就是墨菲定律，你所极力避免的那些最坏的可能也许终将会发生
·2021-03-12 01:59

Hadoop 3.2.1‖联邦模式下突破router的性能瓶颈的实践

上两集回顾：在第一集（点击可参阅详情）中，我们通过性能故障排查解决了Hadoop2.6.0版本的瓶颈问题；在第二集（点击可参阅详情）中，我们将集群由Hadoop2.6.0版本升级到Hadoop3.2.1
·2021-03-09 22:40

数据库‖上千节点Hadoop集群升级过程分享

在上一次我进行了超万亿规模的HadoopNameNode问题的排查，通过为时四天的努力，终于解决了Hadoop2.6.0版本的瓶颈问题，但是生活往往就是墨菲定律，你所极力避免的那些最坏的可能也许终将会发生
·2021-02-25 11:24

Hadoop安装教程(单机/伪分布式环境搭建)/Ubuntu18.04

本教程基于原生Hadoop2，在Hadoop2.6.0(stable)版本下验证通过，可适合任何Hadoop2.x.y版本，如Hadoop2.7.1、2.6.3、2.4.1等。前期工
auhjin_ai8·2020-10-27 14:18

window7使用eclipse提交Hadoop作业到Hadoop集群运行方法

Hadoop集群：Hadoop2.6.0，系统：windows7，开发环境：eclipseEclipse调用Hadoop运行MapReduce程序其实就是普通的java程序可以提交MR任务到集群执行而已
cz-神算子·2020-09-15 03:58

hadoop多次格式化namenode造成datanode无法启动问题解决

今天在机器上新装了hadoop2.6.0想体验一把新版本特征，安装好后发现启动dfs时datanode老是启动不了查看namenode日志发现以下问题：按日志内容来看，namenode和datanode
z骑士·2020-09-14 05:51

Hadoop集群安装配置教程_Hadoop2.6.0/Ubuntu 14.04

本文转载自给力星原文地址：http://www.powerxing.com/install-hadoop-cluster/前言当开始着手实践Hadoop时，安装Hadoop往往会成为新手的一道门槛。尽管安装其实很简单，书上有写到，官方网站也有Hadoop安装配置教程，但由于对Linux环境不熟悉，书上跟官网上简略的安装步骤新手往往Hold不住。加上网上不少教程也甚是坑，导致新手折腾老几天愣是没装好
chijiaodaxie·2020-09-13 18:37

Container exited with a non-zero exit code 127

最近帮助一个朋友查看hadoop2.6.0部署的问题，群集可以正常启动，但运行mapreducewordcount时候，报错误error:Containerexitedwithanon-zeroexitcode127
levy_cui·2020-09-13 12:45

基于Hadoop2.6.0的Mahout0.12.1的配置与使用

一.Mahout的安装1.下载在http://mirror.bit.edu.cn/apache/mahout/0.12.1/下载地址中下载apache-mahout-distribution-0.12.1.tar.gz2.解压tar-C/opt/Mahout-zxvfmahout-distribution-0.12.1.tar.gz(我将压缩包解压到了/opt/Mahout目录下，用户可以根据自己
是可大吖哈·2020-09-13 06:27

hadoop端口

操作步骤1.HDFS进程及端口HDFS启动后包含的进程有：NameNode，DataNode，SecondaryNameNode启动方法，在主节点：#cd/opt/hadoop2.6.0/sbin/#.
bingoabin·2020-09-12 02:36

解决 Linux-Ubuntu 报错E212: Can't open file for writing

照着帖子中指示安装JDKing（如下图）随附链接：http://dblab.xmu.edu.cn/blog/install-hadoop/Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0
SophiaSSSSS·2020-09-11 05:58

Linux 7 Hadoop2.6.0单机和集群搭建

搭建Hadoop前的准备工作/etc/hosts这个文件是记载LAN内接续的各主机的对应[HostName和IP]用的。在LAN内，我们各个主机间访问通信的时候，用的是内网的IP地址进行访问（例：192.168.1.22，192.168.1.23），从而确立连接进行通信。除了通过访问IP来确立通信访问之外，我们还可以通过HostName进行访问，我们在安装机器的时候都会给机器起一个名字，这个名字就
张建闯·2020-08-25 04:14

hadoop2.6.0中配置hbase比较简单的

我没有配置hbase的ha。我使用的是集群中的zk，而不是hbase中自带的zk下载好hbase解压配置hbase-env.shjavahomezk配置hbase-site.sh配置全局变量exporthbasehome分发scp-rhbase目录hadoop02（目标主机）：路径启动集群start-hbase.sh查看webuihadoop01:160101总结hbase是依赖于hdfs，和zk
董世森 学习·2020-08-24 17:31

基于Spark ALS在线推荐系统

所用技术：Bootstrap、flat-ui、Servlet、Spark1.4.1、Hadoop2.6.0、JDK说明：本系统不涉及ssh相关内容，只有简单的Servlet和JSP、HTML页面，系统架构相对简单
fansy1990·2020-08-24 00:18

Hadoop 2.7.1发布啦

ApacheHadoop2.7.1于美国时间2015年07月06日正式发布，本版本属于稳定版本，是自Hadoop2.6.0以来又一个稳定版，同时也是Hadoop2.7.x版本线的第一个稳定版本，也是2.7
过往记忆·2020-08-21 16:52

阿里云搭建集群的过程记录（一）

参考网址：1、http://www.bcmeng.com/hadoop-zookeeper-hbase/（阿里云ECS的Hadoop2.6.0|Zookeeper3.4.6|Hbase0.98.13集群搭建
Mr.Jansor·2020-08-18 12:39

[完]Spark安装学习实践

【参考】http://dblab.xmu.edu.cn/blog/804-2/一、前提安装Hadoop2.6.0以上；安装JAVAJDK1.7以上。
namelessml·2020-08-17 08:24

64位Ubuntu 编译 hadoop源码

本人下载了最新版的ubuntu64（14.04）位桌面版系统，在安装hadoop2.6.0时，由于官方的hadoop是在32位机子上编译的，故需下载hadoop源码进行编译。
weixin_30663471·2020-08-16 09:56

ubuntu14.04中编译Hadoop2.6.0 64位版本

ubuntu14.04中编译Hadoop2.6.064位版本安装JDK下载安装包jdk1.8.0_50，解压，改下环境变量和jdk版本即可。(JDK切换版本文章后面有讲)安装maven31.下载并解压maven3：http://maven.apache.org/download.cgi解压到指定目录，如：/usr/local/apache-maven-3.3.92.设置maven环境变量：编辑～/
luonango·2020-08-16 08:43

Ubuntu12.04编译hadoop2x-eclipse-plugin-master插件

downloads/release/luna/SR2/eclipse-jee-luna-SR2-linux-gtk-x86_64.tar.gz）2、JDK下载安装参见另一篇博文《Ubuntu12.04编译hadoop2.6.0
我心明月·2020-08-16 07:08

32位ubuntu14.04手动编译hadoop2.6.0

下载官方编译好的包安装老是报错：Unabletoloadnative-hadooplibraryforyourplatform用file命令查看发现官方包里的libhadoop.so.1.0.0文件竟然是64位的。假设应该安装了jdk，教程：http://blog.csdn.net/ggz631047367/article/details/423666871.安装mavensudoapt-geti
ggzone·2020-08-16 06:20

创建MapReduce程序，并在hadoop集群中运行

关键词：MapReduce,hadoop2.6.0,intellijIDEA,Maven1、在intellijIDEA下创建maven项目2、引入hadoop相关jar包2.6.0org.apache.hadoophadoop-common
封巍·2020-08-11 03:48

hadoop2.6.0的eclipse插件编译和设置

编译hadoop2.6.0的eclipse插件下载源码：gitclonehttps://github.com/winghc/hadoop2x-eclipse-plugin.git编译源码：cdsrc/contrib
ggzone·2020-08-10 16:20

hadoop2.6.0 - eclipse插件下载、编译、安装、配置

hadoop2.6.0-eclipse插件下载、编译、安装作者：易文俊Email：[email protected]截止目前（2015-02-10）为止，hadoop最新版本为2.6.0，下面以hadoop2.6.0
Kevin2Yi·2020-08-10 12:41

HADOOP Unable to load native-hadoop library for your platform解决办法

最初在CentOS6.5*64上部署hadoop2.6.0，在启动时提示WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform
寸辰·2020-08-10 11:44

hadoop2.6.0搭建hive-2.3.3集群我遇到坑（hive的远程模式下）

总结:1：mysql数据库要在主节点（active）上安装才行！2：lib的数据库连接的jar包要对相关的mysql版本3:如果给集群配置过ha的，要保证hive数据库的初始化的时候，要保证安装了mysql的节点的namenode是active的状态，否则在hive的元数据的初始化的过程中会报错，提示一些节点的是处于备的状态4：在运行hive之前要先启动hive的服务。5：”hive是基于hdfs
董世森 学习·2020-08-10 08:08

Windows下使用Hadoop2.6.0-eclipse-plugin插件

fromerr=vkJI6VUe木偶发表于1年前阅读25614收藏44点赞8评论12摘要:经历过痛苦的过程，在windows下终于可以使用eclipse的hadoop2.6.0插件进行远程调试Mapreduce
stuwcc·2020-08-10 01:58

hadoop2.6.0版本集群环境搭建

一、环境说明1、机器：一台物理机和一台虚拟机2、linux版本：[spark@S1PA11~]$cat/etc/issueRedHatEnterpriseLinuxServerrelease5.4(Tikanga)3、JDK:[spark@S1PA11~]$java-versionjavaversion"1.6.0_27"Java(TM)SERuntimeEnvironment(build1.6.
stark_summer·2020-08-09 12:58

window上连接集群跑hadoop问题之java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Windows.

环境：window764位集群hadoop2.6.0，ubuntuwindow上连接集群跑hadoop问题之java.lang.UnsatisfiedLinkError:org.apache.hadoop.io.nativeio
KeepLearningBigData·2020-08-08 01:39

Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04

本教程适合于原生Hadoop2，包括Hadoop2.6.0,
东方无赖·2020-08-06 13:25

Hadoop 2.6.0升级至Hadoop 3.2.1及回滚

2、问题Hadoop2.6.0升级至3.2.1步骤停掉集群，替换安装包：1.启动journalnode集群.
Deegue·2020-08-06 11:45

安装hadoop3问题及解决

Hadoop2.6.0/Ubuntu14.04安装教程_单机/伪分布式配置一、bin/hdfsnamenode-format没有出现如下内容其他教程一般会说格式化namenode需要有"Exitingwithstatus0
xssl_csdn·2020-08-05 03:12

apache-hive-1.2.1和hbase-1.2.2的整合(伪分布式)

我的机器环境：hadoop2.6.0的伪分布式Hbase伪分布式环境参考：hbase权威指南P2401.启动hadoop和hbase2.下载apache-hive-1.2.13.修改hive中conf下的
kenneth·2020-08-05 00:51

大数据资源共享网盘下载

网盘下载地址：下载地址下载地址点击下载概述参与方式hadoop安装hadoop2.6.0集群安装管理工具top-10-hadoop-cluster-management-tools插件HDFS图形化管理工具
weixin_44304265·2020-08-04 21:29

使用Eclipse编译运行MapReduce程序 Hadoop2.6.0_Ubuntu/CentOS

本教程介绍的是如何在Ubuntu/CentOS中使用Eclipse来开发MapReduce程序，在Hadoop2.6.0下验证通过。
xiaoyatouxihuanchen·2020-08-04 08:37

hadoop2.2.0遇到64位操作系统平台报错，重新编译hadoop

说明：经过实测，hadoop2.6.0在OracleLinux
bamuta·2020-08-04 01:53

Spark入门笔记

sparkmllib机器学习实践-ApacheSpark源码剖析-Spark快速数据处理-深入理解Spark核心思想与源码分析-统计学习方法-spark官方文档中文版环境搭建教程IDEA导入hadoop2.6的jar包hadoop2.6.0
jerry_hero·2020-08-03 18:28

hadoop2.6.0部署好环境后写的一个简单的test

实用maven创建java工程，引入hadoop的依赖[html]viewplaincopyjunitjunit3.8.1testorg.apache.hadoophadoop-hdfs2.6.0org.apache.hadoophadoop-client2.6.0org.apache.hadoophadoop-mapreduce-examples2.6.0pom另外给main方法设置成jar包入
bruce__ray·2020-08-03 15:04

Oozie4.2 安装部署、以及example测试

编译：使用的环境是：Hadoop2.6.0、Spark1.4.0、Hive0.13.1、Sqoop1.4.4编译Oozie的命令：.
weixin_34362991·2020-07-31 10:02

Hadoop 2.6.0单节点安装参考

1.环境说明本例介绍了hadoop2.6.0在单节点上的分布式安装方法。在安装Hadoop前，请确保你的机器上已安装了JDK1.7或更高版本，并配置了SSH无密码登陆本机。
jack-zhu·2020-07-30 20:47

spark 安装和单机测试

》》安装hadoop2.6.0（同理2.7.7）解压hadoop2.6.0到任意目录：$cd/home/tom$wgethttp://apache.claz.org/hadoop/common/hadoop
毕业笙_16c9·2020-07-30 05:38

应用程序在YARN中的整体运行流程和状态机 （ResourceManager端）

作业提交到ResourceManager以后会有状态机的变迁过程，如下为详细状态机分析，使用的是Hadoop2.6.0的版本进行源码分析的状态机，本篇文章主要是RM端核心的状态机变迁，之后会另外写一篇AM
凡哲_Lucas·2020-07-28 19:35
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他