hadoop1.0

Ganglia安装文档

一、需求：  结合公司环境hadoop1.0和2.0集群，选择了Ganglia作为本公司集群监控项目二、Ganglia介绍1.Ganglia是UCBerkeley发起的一个开源集群监视项目，设计用于测量数以千计的节点
zouqingyun·2016-03-02 15:46

Ganglia安装文档

一、需求：结合公司环境hadoop1.0和2.0集群，选择了Ganglia作为本公司集群监控项目二、Ganglia介绍1.Ganglia是UCBerkeley发起的一个开源集群监视项目，设计用于测量数以千计的节点
zouqingyun·2016-03-02 15:46

hadoop1.0集群搭建

1.启动Linux，选择Icopyit（选择move是mac地址不变，选择copy，会新产生一mac地址）2.配置Linux环境    2.1执行ifconfig命令发现，可用的网卡是eth1 HWaddr    2.2将eth1的新的mac地址复制下来，替换原来eth0里旧的的mac地址    vim/etc/sysconfig/network-scripts/ifcfg-eth0       
bbaiggey·2016-03-01 17:00

hadoop入门学习

学习资料：wiki,官网ApacheHadoop版本分为两代，我们将第一代Hadoop称为Hadoop1.0，第二代Hadoop称为Hadoop2.0。
Miranda2015·2016-02-21 03:00

Hadoop 5、HDFS HA 和 YARN

Hadoop2.0产生的背景Hadoop1.0中HDFS和MapReduce存在高可用和扩展方面的问题HDFS存在的问题NameNode单点故障，难以用于在线场景NameNode压力过大，内存受限，影响系统扩展
拉斐尔[Raphael]·2016-01-29 11:00

Hadoop2.0的HA介绍

1概述 在hadoop2.0之前，namenode只有一个，存在单点问题（虽然hadoop1.0有secondarynamenode，checkpointnode，buckcupnode这些，但是单点问题依然存在
u011955252·2016-01-19 14:00

Hadoop 1.x 、Hadoop 2.x 生态系统学习(复制前辈的文章)

Hadoop1.0的核心是HDFS和MapReducehadoop2.0的核心是HDFS和MapReduce，还包括YARN。下图为hadoop的生态系统：2、HDFS（Hado
hsl_1990_08_15·2016-01-14 13:00

Hadoop1.0架构

第一个思考的问题：Hadoop1.0架构任何一个程序都可以被分为两个逻辑部分：程序逻辑本身和它操作的数据。数据本身需要大量的存储空间，而基于这些数据的计算或操作会消耗cpu，内存和存储空间。
onlyqi·2016-01-07 21:28

hadoop1.0安装部署（一）

一、需求公司线上运行有hadoop1.0和hadoop2.0，由于hadoop1.0没有处理jobtracker失败机制，它是一个单点故障，但业务还是以1.0为主，会慢慢过渡到2.0。
zouqingyun·2016-01-07 18:44

hadoop1.0安装部署（一）

一、需求 公司线上运行有hadoop1.0和hadoop2.0，由于hadoop1.0没有处理jobtracker失败机制，它是一个单点故障，但业务还是以1.0为主，会慢慢过渡到2.0。
zouqingyun·2016-01-07 18:44

NameNode 高可用整体架构概述

在Hadoop1.0时代，Hadoop的两大核心组件HDFSNameNode和JobTracker都存在着单点问题，这其中以NameNode的单点问题尤为严重。
u011984824·2015-12-28 16:00

Hadoop NameNode 高可用 (High Availability) 实现解析

NameNode高可用整体架构概述在Hadoop1.0时代，Hadoop的两大核心组件HDFSNameNode和JobTracker都存在着单点问题，这其中以NameNode的单点问题尤为严重。
javastart·2015-12-23 09:11

hadoop安装包的目录结构

etc：Hadoop配置文件所在的目录，包括core-site,xml、hdfs-site.xml、mapred-site.xml等从Hadoop1.0继承而来的配置文件和yarn-
I_absolutely·2015-12-23 01:16

hadoop2.0 HA高可用笔记和搭建流程

一：hadoop2.X笔记hadoop1.0中，HDFS存在的问题-NameNode单点故障-NameNode压力过大、内存受限MapReduce存在的问题---mapReduce计算时间比较长JobStacker
BradyZhu·2015-12-15 18:00

Hadoop2.0的HA介绍

1概述 在hadoop2.0之前，namenode只有一个，存在单点问题（虽然hadoop1.0有secondarynamenode，checkpointnode，buckcupnode这些，但是单点问题依然存在
u010299467·2015-12-13 20:00

org.apache.hadoop.security.AccessControlException: org.apache.hadoop.security.AccessControlException: Permission denied:

org.apache.hadoop.security.AccessControlException:Permissiondenied:user=EM-LKY,access=WRITE,inode="":hadoop1.0
·2015-12-09 11:17

hadoop1.0 的webhdfs

艹，一直以为需要另外配置，没想到其实不用。 配置照常。webhdfs的默认端口是50070：格式如下 curl -i -X PUT "http://127.0.0.1:50070/webhdfs/v1/tmp/hadoop-oneone/sd2/?user.name=oneone&op=MKDIRS"HTTP/1.1 200 OKContent-Type: appl
·2015-11-13 23:16

YARN

YARN Hadoop2.0与HAdoop1.0的区别： Hadoop1.0主要由HDFS和MapReduce两个系统够长，但在Hadoop2.0中主要由 Hadoop Common、HDFS
·2015-11-11 13:27

hadoop1.0和hadoop2.0的对比（****记住***）

hadoop1.0和hadoop2.0的对比早期版本两大核心后期版本两大核心Hadoop的特点（***了解***）扩容能力（Scalable）：能可靠地（reliably）存储和处理千兆字节（PB）数据
51zhangyanfeng·2015-11-09 16:41

hadoop 2.x 安装包目录结构分析

目录下管理脚本的基础实现，用户可以直接使用这些脚本管理和使用hadoop etc：Hadoop配置文件所在目录，包括core-site.xml, hdfs-site.xml, mapred-site.xml等从hadoop1.0
·2015-10-31 12:43

hadoop实战–搭建eclipse开发环境及编写Hello World

号馆 欢迎关注我的个人博客：www.wuyudong.com, 更多云计算与大数据的精彩文章 1、在eclise中安装hadoop的插件并配置 在上篇文章《编译hadoop eclipse的插件（hadoop1.0
·2015-10-31 08:29

编译hadoop eclipse的插件（hadoop1.0）

原创文章，转载请注明： 转载自工学1号馆 欢迎关注我的个人博客：www.wuyudong.com, 更多云计算与大数据的精彩文章 在hadoop-1.0中，不像0.20.2版本，有现成的eclipse-plugin源码包，而是在HADOOP_HOME/src/contrib/eclipse-plugin目录下放置了eclipse插件的源码，这篇文章 ，我想详细记录一下自己是如何编译此
·2015-10-23 08:40

Hadoop 2.0中用户安全伪装/模仿机制实现原理

该机制属于Hadoop安全机制的一部分，因此适用于Hadoop1.0之后的版本（尽管本文标题包含“hadoop2.0”字样）。
javastart·2015-09-18 17:00

hadoop1存在的问题及hadoop2的优势对比

对hadoop1和hadoop  2  做了一个解释图片不错拿来看看 Hadoop1.0 从上图中可以清楚的看出原MapReduce程序的流程及设计思路：首先用户程序(JobClient)提交了一个job
i_bobby·2015-08-03 18:00

MapReduce详解

转载请出自出处：http://eksliang.iteye.com/blog/2228705一.Hadoop1.0中MapReduce的组成1.从功能模块角度客户端：提交MapReduce作业；JobTracker
eksliang·2015-07-22 01:00

Hadoop2.6.0学习笔记（八）SPOF解决方案总结

Hadoop1.0内核主要由两个分支组成：MapReduce和HDFS，众所周知，这两个系统的设计缺陷是单点故障，即MR的JobTracker和HDFS的NameNode两个核心服务均存在单点问题，该问题在很长时间内没有解决
luchunli1985·2015-07-21 13:44

Hadoop2.6.0学习笔记（八）SPOF解决方案总结

Hadoop1.0内核主要由两个分支组成：MapReduce和HDFS，众所周知，这两个系统的设计缺陷是单点故障，即MR的JobTracker和HDFS的NameNode两个核心服务均存在单点问题，该问题在很长时间内没有解决
luchunli1985·2015-07-21 13:44

MapReduce详解

转载请出自出处：http://eksliang.iteye.com/blog/2228705一.Hadoop1.0中MapReduce的组成1.从功能模块角度客户端：提交MapReduce作业；JobTracker
eksliang·2015-07-20 11:00

Hadoop版本选择探讨

ApacheHadoop1.1  Apache版本衍化截至目前（2012年12月23日），ApacheHadoop版本分为两代，我们将第一代Hadoop称为Hadoop1.0，第二代Had
lixuguang·2015-05-27 12:00

自学Hadoop1.0——初识MapReduce基本组件

初识MapReduce基本组件编程读写HDFS开发一个PutMerge程序，用来合并文件后放入HDFS。命令行工具不支持这个操作，需要使用API编程实现。Hadoop文件的API的起点类是FileSystem类。这是一个可以和文件系统进行交互的抽象类，存在不同的具体实现子类用来处理HDFS和本地文件系统。可以通过调用factory方法FileSystem.get(Configurationconf
william_jm·2015-05-23 15:52

hadoop2.2.0目录结构

目录下管理脚本的基础实现，用户可以用这些脚本管理和使用hadoop 三.etc目录hadoop配置文件所在的目录，包括core-site.xml、hdfs-site.xml、mapred-site.xml等从hadoop1.0
eksliang·2015-05-07 16:00

hadoop2.2.0目录结构

目录下管理脚本的基础实现，用户可以用这些脚本管理和使用hadoop 三.etc目录hadoop配置文件所在的目录，包括core-site.xml、hdfs-site.xml、mapred-site.xml等从hadoop1.0
eksliang·2015-05-07 16:00

Hadoop版本选择探讨

1.ApacheHadoop1.1Apache版本衍化截至目前（2012年12月23日），ApacheHadoop版本分为两代，我们将第一代Hadoop称为Hadoop1.0，第二代Hadoop
marvel_cheng·2015-04-29 20:00

HDFS HA和Federation安装部署方法

HDFSHA和Federation安装部署方法相比于Hadoop1.0，Hadoop2.0中的HDFS增加了两个重大特性，HA和Federaion。
nysyxxg·2015-04-02 16:00

详解hadoop1.0 MapReduce job 提交过程

从整个Job运行的流程来看，如下图所示：从上图可以看到，MapReduce运行过程中涉及有4个独立的实体：Client，用于提交MapReducejob。JobTracker，负责协调job的运行。TaskTrackers，运行job分解后的多个tasks，task主要是负责运行Mapper和Reducer。Distributedfilesystem，用于存储上述实体运行时共享的job文件（如中间
gaochao1995·2015-04-02 16:48

Hadoop、Hbase完全分布式搭建

一、Hadoop1.0到2.0的架构变化1、Hadoop2.0由HDFS、MapReduce和YARN三个分支构成2、HDFSNNFederation、HA3、MapReduce运行在YARN上的MR4
ljl_19880709·2015-03-21 16:03

Hadoop、Hbase完全分布式搭建

一、Hadoop1.0到2.0的架构变化1、Hadoop2.0由HDFS、MapReduce和YARN三个分支构成2、HDFSNNFederation、HA3、MapReduce运行在YARN上的MR4
ljl_19880709·2015-03-21 16:03

Hadoop、Hbase完全分布式搭建

一、Hadoop1.0到2.0的架构变化1、Hadoop2.0由HDFS、MapReduce和YARN三个分支构成2、HDFSNNFederation、HA3、MapReduce运行在YARN上的MR4
ljl_19880709·2015-03-21 16:03

Hadoop、MapReduce、YARN和Spark的区别与联系

（1）Hadoop1.0第一代Hadoop，由分布式存储系统HDFS和分布式计算框架MapReduce组成，其中，HDFS由一个NameNode和多个DataNode组成，MapReduce由一个JobTracker
ldcaws·2015-03-17 16:54

hadoop1.0和hadoop2.0的区别

1. Hadoop 1.0中的资源管理方案 Hadoop 1.0指的是版本为Apache Hadoop 0.20.x、1.x或者CDH3系列的Hadoop，内核主要由HDFS和MapReduce两个系统组成，其中，MapReduce是一个离线处理框架，由编程模型（新旧API）、运行时环境（JobTracker和TaskTracker）和数据处理引擎（MapTask和ReduceTask）
zhangxiong0301·2015-03-10 14:00

浅谈hadoop1.0与hadoop2.0的不同

浅谈hadoop1.0与hadoop2.0的不同这几天刚到公司报道，开始了我的实习历程。首先我的目标是对公司的hadoop平台进行学习，希望在短时间自己能够独立搭建，并且能明目个组件内部的交互原理。
yinkaipeng·2015-01-08 11:00

Hadoop-2.0 目录简介

首先是从Hadoop1.0继承来的三个文件core-s
baolibin528·2015-01-07 16:00

Hadoop Common 结构学习

HadoopCommon在Hadoop1.0中是在core包下面的。此包下面的内容供HDFS和MapReduce公用，所以作用还是非常大的。HadoopCommon模块下的内容是比较多的。
Android路上的人·2014-11-29 08:26

Hadoop Common 结构学习

Hadoop Common在Hadoop1.0中是在core包下面的。此包下面的内容供HDFS和MapReduce公用，所以作用还是非常大的。Hadoop Common模块下的内容是比较多的。
Androidlushangderen·2014-11-29 08:00

yarn安装 转

准备首先你需要准备一台或多台服务器，同Hadoop1.0一样，你需要安装JDK，利用ssh设置免密码登录，在此不具体介绍。2. 
blackproof·2014-10-29 09:00

yarn安装 转

准备首先你需要准备一台或多台服务器，同Hadoop1.0一样，你需要安装JDK，利用ssh设置免密码登录，在此不具体介绍。2. 
blackproof·2014-10-29 09:00

关于Hadoop的版本

ApacheHadoop1.1  Apache版本衍化截至目前（2012年12月23日），ApacheHadoop版本分为两代，我们将第一代Hadoop称为Hadoop1.0，第二代Had
chen2009277025·2014-10-13 17:43

[置顶] hadoop2.0的datanode多目录数据副本存放策略

在hadoop2.0中，datanode数据副本存放磁盘选择策略有两种方式：第一种是沿用hadoop1.0的磁盘目录轮询方式，实现类：RoundRobinVolumeChoosingPolicy.java
hit_hlj_sgy·2014-10-11 12:00

hive-0.12安装详解

Hive安装部署（安装会有版本问题hadoop1.0版本以上的请安装hive-0.90测试 hadoop2.0以上请安装hive-0.12.0或者最新版测试）hive-0.9.0下载地址：http://
white__cat·2014-10-06 14:00

Hadoop 2.0 Federation

原文：http://www.linuxidc.com/Linux/2014-05/101179.htm1概述在Hadoop1.0的架构中，HDFS的所有的元数据都放在一个namenode中，只有一个namespace
柴火·2014-09-22 13:50
上一页 1 2 3 4 5 6 7 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他