E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
0.23
[YARN]Apache Hadoop 2.2.0YARN技术架构[翻译]
YARN架构MapReduce在Hadoop
0.23
的时候做了很大的改动,我们称之为MRv2或者YARN。MRv2的主要观点是把JobTracker,资源管理,任务调度执行功能拆分成几个独立的进程。
小网客
·
2013-11-28 17:00
apache
[YARN]Apache Hadoop 2.2.0YARN技术架构[翻译]
YARN架构MapReduce在Hadoop
0.23
的时候做了很大的改动,我们称之为MRv2或者YARN。MRv2的主要观点是把JobTracker,资源管理,任务调度执行功能拆分成几个独立的进程。
小网客
·
2013-11-28 17:00
apache
hadoop+hbase+zookeeper完全分布安装(1)
0.92.xHBase-0.94.xHBase-0.96Hadoop-0.20.205SXXHadoop-0.22.xSXXHadoop-1.0.xSSSHadoop-1.2.xNTSSHadoop-
0.23
hujunshao
·
2013-11-19 14:03
hadoop
hbase
分布安装
YARN/MRv2 ResourceManager代码分析
(上图参考了《Hadoop
0.23
MRv2分析》,清晰版图片可从
caodaoxi
·
2013-10-23 14:00
resource
YARN/MR2编程模型介绍
它实现时采用基于了事件驱动机制,异步编程模型,如下图所示: 该图片来自《Hadoop
0.23
MRv2分析》EventHandler被称作事件处理器,每种事件类型对应一种EventHandler,其对事件的处理过程通过状态机来描述
caodaoxi
·
2013-10-23 14:00
yarn
HDFS架构图_Apache/百度/腾讯
Hadoop
0.23
中FederationHDFS 如下图所示。
libing13810124573
·
2013-10-20 11:00
apache加载mod_limitipconn,限制并发连接数
(apache编译完成后,添加额外的模块)1.下载对应的版本[root@localhost~]#wgethttp://dominia.org/djao/limit/mod_limitipconn-
0.23
蜀绣
·
2013-10-15 10:22
apache
mod_limitipconn
限制并发连接数
新一代mapreduce体系架构介绍-YARN
最近研究了下新一代的mapreduce框架YARN,这里先对YARN框架的引入和架构做个介绍,后续针对每一块做深入分析从Hadoop
0.23
版本开始对于mapduce计算框架,就完全是新的架构了(YARN
yangbutao
·
2013-10-12 10:00
架构
yarn
hadoop
0.23
的容量调度器简介(Hadoop MapReduce Next Generation - Capacity Scheduler)
原文:http://hadoop.apache.org/common/docs/r0.23.0/hadoop-yarn/hadoop-yarn-site/CapacityScheduler.html这个文档描述了CapacityScheduler,一个可插入的hadoop调度器,它可以使的多个用户可以安全的共享一个大的集群,他们的应用程序可以在容量限度下获取到需要的资源。概述CapacitySch
A221133
·
2013-09-23 13:00
hadoop
HADOOP集群
mahout贝叶斯算法开发思路(拓展篇)1
完结篇)blog最后留的问题,如果想直接使用该工具,可以在mahout贝叶斯算法拓展下载): 0.2 0.3 0.4:1 0.32 0.43 0.45:1
0.23
0.33 0.54:1 2.4
thecloud
·
2013-09-14 06:00
Mahout
hbase:单机环境搭建、hbase表操作示例(create, list, put, get, scan, disable, drop...)
0.92.xHBase-0.94.xHBase-0.96Hadoop-0.20.205SXXHadoop-0.22.xSXXHadoop-1.0.xSSSHadoop-1.1.xNTSSHadoop-
0.23
s060403072
·
2013-09-04 10:00
hadoop介绍 - Hadoop secondarynamenode concept
/mastersfilewhereweusedtospecifythehostaddresswheresecondarynamenodeneedstostart.Thedocumentationfor
0.23
isabitsparseandIhadtodigthroughthecode.IntheDFSConfigKeys.java
Mrknowledge
·
2013-09-02 09:00
GSL矩阵计算之行列式
libgsl_d.lib")#pragmacomment(lib,"libgslcblas_d.lib")intmain(void){doublea[]={0.11,0.12,0.13,0.21,0.22,
0.23
Augusdi
·
2013-08-15 10:02
GSL-GNU
scientific
Library
使用mod_limitipconn.c来限制apache的并发数
1、在http://dominia.org/djao/limitipconn2.html上下载对应的版本,我下载的是forapache2.2的版本(mod-limitipconn-
0.23
.tar.bz2
hbyh
·
2013-07-24 17:12
apache
linux
限IP数
hadoop通过压缩包方式安装
官网上的版本目前列举如下:1.1.X-currentstableversion,1.1release1.2.X-currentbetaversion,1.2release2.X.X-currentalphaversion
0.23
Mrknowledge
·
2013-07-18 09:00
siebel意外的数字精度问题
意外的数字精度问题:10.22 -10 =0.220000000000001100.22-100 =0.219999999999999100.22-100.00 =0.22200.22-199.99 =
0.23
sunnyabner
·
2013-07-17 18:00
Hbase
0.23
分布式安装
1.假定已安装好hadoop0.23.7分布安装 2.选择与hadoop版本相支持的Hbase参考https://hbase.apache.org/book/configuration.html Hbase0.943.设置conf/hbase-site.xml hbase.rootdir hdfs://namenode1:9000/hbase hbase.cluster.dis
rokii
·
2013-07-06 10:00
Hadoop Yarn上实现Hama BSP计算应用
引言 hadoop
0.23
系列后,就对Map/Reduce进行了完全重写,把原有的MR计算框架替代成了新一代Yarn计算框架- Yarn。
zhan8610189
·
2013-06-27 20:00
hadoop
YARN:下一代MapReduce的架构
hadoop
0.23
版本中,出现了YARN,即MapReduce2.0版本。
viewcode
·
2013-05-29 11:00
CDH4.1(hadoop-2.0.0-cdh4.1.2)安装部署文档
是Cloudera在hadoop
0.23
基础上改造的,并且把部分功能一起贡献给了Apache。目前ApacheHadoop最新的版本是hadoop-2.0.2-alpha。
caodaoxi
·
2013-05-23 11:00
hadoop
hadoop0.23.7伪分布式 安装回顾
*和
0.23
.*的版本配置和安装流程有比较大的不同。这里简要介绍下安装过程,并有一些已经写的很详细的blog和参考资料给出来,再就是介绍下安装过程中出现的问题。
viewcode
·
2013-05-19 12:00
hbase 配置
接上hadoop配置hadoop和hbase配套版本:hbase0.92–hadoop0.22hbase0.94–hadoop
0.23
hive0.9–hadoop0.20.xpig0.10–hadoop0.20
chailink
·
2013-05-09 10:00
java
hbase
Hadoop 0.23.6安装实践1-单机开发版安装
hadoop
0.23
开始添加了yarn(MRv2)模块,文件结构也发生了较大的变化。以下就安装部署流程详细记录一下。
wliufu
·
2013-04-20 15:00
hadoop
安装
ubuntu
0.23
Hadoop 0.23.6安装实践1-单机开发版安装
hadoop
0.23
开始添加了yarn(MRv2)模块,文件结构也发生了较大的变化。以下就安装部署流程详细记录一下。
wliufu
·
2013-04-18 22:00
hadoop
安装
ubuntu
Hadoop 2.0 安装向导 (
0.23
.x)
http://blog.csdn.net/shenshouer/article/details/7613234安装向导 (
0.23
.x)最新版本的HADOOP2.0与老版本相比有不同的目录结构。
ShiZhixin
·
2013-04-15 14:00
hadoop版本总结
hadoop有两个分支:0.20.x 和
0.23
.x。其中0.20.x是比较稳定的版本,
0.23
.x中新特性更多,但相对不稳定。
bigsea
·
2013-04-11 17:00
hadoop
hadoop版本及cloudera的CDH3 CDH4
hadoop有两个分支:0.20.x 和
0.23
.x。其中0.20.x是比较稳定的版本,
0.23
.x中新特性更多,但相对不稳定。
lelglin
·
2013-04-10 18:00
hadoop
hadoop版本总结
hadoop有两个分支:0.20.x 和
0.23
.x。其中0.20.x是比较稳定的版本,
0.23
.x中新特性更多,但相对不稳定。
java_doom
·
2013-04-04 00:00
hadoop
hadoop版本总结
hadoop有两个分支:0.20.x和
0.23
.x。其中0.20.x是比较稳定的版本,
0.23
.x中新特性更多,但相对不稳定。
xuechongyang
·
2013-03-20 13:00
hive 复杂数据结构嵌套
hive 复杂的数据结构: { array map struct } 数据格式 221190xxx9 0401:0.30 0402:0.81 1303:
0.23
黎明lm
·
2013-03-14 16:00
hive
Hadoop
0.23
.x从原理详解到安装体验
【IT168技术】从0.23.0开始,Hadoop开始支持分布式NameNode,通过NameNodefederation的形式实现。这样实现了NameNode的横向扩展,使得Hadoop集群的规模可以达到上万台。同时在NameNodeHA机制方面,trunk中的代码也开始merge进ha-branch的功能,原来的SecondaryNamenode被BackupNode和CheckpointN
zongquanliu
·
2013-03-07 00:02
hadoop
hadoop
hadoop
0.23.x原理
0.23.x
0.23.x安装
YARN
/r0.23.0/hadoop-yarn/hadoop-yarn-site/YARN.html ApacheHadoopNextGenMapReduce(YARN) MapReduce在hadoop-
0.23
fengyunhust
·
2013-02-04 17:00
yarn
读hadoop
0.23
源码(1):Job
每次配置job的时候,最后一步总是 System.exit(job.waitForCompletion(true)?0:1); 进入waitForCompletion方法 publicbooleanwaitForCompletion(booleanverbose )throwsIOException,InterruptedException, ClassNotFoundException{ if(
eryk86
·
2013-01-15 17:00
Apache Hadoop
0.23
HDFS Federation介绍
HDFSFederation 为了水平扩展命名服务的规模,federation 使用多个Namenode和命名空间代替过去的单个Namenode的模式。多个Namenode被联合在一起提供服务,但是每个Namenode又是独立的,且每个Namenode不需要与其他Namenode协调工作。而Datenode的存储方式还是和过去一样使用块来存储,但每个Datenode需要注册到集群中所有的Name
eryk86
·
2013-01-15 17:00
Apache Hadoop
0.23
MapReduce 2.0 (MRv2 or YARN) 介绍
MapReduce 在hadoop
0.23
版本中经历了一次大修改。现在叫做MapReduce2.0(MRv2)或者YARN。
eryk86
·
2013-01-15 17:00
Apache Pig 0.10.1发布
:http://www.fightrice.com/mirrors/apache/pig/pig-0.10.1/可以通过tar.gz,rpm,deb等方式下载获取2.更好的支持ApacheHadoop
0.23
guoyunsky
·
2013-01-14 17:00
hadoop几个版本区别
做个mark,以后有空再详细写写0.20.x是历史稳定版
0.23
.x是根据0.20.x的稳定版引入了federation和yarn,但缺少NN和HA1.0.x是当前稳定版,但和0.20.x系列差不多,只不过有些优化改进
chlaws
·
2013-01-08 10:00
hadoop
hadoop
YARN Framework(MapReduce 2.0 in Apache Hadoop
0.23
)
UHP博客文章地址:http://yuntai.1kapp.com/?p=600原创文章,转载请注明出处:http://blog.csdn.net/wind5shy/article/details/8283371原文链接:http://blog.cloudera.com/blog/2012/02/mapreduce-2-0-in-hadoop-0-23/ In BuildingandDeployi
wind5shy
·
2012-12-31 11:00
mapreduce
hadoop
framework
framework
framework
yarn
2.0
0.23
hadoop
0.23
状态机框架
p=646原创文章,转载请注明出处:http://blog.csdn.net/wind5shy/article/details/8332017hadoop
0.23
中使用了基于事件驱动机制的异步编程模型。
wind5shy
·
2012-12-19 15:00
hadoop
hadoop
状态机
编程模型
0.23
Hadoop的面试问题
partition作用,设置compression搭建hadoop集群,master/slave都运行那些服务HDFS,replica如何定位版本0.20.2->0.20.203->0.20.205,0.21,
0.23
,1.0.1
martin_liang
·
2012-12-12 10:00
Apache Hadoop 2.0 (Alpha)发布了
ApacheHadoop2.0-alpha发布了,直接从
0.23
.x升为2.0版本,让我们再一次被Hadoop版本的混乱无序状态搞晕。本文将解析Hadoop-2.0-alpha中的新特性。
macyang
·
2012-12-11 22:00
Hadoop
0.23
编译常见错误
0) 要是下面的错误你都碰到了。。说明你开发环境没搞好,用下面这个命令吧。yumgroupinstall"DevelopmentLibraries"1)报错:"[ERROR]Failedtoexecutegoal org.codehaus.mojo:make-maven-plugin:1.0-beta-1:autoreconf(autoreconf)on projecthadoop-yarn-se
yu829
·
2012-12-01 14:00
CentOS上安装Hadoop
0.23
下载hadoop
0.23
先装svn yuminstall subversion svncheckout http://svn.apache.org/repos/as
yu829
·
2012-12-01 14:00
CDH4.1(hadoop-2.0.0-cdh4.1.2)安装部署文档
是Cloudera在hadoop
0.23
基础上改造的,并且把部分功能一起贡献给了Apache。目前ApacheHadoop最新的版本是hadoop-2.0.2-alpha。
can007
·
2012-11-23 22:00
分布式
云计算
HA
Cloudera
Cloudera
RHEL6上配置基于Heartbeat+LVS+ldirectord的高可用服务
我的网络环境: 一、前其他准备1、所需要的软件heartbeat-2.1.3.tar.gzMailTools-1.74.tar.gzIO-Socket-INET6-2.65.tar.gzSocket6-
0.23
uselinux
·
2012-11-20 01:27
LVS
heartbeat
RHEL6
ldirector
Apache Hadoop 2.0-alpha发布
ApacheHadoop2.0-alpha发布了,直接从
0.23
.x升为2.0版本,让我们再一次被Hadoop版本的混乱无序状态搞晕。本文将解析Hadoop-2.0-alpha中的新特性。
kirayuan
·
2012-10-30 15:00
hive 支持hadoop-0.23.1
svn.apache.org/repos/asf/hive/trunk hive $ cd hive $ ant clean package -Dhadoop.version=0.23.1 -Dhadoop-
0.23
hf200012
·
2012-09-10 14:00
hadoop
hadoop
0.23
的代码编译与Eclipse环境下调试 问题
hadoop
0.23
求教:使用linux环境下进行编译后,使用mvn:eclipse生成了项目文件,将项目文件打包传至Windows环境下后,使用m2eclipse插件导入后,出现了几个问题:1.出现了很多错误
cloudeagle
·
2012-09-08 15:00
eclipse
hadoop
0.23
的代码编译与Eclipse环境下调试 问题
hadoop
0.23
求教: 使用linux环境下进行编译后,使用mvn:eclipse生成了项目文件,将项目文件打包传至Windows环境下后,使用m2eclipse插件导入后,出现了几个问题: 1
cloudeagle_bupt
·
2012-09-08 15:00
eclipse
hadoop
windows
eclipse插件
command
hadoop
0.23
编译
Yarn编译指南首先下载hadoop
0.23
版本svncheckouthttp://svn.apache.org/repos/asf/hadoop/common/tags/release-0.23.0-
cloudeagle_bupt
·
2012-09-08 15:00
apache
mapreduce
maven
hadoop
Build
Annotations
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他