E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoopmapreduce
排序性能PK:Spark完胜MapReduce
作为
HadoopMapReduce
后继者ApacheSpark可以支撑数千节点规模的集群部署,尤其在内存数据处理上,Spark比MapReduce更加高效,且支持GB或TB级别的数据。
李士窑
·
2014-10-16 00:00
Hbase伪分布式模式部署
在Hadoop家族中,很多产品为HBase提供服务:HadoopHDFS为HBase提供了高可靠性的底层存储支持;
HadoopMapReduce
为HBase提供了高性能的计算能力;Zookeeper为HBase
conansix
·
2014-10-15 22:00
数据库
分布式
hbase
Hbase单机模式部署
在Hadoop家族中,很多产品为HBase提供服务:HadoopHDFS为HBase提供了高可靠性的底层存储支持;
HadoopMapReduce
为HBase提供了高性能的计算能力;Zookeeper为HBase
看山
·
2014-10-15 16:52
系统运维
大数据
hbase
Hbase单机模式部署
在Hadoop家族中,很多产品为HBase提供服务:HadoopHDFS为HBase提供了高可靠性的底层存储支持;
HadoopMapReduce
为HBase提供了高性能的计算能力;Zookeeper为HBase
conansix
·
2014-10-15 16:00
数据库
hbase
spark简介
本文将围绕以下几个问题展开讨论:1.什么是spark2.spark有什么特点3.spark框架结构及工作流程一、什么是spark Spark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
yhao2014
·
2014-10-13 15:00
spark
分布式计算
Using Python to write Hadoop MapReduce program(Reship)
转载自:http://isilic.iteye.com/blog/1750271 使用 Python 编写
HadoopMapReduce
程序 以前写 Hadoop 的 MapReduce 程序时,
Data168
·
2014-10-11 12:00
mapreduce
Hadoop学习笔记(二)设置单节点集群
本文描述如何设置一个单一节点的Hadoop安装,以便您可以快速执行简单的操作,使用
HadoopMapReduce
和Hadoop分布式文件系统(HDFS)。
mybwu_com
·
2014-10-07 15:00
hadoop
Storm 安装速记
在opensource领域,批处理最有名的组件自然是大名鼎鼎的
HadoopMapReduce
,而流计算则是Storm。
samhacker
·
2014-09-14 22:00
storm
流计算
Apache Hadoop 2.4.1 单节点安装
一、目的这篇文档描述了怎样去安装和配置一个单节点的Hadoop,因此您可以使用
HadoopMapReduce
和HadoopDistributedFileSystem(HDFS)快速展现一个简单的运算。
-Bin-
·
2014-09-14 17:00
Hadoop MapReduceV2(Yarn) 框架
HadoopMapReduceV2(Yarn)框架简介原
HadoopMapReduce
框架的问题对于业界的大数据存储及分布式处理系统来说,Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架,对于Hadoop
MR_White
·
2014-09-10 20:00
hadoop新框架Yarn详解
HadoopMapReduceV2(Yarn)框架简介原
HadoopMapReduce
框架的问题对于业界的大数据存储及分布式处理系统来说,Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架,对于Hadoop
lifuxiangcaohui
·
2014-09-06 23:00
hbase基本概念和hbase shell常用命令用法<转>
HBase是GoogleBigtable的开源实现,它利用HadoopHDFS作为其文件存储系统,利用
HadoopMapReduce
来处理HBase中的海量数据,利用Zookeeper作为协同服务。
yongjian_luo
·
2014-08-28 16:00
Win系统下用Eclipse中运行远程hadoop MapReduce程序出现Permission denied错误
Win系统下用Eclipse中运行远程
hadoopMapReduce
程序出现报错WARNING:job_local1833185613_0001org.apache.hadoop.security.AccessControlException
wind520
·
2014-08-23 22:00
eclipse
mapreduce
hadoop
hadoop
plugi
Spark扫盲
Spark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
所具有的优点
shifenglov
·
2014-08-15 14:00
spark
学习
扫盲
大数据平台有哪些
Spark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
所
jakisou
·
2014-08-13 10:00
Hadoop技术内幕读书笔记-mapreduce架构
HadoopMapReduce
也采用了Master/Slave(M/S)架构。它主要由以下几个组件组成:Client、JobTracker、TaskTracker和Task。
qicq611le
·
2014-08-06 15:00
mapreduce
hadoop
架构
Hadoop 新 MapReduce 框架 Yarn 详解
HadoopMapReduceV2(Yarn)框架简介原
HadoopMapReduce
框架的问题对于业界的大数据存储及分布式处理系统来说,Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架,对于Hadoop
Big-Data
·
2014-08-06 15:00
Hadoop2.0- MapReduceV2(Yarn) 框架简介
阅读更多一、原
HadoopMapReduce
框架的问题Hadoop1.0的原MapReduce框架图:从上图中可以清楚的看出原MapReduce程序的流程及设计思路:1、首先用户程序(JobClient
szjian
·
2014-08-06 14:00
hadoop
mapreduce
yarn
Hadoop2.0- MapReduceV2(Yarn) 框架简介
一、原
HadoopMapReduce
框架的问题Hadoop1.0的原MapReduce框架图: 从上图中可以清楚的看出原MapReduce程序的流程及设计思路:1、首先用户程序(JobClient)提交了一个
szjian
·
2014-08-06 14:00
mapreduce
hadoop
yarn
Spark:一个高效的分布式计算系统
概述什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wbj0110
·
2014-08-04 13:00
spark
Spark:一个高效的分布式计算系统
概述什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wbj0110
·
2014-08-04 13:00
spark
Spark:一个高效的分布式计算系统
概述什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wbj0110
·
2014-08-04 13:00
spark
hive怎样决定reducer个数
HadoopMapReduce
程序中,reducer个数的设定极大影响执行效率,这使得Hive怎样决定reducer个数成为一个关键问题。
libing13810124573
·
2014-08-04 09:00
spark导读
关键词:Spark分布式计算系统Spark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapred
scholltop
·
2014-08-03 19:00
spark
spark导读
关键词:Spark分布式计算系统Spark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapred
scholltop
·
2014-08-03 19:00
spark
Spark:一个高效的分布式计算系统
什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wangganyu188
·
2014-07-18 17:30
spark
hbase shell 基础和常用命令详解
HBase是GoogleBigtable的开源实现,它利用HadoopHDFS作为其文件存储系统,利用
HadoopMapReduce
来处理HBase中的海量数据,利用Zookeeper作为协同服务。
wbj0110
·
2014-07-10 10:00
Hbase
Spark:一个高效的分布式计算系统
概述什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wbj0110
·
2014-07-08 13:00
spark
Spark:一个高效的分布式计算系统
概述什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wbj0110
·
2014-07-08 13:00
spark
Spark:一个高效的分布式计算系统
概述什么是SparkSpark是UCBerkeleyAMPlab所开源的类
HadoopMapReduce
的通用的并行计算框架,Spark基于mapreduce算法实现的分布式计算,拥有
HadoopMapReduce
wbj0110
·
2014-07-08 13:00
spark
hadoop知识点分类
详情参见
HadoopMapReduce
。 2. Hadoop 运行于什么
ticojj
·
2014-07-01 14:00
hadoop
Hadoop MapReduce存在的问题及下一代MapReduce(MRv2/YARN)
需求当我们对
HadoopMapReduce
框架进行改进时,需要时刻谨记的一个重要原则是用户的需求。
小弟季义钦
·
2014-06-17 23:54
并行计算
Hadoop MapReduce存在的问题及下一代MapReduce(MRv2/YARN)
需求当我们对
HadoopMapReduce
框架进行改进时,需要时刻谨记的一个重要原则是用户的需求。
jiq408694711
·
2014-06-17 23:00
Hadoop 中利用 mapreduce 读写 mysql 数据
问题导读1.
hadoopmapreduce
的通过哪两个类可以读取数据源?2.如果没有mysql驱动包,一般会是什么问题?3.如何添加包?
wbj0110
·
2014-06-15 10:00
hadoop
Hadoop 中利用 mapreduce 读写 mysql 数据
问题导读1.
hadoopmapreduce
的通过哪两个类可以读取数据源?2.如果没有mysql驱动包,一般会是什么问题?3.如何添加包?
wbj0110
·
2014-06-15 10:00
hadoop
Hadoop 中利用 mapreduce 读写 mysql 数据
问题导读1.
hadoopmapreduce
的通过哪两个类可以读取数据源?2.如果没有mysql驱动包,一般会是什么问题?3.如何添加包?
wbj0110
·
2014-06-15 10:00
hadoop
分别使用Hadoop MapReduce、hive统计手机流量
3.
hadoopmapreduce
创建类DataWritable的作用是什么?4.为什么创建类DataWritable?5.如何实现统计手机流量?
wbj0110
·
2014-06-15 01:00
hadoop
hive
分别使用Hadoop MapReduce、hive统计手机流量
3.
hadoopmapreduce
创建类DataWritable的作用是什么?4.为什么创建类DataWritable?5.如何实现统计手机流量?
wbj0110
·
2014-06-15 01:00
hadoop
hive
分别使用Hadoop MapReduce、hive统计手机流量
3.
hadoopmapreduce
创建类DataWritable的作用是什么?4.为什么创建类DataWritable?5.如何实现统计手机流量?
wbj0110
·
2014-06-15 01:00
hadoop
hive
数据挖掘笔记-分类-决策树-MapReduce实现-1
之前写的代码都是单机上跑的,发现现在很流行hadoop,所以又试着用
hadoopmapreduce
来处理下决策树的创建。因为hadoop接触的也不多,所以写的不好,勿怪。
wulinshishen
·
2014-05-28 16:00
mapreduce
hadoop
数据挖掘
分类
决策树
hbase shell基础和常用命令详解
面向列的开源数据库,源于google的一篇论文《bigtable:一个结构化数据的分布式存储系统》HBase是GoogleBigtable的开源实现,它利用HadoopHDFS作为其文件存储系统,利用
HadoopMapReduce
ar7style
·
2014-05-23 11:00
Hadoop 新 MapReduce 框架 Yarn 详解
HadoopMapReduceV2(Yarn)框架简介原
HadoopMapReduce
框架的问题对于业界的大数据存储及分布式处理系统来说,Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架,对于Hadoop
颜建海
·
2014-05-12 17:00
Hadoop学习:Map/Reduce初探与小Demo实现
一、概念知识介绍
HadoopMapReduce
是一个用于处理海量数据的分布式计算框架。
过顶擒龙
·
2014-05-09 20:42
hadoop
Hadoop学习:Map/Reduce初探与小Demo实现
一、 概念知识介绍
HadoopMapReduce
是一个用于处理海量数据的分布式计算框架。
liyong199012
·
2014-05-09 20:00
Hadoop 新 MapReduce 框架 Yarn 详解
HadoopMapReduceV2(Yarn)框架简介原
HadoopMapReduce
框架的问题对于业界的大数据存储及分布式处理系统来说,Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架,对于Hadoop
蓝狐乐队
·
2014-05-05 08:00
hadoop2.x配置 - 启用snappy
基于以上特点,Snappy非常适合用于
HadoopMapReduce
中间数据压缩。Snappy详情参见:http://code.google.com/p/snappy/。
mrknowledge
·
2014-04-28 10:11
hadoop安装&运行
hadoop2.x配置 - 启用snappy
基于以上特点,Snappy非常适合用于
HadoopMapReduce
中间数据压缩。Snappy详情参见:http://code.google.com/p/snappy/。
Mrknowledge
·
2014-04-28 10:00
hbase shell
HBase是GoogleBigtable的开源实现,它利用HadoopHDFS作为其文件存储系统,利用
HadoopMapReduce
来处理HBase中的海量数据,利用Zookeeper作为协同服务。
Opensm
·
2014-04-23 16:00
hadoop入门
目的(Purpose)这篇文档描述了怎样安装和配置一个单节点的Hadoop,并且利用
HadoopMapReduce
和HDFS进行简单的操作。
十一月不远
·
2014-04-21 15:00
hadoop
Hadoop中共享全局信息的几种方法
在编写
HadoopMapReduce
程序的过程中有时候需要在各个Mapper或者Reducer中使用一些共享的全局数据,例如在处理整数数据表格的时候有时候需要让每个Reducer知道各个列的取值范围或是一些图算法中需要让各个
yanxiangtianji
·
2014-04-21 00:00
hadoop
共享
信息
上一页
14
15
16
17
18
19
20
21
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他