E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
map-reduce
原生态在hadoop上运行java程序
第一种:原生态运行jar包1,利用eclipse编写
Map-Reduce
方法,一般引入hadoop-core-1.1.2.jar。
zhao_xiao_long
·
2013-07-30 21:26
mapreduce
hadoop
Hadoop
原生态在hadoop上运行java程序
第一种:原生态运行jar包1,利用eclipse编写
Map-Reduce
方法,一般引入hadoop-core-1.1.2.jar。
zhao_xiao_long
·
2013-07-30 21:26
mapreduce
hadoop
Spring Data JPA 笔记
2、SpringDataJPA简介介绍:针对关系型数据库,KV数据库,Document数据库,Graph数据库,
Map-Reduce
等主流数据库,采用统一技术进行访问,并且尽可能简化访问手段,让数据的访问变得更加方便
yunlielai
·
2013-07-29 08:51
技术
数据库
项目
spring
Spring Data JPA 笔记
2、SpringDataJPA简介介绍:针对关系型数据库,KV数据库,Document数据库,Graph数据库,
Map-Reduce
等主流数据库,采用统一技术进行访问,并且尽可能简化访问手段,让数据的访问变得更加方便
yunlielai
·
2013-07-29 08:51
数据库
技术
项目
资料
读者
记录一下Apache Mahout
在这篇文章中才看到,原来
Map-Reduce
也是Ng等人提出的,参见http://www.cs.stanford.edu/people/ang/papers/nips06-mapreducemulticore.pdf
rikey111
·
2013-07-20 23:00
Mahout
使用
Map-Reduce
统计Web 服务器 access.log 日志文件
Map-Reduce
1.6.1.
netkiller.github.com
·
2013-07-15 13:00
mongodb
netkiller
map-reduce
使用
Map-Reduce
统计Web 服务器 access.log 日志文件
使用
Map-Reduce
统计Web服务器access.log日志文件首先将web服务器access.log倒入到mongodb,参考 http://netkiller.github.io/article
neo-chen
·
2013-07-15 13:00
mongodb
netkiller
map-reduce
学习Hadoop不错的系列文章
blog/615033 (2)HDFS读写过程解析 地址:http://blog.csdn.net/forfuture1978/article/details/6001302 (3)
Map-Reduce
qq85609655
·
2013-07-15 12:00
hadoop
在OpenStack虚拟机实例中创建swap分区的一种方法
也许它用swap来存
map-reduce
的临时文件?可是既然这么建议了,只好照办,毕竟我们对MapR也不熟悉。【引用请注明出处:http://blog.csdn.net/bhq2010
·
2013-07-14 22:00
openstack
在OpenStack虚拟机实例中创建swap分区的一种方法
也许它用swap来存
map-reduce
的临时文件?可是既然这么建议了,只好照办,毕竟我们对MapR也不熟悉。【引用请注明出处:http://blog.csdn.net/bhq2010
bhq2010
·
2013-07-13 20:00
通过
Map-Reduce
实现Join系列之四
在本系列的前面几篇文章中,主要介绍了利用
Map-Reduce
任务来完成两个或者多个文件的Join操作的一些算法和思路。
lt200819
·
2013-07-11 23:00
map-reduce
通过
Map-Reduce
实现Join系列之三
在这个系列的前两篇中,介绍了基本的Join算法以及在Hadoop环境中,如何利用
Map-Reduce
过程来完成Join。
lt200819
·
2013-07-11 23:00
map-reduce
通过
Map-Reduce
实现Join系列之二
在本系列的第一篇中,介绍了几种在数据库应用中常见的Join算法,本文将会介绍两种使用
Map-Reduce
实现对两个数据集合进行Join的算法,其中的一种会用到第一篇中提到的哈希Join算法。
lt200819
·
2013-07-11 23:00
map-reduce
通过
Map-Reduce
实现Join系列之一
本系列的开篇在提到使用
Map-Reduce
实现Join之前,先来看看目前在数据库中应用比较广泛和流行的集中Join算法。
lt200819
·
2013-07-11 23:00
map-reduce
基于
Map-Reduce
的相似度计算
基于
Map-Reduce
的相似度计算转载请注明:http://blog.csdn.net/xinzhangyanxiang/article/details/9288589不久前(6.29),参加了ChinaHadoop
xinzhangyanxiang
·
2013-07-10 10:00
相似度计算
mark
map-reduce
mirror
greedy
【原创】《大数据互联网大规模数据挖掘与分布式处理》阅读笔记(二)
【原创】《大数据互联网大规模数据挖掘与分布式处理》第二章大规模文件系统及
MAP-Reduce
lovemianmian
·
2013-06-07 20:00
mapreduce
hadoop
数据挖掘
大数据
MapReduce
如何理解
map-reduce
是干嘛的。。。。。摘自百度百科 如果想统计下过去10年计算机论文出现最多的几个单词,看看大家都在研究些什么,那收集好论文后,该怎么办呢?
wanglei2999
·
2013-06-06 14:00
mapreduce
可伸缩的系统架构经验分享
Map-Reduce
对于大数据的处理,自然可以引入
Map-Reduce
。为
qileilove
·
2013-06-05 10:00
自己完成的第一个
Map-Reduce
, 类似模板匹配
终于完成了自己的第一个
MAP-REDUCE
程序,程序的主要功能是对输入文件中的一组向量,计算新的向量和文件中的向量距离,并按距离从小到大排序。下一步计算应用到高维数据中寻找相似向量的程序中。
ShiZhixin
·
2013-06-04 10:00
--Job的数据输入格式化器—InputFormat
它处理数据的核心就是
map-reduce
模型,但是,无论是map还是reduce,它们的输入输出数据都是key-value对的形式,这种key-value对的形式我们可以看做是结构化的数据。
twtbgn
·
2013-05-20 11:00
format
hadoop mapreduce 学习(-)
Map-Reduce
框架的运作完全基于对,即数据的输入是一批对,生成的结果也是一批对,只是有
hillday
·
2013-05-14 23:00
mapreduce
hadoop
hdfs
我们通过下面这个天气数据处理的例子来说明Hadoop的运行原理.
我们通过下面这个天气数据处理的例子来说明Hadoop的运行原理.1、
Map-Reduce
的逻辑过程假设我们需要处理一批有关天气的数据,其格式如下:·按照ASCII码存储,每行一条记录·每一行字符从0开始计数
JerryDeng
·
2013-05-11 20:14
Hadoop准备篇之(一):Page Rank算法初探
为什么会将PageRank放在hadoop学习笔记里,是因为hadoop课程第一周就重点提到了Google当年三大论文(GFS,
Map-Reduce
和BigTable)以及hadoop思想的来源,并提到了
Elaine Shi
·
2013-05-08 23:00
Hadoop的
Map-Reduce
例子 WordCount
最近在学习云计算,研究Hadoop框架,费了一整天时间将Hadoop在Linux下完全运行起来,看到官方的
map-reduce
的demo程序WordCount,仔细研究了一下,算做入门了。
lovemianmian
·
2013-05-04 11:00
mapreduce
hadoop
hadoop相关(以期为单位)
forfuture1978.iteye.com/blog/615033(2)HDFS读写过程解析地址:http://blog.csdn.net/forfuture1978/article/details/6001302(3)
Map-Reduce
anhuidelinger
·
2013-04-29 08:00
hadoop
mysql
linux
Hive简单介绍
Hadoop 是一个流行的开源
map-reduce
实现,用于像yahoo,Facebook一类的公司。来存储和处理商用硬件上的大范围数据集。
free9277
·
2013-04-10 10:00
java
hive
云计算
学习Hadoop不错的系列文章
forfuture1978.iteye.com/blog/615033(2)HDFS读写过程解析地址:http://blog.csdn.net/forfuture1978/article/details/6001302(3)
Map-Reduce
毛朱
·
2013-04-09 17:00
hadoop1.0.4单击部署
Hadoop快速入门目的这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和
Map-Reduce
框架有所体会,比如在HDFS上运行示例程序或简单作业等
hillday
·
2013-04-03 23:00
Hadoop相关子项目整理
PigHadoop客户端使用类似于SQL的面向数据流的语言PigLatinPigLatin可以完成排序,过滤,求和,聚组,关联等操作,可以支持自定义函数Pig自动把PigLatin映射为
Map-Reduce
lskyne
·
2013-04-02 17:00
学习Hadoop不错的系列文章
blog/615033 (2)HDFS读写过程解析 地址:http://blog.csdn.net/forfuture1978/article/details/6001302 (3)
Map-Reduce
daniel_tu
·
2013-03-29 09:00
hadoop
Hadoop数据传输工具sqoop
sqoop架构:sqoop架构非常简单,其整合了Hive、Hbase和Oozie,通过
map-reduce
任务来传输数据,从而提供并发特性和容错。
yfkiss
·
2013-03-24 19:00
hadoop
数据传输
sqoop
Oracle NoSQL数据库介绍
同时它还支持Hadoop以及Apache的
map-reduce
技术。在运营方面,“
Jonathan Allen
·
2013-03-02 00:00
Greenplum Pivotal HD结合了SQL和Hadoop的优势
PivotalHD支持标准Hadoop发型版本的常用特性(包括HDFS、Pig、Hive、Mahout和
Map-Reduce
等),但又加入了一些其他的组件,具体如下面结构图所示: Pivotal的主要组件是
·
2013-03-01 08:00
GreenPlum
HD
pivotal
Greenplum Pivotal HD结合了SQL和Hadoop的优势
PivotalHD支持标准Hadoop发型版本的常用特性(包括HDFS、Pig、Hive、Mahout和
Map-Reduce
等),但又加入了一些其他的组件,具体如下面结构图所示: Pivotal的主要组件是
Abel Avram
·
2013-03-01 00:00
hadoop c++ pipes接口实现
(1)首先我们需要知道
map-reduce
的基本原理,这里不说了。
nuoline
·
2013-02-25 18:00
hadoop入门文档
Hadoop快速入门 Hadoop集群搭建 Hadoop分布式文件系统 Hadoop
Map-Reduce
教
joerong666
·
2013-02-24 21:00
Hadoop入门
hadoop eclipse 2
hadoop-eclipse开发环境搭建及error:failuretologin错误分类:hadoop2012-10-2023:22191人阅读评论(0)收藏举报对于Hadoop开发者来讲,通过JAVAAPI编程是进入
Map-Reduce
fncj
·
2013-02-07 16:00
hadoop eclipse 2
failure to login错误 分类: hadoop 2012-10-20 23:22 191人阅读 评论(0) 收藏 举报 对于Hadoop开发者来讲,通过JAVA API编程是进入
Map-Reduce
fncj
·
2013-02-07 16:00
eclipse
Spring Data JPA 介绍
于是就花了点时间了解SpringData,可能UDSLII期会基于SpringData做扩展SpringData相关资料介绍:针对关系型数据库,KV数据库,Document数据库,Graph数据库,
Map-Reduce
白浪滔天
·
2013-02-01 11:00
spring
data
jpa
Spring Data JPA 介绍
于是就花了点时间了解SpringData,可能UDSLII期会基于SpringData做扩展SpringData相关资料介绍:针对关系型数据库,KV数据库,Document数据库,Graph数据库,
Map-Reduce
白浪滔天
·
2013-02-01 11:00
spring
jpa
Data
Spring Data JPA 介绍
于是就花了点时间了解SpringData,可能UDSLII期会基于SpringData做扩展SpringData相关资料介绍:针对关系型数据库,KV数据库,Document数据库,Graph数据库,
Map-Reduce
白浪滔天
·
2013-02-01 11:00
spring
data
jpa
几个很老的erlang开源项目
1、Disco 是一个实现了
Map-Reduce
的框架,采用Erlang+Python开发开发语言:ErLangPython 项目主页: http://discoproject.org/ 文档地址: http
androidzhaoxiaogang
·
2013-01-30 22:00
几个很老的erlang开源项目
1、Disco是一个实现了
Map-Reduce
的框架,采用 Erlang + Python 开发 开发语言: ErLang Python 项目主页: http://discoproject.org
nanjingjiangbiao_T
·
2013-01-30 22:00
erlang
Demo for Oozie to Run
Map-Reduce
Job
DemoforOozietoRunMap-ReduceJobMemo:Createanewm/rjobinajavaproject,thenexporttoajarassumed"org.marvin.bd.mr.example.jar".Createa"workflow.xml"foroozie,whichusesaction.Organizefileandarchivatothestructu
MarvinWang
·
2013-01-28 23:00
map
reduce
oozie
workflow.xml
Hadoop Streaming 实战: 实用Partitioner类KeyFieldBasedPartitioner
我们知道,一个典型的
Map-Reduce
过程包括:Input->Map->Patition->Reduce->Output。
xiaolang85
·
2013-01-19 18:00
hive join原理
hive(0.9.0):1.支持equalityjoins,outerjoins,andleftsemijoins2.只支持等值条件3.支持多表join原理hive执行引擎会将HQL“翻译”成为
map-reduce
xiaolang85
·
2013-01-19 18:00
Couchbase发布Couchbase Server 2.0 GA
CouchbaseServer2.0的主要特性包括灵活的JSON数据模型,分布式的索引和查询,增量的
map-reduce
以及跨数据中心的复制。
Abel Avram
·
2013-01-19 00:00
Couchbase发布Couchbase Server 2.0 GA
CouchbaseServer2.0的主要特性包括灵活的JSON数据模型,分布式的索引和查询,增量的
map-reduce
以及跨数据中心的复制。
Abel Avram
·
2013-01-19 00:00
hive join
): 1.支持equality joins, outer joins, and left semi joins 2.只支持等值条件 3.支持多表join 原理 hive执行引擎会将HQL“翻译”成为
map-reduce
·
2013-01-16 11:00
hive
hadoop学习笔记<四>----
map-reduce
工作原理
MapReduce的作业(job)是由客户端提交给Hadoop集群的。一个job包括了输入数据,MapReduce程序和配置信息。Hadoop将作业非为若干个任务(task)来执行,其中包括map任务和reduce任务。 有两类节点和task的执行相关,一类是jobtracker,另外一类是tasktracker。 jobtracker通过调度tasktracker上运行的任务来协调所有运行在
ztianlong
·
2013-01-14 23:00
map-reduce
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他