Hadoop-自学日记

map join优化

转载：http://www.gemini5201314.net/hadoop/hadoop-%E4%B8%AD%E7%9A%84%E4%B8%A4%E8%A1%A8join.html为数据分析中经常进行的
wf1982·2012-01-14 11:00

[转]hadoop0.2版本使用

下载Hadoop： http://labs.renren.com/apache-mirror//hadoop/core/ 选择相应版本并下载相应目录下hadoop-*.tar.gz文件。
jsczxy2·2012-01-05 03:00

Hadoop MapReduce进阶 使用DataJoin包实现Join

它的Jar包存在于contrib/datajoin/hadoop-*-datajoin。为区别于其他的datajoin技术，我们称其为reduce-sidejoin。
jokes000·2011-12-17 20:00

hadoop-实践error

error1在没有配置conf/*-site.xml之前还能运行的很好。配置成功了以后就出错mjiang@venus~/program/program/hadoop/install/hadoop-0.20.203.0$hadoopjarhadoop-examples-0.20.203.0.jarwordcountinput/out111/11/2912:11:35INFOipc.Client:Re
j3smile·2011-11-29 21:00

Run hadoop example

/conf/core-site.xml  /inputroot@u1:/home/sa/hod/hadoop-0.20.1# bin/hadoop jar hadoop-*-examples.jar
·2011-11-08 22:00

基于Eclipse的Hadoop环境搭建指南

编辑系统变量【Path】，加入【c:\cygwin\bin】 二、安装java 配置 JAVA_HOME; 三、配置eclipse 1、把hadoop安装包下的 contrib/ 目录下的插件 hadoop
tibaloga·2011-11-03 12:00

运行hadoop基准测试

集群采购新的服务器，需要对服务器在hadoop环境下的性能进行测试，所以特地整理了一下hadoop集群自带的测试用例：bin/hadoopjarhadoop-*test*.jar 运行上述命令，可以得到hadoop
azhao_dn·2011-11-03 11:00

Hadoop-分布式安装配置

  基础环境 3台linux环境机器，本文采用3个VMWare做的虚拟机安装linux AS 5，本文采用vmware的NAT方式规划IP 分别为：   机器名 IP 说明 Hadoop00  192.168.91.10  Master, nameNode, SecondaryNamenode, jobTracker Hadoop01 1
zp820705·2011-09-24 23:00

Hadoop-分布式安装配置

  基础环境 3台linux环境机器，本文采用3个VMWare做的虚拟机安装linux AS 5，本文采用vmware的NAT方式规划IP 分别为：   机器名 IP 说明 Hadoop00  192.168.91.10  Master, nameNode, SecondaryNamenode, jobTracker Hadoop01 1
zp820705·2011-09-24 23:00

hadoop-*-streaming.jar源码浅析

Main-Class为HadoopStreaming，主函数：publicstaticvoidmain(String[]args)throwsException{  intreturnStatus=0;  StreamJobjob=newStreamJob();     returnStatus=ToolRunner.run(job,args);  if(returnStatus!=0){   S
andyelvis·2011-09-18 17:00

hadoop单机版搭建图文详解

http://freewxy.iteye.com/blog/882784 ）3、下载hhadoop0.21.0.tar.gz（http://apache.etoak.com//hadoop/core/hadoop
backsnow·2011-09-06 17:00

hbase的export与import工具

mapreduce来完成这件事，需要在hbase的conf中添加mapred-site.xml：mapred.job.tracker192.168.0.1:9001hadoop.tmp.dir/tmp/hadoop
lc_koven·2011-09-01 08:00

hadoop参数设置

hadoop.tmp.dir 指定的目录是本地目录，存储namenode的metadata，hdfs的块数据，还有临时数据，默认值/tmp/hadoop-${user.name} fs.default.name
samwalt·2011-08-29 18:00

Hadoop namenode 不能启动解决方案

每次机器重启了，namenode都启动不了，造成到原因可能是：    在core-site.xml配置中hadoop.tmp.dir的目录在系统启动时被清空 hadoop.tmp.dir /tmp/hadoop/hadoop
leecho571·2011-08-27 22:00

hadoop最基本配置及build(ant代理)

core.jar里面，源码在 hadoop-0.20.2\src\core\core-default.xml hadoop-0.20.2\src\mapred\mapred-default.xml hadoop
haoningabc·2011-01-06 11:00

hadoop最基本配置及build(ant代理)

core.jar里面，源码在 hadoop-0.20.2\src\core\core-default.xml hadoop-0.20.2\src\mapred\mapred-default.xml hadoop
haoningabc·2011-01-06 11:00

ubuntu下设置文件权限

今天在配置hadoop到时候，发现无法修改hadoop-­‐env.sh，即使使用命令：sudogedithadoop-env.sh也是无法修改。
xw13106209·2010-12-09 00:00

Hadoop- The Definitive Guide 笔记2

TheApacheHadoopprojectdevelopsopen-sourcesoftwareforreliable,scalable,distributedcomputing,including:HadoopCore,ourflagshipsub-project,providesadistributedfilesystem(HDFS)andsupportfortheMapReducedist
fxjtoday·2010-09-26 15:00

Hadoop- The Definitive Guide 笔记

首先我们为什么需要Hadoop？ThegoodnewsisthatBigDataishere.Thebadnewsisthatwearestrugglingtostoreandanalyzeit.面对海量的数据，我们需要高效的分析和存储他们，而Hadoop可以做到这点，This,inanutshell,iswhatHadoopprovides:areliablesharedstorageandan
fxjtoday·2010-09-21 11:00

Hadoop- The Definitive Guide 笔记

首先我们为什么需要Hadoop？ThegoodnewsisthatBigDataishere.Thebadnewsisthatwearestrugglingtostoreandanalyzeit.面对海量的数据，我们需要高效的分析和存储他们，而Hadoop可以做到这点，This,inanutshell,iswhatHadoopprovides:areliablesharedstorageandan
fxjtoday·2010-09-21 11:00

hadoop-伪分布安装

先决条件安装jre1.6 rpm包 http://www.java.com/zh_CN/download/manual.jspchmod u+x jre-6u21-linux-i586-rpm.bin./jre-6u21-linux-i586-rpm.bin设置密钥登录不然每次启动时都要输入密码$ssh-keygen-tdsa-P''-f~/.ssh/id_dsa $cat~/.ssh/id_ds
jiaminqiang·2010-08-22 11:25

hadoop-伪分布安装

先决条件安装jre1.6 rpm包 http://www.java.com/zh_CN/download/manual.jspchmod u+x jre-6u21-linux-i586-rpm.bin./jre-6u21-linux-i586-rpm.bin设置密钥登录不然每次启动时都要输入密码$ssh-keygen-tdsa-P''-f~/.ssh/id_dsa $cat~/.ssh/id_ds
jiaminqiang·2010-08-22 11:25

Hadoop下运行WordCount的命令总结（亲身体验）

$bin/hadoopnamenode-format$bin/start-all.sh$mkdirwordcount_classes$javac-classpath${HADOOP_HOME}/hadoop
shupan001·2010-07-18 15:00

hadoop tut

hadooop-evn.sh:　java_home= bin/hadoop mkdir -p temp/input cp conf/*.xml temp/input bin/hadoop jar hadoop
stephen80·2010-06-03 11:00

Hadoop Usage

The default value is /tmp/hadoop-${user.name}.   With /tmp/hadoop-${user.name} as hadoop.tm
yaojingguo·2010-04-24 13:00

hadoop-0.20.1部署手记

这次测试，我使用的是最新版本hadoop-
sery·2009-10-20 14:40
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他