hadoop1.2.1

Hadoop入门经典:WordCount

以下程序在hadoop1.2.1上测试成功。 本例先将源代码呈现，然后详细说明执行步骤，最后对源代码及执行过程进行分析。
·2014-08-20 14:00

Hadoop1.2.1伪分布模式安装指南

一、前置条件 1、操作系统准备 （1）Linux可以用作开发平台及产品平台。 （2）win32只可用作开发平台，且需要cygwin的支持。 2、安装jdk 1.6或以上 3、安装ssh，并配置免密码登录。 $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa   $ cat ~/.ssh/id_dsa.pub >
·2014-08-17 10:00

Hadoop1.2.1伪分布模式安装指南

一、前置条件1、操作系统准备（1）Linux可以用作开发平台及产品平台。（2）win32只可用作开发平台，且需要cygwin的支持。2、安装jdk1.6或以上3、安装ssh，并配置免密码登录。$ssh-keygen-tdsa-P''-f~/.ssh/id_dsa $cat~/.ssh/id_dsa.pub>>~/.ssh/authorized_keys注意（1）若.ssh目录不存在，则先建立目录。
jediael_lu·2014-08-17 10:00

hadoop1.2.1之hello，world

在hadoop文件系统上创建文件夹test fs -mkdir test   拷贝当前文件夹input的内容到hadoop文件系统上 fs -put input/ ./test   查看是否拷贝成功 fs -ls -rw-r--r--   1 chenc supergroup    &nbs
michael_roshen·2014-08-12 17:00

Hadoop1.2.1安装笔记4：Hadoop环境验证

格式化节点，只需一次[hadoop@master conf]$ hadoop namenode -format  Warning: $HADOOP_HOME is deprecated.  14/07/31 01:41:39 INFO namenode.NameNode: STARTUP_MSG:  /***********************************************
cisolang·2014-08-12 09:35

Hadoop1.2.1安装笔记3:hadoop配置

在/usr目录下建立hadoop文件夹,赋予hadoop用户权限(master)[hadoop@master usr]$ sudo mkdir hadoop [hadoop@master usr]$ ls -al  total 156  drwxr-xr-x. 2 root root 4096 Jul 31 00:17 hadoop  [hadoop@master usr]$ sudo chown
cisolang·2014-08-12 09:30

Hadoop 1.2.1 安装笔记01 : Linux 与免密码

目标：配置一个hadoop1.2.1测试环境 用的JDK是:jdk-7u65-linux-x64.gz选的hadoop是：hadoop-1.2.1.tar.gz 均来源Apache和oracle网站主机规划
cisolang·2014-08-12 08:46

hadoop编译

1、Hadoop1.2.1源码编译eclipse插件：http://www.linuxidc.com/Linux/2013-10/91666.htm2、Hadoop2.2.0编译Eclipse插件：http
earbao·2014-08-08 14:00

Hadoop 集群搭建

主要环境：      CentOS6.4    JDK1.6    Hadoop1.2.1使用三台机器进行搭建。    
红薯苗·2014-08-08 08:00

Hadoop1.2.1配置用户认证——simple类型

官方文档参考地址：AuthenticationforHadoopHTTPweb-consoles1、配置core-site.xml文件，需要配置的内容如下       hadoop.http.filter.initializers     org.apache.hadoop.security.AuthenticationFilterInitializer           hadoop.http
悟空太多啦·2014-08-03 21:00

hadoop 2.4.1 集群安装一

配置主机名参考 Hadoop1.2.1集群安装一配置JDK环境参考Hadoop1.2.1集群安装二配置hadoopA：下载解压hadoophttp://mirrors.cnnic.cn/apache/hadoop
wind520·2014-07-31 15:00

Hadoop2.4.1分布式安装

1、做好下文中的所有配置：Hadoop1.2.1分布式安装-1-准备篇。
悟空太多啦·2014-07-30 23:00

Hadoop1.2.1分布式安装-2-安装篇

1、在打算做namenode的机器上，wget或其他方式下载hadoop的压缩包，并解压到本地指定目录下载解压命令参考Linux常用命令。2、配置namenode，修改site文件修改core-site.xml        fs.default.name     hdfs://bd01:9000           hadoop.tmp.dir     /home/wukong/a_usr/ha
悟空太多啦·2014-07-27 20:00

Hadoop1.2.1分布式安装-1-准备篇

说明：本文仅为提纲，每一步具体怎么操作请见博客中其他文章1、准备两台CentOS6.5虚拟机。请确认iptables和selinux等防火墙或访问控制机制已关闭。chkconfig iptables off service iptables stop chkconfig selinux off service selinux stop使用VirtualBox复制多台虚拟机时，请重新初始化网络，并
悟空太多啦·2014-07-27 18:00

Hadoop1.2.1集群安装三

配置hadoop1:下载hadoop-1.2.1.tar.gz  在/home/jifeng创建目录  mkdirhadoop  2:解压[jifeng@jifeng01hadoop]$ls hadoop-1.2.1.tar.gz [jifeng@jifeng01hadoop]$tarzxfhadoop-1.2.1.tar.gz [jifeng@jifeng01hadoop]$ls hadoop-
wind520·2014-07-24 10:00

把Nutch爬虫部署到Hadoop集群上

原文地址：http://cn.soulmachine.me/blog/20140204/把Nutch爬虫部署到Hadoop集群上Feb4th,2014 | Comments软件版本：Nutch1.7,Hadoop1.2.1
fz2543122681·2014-07-24 00:00

Hadoop1.2.1集群安装二

1：安装JDK下载好jdk-7u45-linux-x64.gz或从其它电脑copy过去[jifeng@feng01~]$scp-r./jdk-7u45-linux-x64.gzjifeng@jifeng01:/home/jifeng Theauthenticityofhost'jifeng01(10.3.7.214)'can'tbeestablished. RSAkeyfingerprintisa
wind520·2014-07-23 23:00

hadoop1.2.1的core-default.xml文件

hadoop1.2.1的core-default.xml文件 hadoop.tmp.dir /tmp/hadoop-${user.name} 临时目录设定。
cankykong1·2014-07-21 02:00

hadoop1.2.1伪分布安装指南

1.伪分布式的安装1.1 修改ip(1)打开VMWare或者VirtualBox的虚拟网卡(2)在VMWare或者VirtualBox设置网络连接方式为host-only(3)在linux中，修改ip。有上角的图标，右键，选择Edit Connections.... ****ip必须与windows下虚拟网卡的ip在同一个网段，网关必须是存在的。(4)重启网卡，执行命令servicenetwork
开拓者-2015·2014-07-18 18:00

hadoop云盘客户端的设计与实现（二）

网上说hadoop1.2.1的版本是提供thrfit的服务的。我在hadoop的配置文件中确实找了,有thrift的定义文件。运行脚本thrfithadoopap
叶落-飘零·2014-07-17 16:41

Hadoop MapReduce之MapOutputBuffer分析

前言   MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。   
gjt19910817·2014-07-16 00:00

There is insufficient memory for the Java Runtime Environment to continue. 解决

在Centos6.4X64，JDK1.7U21下用hadoop1.2.1运行mahout0.9，处理一个5GB的数据，系统提示ThereisinsufficientmemoryfortheJavaRuntimeEnvironmenttocontinue
liema2000·2014-07-15 09:51

There is insufficient memory for the Java Runtime Environment to continue. 解决

在Centos 6.4X64，JDK1.7U21下用hadoop1.2.1运行mahout0.9，处理一个5GB的数据，系统提示ThereisinsufficientmemoryfortheJavaRuntimeEnvironmenttocontinue
liema2000·2014-07-15 09:00

MapReduce源码分析之MapTask分析

前言MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。
chlaws·2014-07-13 20:13

MapReduce源码分析之MapTask分析

前言   MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。   
chlaws·2014-07-13 20:00

离线安装 Apache Ambari

需要说明一下，这里安装的ambari是支持hadoop1.2.1版本的，而对于比较流行的新版本，比如2.0，你需要下载新的源码包.不过总的来说，安装过程是大同小异的。
poisonchry·2014-07-12 15:00

分布式-ubuntu12.04上安装hadoop1.2.1

在hadoop1.2.1的安装说明中有说明要预先安装java，我安装了好多版本的java以及好多版本的hadoop，然后发现oracle-java7与hadoop1.2.1是可以匹配的。
sunbaigui·2014-07-09 23:00

mahout 0.9的编译

mahout的bin版本目前只支持hadoop1.2.1。但是客户使用hadoop2版本，需要自己手动编译一下mahout的编译脚本如下：#!
1987times·2014-06-21 14:00

Hbase-0.94.19 单机部署

阅读更多准备相关环境运行环境工具LinuxCentos6.3JDK1.7.0_60Hadoop-1.2.1SSHSecureShellHbase需建立在Hadoop环境之上运行，参考Hadoop1.2.1
salazar·2014-06-15 21:00

Hbase-0.94.19 单机部署

准备相关环境 运行环境工具LinuxCentos6.3JDK1.7.0_60Hadoop-1.2.1SSHSecureShell Hbase需建立在Hadoop环境之上运行，参考Hadoop1.2.1单机部署
salazar·2014-06-15 21:00

Hbase-0.94.19 单机部署

准备相关环境 运行环境工具LinuxCentos6.3JDK1.7.0_60Hadoop-1.2.1SSHSecureShell Hbase需建立在Hadoop环境之上运行，参考Hadoop1.2.1单机部署
salazar·2014-06-15 21:00

hadoop1.2.1 web监控页面加上安全机制（特定用户才能登陆）

1、首先停止所有hadoop进程，修改core-site.xml文件，新增如下内容2、在hadoop安装的根目录下新建hadoop-http-auth-signature-secret文件，文件内容如下：hadoopgrid 3、将修改的文件复制到其他两个节点4、启动hadoop所有进程，查看web监控页面，首先使用匿名的方式访问，如下 5、再使用创建文件中的两个用户访问：hadoop用户 gri
coolwyh·2014-05-12 09:00

hadoop1.2.1控制namenode检查点发生的频率

1、停止所有hadoop进程，修改core-site.xml文件，改为2分钟检查一次，增加如下内容  2、复制文件到其他两个slave节点3、启动hadoop所有进程，进入fs.checkpoint.dir设置的目录下，可以看见current每隔两分钟检查更新一次 4、停止所有hadoop服务，更改core-site.xml文件，改为1分钟检查一次，如下图 5、复制到其他两个节点，然后重新启动ha
coolwyh·2014-05-12 09:00

Hadoop1.2.1 SecondNameNode与NameNode分离部署

环境如下(停止所有服务stop-all.sh)：master：master  192.168.1.106slave：slave1    192.168.1.107           slave2    192.168.1.1081、修改master（改为slave其中的一个）slave1 2、修改core-site.xmlfs.default.namehdfs://master:9000 3、修
coolwyh·2014-05-11 17:00

【甘道夫】win7环境下eclipse连接hadoop1.2.1报错简单解决：重编译FileUtil.java

Win7环境下通过eclipse连接hadoop1.2.1集群时，会遇到如下报错：Exceptioninthread"main"java.io.IOException:Failedtosetpermissionsofpath
u010967382·2014-05-09 09:00

Hadoop学习之编译eclipse插件

最近准备开始学习Hadoop1.2.1的源代码，感觉最好的方法还是可以在运行Hadoop及hadoop作业时跟踪调试代码的实际执行情况。
wenyusuran·2014-05-07 17:00

hadoop 1.2.1 Eclipse mapreduce hello word 学习笔记

在hadoop1.2.1成功配置了为分布式环境,经过了十一长假,该继续学习了,这次要在eclipse下运行一个hadoop应用 开发环境操作系统:CentOSLinuxrelease6.0(Final)
mit-tony·2014-05-05 14:43

hadoop 1.2.1 Eclipse mapreduce hello word 学习笔记

在hadoop1.2.1成功配置了为分布式环境,经过了十一长假,该继续学习了,这次要在eclipse下运行一个hadoop应用开发环境操作系统:CentOSLinuxrelease6.0(Final)eclipse4.3javaversion
mit-tony·2014-05-05 14:43

CentOs6搭建hadoop2.4集群

上次搭建hadoop1.2.1分布式集群，这次搭建hadoop2.4分布式集群，由于是在自己的笔记本上搭建集群，所以必须在虚拟机下安装多linux系统来模拟真实的分布式集群环境，我们用的虚拟机是VmWare10
coolwyh·2014-05-02 21:00

CentOs6搭建Hadoop1.2.1分布式集群

namenode2台datanode用户名全是girdmaster192.168.1.103slave1192.168.1.104slave2192.168.1.107具体的安装步骤如下：1、下载jdk1.6以及hadoop1.2.1
coolwyh1981·2014-04-27 17:55

CentOs6搭建Hadoop1.2.1分布式集群

用户名全是girdmaster    192.168.1.103slave1     192.168.1.104slave2     192.168.1.107具体的安装步骤如下：1、下载jdk1.6以及hadoop1.2.1
coolwyh·2014-04-27 17:00

hadoop1.2.1 MultipleOutputs将结果输出到多个文件或文件夹

hadoop1.2.1中使用MultipleOutputs将结果输出到多个文件或文件夹 使用步骤主要有三步： 1、在reduce或map类中创建MultipleOutputs对象，将结果输出 class
退役的龙弟弟·2014-04-24 09:00

Hadoop学习之编译eclipse插件

  最近准备开始学习Hadoop1.2.1的源代码，感觉最好的方法还是可以在运行Hadoop及hadoop作业时跟踪调试代码的实际执行情况。
sky_walker85·2014-04-20 18:00

CentOS6.4之图解Hadoop1.2.1完全分布式部署

原文地址：http://qindongliang1922.iteye.com/blog/1964852散仙上篇博客，介绍了Hadoop基于单机模式下的伪分布式的部署，那么今天我们来看下Hadoop完全分布式的部署，其实只要伪分布式部署的会了，那么完全分布式的相对来说就很简单了，只要我们在一台机器上部署好，然后远程拷贝给其他的子节点就可以了。 散仙用的是Centos6.4的版本，hadoop1.2.
majian_1987·2014-04-17 14:00

MapReduce源码分析之架构分析1

前言MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。
chlaws·2014-04-14 22:54

MapReduce源码分析之架构分析1

前言   MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。   
chlaws·2014-04-14 22:00

MapReduce源码分析之InputSplit分析

前言MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。
chlaws·2014-04-03 23:55

MapReduce源码分析之InputSplit分析

前言MapReduce的源码分析是基于Hadoop1.2.1基础上进行的代码分析。
chlaws·2014-04-03 23:00

在CentOS上安装Hadoop集群

1.1下载Hadoop1.2.1，解压用浏览器下载或
libing13810124573·2014-03-26 23:00

Hadoop家族安装系列(4)——pig0.12安装

在Hadoop1.2.1分布式集群环境下安装pig0.12 ● 前言：1. 大家最好通读一遍过后，在理解的基础上再按照步骤搭建。2. 
cumtheima·2014-03-09 11:00
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他