E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop1.2.1
Hadoop家族安装系列(3)——hive0.12安装
在
Hadoop1.2.1
分布式集群环境下安装hive0.12 ● 前言:1. 大家最好通读一遍过后,在理解的基础上再按照步骤搭建。2.
cumtheima
·
2014-03-08 22:00
hadoop
hive
hive安装
安装Hive
hive0.12
Hadoop家族安装系列(2)——安装Mahout0.9框架
在
Hadoop1.2.1
分布式集群环境下安装Mahout0.9框架 友情提醒:大家最好通读一遍过后,在理解的基础上按照步骤一步一步设置,因为后面的会对前面的有所启示。
cumtheima
·
2014-03-07 19:00
mahout0.9
Mahout安装
安装Mahout
Hadoop 伪分布模式的安装
一下载软件 安装环境:CentOS6.4X86_64 JDK1.7.0_25
Hadoop1.2.1
Hadop下载地址:http://hadoop.apache.org
Crazy__Programmer
·
2014-03-07 16:00
hadoop
Hadoop家族安装系列(1)——
Hadoop1.2.1
分布式安装
在VMware下安装Ubuntu并部署
Hadoop1.2.1
分布式环境 友情提醒:大家最好通读一遍过后,在理解的基础上安装步骤一步一步设置,因为后面的步骤会对前面的步骤有所启示。
cumtheima
·
2014-03-07 11:00
vmware
hadoop
ubuntu
hadoop分布式集群
部署hadoop
hadoop1.2.1
安装配置
环境:ubuntu13使用的用户为普通用户。如:用户rujdk安装略1、安装ssh(1)Java代码 sudo apt-get install openssh-server (2)配置ssh面密码登录Xml代码 $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_
hxpjava1
·
2014-03-01 13:00
HBase 5种写入数据方式
Version:
hadoop1.2.1
;hbaes0.94.16;HBase写入数据方式(参考:《HBaseTheDefinitiveGuide》),可以简单分为下面几种:1.直接使用HTable进行导入
fansy1990
·
2014-02-28 16:00
hbase表导入
MapReduce编程实例
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
Mrknowledge
·
2014-02-24 13:00
hbase 0.94.16 伪分布模式安装
既然是hbase安装,这里就免去hadoop安装的介绍了(请参阅本人
hadoop1.2.1
版安装帖子),hbase0.94.16
caimin1977
·
2014-02-23 17:42
安装
hbase
Ubuntu 12.04 配置hadoop完全分布式
Hadoop1.2.1
版本下载地址:http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/二、准备安装环境我的本机是环境是windows8.1系统+VMvare9
heyongluoyao8
·
2014-01-23 15:00
hadoop1.2.1
安装配置
环境:ubuntu13 使用的用户为普通用户。如:用户ru jdk安装略 1、安装ssh (1) sudo apt-get install openssh-server (2)配置ssh面密码登录 $ ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa $ cat ~/.ssh/id_dsa.pub >> ~/.ssh/aut
退役的龙弟弟
·
2014-01-21 23:00
hadoop
mapreduce实现推荐系统
blog.csdn.net/lichangzai/article/details/173105232.Hadoop集群环境:OracleLinuxEnterprise5.9Java1.6.0_18Hadoop:
hadoop1.2.1
lichangzai
·
2014-01-08 23:00
Hadoop1.2.1
集群安装
机器配置:win7+i7-3635QM+12G内存,使用Vmware虚拟机,里面安装3台Ubuntu12.0464位。虚拟机每一个分配CPU2核、内存2G、硬盘40G。使用NAT网络适配模式。 1、安装Ubuntu 安装Ubuntu后,运行 sudoapt-getupdate sudoapt-get
laosu
·
2013-12-28 16:00
hadoop
在oracle Virtual Box 虚拟机中搭建
hadoop1.2.1
完全分布式环境
一、初衷对于学习Hadoop的我来将,没有足够的硬件设备,但又想安装完全分布式的Hadoop,一个master两个slave。手上就一台能联网的笔记本,那就使用oraclevitualbox进行环境搭建把。环境搭建的效果为:在虚拟机中虚拟3台centos6.464位系统,每台都配置双网卡NAT,host-only模式。在宿主机器上安装eclipse进行Hadoop开发。Hadoop环境搭建很大部分
twlkyao
·
2013-12-15 17:00
hadoop
大数据
云计算
环境搭建
Centos6.4 +Hadoop 1.2.1集群完全分布模式配置
Hadoop1.2.1
版本下载地址:http://apache.dataguru.cn/hadoop/common/ha
fuquanjun1013
·
2013-12-14 16:58
hadoop
centos6.4
1.2.1
集群完全分布模式配置
Centos6.4 +Hadoop 1.2.1集群完全分布模式配置
Hadoop1.2.1
版本下载地址:http://apache.dataguru.cn/hadoop/common/ha
linux_python
·
2013-12-14 16:58
Centos6.4
Hadoop
1.2.1
集群完全分布模式配置
Linux群集
Hadoop1.2.1
源码解析系列:JT与TT之间的心跳通信机制——命令篇
前两篇文章简单介绍了hadoop心跳机制的两个重要角色:JT和TT,虽然不是太详细,但是大纸业说清楚了一些事,在JT篇的最后对于JT返回TT的心跳响应中的一些命令一笔带过,这篇文章将重要介绍这些命令:ReinitTrackerAction,KillTaskAction,KillJobAction,CommitTaskAction,LaunchTaskAction。每个命令都对应着一系列行为,所有的
hqshaozhu
·
2013-12-07 22:00
mapreduce
源码
hadoop
命令
心跳
Hadoop1.2.1
源码解析系列:JT与TT之间的心跳通信机制——JT篇
上一篇浅析了Hadoop心跳机制的TT(TaskTracker)方面,这一篇浅析下JT(JobTracker)方面。我们知道心跳是TT通过RPC请求调用JT的heartbeat()方法的,TT在调用JT的heartbeat回收集自身的状态信息封装到TaskTrackerStatus对象中,传递给JT。下面看看JT如何处理来自TT的心跳。1.JobTracker.heartbeat()://Make
hqshaozhu
·
2013-12-05 00:00
mapreduce
源码
hadoop
心跳
jobtracker
第二节:win 7下编译eclispe hadoop plugin
www.cnblogs.com/chenying99/archive/2013/05/31/3109566.html 1、下载ANT,apache-ant-1.9.2-bin.tar.gz
Hadoop1.2.1
conkeyn
·
2013-11-29 19:00
eclispe
Ubuntu 12.10 +Hadoop 1.2.1版本集群配置
hadoop1.2.1
版本下载地址:http://apache.dataguru.cn/hadoop/common
heyongluoyao8
·
2013-11-28 19:00
hadoop
hadoop
ubuntu
分布式文件系统
Hadoop集群配置
如何在eclipse调试mapreduce程序
如何在eclipse或myeclipse调试mapreduce程序,这个可能是初学mr程序者碰到的一个难题在
hadoop1.2.1
后,在下载的源代码中找不到hadoop-eclipse-plugin
cloud-coder
·
2013-11-26 14:00
eclipse
mapreduce
maven
debug
mr
pom
MapReduce编程实例(六)
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
u012736198
·
2013-11-25 18:00
Hadoop1.2.1
源码解析系列:JobTracker(一)——JobTracker初始化
JobTracker是hadoop的mapreduce框架中最重要的一个类,这个类负责整个集群的作业控制和资源管理。JobTracker的启动是在用户启动hadoop集群时启动的,也就是在hadoop启动完之后使用jps命令看到的jobTracker进程,启动代码是在start-mapred.sh中。启动JobTracker是通过调用JobTracker的main()方法启动。下面一步一步慢慢分析
hqshaozhu
·
2013-11-24 23:00
mapreduce
源码
hadoop
jobtracker
初学者VmWare安装CentOS6.4虚拟机搭建
hadoop1.2.1
\hbase0.94.12环境
主要是希望对以后能有个笔记的东西所以记下所有安装的步骤,也希望跟我同样初学这方面知识的朋友能有一些分享的意义。 一 使用VmWare安装CentOS6.4虚拟机 安装所需软件vmware、CentOS,我使用的vmware版本是7.0.0build-203739,下载地址https://my.vmware.com/cn/web/vmware/downloads,注册什么的就请大家自己
秦昭襄王
·
2013-11-24 22:00
vmware
hadoop
centos
hbase
MapReduce编程实例(五)
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
u012736198
·
2013-11-24 18:00
MapReduce编程实例(四)
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
u012736198
·
2013-11-23 12:00
hadoop1.2.1
eclipse plugin ant build
linux安装1.下载hadoop1.2.1http://mirror.esocc.com/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz2.解压
hadoop1.2.1
joe_zhjiang
·
2013-11-21 17:00
hadoop1.2.1
eclipse plugin ant build
linux安装1.下载hadoop1.2.1http://mirror.esocc.com/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz2.解压
hadoop1.2.1
joe_zhjiang
·
2013-11-21 17:00
eclipse
plugin
MapReduce编程实例(三)
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
u012736198
·
2013-11-21 12:00
MapReduce编程实例(二)
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
u012736198
·
2013-11-20 17:00
linux下eclipse集成
hadoop1.2.1
linux下eclipse集成hadoop1.2.11.下载安装eclipse2.下载安装hadoop3.生成eclipse插件,并放入eclipse文件中4.运行eclipse并配置视图和HDFS文件系统ps:虚拟机要联网,要运行hadoop,
handawei
·
2013-11-16 02:00
eclipse
linux下eclipse集成
hadoop1.2.1
linux下eclipse集成hadoop1.2.11.下载安装eclipse2.下载安装hadoop3.生成eclipse插件,并放入eclipse文件中4.运行eclipse并配置视图和HDFS文件系统ps:虚拟机要联网,要运行hadoop,
handawei
·
2013-11-16 02:00
eclipse
hadoop1.2.1eclipse 插件An internal error occurred during: "Connecting to DFS
hadoop1.2.1
".
编译插件成功后,通过插件连接DFS时仍有Aninternalerroroccurredduring:"ConnectingtoDFShadoop1.2.1".异常,打开error.log,查看错误异常Causedby:java.lang.ClassNotFoundException:org.apache.commons.configuration.Configurationcannotbefoun
a221133
·
2013-11-15 12:23
大数据
eclipse插件
java
java
hadoop1.2.1eclipse 插件An internal error occurred during: "Connecting to DFS
hadoop1.2.1
".
编译插件成功后,通过插件连接DFS时仍有Aninternalerroroccurredduring:"ConnectingtoDFShadoop1.2.1".异常,打开error.log,查看错误异常Causedby:java.lang.ClassNotFoundException:org.apache.commons.configuration.Configurationcannotbefoun
A221133
·
2013-11-15 12:00
java
大数据
eclipse插件
win7下编译
hadoop1.2.1
eclipse插件
最近一段时间都在学习hadoop,下载的是1.2.1的版本,包括源码;发现在该版本的安装目录下不再提供eclipse的插件包;但是在src/contrib目录下依然有eclipse-plugin的目录用于提供插件的源码,以及对应的Ant使用的build.xml文件;为了开发Map/Reduce程序的方便,决定自己进行hadoop的eclipse-plugin的打包操作,打包的步骤如下:PS:本次编
A221133
·
2013-11-14 17:00
大数据
eclipse插件
海量数据
淘宝
一淘
MapReduce编程实例(一)
Hadoop安装配置请参考:Ubuntu下
Hadoop1.2.1
配置安装2.集成开发环境正常。
u012736198
·
2013-11-13 23:00
Ubuntu下 Hadoop 1.2.1 配置安装
本文一步步记录了Ubuntu环境安装
Hadoop1.2.1
,搭建单机模式以及伪分布式模式,希望对各位和我一样的菜鸟有所帮助,共同学习进步,欢迎交流。
u012736198
·
2013-11-13 22:00
Centos6.4 +Hadoop 1.2.1集群配置
Hadoop1.2.1
版本下载地址:http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/本文章配置的是完全分布模式。hadoop三种
pizibaidu
·
2013-11-01 17:38
配置
教程
集群
hadoop
Centos6.4 +Hadoop 1.2.1集群配置
Hadoop1.2.1
版本下载地址:http://apache.dataguru.cn/hadoop/common/hadoop-1.2.1/本文章配置的是完全分布模式。hadoop三种
pizibaidu
·
2013-11-01 17:38
hadoop
centos
集群
配置
教程
Hadoop1.2.1
完全分布式部署
首先确保各个节点主机之间能够SSH无密码访问,关于SSH无密码登陆的配置方法,参考 http://blog.csdn.net/spring292713/article/details/14000737IP地址节点名称192.168.85.152Master192.168.85.153Slave只在Master节点上配置,然后拷贝给其他节点,下面是master的详细配置。 1) 首先,需要配置的是在
spring292713
·
2013-11-01 11:00
hadoop
分布式
图解
Hadoop1.2.1
容量调度器的配置
资源调度器是Hadoop集群中一个比较重要的模块,最初的hadoop资源调度器是基于队列形式的FIFO调度的,这种模式在大规模集群的时候,资源分配并不是很合理,比如一个后提交的任务,但想要它先执行怎么办,而在FIFO模式下,只能等到前面所有的JOB执行完后,才能执行这个作业。所以如何进行资源的合理管理和分配,就成了一个急待解决的需求,由此就产生了后来的二个非常优秀的调度器分别是Yahoo!开源的C
qindongliang1922
·
2013-10-31 17:00
hadoop
centos
资源调度器
容量调度器
图解
Hadoop1.2.1
容量调度器的配置
资源调度器是Hadoop集群中一个比较重要的模块,最初的hadoop资源调度器是基于队列形式的FIFO调度的,这种模式在大规模集群的时候,资源分配并不是很合理,比如一个后提交的任务,但想要它先执行怎么办,而在FIFO模式下,只能等到前面所有的JOB执行完后,才能执行这个作业。所以如何进行资源的合理管理和分配,就成了一个急待解决的需求,由此就产生了后来的二个非常优秀的调度器分别是Yahoo!开源的C
qindongliang1922
·
2013-10-31 17:00
hadoop
centos
资源调度器
容量调度器
图解
Hadoop1.2.1
容量调度器的配置
资源调度器是Hadoop集群中一个比较重要的模块,最初的hadoop资源调度器是基于队列形式的FIFO调度的,这种模式在大规模集群的时候,资源分配并不是很合理,比如一个后提交的任务,但想要它先执行怎么办,而在FIFO模式下,只能等到前面所有的JOB执行完后,才能执行这个作业。所以如何进行资源的合理管理和分配,就成了一个急待解决的需求,由此就产生了后来的二个非常优秀的调度器分别是Yahoo!开源的C
qindongliang1922
·
2013-10-31 17:00
hadoop
centos
资源调度器
容量调度器
图解
Hadoop1.2.1
容量调度器的配置
资源调度器是Hadoop集群中一个比较重要的模块,最初的hadoop资源调度器是基于队列形式的FIFO调度的,这种模式在大规模集群的时候,资源分配并不是很合理,比如一个后提交的任务,但想要它先执行怎么办,而在FIFO模式下,只能等到前面所有的JOB执行完后,才能执行这个作业。所以如何进行资源的合理管理和分配,就成了一个急待解决的需求,由此就产生了后来的二个非常优秀的调度器分别是Yahoo!开源的C
qindongliang1922
·
2013-10-31 17:00
hadoop
centos
资源调度器
容量调度器
图解
Hadoop1.2.1
容量调度器的配置
资源调度器是Hadoop集群中一个比较重要的模块,最初的hadoop资源调度器是基于队列形式的FIFO调度的,这种模式在大规模集群的时候,资源分配并不是很合理,比如一个后提交的任务,但想要它先执行怎么办,而在FIFO模式下,只能等到前面所有的JOB执行完后,才能执行这个作业。所以如何进行资源的合理管理和分配,就成了一个急待解决的需求,由此就产生了后来的二个非常优秀的调度器分别是Yahoo!开源的C
qindongliang1922
·
2013-10-31 17:00
hadoop
centos
资源调度器
容量调度器
hadoop1.2.1
下hbase安装
1:由于我现在安装的hadoop版本是1.21可以根据下面的hadoop与hbase的对应关系,到hbase官网上下载hbase0.94版本。下载地址为:http://apache.mirrors.tds.net/hbase/hbase-0.94.11/2:解压hbase0.94.11的tar包 tar-zxvfhbase-0.94.11.tar.gz 3:修改hbase-env.sh文件
lianhua
·
2013-10-28 15:00
hadoop
myeclipse hadoop插件安装
徐海蛟博士环境:WindowsXP,
hadoop1.2.1
,jdk1.6,myeclipse。Apache官网下载hadoop。解压。
xuhaijiao99
·
2013-10-25 19:45
java
hadoop
MyEclipse
CentOS6.4之图解
Hadoop1.2.1
完全分布式部署
散仙用的是Centos6.4的版本,
hadoop1.2.1
的版本,其他的一些linux系统都是大同小异,关于SSH的配置及一些准备工作,在这里就不多说了,不会的
qindongliang1922
·
2013-10-25 18:00
linux
hadoop
centos
完全分布式部署
CentOS6.4之图解
Hadoop1.2.1
完全分布式部署
散仙用的是Centos6.4的版本,
hadoop1.2.1
的版本,其他的一些linux系统都是大同小异,关于SSH的配置及一些准备工作,在这里就不多说了,不会的
qindongliang1922
·
2013-10-25 18:00
linux
hadoop
centos
完全分布式部署
CentOS6.4之图解
Hadoop1.2.1
完全分布式部署
散仙用的是Centos6.4的版本,
hadoop1.2.1
的版本,其他的一些linux系统都是大同小异,关于SSH的配置及一些准备工作,在这里就不多说了,不会的
qindongliang1922
·
2013-10-25 18:00
hadoop
linux
centos
完全分布式部署
CentOS6.4之图解
Hadoop1.2.1
完全分布式部署
散仙用的是Centos6.4的版本,
hadoop1.2.1
的版本,其他的一些linux系统都是大同小异,关于SSH的配置及一些准备工作,在这里就不多说了,不会的
qindongliang1922
·
2013-10-25 18:00
linux
hadoop
centos
完全分布式部署
上一页
1
2
3
4
5
6
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他