E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop1.1.2
hadoop1.1.2
集群详细安装实例
最近因为公司准备将数据迁移到Hbase上,所以不得不学习hadoop,我们尝试过将数据迁移到mongodb上面,周末在家里做了一个小试验,使用java+mongodb做爬虫抓取数据,我将mongodb安装在centos6.3虚拟机上,分配1G的内存,开始抓数据,半小时后,虚拟机内存吃光,没有办法解决内存问题,网上很多人说没有32G的内存不要玩mongodb,这样的说法很搞笑,难道我将1T的数据都放
都市网达
·
2014-05-15 16:00
Linux下Hadoop Eclipse插件编译安装
转载自:http://www.cnblogs.com/kinuxroot/archive/2013/05/06/linux_hadoop_eclipse_plugin.html在RedHat,
hadoop1.1.2
kartik
·
2014-05-04 14:28
linux
RedHat
eclipse
Hadoop
Linux下Hadoop Eclipse插件编译安装
转载自:http://www.cnblogs.com/kinuxroot/archive/2013/05/06/linux_hadoop_eclipse_plugin.html在RedHat,
hadoop1.1.2
kartik
·
2014-05-04 14:28
eclipse
linux
hadoop
redhat
插件
编译
更新 hadoop eclipse 插件
卸载
hadoop1.1.2
插件,并安装新版hadoop2.2.0插件。
Mrknowledge
·
2014-04-22 11:00
Hbase分布式安装
Hadoop安装参考:"
hadoop1.1.2
分布式环境搭建" 点击打开链接Zookeeper安装参考:"zookeeper分布式安装" 点击打开链接 准备工作服务器信息: 上传hbase包将hbase
wangmuming
·
2014-04-18 09:00
分布式
hbase
hadoop1.1.2
分布式环境搭建
hadoop1.1.2
分布式安装Hadoop简介Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。
wangmuming
·
2014-04-12 19:00
hadoop
分布式
分布式文件系统
分布式计算
Cascading TemplateTap的使用
环境:CentOS6.3,
Hadoop1.1.2
,JDK1.6, Eclipse,Cascading应用场景:当需要把输入文件根据某个字段分片(数据按字段值输入到相应的目录)输出时。
zlcd1988
·
2014-04-09 11:00
fuse_trash.c:119: error: too few arguments to function 'hdfsDelete'
在
hadoop1.1.2
中使用命令antcompile-contrib-Dlibhdfs=1-Dfusedfs=1编译fuse_dfs的时候出现如下错误:compile: [echo]contrib:fairscheduler
Mrknowledge
·
2014-04-08 22:00
Spark 开发搭建运行
环境:CentOS6.3,
Hadoop1.1.2
,JDK1.6,Spark1.0.0,Scala2.10.3,Eclipse(Hadoop可以不安装)首先明白一点,spark就是scala项目。
zlcd1988
·
2014-03-22 17:00
scala
spark
spark
开发
spark部署
spark打包
hadoop伪分布式的安装
(如有错误,欢迎批评指正) 1.安装环境 在windows系统上安装linux系统,以CenOS为例.hadoop版本是
hadoop1.1.2
2.配置linux虚拟机
迪allen
·
2014-03-20 21:00
hadoop
详解
伪分布式
hadoop伪分布式的安装
(如有错误,欢迎批评指正) 1.安装环境 在windows系统上安装linux系统,以CenOS为例.hadoop版本是
hadoop1.1.2
2.配置linux虚拟机 2.1确保window
迪allen
·
2014-03-18 22:01
hadoop
详解
伪分布式
Spark 安装
环境:CentOS6.3,
Hadoop1.1.2
,JDK1.6,Spark1.0.0,Scala2.10.3在安装开始前,请大家务必明白,spark版本不一样,有些细节是不一样的。
zlcd1988
·
2014-03-13 16:00
scala
hadoop
spark
spark
centos
1.0.0
windows下Eclipse安装
hadoop1.1.2
插件连接hadoop集群
我的hadoop集群用的版本:
hadoop1.1.2
hadoop0.20以后的版本的安装目录下contrib/没有eclipse的hadoop-*-eclipse-plugin.jar插件,需要自己用
stefshawn
·
2013-10-16 15:00
hadoop1.1.2
升级1.2.1
运行命令:bin/hadoopnamenode-upgrade进入升级信息展示然后就是漫长的数据升级,140G的数据升级了十几个小时到现在还没完成~~~
xqj198404
·
2013-09-27 10:00
hadoop
MapReduce工作的基本流程
Hadoop0.2之前版本和之后版本在Job中有很大的改进,本次采用的版本是
Hadoop1.1.2
版本。
zhao_xiao_long
·
2013-09-02 20:46
工作流程
mapreduce
hadoop
Hadoop
MapReduce工作的基本流程
Hadoop0.2之前版本和之后版本在Job中有很大的改进,本次采用的版本是
Hadoop1.1.2
版本。
zhao_xiao_long
·
2013-09-02 20:46
mapreduce
hadoop
工作流程
HDFS基本文件常用命令
如下: vim/etc/profile中加入一句 exportHADOOP_INSTALL=/usr/local/
hadoop1.1.2
注意这里要写HADOOP_INSTALL,因为如果写HADOOP_HOME
zhao_xiao_long
·
2013-07-28 13:37
HDFS文件基本操作
HDFS基本文件常用命令
如下:vim/etc/profile中加入一句exportHADOOP_INSTALL=/usr/local/
hadoop1.1.2
注意这里要写HADOOP_INSTALL,因为如果写HADOOP_HOME
zhao_xiao_long
·
2013-07-28 13:37
HDFS文件基本操作
Hadoop
Hadoop1.1.2
Eclipse 插件编译
可以直接下载我编译好的插件hadoop-eclipse-plugin-1.1.2http://download.csdn.net/detail/wind520/57843891:方法一: copysrc\contrib\build-contrib.xml到src\contrib\eclipse-plugin目录下,然后修改
wind520
·
2013-07-19 17:00
eclipse
hadoop
plugin
hadoop-1.1.2 在centos环境下的部署
CentOS6.4Java:默认的 OpenJDK1.7.0.91:配置JAVA_HOMEhttp://blog.csdn.net/wind520/article/details/93088092:下载
hadoop1.1.2
wind520
·
2013-07-12 18:00
ubuntu系统下eclipse配置hadoop开发环境并运行wordcount程序
先列出本机环境:ubuntu12eclipse3.6hadoop1.1.2ubuntu12环境下
hadoop1.1.2
伪分布式配置成功,然后用Ant编译eclipsehadoopplugin插件,接下来就是
yonghutwo
·
2013-06-30 14:00
eclipse
hadoop
wordcount
ubuntu12环境下
hadoop1.1.2
伪分布式配置
网上大多数类似文章都基于hadoop0.02,现在hadoop版本升级,本人经实践,写下本文,其中不少地方参考了前辈的经验,在此致谢,并声明copy之处只为技术交流。1.环境ubuntu12hdoop1.1.22,创建hadoop用户组;1sudoaddgrouphadoop2.创建hadoop用户;1sudoadduser-ingrouphadoophadoop3.给hadoop用户添加权限,打
yonghutwo
·
2013-06-28 13:00
java
jdk
hadoop
ssh
ubuntu
hadoop环境搭建
Hadoop1.1.2
、ubantu12.04、eclipse juno、JDK1.7 下载http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common
cywhoyi
·
2013-06-09 17:00
hadoop
hadoop环境搭建
Hadoop1.1.2
、ubantu12.04、eclipse juno、JDK1.7 下载http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common
cywhoyi
·
2013-06-09 17:00
hadoop
远程调用执行Hadoop Map/Reduce
注:基于
Hadoop1.1.2
版本转发请注明地址:http://sgq0085.iteye.com/admin/blogs/1879442一个常见的WordCount如下:packagecom.gqsha
sgq0085
·
2013-05-30 09:00
Hadoop
remote
远程调用
Cluster
调用Utils
远程调用执行Hadoop Map/Reduce
注:基于
Hadoop1.1.2
版本 转发请注明地址:http://sgq0085.iteye.com/admin/blogs/1879442 一个常见的WordCount如下: pa
sgq0085
·
2013-05-30 09:00
hadoop
cluster
远程调用
remote
[置顶] Ubuntu12.04配置
Hadoop1.1.2
集群
Ubuntu12.04配置
Hadoop1.1.2
集群背景ThinkPadT420Ubuntu12.04VmwareWorkstation9.0.0目的 最终要配置一台master,一台secondary
sourceFour
·
2013-05-06 10:00
hadoop
cluster
集群
ubuntu
12.04
Windows环境下ANT
Hadoop1.1.2
eclipse-plugin
同Windows编译Hadoop-eclipse-plugin-1.0.4.jar一样1. apache ant压缩包,解压到D盘2. 配置ant环境变量ANT_HOME = D:\apache-ant-1.9.0在path环境变量后追加 %ANT_HOME%\bin 在CMD命令窗中 ant -ve
sgq0085
·
2013-04-16 09:00
eclipse
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他