E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop1.2.1
hadoop安装
hadoop1.2.1
1、安装jdk我的javajdk版本:jdk1.6.0_45(官方下载)安装目录:exportJAVA_HOME=/home/ubuntu/Downloads/jdk1.6 exportCLASSPATH=".:$JAVA_HOME/lib:$CLASSPATH" exportPATH="$JAVA_HOME/bin:$PATH" $java-version#查看安装结果,出现如下信息安装成功 j
t1234xy4
·
2016-03-17 11:00
hadoop
021_在Eclipse Indigo中安装插件hadoop-eclipse-plugin-1.2.1.jar,直接运行wordcount程序
1、工具介绍EclipseIdigo、JDK1.7-32bit、
hadoop1.2.1
、hadoop-eclipse-plugin-1.2.1.jar(自己网上下载)2、插件安装步骤1)将hadoop-eclipse-plugin
YouxiBug
·
2016-03-15 11:00
搭建hbase-0.94.26集群环境
先安装
hadoop1.2.1
,见http://blog.csdn.net/jediael_lu/article/details/389264771、配置hbase-site.xml[html]viewplaincopy
lujinhong2
·
2016-03-11 10:00
011_用eclipse打开
hadoop1.2.1
源码出现The method getSplits(JobConf, int) is undefined for the type Object错误
出现的错误截图:此时Eclipse使用的jdk1.8,将编译环境改成jdk1.7就行了,解决。没问题了。下面观点是参考如下网址,未经验证。参考:http://blog.csdn.net/oneinmore/article/details/45332279这些都是泛型相关的错误,因此我猜测是eclipse在解析代码时对于泛型都要临时生成一些类,而这些类的生成方法在不同版本的jdk中是不同的,又因为
YouxiBug
·
2016-03-04 20:00
hadoop1.2.1
伪分布式搭建
0.使用host-only方式 将Windows上的虚拟网卡改成跟Linux上的网卡在同一网段 注意:一定要将widonws上的WMnet1的IP设置和你的虚拟机在同一网段,但是IP不能相同1.Linux环境配置(windows下面的防火墙也要关闭) 1.1修改主机名 vim/etc/sysconfig/network 1.2修改IP vim/etc/sysconf
bbaiggey
·
2016-03-01 17:00
hadoop1.2.1
三种模式配置
1.本地模式本地模式的安装将hadoop安装包解压后不用任何配置就是默认的本地模式此时core-site.xml,hdfs-site.xml,marped.site.xml三个配置文件都为空此时没有hdfs文件系统,可以执行mapreducehadoopfs-ls/会列出本地的linux文件系统 2.伪分布式模式需要配置core-site.xml,hdfs-site.xml,marped-site
黛玉他哥
·
2016-02-21 13:00
hadoop1.2.1
伪分布式配置
主要配置core-site.xml hdfs-site.xml mapred-site.xml
黛玉他哥
·
2016-02-20 22:00
MapReduce V1:Job提交流程之JobClient端分析
MapReduceV1:Job提交流程之JobClient端分析我们基于
Hadoop1.2.1
源码分析MapReduceV1的处理流程。
baolibin528
·
2016-02-19 14:00
mapreduce
V1Job提交流程之
Hadoop中空间数据的存储(一)
实验准备: 1、数据集:全国县级行政单元(约148MB) 2、实验环境:
Hadoop1.2.1
yaoxiaochuang
·
2016-02-06 00:00
hadoop
数据
存储
空间数据
使用3个节点来部署完全分布式集群
散仙用的是Centos6.4的版本,
hadoop1.2.1
的版本,其他的一些linux系统都是大同小异,关于SSH的配置及一些准备工作,在这里就不多说了,不会的可以参照散仙的
weitao1026
·
2016-01-23 21:00
hadoop
hadoop1.2.1
伪分布模式配置
1、修改core-site.xml,配置hdfs1 2 3fs.default.name 4hdfs://localhost:9000 5 6 7hadoop.tmp.dir 8/home/jimmy/Desktop/tmp 9 10注:a)fs.default.name对应的value是hdfs的ip和端口,只要端口不被占用即可b)hadoop.tmp.dir对应的value是hadoop临时文
u012701023
·
2016-01-19 11:00
hadoop
ubuntu13.04环境
hadoop1.2.1
单机模式安装
一、虚拟机上安裝ubuntun13.04 中文版当然,你要是习惯看英文版,也可以直接安装英文版。老老实实从官网下载安装即可,安装系统不是本文的重点。这里只提一个注意事项:新手安装前,切记断网,因为安装过程中会联网下载,默认情况下连接的是美国的服务器,如果网速慢,这一步就可能会耗费几个小时。断网后,这里会自动跳过,等安装好,再设置服务器,选择国内的服务器更新语言包等其它软件。 二、安装JDK1.7.
u012701023
·
2016-01-19 10:00
虚拟机
hadoop
ubuntu
hadoop1.2.1
伪分布式安装
1.关闭防火墙和selinux2.创建hadoop用户3.下载hadoop包并解压https://archive.apache.org/dist/hadoop/common/4.配置系统环境/etc/hosts添加192.168.4.150 nutch#主机名5.java-version#查看java版本号 安装java环境#javaexportJAVA_HOME=/usr/java/jdk1.7
tanj123
·
2016-01-13 10:00
一步一步安装
hadoop1.2.1
一步一步安装hadoop1.2.1--主机基本配置--配置主机hostnamenode1hostnamenode2hostnamenode3--配置ipifconfig192.168.239.129192.168.239.135192.168.239.136--配置映射vi/etc/hosts192.168.239.129node1192.168.239.135node2192.168.239.1
gdmzlhj1
·
2016-01-08 14:45
hadoop
hadoop1.2.1
运行wordcount报错
安装步骤参见http://www.tuicool.com/articles/NBvMv2根据上述网站中的步骤安装好
hadoop1.2.1
,安装过程中一定要细心,文件位置不要随意放。
u010147288
·
2015-11-30 21:00
hadoop
ubuntu
wordcount
eclipse连接hdfs连接不上
hdfs://192.168.105.10:9000 hadoop.tmp.dir /home/
hadoop1.2.1
jveqi
·
2015-11-27 13:00
搭建及修正
Hadoop1.2.1
MapReduce Pipes C++开发环境
Hadoop目前人气超旺,返璞归真的KV理念让人们再一次换一个角度来冷静思考一些问题。 但随着近些年来写C/C++的人越来越少,网上和官方WIKI的教程直接落地的成功率却不高,多少会碰到这样那样的问题。 现在我就重新整理下搭建过程的一些细节,供同好者分享,也请多多指点。 1,一些条件: VituralBox 4.3 Win7 x64 Centos 6.4 x64_86(来自某
·
2015-11-13 22:31
mapreduce
在
Hadoop1.2.1
分布式集群环境下安装hive0.12
在
Hadoop1.2.1
分布式集群环境下安装hive0.12 ● 前言: 1. 大家最好通读一遍过后,在理解的基础上再按照步骤搭建。 2.
·
2015-11-13 07:52
hadoop
Hadoop1.1 和Hadoop 2.4 集群安装版
1.2 软件... 4 1.3 网络拓扑结构... 4 1.4 系统分区... 5 1.5 虚拟机配置... 5 1.6 SSH免密码登录... 5 1.7 JDK安装... 7 2
Hadoop1.2.1
·
2015-11-13 06:45
hadoop
Mahout安装(Hadoop 1.2.1 版本)
1 安装环境
Hadoop1.2.1
分布式集群环境下安装(192.168.1.53-56) Mahout 0.9 2 
·
2015-11-13 04:20
hadoop
Ubuntu环境下手动配置
Hadoop1.2.1
/×××××××××××××××××××××××××××&t
·
2015-11-12 18:42
ubuntu
Ubuntu环境下
Hadoop1.2.1
, HBase0.94.25, nutch2.2.1各个配置文件一览
/××××××××××××××××××××××××××××&ti
·
2015-11-12 15:33
ubuntu
hadoop1.2.1+hbase0.90.4+nutch2.2.1+elasticsearch0.90.5配置(伪分布式)
解压
hadoop1.2.1
到某个目录下,这里解压到ubuntu下载目录下(注意没必要使用管理员权限) 在
hadoop1.2.1
conf目录下的core-site.xml添加一下内容:
·
2015-11-12 13:13
elasticsearch
Ubuntu14.04安装完全分布式
Hadoop1.2.1
一直想装hadoop集群,但总是没有时间,最近抽了三天时间下定决定装了一下,在我的wmware上虚拟了一台Ubuntu14.04,然后再复制了两台虚拟机,准备开始!!!! 基本参考 http://www.cnblogs.com/xia520pi/archive/2012/05/16/2503949.html 一. 了解hadoop: 对于Hadoop的集群来讲,可以分成两大
·
2015-11-11 06:39
ubuntu
Hadoop1.2.1
出现Warning: $HADOOP_HOME is deprecated.的解决方案
通过启动或停止hadoop我们会发现会出现 “Warning: $HADOOP_HOME is deprecated” 这样一个警告,下面给出解决方案: 不过我们一般推荐第二种,因为我们还是需要$HADOOP_HOME的,方便引用。 所以我们一般在/etc/profile 文件最后加上 export HADOOP_
·
2015-11-02 15:00
hadoop
Hadoop1.2.1
配置文件详解
首先我们先回顾一下Hadoop的一些概念: Apache Hdoop 1.x 组成 NameNode(元数据服务器) Secondary NameNode(辅助元数据服务器) JobTracker(任务调度员) DataNodes(块存储) TaskTrackers(任务执行) HDFS文件系统 NameNoode:属于管理层,用于管理
·
2015-11-02 15:58
hadoop
Hadoop1.2.1
的 “Hello world!”
下图是大概步骤: 下面是详细步骤,但我的代码跟上面有点不一样,但都是一个道理: 第一个程序测试 wordcount 先创建目录 hadoop fs -mkdir /wc hadoop fs -mkdir /wc/input 把要统计的文件放入目录 hadoop fs&nbs
·
2015-11-02 15:57
world
hello
Hadoop1.2.1
伪分布式安装
Hadoop1.2.1
单机模式安装 Hadoop组件依赖图(从下往上看) 安装步骤: 详细步骤: 设置ssh自动登录(如下图
·
2015-11-02 15:57
hadoop
二、Hadoop集群的配置(
Hadoop1.2.1
,CentOS6.5)
三台机器配置(配置etc/hosts):192.168.10.128 master192.168.10.135 slave1192.168.10.136 slave2并修改三台机器的主机名:# vi /etc/sysconfig/network一、配置三台机器的SSH免密码登陆(Master要能够免密码登陆两台slave):http://blog.csdn.net/gsying1474/ar
gsying1474
·
2015-10-29 15:00
linux
cluster
centos6.5
HADOOP集群
hadoop1.2.1
一、Hadoop单机版standalone的安装与配置(
Hadoop1.2.1
,CentOS6.5)
一、安装jdk1、下载bin包,自行下载,上传到CentOS6.5中,2、安装bin包,#chmod755jdk-6u27-linux-x64-rpm.bin#./jdk-6u27-linux-x64-rpm.bin3、配置环境变量#vi/etc/profile添加如下exportJAVA_HOME=/usr/java/jdk1.6.0_27exportCLASSPATH=.:$JAVA_HOME
刘迎光-萤火虫工作室
·
2015-10-29 15:37
hadoop
一、Hadoop单机版standalone的安装与配置(
Hadoop1.2.1
,CentOS6.5)
一、安装jdk 1、下载bin包,自行下载,上传到CentOS6.5中, 2、安装bin包, #chmod755 jdk-6u27-linux-x64-rpm.bin #./jdk-6u27-linux-x64-rpm.bin 3、配置环境变量 #vi/etc/profile 添加如下export JAVA_HOME=/usr/java/jdk1.6.0_27exp
gsying1474
·
2015-10-29 15:00
standalone
单机版
centos6.5
hadoop1.2.1
hadoop1.2.1
伪分布模式配置
1、修改core-site.xml,配置hdfs 1 <configuration> 2 <property> 3 <name>fs.default.name</name> 4 <value>hdfs://localhost:9000</value> 5 </property>
·
2015-10-28 08:14
hadoop
Hadoop应用-------Hadoop计算能力调度器(Capacity Scheduler)应用和配置{hadoop mradmin -refreshQueues动态更新队列和容量}其他调度器比较
文章来源:http://www.cnblogs.com/ggjucheng/archive/2012/07/25/2608817.html其他参考文章:
Hadoop1.2.1
容量调度器的配置:http:
buster2014
·
2015-10-25 07:00
分散式-ubuntu12.04安装
hadoop1.2.1
在
hadoop1.2.1
被预装在一份报告中安装说明java。我装了很多的版本号java以及许多的版本号hadoop,然后发现oracle-java7与
hadoop1.2.1
能够匹配。
·
2015-10-23 08:03
ubuntu
学习Mahout(一)
Mahout 官方下载地址:http://apache.fayea.com/apache-mirror/mahout/ 环境ubuntu 12.04,
hadoop1.2.1
,mahout 0.9
·
2015-10-21 12:34
Mahout
hadoop1.2.1
在linux中配置安装独立运行Standalone Operation,伪分布Pseudo-Distributed Operation,集群配置三种配置和测试
前言: 由于安装已经很长时间了,有些问题我已记不得太清,如果哪里有手误敬请指出。但是要记住遇到问题可以直接上网查,就算你不知道为什么有问题你让可以把报错的那句话复制直接查。 我这个大概适用的是1.X版本。要提醒各位,一定要学到东西,即使只是安装。不要犯直接复制别人代码ip,别人版本的问题!!! 1:安装sunjdk 我此处用的另一篇文章中的命令,但是安装的貌似
u010668907
·
2015-10-16 17:00
hadoop
MapReduce V1:Job提交流程之JobClient端分析
我们基于
Hadoop1.2.1
源码分析MapReduceV1的处理流程。
OSC-小小侦探
·
2015-10-09 10:00
基于
hadoop1.2.1
的hive伪分布式安装
主要参考的这篇bloghttp://www.kankanews.com/ICkengine/archives/72851.shtml使用的hive版本是hive-0.11.0-bin.tar.gz操作系统是ubuntu12.0464位1、下载hive-0.11.0-bin-tar.gz并且进行解压tar-zxvfhive-0.11.0-bin.tar.gz2、配置环境变量cd~ vim.bashr
lfdanding
·
2015-08-19 22:00
hadoop
hive
基于
hadoop1.2.1
的hbase伪分布式安装
今天安装了一下hbase,主要参考一下这几个博客,其实都大同小异,配置起来还是很简单的。http://www.linuxidc.com/Linux/2015-03/114670.htmhttp://www.bubuko.com/infodetail-665716.htmlhttp://blog.csdn.net/wind520/article/details/39856353我主要参考了这篇博客h
lfdanding
·
2015-08-17 16:00
hadoop
hbase
hadoop分布式集群搭建
参考的文章为:http://blog.csdn.net/ab198604/article/details/82504611)下载
hadoop1.2.1
源码2)下载JDK,可以使用如下命令sudoapt-getinstallcdt-eclipse3
lfdanding
·
2015-08-05 15:00
hadoop
linux虚拟机下Hadoop集群分布式配置
首先我们需要在官网下载hadoophttp://hadoop.apache.org/我下载的是
hadoop1.2.1
下载完使用SSHSecureFileTransferClient上传到虚拟机中去在集群中我使用了三个虚拟机
helloitlxj
·
2015-08-02 09:58
hadoop
linux
Hadoop之——
hadoop1.2.1
伪分布式搭建
转载请注明出处:http://blog.csdn.net/l1028386804/article/details/513140650.使用host-only方式 将Windows上的虚拟网卡改成跟Linux上的网卡在同一网段 注意:一定要将widonws上的WMnet1的IP设置和你的虚拟机在同一网段,但是IP不能相同1.Linux环境配置(windows下面的防火墙也要关闭)1.1修改主
l1028386804
·
2015-07-21 23:00
hadoop
分布式
hadoop1.2.1
报Warning: $HADOOP_HOME is deprecated. 的解决方法
启动/停止Hadoop时报了一个警告信息,安装的Hadoop版本是
hadoop1.2.1
,如下图: 原因是Hadoop本身对HADOOP_HOME做了判断,具体在bin/hadoop和bin/hadoop-config.sh
gnail_oug
·
2015-07-16 09:00
is
HADOOP_HOME
depre
hadoop 格式化后没有datanode节点
环境:1NameNode2DataNode三台机器,Hadoop为1.2.1解决办法:1.先停止Hadoop,bin/stop-all.sh2.三台机器都把
hadoop1.2.1
/tmp下所有文件删除,
mr_liM
·
2015-07-13 15:32
书虫 --
hadoop1.2.1
Hadoop vi conf/core-site.xml <!-- fs.default.name - 这是一个描述集群中NameNode结点的URI(包括协议、主机名称、端口号),集群里面的每一台机器都需要知道NameNode的地址。DataNode结点会先在NameNode上注册,这样它们的数据才可以被使用。独立的客户端程序通过这个URI跟DataNode交互,
liming495
·
2015-06-30 22:00
hadoop
【Hadoop】9、
hadoop1.2.1
完全分布式安装过程异常报错
异常报错1、ssh配置出错,ssh登录Theauthenticityofhost192.168.0.xxxcan’tbeestablished.用ssh登录一个机器(换过ip地址),提示输入yes后,屏幕不断出现y,只有按ctrl+c结束错误是:Theauthenticityofhost192.168.0.xxxcan’tbeestablished.以前和同事碰到过这个问题,解决了,没有记录,这次
cutter_point
·
2015-06-28 10:00
Hadoop
ubuntu 安装
hadoop1.2.1
在Ubuntu下安装并测试hadoop-1.2.1 我使用的ubuntu版本为ubuntu12.04.5,hadoop版本为1.2.1稳定版本,java版本jdk7。 一、安装时先遇到的问题是由于ubuntu是新安装的所以ssh,java没装,安装ssh和java时提示需要运行apt-getupdate命令先更新,按照提示走吧。 二、java安装的
KevinTong
·
2015-06-24 16:00
mapreduce
hadoop
ubuntu
Hadoop1.2.1
HDFS原理
基本以图片的形式呈现给大家: 、
·
2015-06-06 19:00
hadoop
Hadoop1.2.1
日志格式说明及启停方式
日志格式: 日志名称解析: Hadoop启停的三种方式: 、停止后面的以此类推...... 另外 hadoop-daemons.sh 表示启动多个,比如datanode跟tasktracker在真实环境都会有多个 附:
·
2015-05-27 21:00
hadoop
Hadoop1.2.1
单机模式安装
首先安装JDK: 然后安装hadoop: 最后的实例测试:首先在/opt/data目录下创建input目录,然后把hadoop的conf目录下的所有xml文件拷贝到上面的input目录,然后运行下面图片的第三行命令(注意此条命令我是在hadoop目录下运行的),最后查看output目录下的文件,检测是否成功 若出现以下文件则表示安装成功,测试通过
·
2015-05-17 00:00
hadoop
上一页
1
2
3
4
5
6
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他