E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.4.1
hbase0.98.8源码编译(基于
hadoop2.4.1
)
上一篇介绍了
hadoop2.4.1
的编译过程,以及hive和spark的编译,这次简单介绍hbase的编译过程。
tjbklx33
·
2014-12-11 15:48
hbase
编译
hadoop2.4.1
源码编译步骤 hive0.13.1编译
jdk1.7.0_71 maven-3.2.3 hadoop2.4.12、安装JDK,maven 略3、安装protoc 在hadoop2.X版本的编译时,需要protoc的支持,
hadoop2.4.1
tjbklx33
·
2014-12-10 10:32
hadoop
hive
源码编译
hadoop2.4.1
源码编译步骤 hive0.13.1编译
编译环境CentOS6.564位jdk1.7.0_71maven-3.2.3hadoop2.4.12、安装JDK,maven略3、安装protoc在hadoop2.X版本的编译时,需要protoc的支持,
hadoop2.4.1
tjbklx33
·
2014-12-10 10:32
hadoop
源码编译
hive
云计算
Hadoop2.4.1
伪分布式配置详解
实验环境: VMwareWorkstation10.0 CentOS6.5
Hadoop2.4.1
Jdk1.7.0一.Linux系统环境准备 用WindSCP等软件,把
忙碌的键盘
·
2014-12-09 19:00
云计算大赛&
hadoop2.4.1
安装
身处大数据时代,一下子一个词:“云计算”火了起来。最近参加了第一届云计算大赛。大二开始跟着老师做云计算的项目,还正在看老师发给我的项目资料呢,突然就来了这么个比赛,放下手中的ACM和其他琐事,开始琢磨着这个云计算大赛。比赛分为三个类别:创意赛,技能赛,命题赛。权衡之后,加上老师的建议选择了技能赛,简单来说就是主办方出了4道题目给你做,然后我要做的事就是把MapReduce代码交给他。运行环境就是h
u013815546
·
2014-11-27 19:00
hadoop
大数据
分布式
云计算
新手指引向
hadoop2升级的那点事情(详解)
前言前阵子,公司的hadoop从hadoop1.02升级到
hadoop2.4.1
,记录下升级的步骤和遇到的问题,和大家分享,希望别人可以少走一些弯路技术选型 当前使用版本: apachehadoop1.0.2
houzhizhen
·
2014-11-04 13:00
hadoop
在集群上安装Hive
1、先决条件 要求必须已经安装完成Hadoop,Hadoop的安装在之前的博文《VMware下
Hadoop2.4.1
完全分布式集群平台安装与设置》有详细介绍过。
dwf07223
·
2014-10-16 01:45
mysql
hadoop
hive
在集群上安装Hive
1、先决条件要求必须已经安装完成Hadoop,Hadoop的安装在之前的博文《VMware下
Hadoop2.4.1
完全分布式集群平台安装与设置》有详细介绍过。
dwf07223
·
2014-10-16 01:45
MySQL
Hadoop
Hive
Hive
Hadoop 2.4.1+HBase 0.98.6.1 分布式安装
A:先配置
Hadoop2.4.1
的集群环境参考:http://blog.csdn.net/wind520/article/details/38317937B:配置HBase参考:http://abloz.com
wind520
·
2014-10-07 18:00
hbase
hadoop2
Apache
Hadoop2.4.1
Filesystem shell
overview文件系统(FS)shell包含各种与HDFS交互的命令, 比如LocalFS,HFTPFS,S3FS,andother.FSshell执行通过下面的命令:bin/hdfsdfs所有的FSshell的可以使用路径URI作为参数。URI的格式是scheme:authority/path。HDFS的scheme是hdfs,本地文件的scheme是file。scheme和authority
-Bin-
·
2014-10-04 00:00
Hadoop 命令自启动
1、把启动程序的命令添加到/etc/rc.d/rc.local文件中
hadoop2.4.1
安装在/app/prog/hadoop/,他的启动命令在/app/prog/hadoop/sbin/start-all.sh
zhoujj303030
·
2014-09-28 10:00
hadoop2.4.1
结合hbase0.96.2
接上:http://onlyoulinux.blog.51cto.com/7941460/1554951上文说到用
hadoop2.4.1
分布式结合hase0.94.23出现大量的报错,没能解决,最后用新版本
丶老龚
·
2014-09-27 04:12
结合
hadoop
hbase
hadoop集群存储
hadoop2.4.1
结合hbase0.96.2
接上:http://onlyoulinux.blog.51cto.com/7941460/1554951上文说到用
hadoop2.4.1
分布式结合hase0.94.23出现大量的报错,没能解决,最后用新版本
Onlyou_Linux
·
2014-09-27 04:12
hadoop
hbase
结合
Sqoop1.4.5 with
hadoop2.4.1
前言: 在使用Hadoop2.4.0的时候,想用Sqoop导出数据到MySQL中,但是Sqoop-1.4.5会出现版本不兼容的问题,所以需要对其进行重新编译。 1. 编译前准备看了一下README.txt文件,需要以下软件包:*asciidoc*make*python2.5+*xmlto*tar*gzip 下面是在CentOS的安装的:yum-yinstallasciidocyum-
哈鼎
·
2014-09-25 15:00
with
haoop
2.4.1
sqoop-1.4.5
hadoop2.4.1
分布式安装结合hbase0.94.23
centos6.5x86虚拟机上安装完全分布式hadoop-2.4.1结合hbase-0.94.23一、环境准备:以下3台虚拟机:192.168.1.105 nn namenode192.168.1.106 sn secondarynamenode/datanode192.168.1.107 dn1 da
Onlyou_Linux
·
2014-09-18 22:22
hadoop
大数据
hbase
hadoop2.4.1
分布式安装结合hbase0.94.23
centos6.5x86虚拟机上安装完全分布式hadoop-2.4.1结合hbase-0.94.23一、环境准备:以下3台虚拟机:192.168.1.105nnnamenode192.168.1.106snsecondarynamenode/datanode192.168.1.107dn1datanode要求:1、节点间ping通:[root@nn~]#cat/etc/hosts注意最好把ipv6
丶老龚
·
2014-09-18 22:22
hadoop
hbase
大数据
hadoop集群存储
入门安装hadoop安装方法2---安装
编译-
Hadoop2.4.1
源码编译_个人测试整理注明:本教程所有工具软件均安装在/usr/local/目录下,所以要把已下载的工具包Ftp传到生产环境的/usr/local/目录下,然后进入此目录操作
罗文浩
·
2014-09-18 11:00
hadoop2升级的那点事情(详解)
前言 前阵子,公司的hadoop从hadoop1.02升级到
hadoop2.4.1
,记录下升级的步骤和遇到的问题,和大家分享,希望别人可以少走一些弯路 技术选型 当前使用版本: 
·
2014-09-17 15:00
hadoop2
oozie 4.0.0 on
hadoop2.4.1
安装笔记(完整版)
oozie版本:4.0.0(开始在官网下载4.0.1的版本,编译一直无法通过,报错说oozie-hadoop-4.0.1的jar,换4.0.0竟然没报错,不解) hadoop 2.4.1 由于测试集群用了改版本,无奈,原本github上有编译好的oozie,但是最高才3.0,只能支持hadoop 2.0 ==================================华丽的分割======
michaellou
·
2014-08-28 14:00
hadoop2
spark 1.1.0 on hadoop 2.4.1 安装笔记 (resourcemanager ha 支持)
但是
hadoop2.4.1
的resourcemanagerha在spark1.0.2版本还不支持(提交spark到yarn的时候。applicationmaster老是会请求本地的8030端口)。
jiushuai
·
2014-08-22 15:00
Hadoop2.4.1
伪分布式的搭建
1.准备Linux环境 1.0点击VMware快捷方式,右键打开文件所在位置->双击vmnetcfg.exe->VMnet1host-only->修改subnetip设置网段:192.168.1.0子网掩码:255.255.255.0->apply->ok 回到windows-->打开网络和共享中心->更改适配器设置->右键VMnet1->属性->双击IPv4->设置windows的IP:192
LEON_SHI
·
2014-08-15 17:00
云计算
Hadoop2.4.1
伪分布式的搭建
hadoop版本升级到2.4.1
测试环境介绍:Hadoop1.0.3 升级到
Hadoop2.4.1
当前老环境(三副本环境):Namenode 192.168.1.10Datanode 192.168.1.11(SecondNamenode
zhanghonged
·
2014-08-12 16:30
hadoop
版本升级
2.4.1
Create a
hadoop2.4.1
Cluster on Cent OS 6.5 (host
1.PreparethreeCentOshostsforpoc10.28.241.174shuynh-gecko110.28.241.172shuynh-gecko210.28.241.175shuynh-gecko3root@shuynh-gecko1:~#cat/etc/os-release2.GetallimagesrelatedtoHadoopClusteroneachnode2.1get
幸运的幸福
·
2014-08-12 11:00
hadoop
docker
Create a
hadoop2.4.1
Cluster on Ubuntu (host mode)
1.Preparethreeubuntuhostsforpoc192.168.1.4testdocker01192.168.1.5testdocker02192.168.1.6testdocker03root@testdocker01:~#cat/etc/os-releaseNAME="Ubuntu"VERSION="14.04,TrustyTahr"ID=ubuntuID_LIKE=debian
幸运的幸福
·
2014-08-12 11:00
hadoop
docker
每日阅读
Hadoop2.4.1
+ ZK + HBase 环境搭建 http://www.aboutyun.com/thread-8635-1-1.html 1.
hadoop2.4.1
如何搭建环境?
Big-Data
·
2014-08-06 15:00
Hadoop2.4.1
部署(完整版)
原文地址引言 转眼间,Hadoop的stable版本已经升级到2.4.1了,社区的力量真是强大!3.0啥时候release呢? 今天做了个调研,尝鲜了一下2.4.1版本的分布式部署,包括NNHA(目前已经部署好了2.2.0的NNHA,ZK和ZKFC用现成的),顺便也结合官方文档http://hadoop.apache.org/docs/r2.4.1/hadoop-project-dist/
white__cat
·
2014-08-06 01:00
centos x64搭建
hadoop2.4.1
HA
Hadoop HA的实现方式上图大致架构包括:1、 利用共享存储来在两个NN间同步edits信息。以前的HDFS是sharenothingbutNN,现在NN又sharestorage,这样其实是转移了单点故障的位置,但中高端的存储设备内部都有各种RAID以及冗余硬件包括电源以及网卡等,比服务器的可靠性还是略有提高。通过NN内部每次元数据变动后的flush操作,加上NFS的close-to-ope
zhanghonged
·
2014-07-31 17:56
集群
HA
源码编译
Hadoop2.4.1
Hadoop2.4.1
分布式安装
1、做好下文中的所有配置:Hadoop1.2.1分布式安装-1-准备篇。2、Hadoop2.x的发行版中有个小问题:libhadoop.so.1.0.0在64位OS中存在问题,因为它是32位的,在64位OS中hadoop启动时会报一个WARN的日志。这个包的作用是调用native的api,可以提高hadoop的性能,如果这个包失效,那就是使用jvm做压缩等工作,效率就会很低。处理方法就是重新编译H
悟空太多啦
·
2014-07-30 23:00
hadoop
hadoop2
hadoop2安装
CentOS6.5-64bit
Hadoop2.4.1
分布式集群部署
参考多个文档,终于把
hadoop2.4.1
集群环境搭建成功。因参考文档大多是hadoop2.2版本,所以在这里重新整理一份
hadoop2.4.1
版本的与大家分享。
一脸坏笑
·
2014-07-14 13:00
mapreduce
hadoop
centos
分布式
hdfs
【甘道夫】
Hadoop2.4.1
尝鲜部署+完整版配置文件
引言 转眼间,Hadoop的stable版本已经升级到2.4.1了,社区的力量真是强大!3.0啥时候release呢? 今天做了个调研,尝鲜了一下2.4.1版本的分布式部署,包括NNHA(目前已经部署好了2.2.0的NNHA,ZK和ZKFC用现成的),顺便也结合官方文档http://hadoop.apache.org/docs/r2.4.1/hadoop-project-dist/hado
u010967382
·
2014-07-11 22:00
Hadoop2.4.1
Hadoop2.4.1
入门实例:MaxTemperature
注意:以下内容在2.x版本与1.x版本同样适用,已在2.4.1与1.2.0进行测试。一、前期准备1、创建伪分布Hadoop环境,请参考官方文档。或者http://blog.csdn.net/jediael_lu/article/details/386372772、准备数据文件如下sample.txt:1234567986762311901012345679867623119010123456798
jediael_lu
·
2014-07-09 13:00
单机/伪分布式
Hadoop2.4.1
安装文档
转载自官方文档,最新版请见:http://hadoop.apache.org/docs/r2.4.1/hadoop-project-dist/hadoop-common/SingleCluster.html补充:建议添加如下环境变量#hadoopconfigurationexportPATH=$PATH:/home/jediael/hadoop-2.4.1/bin:/home/jediael/ha
jediael_lu
·
2014-07-08 21:00
hadoop
安装
上一页
1
2
3
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他