E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.5.2
【Hadoop十六】Capacity Scheduler
在
Hadoop2.5.2
中,默认的资源调度器默认使用的算法是计算能力调度器,配置文件位于/etc/hadoop/capacity-scheduler.xml,不做任何修改,它的配置文件内容如下,默认配置中显示了一些可用的配置参数以及这些配置参数的默认值
bit1129
·
2015-06-13 13:00
scheduler
【Hadoop十六】Capacity Scheduler
在
Hadoop2.5.2
中,默认的资源调度器默认使用的算法是计算能力调度器,配置文件位于/etc/hadoop/capacity-scheduler.xml,不做任何修改,它的配置文件内容如下,默认配置中显示了一些可用的配置参数以及这些配置参数的默认值
bit1129
·
2015-06-13 13:00
scheduler
hbase编译安装+启用lz4压缩
对比结果参考:http://www.tielaba.com/shujuku/20130806/13.html我的操作环境centos6.6(64)+hadoop2.5.2+hbase1.0.1.1()
hadoop2.5.2
杰仪
·
2015-06-04 15:00
hadoop2.5.2
升级 hadoop2.6.0
今天升级hadoop,先直接关闭hadoop#stop-dfs.sh每台机子安装、配置好hadoop2.6.0后启动会报错。提示使用-rollingUpgradestarted升级使用如下命令后成功 #hdfs namenode -rollingUpgrade started 升级过程会出现很多转化的debug信息。完成后会启动namenode和datanode.登陆后台界面会查看到版本已经变成
杰仪
·
2015-06-03 13:00
Could not locate executable null 解决办法【在windows环境下开发hadoop2.4.1或者
hadoop2.5.2
的mapreduce,执行job遇到的一些错误】
可以在windows8、windows764位操作系统4G内存i5进行hadoop2.4.1和
hadoop2.5.2
的mapreduce开发【若本文有错误,请查看上面的详情链接】文章来自http://www.ab
buster2014
·
2015-05-09 18:00
hadoop2.5.2
配置httpfs服务
hadoop2.5.2
配置httpfs服务httpfshadoophdfs测试环境ubuntu14.04单机
hadoop2.5.2
伪分布式jdk1.7作用通过HttpFs你可以在浏览器里面管理HDFS上的文件
duguyiren3476
·
2015-05-08 12:55
hadoop
hadoop2.5.2
配置httpfs服务
阅读更多
hadoop2.5.2
配置httpfs服务httpfshadoophdfs测试环境ubuntu14.04单机
hadoop2.5.2
伪分布式jdk1.7作用通过HttpFs你可以在浏览器里面管理HDFS
duguyiren3476
·
2015-05-08 12:00
httpfs
hadoop
hdfs
hadoop2.5.2
配置httpfs服务
hadoop2.5.2
配置httpfs服务 httpfs hadoop hdfs 测试环境 ubuntu 14.04 单机
hadoop2.5.2
duguyiren3476
·
2015-05-08 12:00
hadoop
hdfs
httpfs
Sqoop1.9.x安装
环境:CentOS6.5、
Hadoop2.5.2
、sqoop1.99.31.9.x版本的sqoop分为服务器和客户端两个部分。
张超
·
2015-04-05 23:00
eclipse 下安装
hadoop2.5.2
插件
一.hadoop集群环境配置(完整配置参考上一篇博客) 1.在master节点上(master)修改hdfs-site.xml加上以下内容 dfs.permissions false 旨在取消权限检查,原因是为了解决我在windows机器上配置eclipse连接hadoop服务器时,配置map/reduce连接后报以下错误,org.apache.hadoop.security.AccessCo
eksliang
·
2015-04-03 09:00
eclipse
hadoop
hadoop
eclipse 下安装
hadoop2.5.2
插件
一.hadoop集群环境配置(完整配置参考上一篇博客) 1.在master节点上(master)修改hdfs-site.xml加上以下内容 dfs.permissions false 旨在取消权限检查,原因是为了解决我在windows机器上配置eclipse连接hadoop服务器时,配置map/reduce连接后报以下错误,org.apache.hadoop.security.AccessCo
eksliang
·
2015-04-03 09:00
eclipse
hadoop
hadoop
eclipse远程连接hadoop进行开发测试
hadoop进行开发测试 马克飞象 由于搭建hadoop环境在仿真系统,在本地远程连接hdfs和提交mapreduce的job任务精力了曲折,现整理如下: hadoop环境 :
hadoop2.5.2
duguyiren3476
·
2015-03-27 18:00
eclipse
mapreduce
hadoop
使用Hadoop提供的API操作HDFS
Hadoop的版本不同,可能函数的参数会有所不同,本文所使用的是
Hadoop2.5.2
。
艾斯的梦想
·
2015-03-27 13:16
hadoop
api
文件操作
使用Hadoop提供的API操作HDFS
Hadoop的版本不同,可能函数的参数会有所不同,本文所使用的是
Hadoop2.5.2
。
艾斯的梦想
·
2015-03-27 13:16
Hadoop
API
文件操作
Hadoop学习与实践
Hadoop2.x下安装HBase
环境:CentOS6.5
Hadoop2.5.2
HBase1.0.01.安装好hadoop集群,并启动[grid@hadoop4~]$shhadoop-2.5.2/sbin/start-dfs.sh[
张超
·
2015-03-19 01:00
linux(centos7)基于
hadoop2.5.2
安装spark1.2.1
1、安装hadoop参考http://blog.csdn.net/bahaidong/article/details/418659432、安装scala参考http://blog.csdn.net/bahaidong/article/details/442206333、安装spark下载spark最新版spark-1.2.1-bin-hadoop2.4.tgzhttp://www.apache.o
donglin0325
·
2015-03-12 13:05
hadoop
linux
spark
Hadoop2.5.2
安装——伪分布式模式
转载请出自出处:http://eksliang.iteye.com/blog/2191493一、下载hadoop的的部署文件我这里是使用当前的最高版本:2.5.2下载地址http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.5.2/部署hadoop伪分布式之前,请确保当前系统已经安装了jdk二、新建hadoop用户 当然你也可以使用root
eksliang
·
2015-03-11 15:00
hadoop
hadoop伪分布式安装
Hadoop2.5.2
安装——伪分布式模式
转载请出自出处:http://eksliang.iteye.com/blog/2191493一、下载hadoop的的部署文件我这里是使用当前的最高版本:2.5.2下载地址http://mirrors.cnnic.cn/apache/hadoop/common/hadoop-2.5.2/部署hadoop伪分布式之前,请确保当前系统已经安装了jdk二、新建hadoop用户 当然你也可以使用root
eksliang
·
2015-03-11 15:00
hadoop
hadoop伪分布式安装
sqoop-1.4.5和hadoop-2.5.2集成
Sqoop安装与配置Sqoop的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Sqoop的启动前需要首先安装Hadoop。
zhiquanliu
·
2015-03-10 22:00
hadoop
sqoop
1.4.5
2.5.2
Hbase0.98集群安装
说明:转载我同事关于hadoop的文章,给大家分享下~地址:http://gao-xianglong.iteye.com/blog/2189819《Hbase0.98集群安装》
Hadoop2.5.2
集群安装
vekergu
·
2015-03-07 11:34
HBase
Hbase0.98集群安装
说明:转载我同事关于hadoop的文章,给大家分享下~地址:http://gao-xianglong.iteye.com/blog/2189819《Hbase0.98集群安装》
Hadoop2.5.2
集群安装
vekergu
·
2015-03-07 11:34
hbase
Hadoop2.5.2
集群安装
说明:转载我同事关于hadoop的文章,给大家分享下~地址:http://gao-xianglong.iteye.com/blog/2189773《
Hadoop2.5.2
集群安装》 1、环境介绍操作系统
vekergu
·
2015-03-07 11:25
hadoop
安装
Hadoop2.5.2
集群安装
说明:转载我同事关于hadoop的文章,给大家分享下~地址:http://gao-xianglong.iteye.com/blog/2189773《
Hadoop2.5.2
集群安装》1、环境介绍操作系统:
vekergu
·
2015-03-07 11:25
hadoop
安装
集群环境下Hadoop2.5.2+Zookeeper3.4.6+Hbase0.98+Hive1.0.0安装目录总汇
http://gao-xianglong.iteye.com/blog/2190214《集群环境下Hadoop2.5.2+Zookeeper3.4.6+Hbase0.98+Hive1.0.0安装目录总汇》
Hadoop2.5.2
vekergu
·
2015-03-07 11:29
hadoop
zookeeper
hive
hbase
Hbase0.98集群安装
《Hbase0.98集群安装》
Hadoop2.5.2
集群安装 Zookeeper3.4.6集群安装 前面笔者分别介绍了Hadoop和Zookeeper的集群安装,如果Hbase需要集群
gao_xianglong
·
2015-03-06 16:00
hbase
Hbase0.98集群安装
《Hbase0.98集群安装》
Hadoop2.5.2
集群安装 Zookeeper3.4.6集群安装 前面笔者分别介绍了Hadoop和Zookeeper的集群安装,如果Hbase需要集群
gao_xianglong
·
2015-03-06 16:00
hbase
Hadoop2.5.2
集群安装
《
Hadoop2.5.2
集群安装》 1、环境介绍 操作系统:CentOS X64 物理机器:192.168.1.224(Master)、192.168.1.226(Slave1
gao_xianglong
·
2015-03-06 15:00
hadoop
Hadoop2.5.2
集群安装
《
Hadoop2.5.2
集群安装》 1、环境介绍 操作系统:CentOS X64 物理机器:192.168.1.224(Master)、192.168.1.226(Slave1
gao_xianglong
·
2015-03-06 15:00
hadoop
hadoop2.5.2
版本中的mapreduce要编译,需要引入哪个包呢?
问:想要编译一个mapreduce的java文件,可是上述最右边的类都报错,大侠帮忙看看,需要引入哪个包呢,我看网上有说引入hadoop-core.jar包的,可是我的版本是2.5.2的,会有版本冲突吗?答:hadoop-mapreduce-client-core-2.5.1.jar,在 hadoop-2.5.1\share\hadoop\mapreduce 目录下问:再多问个问题哈,如果在后台编
天下杰论
·
2015-02-27 12:00
Hadoop2.5.2
安装——单机模式
转载请出自出处:http://eksliang.iteye.com/blog/2185414 一、概述 Hadoop有三种模式 单机模式、伪分布模式和完全分布模式,这里先简单介绍单机模式 ,默认情况下,Hadoop被配置成一个非分布式模式,独立运行JAVA进程,适合开始做调试工作。 二、下载地址 Hadoop 网址http:
eksliang
·
2015-02-12 16:00
hadoop
hadoop单机部署
Hadoop2.5.2
安装——单机模式
转载请出自出处:http://eksliang.iteye.com/blog/2185414 一、概述 Hadoop有三种模式 单机模式、伪分布模式和完全分布模式,这里先简单介绍单机模式 ,默认情况下,Hadoop被配置成一个非分布式模式,独立运行JAVA进程,适合开始做调试工作。 二、下载地址 Hadoop 网址http:
eksliang
·
2015-02-12 16:00
hadoop
hadoop单机部署
在集群上安装
hadoop2.5.2
1.查看20台服务器环境。发现没有hadoop用户,hosts已经更改。2.下载hadoop2.5.2.查看zookeeper版本,发现是zookeeper3.4.6,和线上不一致。[root@hadoopNN1~]#cd/data/hadoop/data1/usr/local/setupSpark/vimnewslaves#把要部署的服务器列表放到此文件
[email protected]
houzhizhen
·
2015-01-16 17:00
hadoop
搭建
Hadoop2.5.2
集群
环境:三台CentOS6.6虚拟机,机器名分别为hadoop4、hadoop5、hadoop6,通过桥接连网,互相可以ping通,均安装好JDK1.7,关闭iptables防火墙,创建好新用户并配置好ssh免密码修改配置文件hadoop-env.sh,指定JAVA路径[grid@hadoop4hadoop]$vihadoop-env.shexportJAVA_HOME=/usr/java/jdk1
张超
·
2014-12-31 23:00
编译
Hadoop2.5.2
环境:CentOS6.664bit、JDK1.7.0_72一、安装与编译有关的包[root@hadoop4~]#yuminstallautoconfautomakelibtoolcmakencurses-developenssl-develgcc*二、安装Maven[grid@hadoop4~]$wgethttp://apache.fayea.com/maven/maven-3/3.2.5/bin
张超
·
2014-12-30 23:00
搭建hadoop/spark集群环境
hadoop2.5.2
的安装可以参照http://blog.csdn.net/greensurfer/article/details/39450369jdk下载地址http://www.oracle.com
sucre
·
2014-12-25 10:00
hadoop
scala
spark
【Sqoop一】Sqoop1.4.5和
Hadoop2.5.2
数据集成入门
Sqoop安装与配置Sqoop的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Sqoop的启动前需要首先安装Hadoop。
bit1129
·
2014-12-25 01:00
hadoop2
【Sqoop一】Sqoop1.4.5和
Hadoop2.5.2
数据集成入门
Sqoop安装与配置Sqoop的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Sqoop的启动前需要首先安装Hadoop。
bit1129
·
2014-12-25 01:00
hadoop2
【Sqoop一】Sqoop1.4.5和
Hadoop2.5.2
数据集成入门
Sqoop安装与配置Sqoop的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Sqoop的启动前需要首先安装Hadoop。
bit1129
·
2014-12-25 01:00
hadoop2
【Hive一】Hive入门
Hive安装与配置Hive的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Hive的启动前需要首先启动Hadoop。
axxbc123
·
2014-12-25 00:11
Hive
【Hive一】Hive入门
Hive安装与配置 Hive的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Hive的启动前需要首先启动Hadoop。
bit1129
·
2014-12-25 00:00
hive
【Hive一】Hive入门
Hive安装与配置 Hive的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Hive的启动前需要首先启动Hadoop。
bit1129
·
2014-12-25 00:00
hive
【Hive一】Hive入门
Hive安装与配置 Hive的运行需要依赖于Hadoop,因此需要首先安装
Hadoop2.5.2
,并且Hive的启动前需要首先启动Hadoop。
bit1129
·
2014-12-25 00:00
hive
vmware(centos7)下搭建
hadoop2.5.2
环境
1、虚拟机安装centos7(比较简单,自行安装)2、创建用户密码hadoop/hadoop[root@localhosthome]#adduserhadoop[root@localhosthome]#passwdhadoop修改主机名并查看[root@localhosthadoop]#sudohostnamectlset-hostname"master"[root@localhosthadoop
donglin0325
·
2014-12-11 14:09
hadoop
linux
Hadoop2.5.2
新特性
今天看了下hadoop官网,2.5.2版本已经发布好几天了。赶紧看看有什么新东西。ApacheHadoop2.5.2包含了一些重要的基于2.5.0发行版的bug修复。Common使用HTTP代理服务器时认证技术改进。当通过代理服务器访问WebHDFS时,这将非常有用。增加了一个新的hadoop指标监控sink,允许将监控数据直接写入到Graphite。与hadoop兼容文件系统相关的规范工作。HD
chen517611641
·
2014-11-25 15:00
hadoop
工作
gateway
文件系统
发布
hadoop 2.5.2 安装时遇到的异常
在安装
hadoop2.5.2
的时候,遇到了一下异常说是加载不了libhadoop.so.1.0.0这个包,我的hadoop是在官网上下载的二进制的包,而官网默认是在64位系统上编译的,儿我的系统是32位的所以或出现以上的异常
zeq9069
·
2014-11-23 13:00
hadoop
【Hadoop一】Hadoop伪集群环境搭建
结合网上多份文档,不断反复的修正hadoop启动和运行过程中出现的问题,终于把
Hadoop2.5.2
伪分布式安装起来,跑通了wordcount例子。
bit1129
·
2014-11-22 15:00
hadoop
【Hadoop一】Hadoop伪集群环境搭建
结合网上多份文档,不断反复的修正hadoop启动和运行过程中出现的问题,终于把
Hadoop2.5.2
伪分布式安装起来,跑通了wordcount例子。
bit1129
·
2014-11-22 15:00
hadoop
【Hadoop一】Hadoop伪集群环境搭建
结合网上多份文档,不断反复的修正hadoop启动和运行过程中出现的问题,终于把
Hadoop2.5.2
伪分布式安装起来,跑通了wordcount例子。
bit1129
·
2014-11-22 15:00
hadoop
上一页
1
2
3
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他