E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.2.0)
Hadoop2.2.0
集成Hbase0.96报的一个异常
最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的异常就是
qindongliang1922
·
2014-07-14 11:00
maven
hadoop
hbase
Hadoop2.2.0
集成Hbase0.96报的一个异常
阅读更多最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的
qindongliang1922
·
2014-07-14 11:00
hbase
hadoop
maven
Hadoop2.2.0
集成Hbase0.96报的一个异常
最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的异常就是
qindongliang1922
·
2014-07-14 11:00
maven
hadoop
hbase
Hadoop2.2.0
集成Hbase0.96报的一个异常
最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的异常就是
qindongliang1922
·
2014-07-14 11:00
maven
hadoop
hbase
Hadoop2.2.0
集成Hbase0.96报的一个异常
最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的异常就是
qindongliang1922
·
2014-07-14 11:00
maven
hadoop
hbase
Hadoop2.2.0
集成Hbase0.96报的一个异常
最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的异常就是
qindongliang1922
·
2014-07-14 11:00
maven
hadoop
hbase
Hadoop2.2.0
集成Hbase0.96报的一个异常
最近项目抓取的数据,存在Hbase里,所以需要从Hbase里读取数据,创建连接时,发现总是报如下的一个异常:这个异常,并不影响,数据结果的获取,但是每次总报这个异常,未免让人感觉很不爽,后来经查,散仙发现是xml的解析jar包冲突的问题,究其原因,主要有2处:1、系统使用的jar包版本冲突所导致的,比如有两个版本不一样但相同的包2、系统使用的jar包版本过低(相对其他包而言)上面的截图中的异常就是
qindongliang1922
·
2014-07-14 11:00
maven
hadoop
hbase
Hadoop2.2.0
入门教程(四)之MapReduce中的二次排序
问题:对一下数据进行排序,首先对key进行升序,如果key相同,那么对value进行升序那么处理的结果是:key value 30 20 40 20 40 10 40 5 30 30 30 10 50 10 40 30 30 40 50 20 50 60处理结果:---------------------------------- 3010 3020 3030 3040 -------------
残风vs逝梦
·
2014-07-11 16:00
mapreduce
hadoop2.x
SecondSort
hadoop2.2.0
安装笔记
NameNode192.168.1.122 hadoop/hadoopVM 192.168.1.123 DataNode1192.168.1.124datanode1/datanode1hadoop/hadoopDataNode2192.168.1.125datanode2/datanode2hadoop/hadoop一、在所有机器上安装openssh-serversudo apt-get ins
陶诗德
·
2014-07-10 08:00
CentOS6.5编译部署64位
Hadoop2.2.0
1 root用户,建立haoop用户 useradd -g root hadoop 2 编译hadoop(64位hadoop需要自己编译) 2.1 下载jdk、maven、hadoop-src http://www.oracle.com/technetwork/java/javase/downloads/jdk7-downloads-1880260.html http://
zhouwenjian
·
2014-07-07 22:00
centos6
hadoop 重启datanode及动态加入节点
阅读更多
hadoop2.2.0
启动子节点适用于子节点单独挂掉然后重启的情况,或者增加子节点的情况。
雨一直下
·
2014-07-07 11:00
hadoop
datanode
重启
hadoop 重启datanode及动态加入节点
阅读更多
hadoop2.2.0
启动子节点适用于子节点单独挂掉然后重启的情况,或者增加子节点的情况。
雨一直下
·
2014-07-07 11:00
hadoop
datanode
重启
hadoop 重启datanode及动态加入节点
hadoop2.2.0
启动子节点 适用于子节点单独挂掉然后重启的情况,或者增加子节点的情况。
雨一直下
·
2014-07-07 11:00
hadoop
重启
datanode
hadoop 重启datanode及动态加入节点
hadoop2.2.0
启动子节点 适用于子节点单独挂掉然后重启的情况,或者增加子节点的情况。
雨一直下
·
2014-07-07 11:00
hadoop
重启
datanode
Hadoop2.2.0
入门教程(二)之hadoop2.x eclipse plugin 编译
hadoop2.xeclipseplugin编译详细内容请参考:编译hadoop2.xHadoop-eclipse-plugin插件
残风vs逝梦
·
2014-07-03 19:00
Hadoop2.2.0
入门教程(一)之hadoop2.x编译mac版本)
Hadoop编译在apache官网提供的hadoop2.x的编译后的hadoop项目,但是官方提供的编译后的项目是在32bit电脑上编译的,那么在64bit的电脑上,hadoop程序的运行还和本地环境有关,所以建议大家去官网下载hadoop2.x的源代码,然后在自己的环境上编译hadoop2.x项目。一般出现以下错误,需要在本地编译hadoop项目:WARN util.NativeCodeLoad
残风vs逝梦
·
2014-07-03 19:00
hadoop2.2.0
hadoop2.x
hadoop本地编译
Hadoop2.2.0
入门教程(序言)
学习所有的知识都是经历这么三个过程,what,why,how what:whatishadoop那么学习hadoop之前,先找到apachehadoop官网,了解hadoophadoop官方网站http://hadoop.apache.org/docs/r2.2.0/hadoop-project-dist/hadoop-common/CommandsManual.htmlhadoop百度百科1.1
残风vs逝梦
·
2014-07-03 15:00
hadoop2.x
Hadoop2.2.0
入门教程(三)之HDFS SHELL脚本
HDFSShellhadoopfs-help: HDFS的帮助命令hadoopfs-ls:查看文件或目录的命令for example: hadoop fs -ls / 查看/(根目录下得文件或目录) for example: hadoop fs -lsr / 递归查看/(根目录下的所有文件和目录)这个我们使用了绝对路径/感觉像是在对linux/Unix系统的文件系统进行操作,实际上,这
残风vs逝梦
·
2014-07-02 20:00
hadoop
shell
hdfs
Spark on Yarn部署
环境:CentOS6.4,8G内存,60G硬盘,
Hadoop2.2.0
,Spark1.0.0,Scala2.10.31.安装HadoopYarn集群http://blog.csdn.net/zlcd1988
zlcd1988
·
2014-07-02 18:00
hadoop
spark
spark
on
yarn
1.0.0安装
yarn上安装Spark
Hadoop上安装Spark
YARN搭建
编译
hadoop2.2.0
源代码时报错
编译
hadoop2.2.0
源代码时,mvninstall-DskipTests报错:[ERROR]COMPILATIONERROR: [INFO]----------------------------
xuefeng0707
·
2014-07-02 01:00
Hadoop Yarn 安装
环境:Linux,8G内存,60G硬盘,
Hadoop2.2.0
为了构建基于Yarn体系的Spark集群,先要安装Hadoop集群,为了以后查阅方便记录了我本次安装的具体步骤。
zlcd1988
·
2014-06-30 16:00
hadoop
安装
yarn
hadoop安装
2安装
yarn安装
hadoop2.x安装配置
1.首先准备
hadoop2.2.0
的安装包,从官网获取,略。2.加压安装包,进行配置。
xyls12345
·
2014-06-30 12:00
Hadoop学习四十:Phoenix二级索引浅谈
一.概述
Hadoop2.2.0
Hbase0.96.1.1 Phoenix-2.2.0-SNAPSHOTPhoenix官网上提供了三个与Hbase兼容的版本,分别为Phoenix2.X-Hbase0.94
zy19982004
·
2014-06-30 09:00
Phoenix
Hadoop学习四十:Phoenix二级索引浅谈
一.概述
Hadoop2.2.0
Hbase0.96.1.1 Phoenix-2.2.0-SNAPSHOTPhoenix官网上提供了三个与Hbase兼容的版本,分别为Phoenix2.X-Hbase0.94
zy19982004
·
2014-06-30 09:00
Phoenix
Hadoop2.2.0
的分布式HA搭建
近期将提供如下图文安装手册,将以PDF格式放到附件中……目录1.简介2.所需软件3.集群安装规划4.安装环境准备4.1.修改虚拟机IP4.2.修改主机名4.3.修改主机名与IP的映射关系4.4.关闭防火墙4.5.设置防火墙开机不启动4.6.配置Windows的IP与主机名的映射4.7.确保windows和Linux互通4.8.配置三台节点的ssh免密码登录4.9.上传安装包5.安装JDK5.1.解
英杰王
·
2014-06-29 18:57
Hadoop
Hadoop2.2.0
的分布式HA搭建
近期将提供如下图文安装手册,将以PDF格式放到附件中…… 目录 1.简介 2.所需软件 3.集群安装规划 4.安装环境准备 4.1.修改虚拟机IP 4.2.修改主机名 4.3.修改主机名与IP的映射关系 4.4.关闭防火墙 4.5.设置防火墙开机不启动 4.6.配置Windows的IP与主机名的映射 4.7.确保windows和Linux互通 4.8.配置
wang吖
·
2014-06-29 18:00
hadoop2
Hadoop2.2.0
的伪分布式搭建(可下载PDF附件)
安装
Hadoop2.2.0
6. 启动Hadoop 7. 验证HDFS是否可用 8. 设置免密码登 1.
wang吖
·
2014-06-28 21:00
大数据
hadoop2.2.0
在Eclipse上建立
hadoop2.2.0
/hadoop2.4.0源代码阅读环境
1.安装依赖的包:yuminstallgcc-c++g++autoconfautomakelibtoolcmakezlib1g-devpkg-configlibssl-dev2.安装protobuf2.5.0,首先去google的网站上下载protobuf源代码,解压并切换到root用户执行如下命令:./configure如果中间发生错误,说明有些依赖包并为安装,anerroroccuredbec
littlesuccess
·
2014-06-26 13:00
基于
Hadoop2.2.0
安装Spark 1.0
基于
Hadoop2.2.0
安装spark1.0 转至元数据结尾 Created by spark.long 昨天
longxiping
·
2014-06-23 17:00
spark
maven 编译 spark1.0.0
cloudfront.net/spark-1.0.0.tgz tar-zxfspark-1.0.0.tgz cdspark-1.0.0 编译:由于spark依赖的hadoop版本默认是1.0.4,我们平时用的是
hadoop2.2.0
baiyangfu
·
2014-06-20 20:00
hadoop 1.x升级至hadoop-2.2.0记录
一、概述公司hadoop集群从1.2.1升级到2.2.0已经有一段时间,这篇blog将总结一下我前段时间在升级至
hadoop2.2.0
版本过程中遇到的一些问题,以及具体的升级步骤。
zengzhaozheng
·
2014-06-18 15:23
hadoop
yarn
MRv2
hadoop相关技术
hadoop 1.x升级至hadoop-2.2.0记录
一、概述 公司hadoop集群从1.2.1升级到2.2.0已经有一段时间,这篇blog将总结一下我前段时间在升级至
hadoop2.2.0
版本过程中遇到的一些问题,以及具体的升级步骤。
zengzhaozheng
·
2014-06-18 15:23
hadoop
yarn
hadoop2
MRv2
【甘道夫】并行化频繁模式挖掘算法FP Growth及其在Mahout下的命令使用
今天调研了并行化频繁模式挖掘算法PFPGrowth及其在Mahout下的命令使用,简单记录下试验结果,供以后查阅:环境:Jdk1.7+
Hadoop2.2.0
单机伪集群+ Mahout0.6(0.8
u010967382
·
2014-06-17 18:00
hadoop2.2+mahout0.9实战
版本:
hadoop2.2.0
,mahout0.9。使用mahout的org.apache.mahout.cf.taste.hadoop.item.RecommenderJob进行测试。
wbj0110
·
2014-06-16 11:00
hadoop
Mahout
hadoop2.2+mahout0.9实战
版本:
hadoop2.2.0
,mahout0.9。使用mahout的org.apache.mahout.cf.taste.hadoop.item.RecommenderJob进行测试。
wbj0110
·
2014-06-16 11:00
hadoop
Mahout
hadoop2.2+mahout0.9实战
版本:
hadoop2.2.0
,mahout0.9。使用mahout的org.apache.mahout.cf.taste.hadoop.item.RecommenderJob进行测试。
wbj0110
·
2014-06-16 11:00
hadoop
Mahout
【甘道夫】
Hadoop2.2.0
NN HA详细配置+Client透明性试验【完整版】
实验环境:
Hadoop2.2.0
的4节点集群,ZK节点3个(ZK节点数最好为奇数个),hosts文件和各节点角色分配如下:hosts:192.168.66.91master19
u010967382
·
2014-06-15 11:00
hadoop
HA
hadoop2.2.0
启动遇到的常见错误
1107:14:32,896WARNorg.apache.hadoop.hdfs.server.datanode.DataNode:Invaliddfs.datanode.data.dir/usr/zkt/
hadoop2.2.0
kt431128
·
2014-06-11 23:00
如何在Windows下的eclipse调试
Hadoop2.2.0
分布式集群
上篇文章,散仙已经在eclipse中通过local的模式可以正确的调试hadoop2.2,那么本篇,散仙将重点叙述下,如何在eclipse中,真真正正的提交作业到yarn上,开启分布式模式的调试,通过在eclipse上调试,hadoop的MapReduce程序,可以使我们学习Hadoop更加容易,清晰。如果没有看过,散仙的如何在eclipse中使用local模式调试hadoop的文章,可以先看下上
qindongliang1922
·
2014-06-11 17:00
eclipse
hadoop
windows
mapreducem
如何在Windows下的eclipse调试
Hadoop2.2.0
分布式集群
上篇文章,散仙已经在eclipse中通过local的模式可以正确的调试hadoop2.2,那么本篇,散仙将重点叙述下,如何在eclipse中,真真正正的提交作业到yarn上,开启分布式模式的调试,通过在eclipse上调试,hadoop的MapReduce程序,可以使我们学习Hadoop更加容易,清晰。如果没有看过,散仙的如何在eclipse中使用local模式调试hadoop的文章,可以先看下上
qindongliang1922
·
2014-06-11 17:00
eclipse
hadoop
windows
mapreducem
如何在Windows下的eclipse调试
Hadoop2.2.0
分布式集群
上篇文章,散仙已经在eclipse中通过local的模式可以正确的调试hadoop2.2,那么本篇,散仙将重点叙述下,如何在eclipse中,真真正正的提交作业到yarn上,开启分布式模式的调试,通过在eclipse上调试,hadoop的MapReduce程序,可以使我们学习Hadoop更加容易,清晰。如果没有看过,散仙的如何在eclipse中使用local模式调试hadoop的文章,可以先看下上
qindongliang1922
·
2014-06-11 17:00
eclipse
hadoop
windows
mapreducem
如何在Windows下的eclipse调试
Hadoop2.2.0
分布式集群
上篇文章,散仙已经在eclipse中通过local的模式可以正确的调试hadoop2.2,那么本篇,散仙将重点叙述下,如何在eclipse中,真真正正的提交作业到yarn上,开启分布式模式的调试,通过在eclipse上调试,hadoop的MapReduce程序,可以使我们学习Hadoop更加容易,清晰。如果没有看过,散仙的如何在eclipse中使用local模式调试hadoop的文章,可以先看下上
qindongliang1922
·
2014-06-11 17:00
eclipse
hadoop
windows
mapreducem
如何在Windows下的eclipse调试
Hadoop2.2.0
分布式集群
上篇文章,散仙已经在eclipse中通过local的模式可以正确的调试hadoop2.2,那么本篇,散仙将重点叙述下,如何在eclipse中,真真正正的提交作业到yarn上,开启分布式模式的调试,通过在eclipse上调试,hadoop的MapReduce程序,可以使我们学习Hadoop更加容易,清晰。如果没有看过,散仙的如何在eclipse中使用local模式调试hadoop的文章,可以先看下上
qindongliang1922
·
2014-06-11 17:00
eclipse
hadoop
windows
mapreducem
如何在Windows下的eclipse调试
Hadoop2.2.0
分布式集群
上篇文章,散仙已经在eclipse中通过local的模式可以正确的调试hadoop2.2,那么本篇,散仙将重点叙述下,如何在eclipse中,真真正正的提交作业到yarn上,开启分布式模式的调试,通过在eclipse上调试,hadoop的MapReduce程序,可以使我们学习Hadoop更加容易,清晰。如果没有看过,散仙的如何在eclipse中使用local模式调试hadoop的文章,可以先看下上
qindongliang1922
·
2014-06-11 17:00
eclipse
hadoop
windows
mapreducem
如何在win7下的eclipse中以local模式调试
Hadoop2.2.0
的程序
在上一篇博文中,散仙已经讲了Hadoop的单机伪分布的部署,本篇,散仙就说下,如何eclipse中调试
hadoop2.2.0
,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
如何在win7下的eclipse中以local模式调试
Hadoop2.2.0
的程序
在上一篇博文中,散仙已经讲了Hadoop的单机伪分布的部署,本篇,散仙就说下,如何eclipse中调试
hadoop2.2.0
,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
如何在win7下的eclipse中以local模式调试
Hadoop2.2.0
的程序
在上一篇博文中,散仙已经讲了Hadoop的单机伪分布的部署,本篇,散仙就说下,如何eclipse中调试
hadoop2.2.0
,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
如何在win7下的eclipse中以local模式调试
Hadoop2.2.0
的程序
在上一篇博文中,散仙已经讲了Hadoop的单机伪分布的部署,本篇,散仙就说下,如何eclipse中调试
hadoop2.2.0
,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
如何在win7下的eclipse中以local模式调试
Hadoop2.2.0
的程序
在上一篇博文中,散仙已经讲了Hadoop的单机伪分布的部署,本篇,散仙就说下,如何eclipse中调试
hadoop2.2.0
,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
如何在win7下的eclipse中以local模式调试
Hadoop2.2.0
的程序
在上一篇博文中,散仙已经讲了Hadoop的单机伪分布的部署,本篇,散仙就说下,如何eclipse中调试
hadoop2.2.0
,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
上一页
3
4
5
6
7
8
9
10
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他