E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.X
找不到类class org.apache.sqoop.Sqoop
前言: 最近由于要使用Sqoop来到出数据到hdfs,可是发现Sqoop1.4.5跟
hadoop2.X
不兼容,需要对Sqoop1.4.5进行编译,编译的具体方法见:http://my.oschina.net
哈鼎
·
2014-09-30 14:00
main
Class
find
load
or
could
sqoop1.4.4
error:
not
hadoop2.4.0
入门hadoop安装方法5--Zookeeper3.5.0安装部署
安装-Zookeeper3.5.0安装部署在学习本篇之前,需要部署好Hadoop地址:
Hadoop2.x
安装部署目录 [隐藏]1.下载zookeeper-3.5.0版本2.配置etc/profile3.
罗文浩
·
2014-09-18 11:00
入门hadoop安装方法4--Hbase0.98.6部署
编译&安装-Hbase0.98.6部署部署Hbase前需先安装Hadoop和Zookeeper参考:
Hadoop2.x
安装部署 Zookeeper安装部署目录 [隐藏]一、编译Hbase二
罗文浩
·
2014-09-18 11:00
入门安装hadoop安装方法1
Hadoop部署路线编译-
Hadoop2.X
源码编译安装-
Hadoop2.X
集群搭建完全版编译&安装-Hbase0.98.6部署安装-Zookeeper3.5.0安装部署
罗文浩
·
2014-09-18 11:00
编译
hadoop2.x
的eclipse插件
注意:以下操作基于Hadoop-2.4.1,EclipseLuna,Win764位1、下载插件源码包https://github.com/winghc/hadoop2x-eclipse-plugin2、新建eclipsejava工程,将压缩包中以下目录的内容复制到project中(只是放到eclipse里边看而已,并不使用eclipse编译)hadoop2x-eclipse-plugin-mast
悟空太多啦
·
2014-09-13 22:00
hadoop
eclipse插件
jps命令失效
在将hadoop从1.x升级到
hadoop2.x
版本时,发现了一个特别让人头疼的问题:Jps命令竟然失效了!!!!!
开拓者-2015
·
2014-09-13 10:00
linux
jps
hadoop2.x
常用端口及定义方法
Hadoop集群的各部分一般都会使用到多个端口,有些是daemon之间进行交互之用,有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多,完全记不住哪个端口对应哪个应用,特收集记录如此,以便查询。这里包含我们使用到的组件:HDFS,YARN,HBase,Hive,ZooKeeper:组件节点默认端口配置用途说明HDFSDataNode50010dfs.datanode.addre
雨一直下
·
2014-09-11 12:00
hadoop2.x
默认端口
hadoop2.x
常用端口及定义方法
Hadoop集群的各部分一般都会使用到多个端口,有些是daemon之间进行交互之用,有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多,完全记不住哪个端口对应哪个应用,特收集记录如此,以便查询。 这里包含我们使用到的组件:HDFS, YARN, HBase, Hive, ZooKeeper: 组件 节点 默认端口 配置 用途说明 HDFS DataNode
雨一直下
·
2014-09-11 12:00
hadoop2.x
默认端口
hadoop2.x
安装
hadoop2.x
安装1.搭建虚拟机(使用桥接网络,以便设置ssh连接,注意版本)2.安装jdk3.编辑hosts的文件4.关闭防火墙5.部署免密码登录6.下载
hadoop2.x
并解压7.修改配置文件8
雨一直下
·
2014-09-08 23:00
安装
hadoop2.2
hadoop2.x
安装
hadoop2.x
安装 1.搭建虚拟机(使用桥接网络,以便设置ssh连接,注意版本) 2.安装jdk 3.编辑hosts的文件 4.关闭防火墙 5.部署免密码登录 6.下载
hadoop2.x
雨一直下
·
2014-09-08 23:00
安装
hadoop2.2
Datax与
hadoop2.x
兼容部署与实际项目应用工作记录分享
一、概述 Hadoop的版本更新挺快的,已经到了2.4,但是其周边工具的更新速度还是比较慢的,一些旧的周边工具版本对
hadoop2.x
的兼容性做得还不完善,特别是sqoop。
zengzhaozheng
·
2014-08-15 15:20
hadoop
sqoop
DataX
sqoop2
Datax与
hadoop2.x
兼容部署与实际项目应用工作记录分享
一、概述Hadoop的版本更新挺快的,已经到了2.4,但是其周边工具的更新速度还是比较慢的,一些旧的周边工具版本对
hadoop2.x
的兼容性做得还不完善,特别是sqoop。
zengzhaozheng
·
2014-08-15 15:20
hadoop
sqoop
datax
hadoop相关技术
视频jourk--hadoop2.2.0(第一个2.x的正式版本)框架介绍:笔记
hadoop2.x
包括4个模块:common:hadoop的公共模块,以前叫core。包括通信模块等等。。。HDFS:分布式文件系统。
Big-Data
·
2014-08-08 17:00
零基础学习hadoop到上手工作线路指导(中级篇)
上面我们会了基本的编程,我们需要对hadoop有一个更深的理解:hadoop分为hadoop1.X、
hadoop2.X
,并且还有hadoop生态系统。这里只能慢慢介绍了。一口也吃不成胖子。
Big-Data
·
2014-08-07 18:00
Hadoop2.4.1分布式安装
2、
Hadoop2.x
的发行版中有个小问题:libhadoop.so.1.0.0在64位OS中存在问题,因为它是32位的,在64位OS中hadoop启动时会报一个WARN的日志。
悟空太多啦
·
2014-07-30 23:00
hadoop
hadoop2
hadoop2安装
Hadoop2.x
的eclipse插件的编译
Hadoop2.2.0的eclipse插件的编译博客分类:Hadoophadoophadoop2.2.0的eclipse插件eclipse-plugin
Hadoop2.x
之后,已经发布了稳定的版本hadoop2.2.0
tao975
·
2014-07-24 08:19
eclipse
hadoop
plugin
利用QJM实现HDFS的HA策略部署与验证工作记录分享
1、概述
Hadoop2.X
中的HDFS(Vsersion2.0)相比于Hadoop1.X增加了两个重要功能,HA和Federation。
zengzhaozheng
·
2014-07-22 09:15
HA
mapreduce
hadoop
Yarn
利用QJM实现HDFS的HA策略部署与验证工作记录分享
1、概述
Hadoop2.X
中的HDFS(Vsersion2.0)相比于Hadoop1.X增加了两个重要功能,HA和Federation。
zengzhaozheng
·
2014-07-22 09:15
mapreduce
hadoop
HA
qjm
hadoop升级小记
升级后的hadoop为hadoop2.2.0的版本,下面散仙总结下升级心得: (1)hadoop的hdfs系统,支持不同的hadoop版本之间的数据平滑过渡,比如可以直接将Hadoop1.x的数据,升级到
hadoop2
qindongliang1922
·
2014-07-21 15:00
hadoop升级
hadoop升级小记
升级后的hadoop为hadoop2.2.0的版本,下面散仙总结下升级心得: (1)hadoop的hdfs系统,支持不同的hadoop版本之间的数据平滑过渡,比如可以直接将Hadoop1.x的数据,升级到
hadoop2
qindongliang1922
·
2014-07-21 15:00
hadoop升级
hadoop升级小记
升级后的hadoop为hadoop2.2.0的版本,下面散仙总结下升级心得: (1)hadoop的hdfs系统,支持不同的hadoop版本之间的数据平滑过渡,比如可以直接将Hadoop1.x的数据,升级到
hadoop2
qindongliang1922
·
2014-07-21 15:00
hadoop升级
hadoop升级小记
升级后的hadoop为hadoop2.2.0的版本,下面散仙总结下升级心得: (1)hadoop的hdfs系统,支持不同的hadoop版本之间的数据平滑过渡,比如可以直接将Hadoop1.x的数据,升级到
hadoop2
qindongliang1922
·
2014-07-21 15:00
hadoop升级
hadoop升级小记
升级后的hadoop为hadoop2.2.0的版本,下面散仙总结下升级心得: (1)hadoop的hdfs系统,支持不同的hadoop版本之间的数据平滑过渡,比如可以直接将Hadoop1.x的数据,升级到
hadoop2
qindongliang1922
·
2014-07-21 15:00
hadoop升级
hadoop升级小记
升级后的hadoop为hadoop2.2.0的版本,下面散仙总结下升级心得: (1)hadoop的hdfs系统,支持不同的hadoop版本之间的数据平滑过渡,比如可以直接将Hadoop1.x的数据,升级到
hadoop2
qindongliang1922
·
2014-07-21 15:00
hadoop升级
hadoop2.x
HA配置
1.安装zookeeper1.解压缩tar-zxfzookeeper-3.4.5.tar.gz2.conf目录下修改文件名zoo_sample.cfg改为zoo.cfg#mvzoo_sample.cfgzoo.cfg3.修改成如下内容即可(每个主机的这个配置文件一样)dataDir=/export/crawlspace/mahadev/zookeeper/server1/dataclientPor
q79969786
·
2014-07-18 23:37
hadoop相关
如何将Lucene索引写入
Hadoop2.x
?
http://qindongliang1922.iteye.com/blog/2090121散仙,在上篇文章,已经写了如何将Lucene索引写入Hadoop1.x的HDFS系统,本篇散仙将介绍上将索引写在
Hadoop2
qindongliang1922
·
2014-07-09 20:00
mapreduce
hadoop
Solr
Lucene
全文检索
如何将Lucene索引写入
Hadoop2.x
?
http://qindongliang1922.iteye.com/blog/2090121散仙,在上篇文章,已经写了如何将Lucene索引写入Hadoop1.x的HDFS系统,本篇散仙将介绍上将索引写在
Hadoop2
qindongliang1922
·
2014-07-09 20:00
mapreduce
hadoop
Lucene
Solr
全文检索
如何将Lucene索引写入
Hadoop2.x
?
http://qindongliang1922.iteye.com/blog/2090121散仙,在上篇文章,已经写了如何将Lucene索引写入Hadoop1.x的HDFS系统,本篇散仙将介绍上将索引写在
Hadoop2
qindongliang1922
·
2014-07-09 20:00
mapreduce
hadoop
Lucene
Solr
全文检索
如何将Lucene索引写入
Hadoop2.x
?
http://qindongliang1922.iteye.com/blog/2090121散仙,在上篇文章,已经写了如何将Lucene索引写入Hadoop1.x的HDFS系统,本篇散仙将介绍上将索引写在
Hadoop2
qindongliang1922
·
2014-07-09 20:00
mapreduce
hadoop
Lucene
Solr
全文检索
如何将Lucene索引写入
Hadoop2.x
?
http://qindongliang1922.iteye.com/blog/2090121散仙,在上篇文章,已经写了如何将Lucene索引写入Hadoop1.x的HDFS系统,本篇散仙将介绍上将索引写在
Hadoop2
qindongliang1922
·
2014-07-09 20:00
mapreduce
hadoop
Solr
Lucene
全文检索
如何将Lucene索引写入
Hadoop2.x
?
http://qindongliang1922.iteye.com/blog/2090121散仙,在上篇文章,已经写了如何将Lucene索引写入Hadoop1.x的HDFS系统,本篇散仙将介绍上将索引写在
Hadoop2
qindongliang1922
·
2014-07-09 20:00
mapreduce
hadoop
Lucene
Solr
全文检索
Hadoop2.2.0 入门教程(二)之
hadoop2.x
eclipse plugin 编译
hadoop2.xeclipseplugin编译详细内容请参考:编译hadoop2.xHadoop-eclipse-plugin插件
残风vs逝梦
·
2014-07-03 19:00
Hadoop2.2.0 入门教程(一)之
hadoop2.x
编译mac版本)
Hadoop编译在apache官网提供的
hadoop2.x
的编译后的hadoop项目,但是官方提供的编译后的项目是在32bit电脑上编译的,那么在64bit的电脑上,hadoop程序的运行还和本地环境有关
残风vs逝梦
·
2014-07-03 19:00
hadoop2.2.0
hadoop2.x
hadoop本地编译
hadoop2.x
配置 - 改 hadoop ssh 端口
启动hadoop,但ssh端口不是默认的22怎么样?好在它可以配置。在conf/hadoop-env.sh里改下。如:exportHADOOP_SSH_OPTS="-p1234"
Mrknowledge
·
2014-06-30 19:00
hadoop2.x
安装配置
1.首先准备hadoop2.2.0的安装包,从官网获取,略。2.加压安装包,进行配置。假设hadoop安装到/usr/hadoop-2.2.0目录,则进行如下配置:(1)/etc/profile配置exportHADOOP_PREFIX=/usr/hadoop-2.2.0exportPATH=$PATH:$HADOOP_PREFIX/bin:$HADOOP_PREFIX/sbin(2)/usr/h
xyls12345
·
2014-06-30 12:00
eclipse中开发
Hadoop2.x
的Map/Reduce项目汇总
一、eclipse中开发
Hadoop2.x
的Map/Reduce项目本文演示如何在Eclipse中开发一个Map/Reduce项目:1、
wbj0110
·
2014-06-24 15:00
hadoop
eclipse中开发
Hadoop2.x
的Map/Reduce项目汇总
一、eclipse中开发
Hadoop2.x
的Map/Reduce项目本文演示如何在Eclipse中开发一个Map/Reduce项目:1、
wbj0110
·
2014-06-24 15:00
hadoop
eclipse中开发
Hadoop2.x
的Map/Reduce项目汇总
一、eclipse中开发
Hadoop2.x
的Map/Reduce项目本文演示如何在Eclipse中开发一个Map/Reduce项目:1、
wbj0110
·
2014-06-24 15:00
hadoop
Hadoop 2.4.0和YARN的安装过程
Hadoop2.x
新特性 将Mapreduce框架升级到ApacheYARN,YARN将Mapreduce工作区分为两个:JobTracker组件:实现资源管理和任务JOB;计划/监视组件:划分到单独应用中
摆渡者
·
2014-06-21 18:00
hadoop
安装
yarn
hadoop2.x
HDFS javaAPI
HDFS javaAPI Configuration conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://h6:9000"); FileSystem fileSystem = FileSystem.get(conf);
weir2009
·
2014-06-19 10:00
javaapi
hadoop2.x
HDFS javaAPI
HDFS javaAPI Configuration conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://h6:9000"); FileSystem fileSystem = FileSystem.get(conf);
weir2009
·
2014-06-19 10:00
javaapi
hadoop2.x
HDFS javaAPI
HDFS javaAPI Configuration conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://h6:9000"); FileSystem fileSystem = FileSystem.get(conf);
weir2009
·
2014-06-19 10:00
javaapi
Hadoop2.x
HDFS shell命令
Hadoop2 HDFS shell命令 1. hdfs dfs -appendToFile <localsrc> ... <dst> 可同时上传多个文件到HDFS里面 2. hdfs dfs -cat URI [URI ...] 查看文件内容 3. hdfs d
weir2009
·
2014-06-18 16:00
hadoop
Hadoop2.x
HDFS shell命令
Hadoop2 HDFS shell命令 1. hdfs dfs -appendToFile <localsrc> ... <dst> 可同时上传多个文件到HDFS里面 2. hdfs dfs -cat URI [URI ...] 查看文件内容 3. hdfs d
weir2009
·
2014-06-18 16:00
hadoop
Hadoop2.x
HDFS shell命令
Hadoop2 HDFS shell命令 1. hdfs dfs -appendToFile <localsrc> ... <dst> 可同时上传多个文件到HDFS里面 2. hdfs dfs -cat URI [URI ...] 查看文件内容 3. hdfs d
weir2009
·
2014-06-18 16:00
hadoop
hadoop2.x
配置 - HistoryServer原理详解
refer:http://www.cnblogs.com/shenh062326/archive/2012/12/16/2820381.html--------------------------------------------------------------------------------------------------------------------------------
Mrknowledge
·
2014-06-12 16:00
hadoop2.x
配置 - Uber模式参数
refer:http://blog.csdn.net/liangliyin/article/details/20928653------------------------------------------------------------------------------------------------------------------------------------------
Mrknowledge
·
2014-06-12 09:00
hadoop2.x
配置 - RM与NM相关参数
REFER:http://dongxicheng.org/mapreduce-nextgen/hadoop-yarn-configurations-resourcemanager-nodemanager/--------------------------------------------------------------------------------------------------
Mrknowledge
·
2014-06-11 17:00
hadoop2.x
配置 - MapReduce相关参数
REFER:http://dongxicheng.org/mapreduce-nextgen/hadoop-yarn-configurations-mapreduce/--------------------------------------------------------------------------------------------------------------------
Mrknowledge
·
2014-06-11 17:00
如何在win7下的eclipse中以local模式调试Hadoop2.2.0的程序
hadoop2.2.0,如果你使用的还是hadoop1.x的版本,那么,也没事,散仙在以前的博客里,也写过eclipse调试1.x的hadoop程序,两者最大的不同之处在于使用的eclipse插件不同,
hadoop2
qindongliang1922
·
2014-06-10 21:00
java
eclipse
hadoop
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他