E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
$HADOOP_HOME
hadoop作业提交 初始化
下面我们来熟悉一下MapReduce作业的提交和初始化的过程: 作业的提交过程 第一步,使用Hadoop提供的shell命令提交作业,命令行作业提交命令:Java代码 $
HADOOP_HOME
meiye
·
2013-10-14 07:00
hadoop
升级hadoop
在没有更换前先备份数据 [hadoop@Hadoop-10-4 hadoop]$ bin/hadoop dfsadmin -finalizeUpgrade Warning: $
HADOOP_HOME
zhengzhuangjie
·
2013-10-09 10:00
hadoop
hadoop导入eclipse并编译打包
1.新建一个java工程,将该工程下面的.classpath .project 拷贝到$
HADOOP_HOME
下面,然后修改.project里面,将工程名字修改为hadoop-1.0.3
代码生活
·
2013-09-30 16:00
eclipse
Hadoop常用配置总结
namenode:50070JobTracker管理界面:http://jobtracker:50030Hadoop守护进程日志存放目录:可以用环境变量${Hadoop_LOG_DIR}进行配置,默认情况下是${
HADOOP_HOME
sdzzboy
·
2013-09-25 15:00
mapreduce
hadoop
集群
mahout贝叶斯算法开发思路(拓展篇)2
如果想直接下面算法调用包,可以直接在mahout贝叶斯算法拓展下载,该算法调用的方式如下:$
HADOOP_HOME
/binhadoopjarmahout.jarmahout.fansy.bayes.BayerRunner-ihdfs_input_path-ohdfs_output_path-scl
fansy1990
·
2013-09-14 14:00
算法
开发
Mahout
mahout贝叶斯算法开发思路(拓展篇)2
如果想直接下面算法调用包,可以直接在mahout贝叶斯算法拓展下载,该算法调用的方式如下:$
HADOOP_HOME
/binhadoopjarmahout.jarmahout.fansy.bayes.BayerRunner-ihdfs_input_path-ohdfs_output_path-scl
thecloud
·
2013-09-14 14:00
Mahout
Mahout贝叶斯算法开发思路(拓展篇)2
如果想直接下面算法调用包,可以直接在mahout贝叶斯算法拓展下载,该算法调用的方式如下:$
HADOOP_HOME
/binhadoopjarmahout.jarmahout.fansy.bayes.BayesRunner-ihdfs_input_path-ohdfs_output_path-scl
fansy1990
·
2013-09-14 14:00
Mahout
贝叶斯算法拓展
Hadoop常用命令
启动Hadoop进入
HADOOP_HOME
目录。执行shbin/start-all.sh关闭Hadoop进入
HADOOP_HOME
目录。
smile0198
·
2013-09-10 22:00
Hadoop操作笔记--命令大全
缺省是${
HADOOP_HOME
}/
huaishu
·
2013-09-05 10:00
Hadoop--hadoop常用命令
启动Hadoop进入
HADOOP_HOME
目录。执行shbin/start-all.sh关闭Hadoop进入
HADOOP_HOME
目录。
u010926176
·
2013-09-03 17:00
hadoop
编译Hadoop Eclipse Plugin
编译HadoopEclipsePlugin环境Eclipse3.7.2Ant1.9.0JDK1.7.0_17Hadoop1.1.2配置修改${
HADOOP_HOME
}\src\contrib\eclipse-plugin
shelltea
·
2013-08-26 20:00
eclipse
hadoop
配置jdk等环境变量
配置jdk,hadoop,hbase,hive环境变量,详情见附件 JAVA_HOME=/usr/java/jdk1.7.0_17
HADOOP_HOME
=/hadoop-1.0.4/ HBASE_HOME
fainily
·
2013-08-26 15:00
环境变量
Hive报错java.lang.NoClassDefFoundError: org/codehaus/jackson/JsonFactory
$
HADOOP_HOME
/lib中不包含jackson-core-asl-1.8.8.jarjackson-jaxrs-1.8.8.jarjackson-mapper-asl-1.8.8.jarjackson-x
duguduchong
·
2013-08-25 18:00
hadoop
hive
集群
Hadoop Streaming框架学习2
HadoopStreaming框架学习(二)1.常用Streaming命令介绍 使用下面的命令运行StreamingMapReduce程序:1:$
HADOOP_HOME
/bin/hadoop/
·
2013-08-21 18:00
hadoop
Hadoop运行错误及解决方法--namenode不启动(能力工场--小马哥整理)
小马哥很懒,首先告诉大家的方法就是(一)使用命令:hadoopnamenode-format重新格式化一个集群中的namenode,然后重新启动hadoop集群;(二)如果上述办法没有奏效将${
HADOOP_HOME
malijava
·
2013-08-20 01:41
hadoop
NameNode
HDFS命令行操作
(1)所有命令(先将$
HADOOP_HOME
/bin加入到.bashrc的$PATH变量中)[html] viewplaincopy[hadoop@node14 hadoop-0.21.0]$ ll $
xiaojun1288
·
2013-08-15 15:00
HIve升级到新版本过程
1:将原有的hive改名为hive_backup2:将原有hive中的conf文件夹全部复制到新版本hive中3:修改hive-conf.sh文件添加
HADOOP_HOME
4:相关第三方的包要转移到新的
lxpbs8851
·
2013-08-07 10:00
awk算术运算一例:统计hdfs上某段时间内的文件大小
计算hdfs指定目录中所有文件名中包含2011-04-24的文件大小,并换算成GB: $
HADOOP_HOME
/bin/hadoop fs -du/user/hdfs/s3/ifocus/*2011-04
sunmeng_Alex
·
2013-08-05 15:00
Hadoop常用命令汇总
启动Hadoop进入
HADOOP_HOME
目录。执行shbin/start-all.sh关闭Hadoop进入
HADOOP_HOME
目录。
bell2008
·
2013-07-31 01:00
hadoop
apche mahout0.8安装与测试
下载tar.gz的安装包地址:http://www.apache.org/dyn/closer.cgi/mahout/下载后解压在你希望安装的路径上修改bin目录下的mahout文件在文件开头添加变量
HADOOP_HOME
xqj198404
·
2013-07-29 18:00
hadoop
Mahout
HDFS基本文件常用命令
如下: vim/etc/profile中加入一句 exportHADOOP_INSTALL=/usr/local/hadoop1.1.2 注意这里要写HADOOP_INSTALL,因为如果写
HADOOP_HOME
zhao_xiao_long
·
2013-07-28 13:37
HDFS文件基本操作
HDFS基本文件常用命令
如下:vim/etc/profile中加入一句exportHADOOP_INSTALL=/usr/local/hadoop1.1.2注意这里要写HADOOP_INSTALL,因为如果写
HADOOP_HOME
zhao_xiao_long
·
2013-07-28 13:37
HDFS文件基本操作
Hadoop
Hadoop1.x 源码修改编译执行
以rpm方式安装的hadoop-1.1.2为例:1.cmd进入到$
HADOOP_HOME
目录中运行ant命令,就可以编译成功了,他会在$
HADOOP_HOME
目录下生成一个build目录,build目录下会生成新的
Mrknowledge
·
2013-07-25 17:00
编译Hadoop1.1.2eclipse插件并测试
(一)、building hadoop 1、编辑{
HADOOP_HOME
}/build.xml (1)、对31行的hadoop版本做修改 <property name="version
·
2013-07-24 16:00
eclipse插件
HADOOP实践101:在Hadoop集群中添加机器和删除机器
本次操作之前,Hadoop的集群情况如下:HDFS的机器情况如下:MR的机器情况如下:添加机器在集群的Master机器中,修改$
HADOOP_HOME
/conf/slaves文件,在其中添加需要加入集群的新机器
duguduchong
·
2013-07-20 16:00
一个完整的Avro数据序列化例子
将以上四个文件放入${
HADOOP_HOME
}/lib目录下(当前为/usr/local/hadoop/lib,为了以后hadoop项目方便)。2.定义模式(Schem
wzw0114
·
2013-07-17 20:40
序列化
avro
Hadoop Streaming Command Details and Q&A
HadoopStreamingHadoopstreamingisautilitythatcomeswiththeHadoopdistribution.TheutilityallowsyoutocreateandrunMap/Reducejobswithanyexecutableorscriptasthemapperand/orthereducer.Forexample:$
HADOOP_HOME
·
2013-07-17 20:00
command
Hive下的变量使用
3.env的命名空间,是指环境变量,包括Shell环境下的变量信息,如
HADOOP_HOME
之类的普通的变量可以使用--definekey=value或者
吐槽达达仔
·
2013-07-17 14:44
Hive
Hive下的变量使用
3.env的命名空间,是指环境变量,包括Shell环境下的变量信息,如
HADOOP_HOME
之类的普通的变量可以使用--definekey=val
dacoolbaby
·
2013-07-17 14:00
Hive
变量
Hive下的变量使用
3. env的命名空间,是指环境变量,包括Shell环境下的变量信息,如
HADOOP_HOME
之类的 普通的变量可以使用&nbs
dacoolbaby
·
2013-07-17 14:00
变量
hive
sqoop 的安装使用
2.设置环境变量
HADOOP_HOME
。
whatis_java
·
2013-07-16 11:08
hadoop
hdfs的C接口libhdfs的测试
sDFS.ItprovidesCapistoasubsetoftheHDFSAPIstomanipulateDFSfilesandthefilesystem.libhdfsispartofthehadoopdistributionandcomespre-compiledin${
HADOOP_HOME
Mrknowledge
·
2013-07-12 17:00
Hive环境搭建
Hadoop0.20.x (2)安装步骤 l 解压 $ tar -xzvf hive-x.y.z.tar.gz l 环境变量HIVE_HOME,PATH,JAVA_HOME,
HADOOP_HOME
ghost_face
·
2013-07-05 10:00
hive
hadoop+hive使用中遇到的问题汇总
size=medium]问题排查方式[/size][list][*]一般的错误,查看错误输出,按照关键字google[*]异常错误(如namenode、datanode莫名其妙挂了):查看hadoop($
HADOOP_HOME
godlovedog
·
2013-07-02 19:18
hadoop
hadoop+hive使用中遇到的问题汇总
问题排查方式 一般的错误,查看错误输出,按照关键字google 异常错误(如namenode、datanode莫名其妙挂了):查看hadoop($
HADOOP_HOME
/logs)
godlovesdog
·
2013-07-02 19:00
hadoop
hadoop
hive
Hadoop命令大全
假设Hadoop的安装目录
HADOOP_HOME
为/home/admin/hadoop。启动与关闭启动HADOOP1. 进入
HADOOP_HOME
目录。2.
wind520
·
2013-07-02 16:00
hadoop
集群
脚本
任务
作业
Hadoop jobtracker.jsp 404
可能原因: if [ -d "$
HADOOP_HOME
/build/webapps" ]; then CLASSPATH=${CLASSPATH}:$
HADOOP_HOME
sunwinner
·
2013-06-28 16:00
hadoop
[整理学习]Hadoop基本文件操作命令
假设Hadoop的安装目录
HADOOP_HOME
为/home/hadoop启动与关闭启动HADOOP1. 进入
HADOOP_HOME
目录。2.
zhang__bing
·
2013-06-28 15:00
hadoop中一些常用的命令介绍
假设Hadoop的安装目录
HADOOP_HOME
为/home/admin/hadoop。启动与关闭启动Hadoop1.进入
HADOOP_HOME
目录。
·
2013-06-19 18:09
hadoop集群安装与配置---hive安装与配置
配置(1) 复制一份hive-env.sh.template,取消.template后缀(2) 更改hive-env.sh的内容:
HADOOP_HOME
=/home/hadoopuser/hadoop
xqj198404
·
2013-06-17 09:00
mysql
hive
HADOOP集群
引入一个文件夹下所有的包
HADOOP_LIB1=${
HADOOP_HOME
}/share/hadoop/hdfs/\*HADOOP_LIB2=${
HADOOP_HOME
}/share/hadoop/hdfs/lib/\*HADOOP_LIB3
guotong1988
·
2013-06-14 16:00
hadoop环境搭建
mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-1.1.2/,二进制版本,解压、安装 http://hadoop.apache.org/docs/r1.1.2/ 1.进入
hadoop_home
cywhoyi
·
2013-06-09 17:00
hadoop
hadoop环境搭建
mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/hadoop-1.1.2/,二进制版本,解压、安装 http://hadoop.apache.org/docs/r1.1.2/ 1.进入
hadoop_home
cywhoyi
·
2013-06-09 17:00
hadoop
hadoop常用命令
启动Hadoop进入
HADOOP_HOME
目录。执行shbin/start-all.sh关闭Hadoop进入
HADOOP_HOME
目录。
huoyunshen88
·
2013-06-08 14:00
Ubuntu 12.04上编译hadoop-eclipse-plugin-1.0.4.jar包
1、在Eclipse中选择File-->Import-->ExistingProjectsintoWorkspace导入已有项目,假设路径为:$
HADOOP_HOME
/src/contrib/eclipse-plugin
wjeson
·
2013-06-04 08:00
PIG安装使用
首先下载pig-0.10.1.tar.gz版本解压到hadoop/pig下面,配置好
HADOOP_HOME
以及PATH环境变量#读取HDFS中的数据到变量中grunt>Line=load'inputTest
ciaos
·
2013-06-03 21:01
Hadoop学习十四:Hadoop-Hdfs FSDataset源码
blk_1150083481087817002是block;%
hadoop_home
%/dfs/data/current/blk_115008348108781700是block文件。
zy19982004
·
2013-05-30 21:00
hadoop
Hadoop学习十四:Hadoop-Hdfs FSDataset源码
blk_1150083481087817002是block;%
hadoop_home
%/dfs/data/current/blk_115008348108781700是block文件。
zy19982004
·
2013-05-30 21:00
Hadoop学习十四:Hadoop-Hdfs FSDataset源码
blk_1150083481087817002是block;%
hadoop_home
%/dfs/data/current/blk_115008348108781700是block文件。
zy19982004
·
2013-05-30 21:00
Hadoop深入学习:MapReduce作业提交和初始化
下面我们来熟悉一下MapReduce作业的提交和初始化的过程: 作业的提交过程 第一步,使用Hadoop提供的shell命令提交作业,命令行作业提交命令: $
HADOOP_HOME
flyingdutchman
·
2013-05-27 22:00
MapReduce作业提交过程
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他