E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop-1.2.1
VMware中Ubuntu14.04下Spark虚拟集群安装运行步骤简述
4.安装
hadoop-1.2.1
。5.安装scala-2.10.4。6.安装spark-1.0.1-bin-hadoop1。7.克隆虚拟机slave1。
Ian_Hua
·
2023-04-08 11:50
技术漫谈
vmware
spark
mahout之旅---分布式推荐算法ALS-MR
Mahout分布式推荐系统——基于矩阵分解的协同过滤系统1.实例环境Mahout版本:mahout-0.9;Hadoop版本:
hadoop-1.2.1
;Jdk版本:java1.7.0_13分布式系统:centos
卅一
·
2023-01-27 09:53
数据挖掘
算法
数据挖掘
mapreduce
协同过滤算法
ALS-WR
namenode -format进行格式化出错
项目场景:namenode-format进行格式化出错出现以下错误:java.io.IOException:Cannotcreatedirectory/opt/
hadoop-1.2.1
/tmp/dfs/
就是就是想吃
·
2022-12-21 16:37
其他
hadoop
hdfs
Hadoop 1.x 守护进程服务三种启动停止方式
所有的命令均在/opt/modules/
hadoop-1.2.1
/bin中1、第一种方式分别启动HDFS和MapReduce,命令如下:启动:start-dfs.sh顺序NameNode、DataNode
残缺的孤独
·
2020-09-16 02:14
【HBase基础教程】5、HBase API访问
开发环境硬件环境:Centos6.5服务器4台(一台为Master节点,三台为Slave节点)软件环境:Java1.7.0_45、EclipseJunoServiceRelease2、
hadoop-1.2.1
andie_guo
·
2020-09-15 22:31
hbase
Hadoop基础教程
Hadoop启动,停止,与其中的守护进程的启动停止
版本
hadoop-1.2.1
启动脚本脚本说明start-all.sh启动所有的Hadoop守护进程。
杨鑫newlfe
·
2020-09-14 15:36
大数据挖掘与大数据应用案例
Linux
Hadoop-2.2.0中文文档——Apache Hadoop 2.2.0 概览
起先从
Hadoop-1.2.1
开始,略会写点MapReduce,还是想要跟上Hadoop发展的步伐,虽说现在官方已经发布2.4.0版本了,但是稳定版还是2.2.0。
laozhao02
·
2020-09-14 00:18
Hadoop学习之传递命令行参数给Mapper和Reducer
在
Hadoop-1.2.1
进行作业开发时,由于输入文件的特殊性,需要将日期作为参数传递到Mapper和Reducer任务。
skyWalker_ONLY
·
2020-09-13 19:45
Hadoop-1.x
Hadoop
Hadoop各个版本的下载地址
mirror.bit.edu.cn/apache/hadoop/common/linux安装1.2.1版本示例wgethttp://mirror.bit.edu.cn/apache/hadoop/common/
hadoop
ysk_xh_521
·
2020-09-11 18:42
大数据
遇到问题---Hadoop---java.io.IOException: NameNode is not formatted
这时候用下面的命令去查看master机子的启动日志:cd/home/joe/hadoop/
hadoop-1.2.1
/libexec/..
张小凡vip
·
2020-09-11 02:47
hadoop
遇到问题解决方案集锦
hbase-0.94安装方法详解
Hadoop-1.2.1
的安装方法参考
hadoop-1.2.1
安装方法详解注意:安装时要注意Hadoop和HBase之间的版本关系,如果不匹配,很可能会影响HBase系统的稳定性。本帖教程
gnail_oug
·
2020-08-22 16:05
hbase
hadoop学习笔记
hadoop-1.2.1
完全分布式安装
配置hadoop集群首先选准备3台liunx机器(我用的Ubuntu虚拟机)Ubuntu还是Centos随便192.168.1.101h1(准备装成namenode)192.168.1.102h2(准备装成datanode)192.168.1.103h3(准备装成datanode)首先,联通这3台机子的使用ssh免密钥:我自己使用的都是root用户,因为懒的使用其他用户还要赋值权限生成ssh密钥命
阿童木-atom
·
2020-08-19 06:47
系统架构
hadoop生态集群
大数据
CentOS6.4下伪分布式安装
Hadoop-1.2.1
一、配置hadoop总共需要修改4个文件,"hadoop-env.sh","core-site.xml"、"hdfs-site.xml"和"mapred-site.xml"。1.hadoop-env.shexportJAVA_HOME=/usr/java/jdk1.7.0_452.core-site.xmlhadoop.tmp.dir/home/luffy/Development/hadoop-$
weixin_34384557
·
2020-08-19 05:52
大数据
运维
java
[转]CentOS下安装伪分布式
Hadoop-1.2.1
From:http://blog.csdn.net/yinan9/article/details/16805275环境:CentOS5.10(虚拟机下)[root@localhosthadoop]#lsb_release-aLSBVersion::core-4.0-ia32:core-4.0-noarch:graphics-4.0-ia32:graphics-4.0-noarch:printing
weixin_34269583
·
2020-08-19 05:07
centos部署伪分布式hadoop1.2.1
2019独角兽企业重金招聘Python工程师标准>>>配置环境变量HADOOP_INSTALL=/home/grid/
hadoop-1.2.1
/JAVA_HOME=/opt/default-javaPATH
weixin_33709219
·
2020-08-19 04:36
Hadoop-1.2.1
安装与配置
Hadoop-1.2.1
安装与配置学习hadoop也是有一段时间了,但是都是纸上谈兵,再加上当今云计算工具的不断更新换代,也不知现在的hadoop还能干什么。
肖玄
·
2020-08-19 04:57
云计算
Hadoop-1.2.1
分布式集群搭建(亲测有效版)
Hadoop-1.2.1
分布式集群搭建Hadoop-121分布式集群搭建环境条件安装jdk并配置环境安装ssh-client安装ssh-server配置ssh免密登录安装配置Hadoop-121搭建hadoop
linukey
·
2020-08-19 02:27
Hadoop
hadoop-1.2.1
安装方法详解
redhat)2、设置虚拟机主机名ip内存硬盘master192.168.10.200500M8Gslave1192.168.10.201500M8Gslave2192.168.10.202500M8G3、下载
hadoop
gnail_oug
·
2020-08-19 02:59
hadoop
hadoop学习笔记
hadoop
安装方法详解
CentOS下安装伪分布式
Hadoop-1.2.1
系统环境:CentOS5.10(虚拟机下)[root@localhosthadoop]#lsb_release-aLSBVersion::core-4.0-ia32:core-4.0-noarch:graphics-4.0-ia32:graphics-4.0-noarch:printing-4.0-ia32:printing-4.0-noarchDistributorID:CentOSDescri
yinan9
·
2020-08-19 00:41
hadoop
Error:Call to localhost/127.0.0.1:9000 failed on
我用的各个软件版本如下:eclipse版本是:eclipse-jee-luna-SR1-win32-x86_64,hadoop版本:
hadoop-1.2.1
(虽然有点老,但是对于我这个项目足够了,你们也可以用新
chengxie1963
·
2020-08-18 10:56
eclipse配置hadoop mapreduce开发环境
MyEclipse后,创建一个java项目File->New->JavaProject输入项目名称,确定2.导入hadoop所有包解压hadoop-1.2.1.tar(E:\software\share\
hadoop
常飞梦
·
2020-08-16 19:19
Hadoop
Java
ubuntu下hadoop源代码安装
lib目录下2.解压hadoop压缩包cdhadoop-1.2.1anteclipse报错create-native-configure:BUILDFAILED/home/steven/download/
hadoop
digao61
·
2020-08-16 08:11
hadoop
Hadoop开发环境搭建-Eclipse插件配置
上面的几篇文章已经详细的记录了我的Hadoop集群搭建过程,成功搭建了由一个Master和两个Slave构成的简单的
Hadoop-1.2.1
集群,下面通过在Eclipse中安装Hadoop插件的方法搭建
米范engineer
·
2020-08-16 06:41
Hadoop
根据
hadoop-1.2.1
整理出的mapreduce过程
1.Job.waitForComplete()代表一个由用户配置提交的作业2.JobClient.submitJobInternal()(1).检查客户端参数,用户权限,生成jobid(2).生成hadoop上下文JobContext,计算输入分片,将所有运行时信息写入job.xml3.调用JobSubmitProtocol.submit方法提交,实际上是远程RPC调用JobTracker的sub
Lincolnfather
·
2020-08-15 05:50
hadoop
Pig的安装和使用方法
本文使用的pig版本是pig-0.12.0.tar.gz,在安装以前已经安装好了hadoop,hadoop的安装方法参考
hadoop-1.2.1
安装方法详解pig的安装方法很简单,配置一下环境即可,pig
gnail_oug
·
2020-08-10 16:27
pig
hadoop学习笔记
Hadoop实战 Hadoop Pipes运行C++程序问题解决
原创博客,转载请注明:http://blog.csdn.net/zhang2010kang/article/details/45871549说明:我使用的是
hadoop-1.2.1
,开发环境是OpenSuSE12.3x64
zhang2010kang
·
2020-08-07 22:29
hadoop
在centos6.5上hadoop mapreduce 统计英文单词
集群统计一篇文章中英文单词的数量统计1.txt中单词的数量,新建一个mds目录,把文件移到此目录下a.写一个shell脚本新建一个run.sh文件并编辑HADOOP_CMD=”/usr/local/src/
hadoop
Blithe_Lee2
·
2020-08-01 14:45
人工智能大数据
大数据开发
Hadoop学习笔记0004——eclipse安装hadoop插件
Hadoop学习笔记0004——eclipse安装hadoop插件1、下载hadoop-1.2.1.tar.gz,解压到win7下
hadoop-1.2.1
;2、如果
hadoop-1.2.1
中没有hadoop-eclipse-plugin
拾毅者
·
2020-07-15 17:06
Hadoop
hbase总结(二)-hbase安装
我将要安装的hbase是hbase-0.94.11版本,需要的hadoop是
hadoop-1.2.1
版本。
程序员成长史
·
2020-07-11 10:47
Hbase
java对HDFS中文件的操作
22需要处理hadoop的文件程序需要引入下面jar包,可以
hadoop-1.2.1
\lib找到。
wangzhantao
·
2020-07-10 05:26
Hadoop学习笔记
Ubuntu下Hadoop1.2.1伪分布模式安装教程
软件环境准备1.1Hadoop:我们使用hadoopRelease1.2.1(stable)版本,下载链接:http://mirrors.ustc.edu.cn/apache/hadoop/common/
hadoop
xh1056
·
2020-07-09 01:38
Hadoop
hadoop1.2.1伪分布模式安装教程
软件环境准备1.1Hadoop:我们使用hadoopRelease1.2.1(stable)版本,下载链接:http://mirrors.ustc.edu.cn/apache/hadoop/common/
hadoop
weixin_30298497
·
2020-07-08 13:00
mac关于Hadoop安装
后面重新下载了低版本的
hadoop-1.2.1
,解决了问题。下面讲述如何正确配置Hadoop安装,留作记录,以备不时之需。1.安装JDK1.1
vernwang
·
2020-07-08 05:13
Hadoop-1.2.1
安装
Hadoop的安装比较繁琐,有如下几个原因:其一,Hadoop有非常多的版本;其二,官方文档不尽详细,有时候更新脱节,Hadoop发展的太快了;其三,网上流传的各种文档,或者是根据某些需求定制,或者加入了不必须要的步骤,或者加入容易令人误解的步骤。其实安装是很重要的步骤,只有安装好了,才能谈及下一步。在本书撰写的时候,选用Hadoop的stable版安装。笔者的登录用户名是brian,大家可以根据
e421083458
·
2020-07-07 07:58
云计算
FileUtil
FileUtil用的时候,注释内容如下:
hadoop-1.2.1
\src\core\org\apache\hadoop\fs/***LicensedtotheApacheSoftwareFoundation
鲍礼彬
·
2020-07-07 03:59
Bigdatda-HDFS
Hadoop 全分布配置还算蛮详细的步骤整理
vmwareworkstation11系统:fedora(其实fedora和ubuntu操作步骤一模一样,就是在给新建用户分配权限那一步有点不一样之外)一台从机fedora中已安装jdk1.8.0_11和
hadoop
吴言-----
·
2020-07-04 23:17
【HBase基础教程】6、HBase之读取MapReduce数据写入HBase
开发环境硬件环境:Centos6.5服务器4台(一台为Master节点,三台为Slave节点)软件环境:Java1.7.0_45、EclipseJunoServiceRelease2、
hadoop-1.2.1
andie_guo
·
2020-07-01 15:24
hbase
Hadoop基础教程
@在 CentOS Linux 中安装
Hadoop-1.2.1
( single-node cluster)
原始链接:http://www.seyvoue.com/posts/17188a01/本文介绍如何在CentOS7中以伪分布式模式(Pseudo-DistributedMode)运行
Hadoop-1.2.1
seyvoue
·
2020-02-13 04:57
MyEclipse安装hadoop插件
【配置环境】:
Hadoop-1.2.1
,MyEclipse,Centos6.5网站上有很多关于Hadoop-eclipse的安装配置信息,但很少有讲到关于怎么在MyEclipse上配置Hadoop的相关操作
先生_吕
·
2020-01-03 19:36
hadoop错误汇总
mv/root/.ssh/known_hosts/tmp对hadoop的namenode节点格式化的时候,出现Formatabortedin/usr/local/src/
hadoop-1.2.1
/tmp
远o_O
·
2019-12-08 05:38
hadoop安装
hadoop下载地址:wgethttp://mirror.bit.edu.cn/apache/hadoop/common/
hadoop-1.2.1
/hadoop-1.2.1.tar.gz环境:ubuntu
兔头咖啡
·
2017-12-08 23:21
hadoop环境搭建
这里用到是centos6.4与hadoop1.2.1版本1.下载安装文件,使用wget命令wgethttp://mirror.bit.edu.cn/apache/hadoop/common/
hadoop
想念最初的美好
·
2017-11-18 19:24
hadoop
linux
hadoop
【大数据】开发环境搭建(三):hadoop伪分布式集群环境搭建(下)
首先进行解压该压缩包tarxvzfhadoop-1.2.1-bin.tar,解压过程如图所示解压完成以后,会在当前目录下产生一个
hadoop-1.2.1
的文件
贫僧洗头爱飘柔
·
2017-10-22 17:59
Hadoop环境搭建
HDFS重新初始化
/stop-all.sh2.hadoop初始化之前,删除文件夹rm-rf/usr/local/src/
hadoop-1.2.1
/tmp3.(可选)删除hadoop日志rm-rf/us
微酸柠檬
·
2017-09-22 14:37
初始化
Hadoop
HDFS
大数据环境搭建
Hadoop日记——安装、配置、启动HDFS
、启动HDFS这次讲的HDFS是伪分布式的(单台服务器)1.下载和解压Hadoop1.2.1下载wgethttp://mirrors.ustc.edu.cn/apache/hadoop/common/
hadoop
饥渴计科极客杰铿
·
2017-06-24 16:21
Hadoop日记——安装、配置、启动HDFS
、启动HDFS这次讲的HDFS是伪分布式的(单台服务器)1.下载和解压Hadoop1.2.1下载wgethttp://mirrors.ustc.edu.cn/apache/hadoop/common/
hadoop
饥渴计科极客杰铿
·
2017-06-24 16:21
部署hadoop
一、软件下载及系统环境软件版本:1.2.1下载地址:http://archive.apache.org/dist/hadoop/common/
hadoop-1.2.1
/文件名:hadoop-1.2.1.
Du.Jiheng
·
2016-12-22 16:21
Hadoop的分布式文件系统(HDFS)的使用
Hadoop的分布式文件系统(HDFS)的使用1、首先在CentOS中安装hadoop1.2.1,安装教程请参见我的另外一篇博客《在CentOS中安装
hadoop-1.2.1
,并进行配置文件的配置》;2
IRhythm
·
2016-09-03 08:44
Linux
Hadoop
在CentOS中安装
hadoop-1.2.1
,并进行配置文件的配置
1、下载hadoop的安装包至/opt目录下,使用命令:wgethttp://mirror.bit.edu.cn/apache/hadoop/common/
hadoop-1.2.1
/hadoop-1.2.1
IRhythm
·
2016-09-01 15:02
Linux
Hadoop
用Eclipse编译Hadoop1.2.1的eclipse插件
0x00准备工作Eclipse、hadoop-1.2.1.tar.gzeclipse-plugin所在目录:
hadoop-1.2.1
\src\contrib\eclipse-plugin0x01导入Eclipse
明月的味道
·
2016-07-15 15:58
上一页
1
2
3
4
5
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他