E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop1
hadoop2.4安装部署——亲手测试通过
机器与环境192.168.100.150redhat,jdk1.6.0_301、linuxrh下安装
hadoop1
)下载:http://mirror.esocc.com/apache/hadoop/
coolwzjcool
·
2014-06-18 08:41
个人收藏
Hadoop入门进阶步步高(三)-配置Hadoop
三、配置
Hadoop1
、设置$HADOOP_HOME/conf/hadoop-env.sh这个文件中设置的是Hadoop运行时需要的环境变量,在1.2.1版中共有19个环境变量,如下: 变量名称默认值说明
fenglibing
·
2014-06-15 22:00
mapreduce
hadoop
hdfs
NameNode
mapred
Spark1.0.0 开发环境快速搭建
平台的环境配置如下: 机器名 配置 角色 软件安装
hadoop1
2G内存,双核 hadoop:NN/DNSpark:Master/worker /app/hadoop/hadoop220/app/hadoop
book_mmicky
·
2014-06-12 15:00
spark
Hadoop初学指南(9)--
hadoop1
的集群安装
本文主要介绍了hadoop1.2版本集群的安装步骤1分布结构由于是实验环境,所以只是简单的实现hadoop1.2版本的集群:主节点(1个,是hadoop0):NameNode、JobTracker从节点(2个,是
hadoop1
yushaoqing
·
2014-06-11 16:29
hadoop
集群
主机
slaves
Hadoop初学指南(9)--
hadoop1
的集群安装
本文主要介绍了hadoop1.2版本集群的安装步骤1分布结构由于是实验环境,所以只是简单的实现hadoop1.2版本的集群:主节点(1个,是hadoop0):NameNode、JobTracker从节点(2个,是
hadoop1
yushaoqing
·
2014-06-11 16:29
主机
集群
hadoop
Hadoop
shark on yarn udf的使用
参考资料[1]中是基于
hadoop1
的,这里要在基于hadoop2的解决同样的问题。
lzshlzsh
·
2014-06-03 23:00
Hadoop认知--在不同的阶段
在这个月中我干了如下几件事1、大体看了《Hadoop权威指南》,把里面的代码手工码了一遍,并写了8篇学习笔记2、配置了
Hadoop1
和Hadoop2集群,都是用4台虚拟机3、听了一些Hadoop视频基本认知如下
puma_dong
·
2014-05-22 15:00
hadoop
Hadoop认知
Hbase的JavaAPI操作_无法定位登录配置问题解决
Myeclipse调用JavaApi接口进行操作的时候遇到了如下问题: 该问题经分析定位为Hbase的配置文件为conf下面未添加backup-master 保证Hbase集群启动成功:http://
hadoop1
wang吖
·
2014-05-17 19:00
javaapi
HDFS HA系列实验之五:client 配置
Hadoopclient访问HDFS是通过client端的hadoop配置文件来访问hadoop集群的,一般的情况下我们在配置文件core-site.xml中配置fs.defaultFS是使用一个类似hdfs://
hadoop1
book_mmicky
·
2014-05-13 15:00
Hbase缺省配置文件
hbase在0.95之后,分别有了
hadoop1
和hadoop2版了。
book_mmicky
·
2014-05-13 15:00
zookeeper3.4.5安装笔记
1:解压 官网zookeeper.apache.org下载安装包,然后解压缩到
hadoop1
的/app/hadoop/zookeeper345目录,目录属于hadoop:hadoop。
book_mmicky
·
2014-05-13 15:00
hadoop
zookeeper
Hive 0.11.0 远程模式搭建
1:安装计划
hadoop1
192.168.100.171 (hadoop2.2.0namenode)hadoop3 192.168.100.173 (hadoop2.2.0datanode
book_mmicky
·
2014-05-13 15:00
hadoop
hive
安装
Redis安装和配置
安装机器:
hadoop1
(因为只是测试用就不使用redis的主从复制配置了)安装目录:/app/redis数据目录:/app/redis/data配置文件:/app/redis/redis6379.conf2
book_mmicky
·
2014-05-13 15:00
redis
org.apache.hadoop.mapreduce.JobContext
Foundinterfaceorg.apache.hadoop.mapreduce.JobContext,butclasswasexpected这里需要注意,sqoop有两个版本:sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz(对应
hadoop1
闵开慧
·
2014-05-13 11:00
expected
Class
WAS
interface
found
but
大数据迁移(简单案例)(41 )
所谓的大数据迁移就是把某个节点上的数据(或者几个节点上的数据)分别拷贝到不同数据节点上的过程.就像我在的公司就是这样做的,在CDHhadoop的版本中,一个命令就能完成上面的大数据迁移的所有事情.例如:现有的机器:
hadoop1
肖鋭
·
2014-05-11 20:00
第九章 搭建Hadoop 2.2.0版本HDFS的HA配置
在
hadoop1
时代,只有一个NameNode。如果该NameNode数据丢失或者不能工作,那么整个集群就不能恢复了。这是
hadoop1
中的单点问题,也是
hadoop1
不可靠的表现。
蓝狐乐队
·
2014-05-05 00:00
hadoop2.2.0集群的HA高可靠的最简单配置
在
hadoop1
时代,只有一个NameNode。如果该NameNode数据丢失或者不能工作,那么整个集群就不能恢复了。这是
hadoop1
中的单点问题,也是
hadoop1
不可靠的表现,如图1所示。
蓝狐乐队
·
2014-04-28 14:00
Hadoop初学指南(1)--
Hadoop1
伪分布模式的安装
本文主要介绍了
hadoop1
的伪分布模式的安装。只需要根据步骤一步一步的操作就可以按照好hadoop的伪分布安装。
yushaoqing
·
2014-04-25 17:56
安装
虚拟机
status
Hadoop
Hadoop初学指南(1)--
Hadoop1
伪分布模式的安装
本文主要介绍了
hadoop1
的伪分布模式的安装。只需要根据步骤一步一步的操作就可以按照好hadoop的伪分布安装。
yushaoqing
·
2014-04-25 17:56
hadoop
虚拟机
安装
status
伪分布
mapreduce中wordcount详细介绍(包括
hadoop1
和hadoop2版本)
1.1MapReduce编程模型MapReduce采用"分而治之"的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成,然后通过整合各个节点的中间结果,得到最终结果。简单地说,MapReduce就是"任务的分解与结果的汇总"。在Hadoop中,用于执行MapReduce任务的机器角色有两个:一个是JobTracker;另一个是TaskTracker,JobTracker是用于
闵开慧
·
2014-04-24 10:00
虚拟机重启后hadoop走动步骤
在
hadoop1
上执行命令:/usr/local/hadoop/bin/hdfszkfc�CformatZK【格式化操作的目的是在ZK集群中建立一个节点,用于保存集群c1中NameNode的状态数据】在
23萝卜
·
2014-04-12 13:02
虚拟机
国内第一篇详细讲解hadoop2的automatic HA+Federation+Yarn的教程(1)
对于
hadoop1
,很多同学就因为不能搭建正确的运行环境,导致学习兴趣锐减。不过,我有免费的学习视频下载,请点击这里。
23萝卜
·
2014-04-11 21:43
搭建
hadoop2.2.o
国内第一篇详细讲解hadoop2的automatic HA+Federation+Yarn的教程(1)
对于
hadoop1
,很多同学就因为不能搭建正确的运行环境,导致学习兴趣锐减。不过,我有免费的学习视频下载,请点击这里。
23萝卜
·
2014-04-11 21:43
hadoop2.2.o
搭建
hadoop
同步时间
1、
hadoop1
节点上操作:启动NTPDchkconfigntpdon启动ntpd:servicentpdstartvim/etc/ntp.conf注释掉#restrictdefaultkodnomodifynotrapnopeernoquery
23萝卜
·
2014-04-11 12:37
时间同步
Hbase简单搭建(33)
(2)zookeeper必须在各个节点启动成功.确定集群结构,以hadoop0作为主节点,
hadoop1
和hadoop2作为从节点.在hadoop0、
hadoop1
肖鋭
·
2014-04-05 21:00
Eclipse调用hadoop2运行MR程序
在
Hadoop1
中,只需指定jt(jobtracker)和fs(namenode)即可,一般如下:Configurationconf=newConfiguration();conf.set("mapred.job.tracker
fansy1990
·
2014-04-03 22:27
hadoop
eclipse
java调用hadoop
Eclipse调用hadoop2运行MR程序
在
Hadoop1
中,只需指定jt(jobtracker)和fs(namenode)即可,一般如下:Configurationconf=newConfiguration(); conf.set("mapred.job.tracke
fansy1990
·
2014-04-03 22:00
hadoop2配置文件详细解释
对于
hadoop1
,很多同学就因为不能搭建正确的运行环境,导致学习兴趣锐减。不过,我有免费的学习视频下载,请点击这里。
闵开慧
·
2014-04-03 11:00
hadoop2配置文件详细解释
Zookeeper集群搭建(简单)(29)
1 搭建zookeeper的集群1.1 zookeeper集群要求至少3个节点(hadoop0,
hadoop1
,hadoop2)(第27章hadoop集群搭建),且是奇数个,且节点之间的时间要同步
肖鋭
·
2014-03-30 20:00
hadoop 常用配置项
;fs.default.name hdfs://hadoopmaster:9000 定义HadoopMaster的URI和端口 fs.checkpoint.dir /opt/data/
hadoop1
·
2014-03-25 14:00
hadoop
hadoop2.2的eclipse插件编译
在网上下载hadoop2x-eclipse-plugin-master的插件包:https://github.com/winghc/hadoop2x-eclipse-plugin(用unzip解压).
hadoop1
zhu_9527
·
2014-03-20 22:00
Hadoop集群搭建(27)
Hadoop集群搭建方式: 1.1 确定部署三个节点,分别是hadoop0,
hadoop1
,hadoop2。
肖鋭
·
2014-03-19 22:00
ssh 配置
SSH 无密 码原理简介 : 首先在
hadoop1
上生成一个密 钥对,包括一个公钥和一个私钥,并将公钥复制到所有的 slave(hadoop2-hadoop4) 上。
228298566
·
2014-03-04 15:00
ssh
传智播客2014年JavaEE+物联云计算就业班课程升级通知
与之前相比较,新课程紧密结合企业需求、内容更全面、更深入,课程设计更连贯、更合理,具备了架构师水平.全新课程出炉,详解如下:1.云计算之大数据库处理hadoop2课程激流勇进
Hadoop1
和ha
itcast_cn
·
2014-02-26 10:00
java
传智播客
课程调整
配置hadoop集群时,ssh无密码登陆设置(各个主机的用户名需要一样)
环境:主机hadoop0,namenode,centos6.4操作系统,用户名hadoop从机
hadoop1
,datan
天边tbdp
·
2014-02-21 17:27
centos
hadoop
SSH 无密 码原理简介
SSH 无密 码原理简介 : 首先在
hadoop1
上生成一个密 钥对,包括一个公钥和一个私钥,并将公钥复制到所有的 slave(hadoop2-hadoop4) 上。
zhanghaj00
·
2014-02-19 17:00
ssh
Hadoop1
:Linux下部署Hadoop伪分布模式
JDK版本为1.8_191Hadoop版本为2.4.1Distribution为Ubuntu141,创建hadoop账号#创建hadoop用户组root@sean:~#groupaddhadoop#在hadoop用户组下创建hadoop账号root@sean:~#useradd-d/home/hadoop-m-ghadoophadoop#修改hadoop账号密码root@sean:~#passwd
sean-zou
·
2014-02-14 01:22
Big
Data
国内第一篇详细讲解hadoop2的automatic HA+Federation+Yarn配置的教程
对于
hadoop1
,很多同学就因为不能搭建正确的运行环境,导致学习兴趣锐减。不过,我有免费的学习视频下载,请点击这里。
吴超沉思录
·
2014-02-12 14:00
配置
HA
hadoop2
Federation
core-site.xml
Description fs.default.namehdfs://hadoopmaster:9000定义HadoopMaster的URI和端口 fs.checkpoint.dir/opt/data/
hadoop1
蓝狐乐队
·
2014-02-11 13:00
hadoop 2.2.0安装
hahadoop-2.2.0 安装和配置步骤具体如下:1、主机和ip分配如下 ip地址 主机名 用途 192.168.1.112
hadoop1
hxpjava1
·
2014-02-09 17:00
日志架构(六)服务端设计
修改nginx配置,支持超长URL的提交;日志采用logrotate切割,结合crontab实现分钟切割;收集器主要采用flume与nginx同机器部署agent,收集到collector,最终保存到
hadoop1
85977328
·
2014-02-08 22:00
服务端
日志架构(六)服务端设计
修改nginx配置,支持超长URL的提交;日志采用logrotate切割,结合crontab实现分钟切割;收集器主要采用flume与nginx同机器部署agent,收集到collector,最终保存到
hadoop1
85977328
·
2014-02-08 22:00
服务端
日志架构(六)服务端设计
修改nginx配置,支持超长URL的提交;日志采用logrotate切割,结合crontab实现分钟切割;收集器主要采用flume与nginx同机器部署agent,收集到collector,最终保存到
hadoop1
85977328
·
2014-02-08 22:00
服务端
国内最全最详细的hadoop2.2.0集群的MapReduce的最简单配置
简介 hadoop2的中的MapReduce不再是
hadoop1
中的结构已经没有了JobTracker,而是分解成ResourceManager和ApplicationMaster。
吴超沉思录
·
2014-01-26 20:00
国内最全最详细的hadoop2.2.0集群的HA高可靠的最简单配置
在
hadoop1
时代,只有一个NameNode。如果该NameNode数据丢失或者不能工作,那么整个集群就不能恢复了。这是
hadoop1
中的单点问题,也是
hadoop1
不可靠的表现,如图1所示。
吴超沉思录
·
2014-01-26 07:00
Hadoop2.2.0版本多节点集群安装及测试
三台机器的分工如下:
Hadoop1
(Master): NameNode/ResouceManagerHadoop
zhu_9527
·
2013-12-17 11:00
hbase+zookeeper集群搭建
hbase版本:0.92.1.tar.gz,在
hadoop1
上部署master和slave,
lxf310
·
2013-12-11 14:00
ubuntu安装 hadoop
三台机器(ip不用自己设置,网络nat即可) vim /etc/hosts
hadoop1
这些年
·
2013-12-08 22:00
ubuntu
视频专辑:炼数成金 hadoop 视频教程
专辑:炼数成金hadoop视频教程简介:hadoop入门级经典课程,炼数成金-
hadoop1
hadoop01a_Hadoop的源起与体系介绍2013-10-2216:36|播放(59)|评论(0)|
小白forever
·
2013-11-17 23:00
mapreduce
hadoop
大数据
hbase
hdfs
ceph-hadoop
ceph-client4.ceph创建poola)cephosdpoolcreatehadoop1100cephosdpoolsethadoop1size1b)cephosddump|grephadoop1$:pool3'
hadoop1
Chrro
·
2013-10-30 15:00
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他