E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
2.7.2
hadoop
2.7.2
分布式集群搭建和生态系统配置
本文只介绍集群环境安装配置,其中的功能使用不做过多说明.详情参考其他资料集群没有配置HA,详情参考其他资料,或本人接下来的文章一版本搭配问题:hadoop使用的是目前比较新的稳定版本hive27June2015:release1.2.1availableThisreleaseworkswithHadoop1.x.y,2.x.y当然还有2.0.0版本,当时也没直接选了1.2.1后来也不想改动了hiv
gao634209276
·
2016-05-15 21:35
hadoop2.x
ubuntu
hive
hbase
hdfs
yarn
hadoop
2.7.2
集群hive-1.2.1整合hbase-1.2.1
本文操作基于官方文档说明,以及其他相关资料,若有错误,希望大家指正根据hive官方说明整合hbase链接如下https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration文中指出hive0.9.0匹配的Hbase版本至少要0.92,比这更早的hive版本要匹配Hbase0.89或者0.90自Hive1.x后,hive能够兼容Hba
gao634209276
·
2016-05-12 14:10
hadoop2.x
hive
hbase
hadoop集群搭建HDFS、HA、 YARN
最新的hadoop-
2.7.2
又增加了YARNHA1、环境准备修改主机名、IP地址。这些在之前博客有提过就不再写了。配置IP地址和主机名映射关系。
u013821825
·
2016-05-12 10:00
hadoop
hdfs
HADOOP集群
hadoop集群搭建HDFS、HA、 YARN
最新的hadoop-
2.7.2
又增加了YARNHA1、环境准备修改主机名、IP地址。这些在之前博客有提过就不再写了。配置IP地址和主机名映射关系。
u013821825
·
2016-05-11 23:00
hadoop
hdfs
HADOOP集群
创建编译运行MapReduce程序(Eclipse+Ubuntu14.04+Hadoop
2.7.2
)
http://www.powerxing.com/hadoop-build-project-using-eclipse/我在学习hadoop的时候,配置Eclipse+Ubuntu14.04+Hadoop
2.7.2
DjangoBUAA
·
2016-05-11 19:00
eclipse
hadoop
ubuntu
机器学习
hadoop
2.7.2
集群搭建之虚拟机安装
一、首先我是准备了7台centos虚拟机,所以首先简单介绍一下centos虚拟机的安装镜像文件:CentOS-7-x86_64-Minimal-1511.iso(因为是虚拟机,所以我选择的是最小化安装板,自己可以去centos官网上下载镜像文件)接下来两项默认下一步就好了点击关闭–》完成—》进入启动界面开启虚拟机选择installcentos7enter键进入图形安装界面continuedone键
u013821825
·
2016-05-11 00:00
虚拟机
hadoop
centos
centos下搭建hadoop平台
环境:centos7.1+hadoop-
2.7.2
下载地址:http://apache.fayea.com/hadoop/common/hadoop-
2.7.2
/准备好虚拟机或者centos系统以及hadoop
u013821825
·
2016-05-10 23:00
hadoop
hadoop集群
2.7.2
搭建
hadoop集群
2.7.2
搭建本文首先搭建两节点的集群,然后动态添加节点。
WuXiaoQuan824212
·
2016-05-10 22:00
hadoop
集群
HADOOP集群
hadoop
2.7.2
(hadoop2.x)使用ant制作eclipse插件hadoop-eclipse-plugin-
2.7.2
.jar
之前介绍了我在Ubuntu下组合虚拟机Centos6.4搭建hadoop
2.7.2
集群,为了做mapreduce开发,要使用eclipse,并且需要对应的hadoop插件hadoop-eclipse-plugin
gao634209276
·
2016-05-10 12:05
hadoop2.x
ubuntu
java
hadoop
2.7.2
(hadoop2.x)使用ant制作eclipse插件hadoop-eclipse-plugin-
2.7.2
.jar
之前介绍了我在Ubuntu下组合虚拟机Centos6.4搭建hadoop
2.7.2
集群,为了做mapreduce开发,要使用eclipse,并且需要对应的hadoop插件hadoop-eclipse-plugin
gao634209276
·
2016-05-10 12:00
java
eclipse
hadoop
ant
eclipse插件
关于hadoop2.x(2.7.1
2.7.2
)集群配置和测试运行中Ubuntu虚拟机VM设置nat方式导致节点传输问题
集群配置都大同小异,在这里我简单说下我的配置:主节点系统是Ubuntu14.04LTSx64其他两个节点在VM中系统为Centos6.4x64JVM为jdk1.7_80hadoop版本2.7.1和
2.7.2
gao634209276
·
2016-05-09 18:00
自己上传jar包到我们的maven本地仓库中
主要是因为现在maven仓库没有特别稳定的镜像,时常发现有些我们要依赖的包死活就是拿不到,比如 org.aspectj aspectjweaver
2.7.2
要么就是引下来是这种东西都是1Kb,而且是乱码
u011325787
·
2016-05-09 18:00
Mac系统安装Hadoop
图0-1系统版本1.下载Hadoop下载链接:http://hadoop.apache.org/releases.html图1-1Hadoop下载页面我下载的是
2.7.2
版本的binary,所以我们下面的安装配置以这个版本为例
wj_november
·
2016-05-05 10:00
Hadoop安装&单机/伪分布式配置_Hadoop
2.7.2
/Ubuntu14.04
一、安装Java1.下载jdk-8u91-linux-x64.tar.gz文件,网址为:http://www.oracle.com/technetwork/java/javase/downloads/index.html2.安装:#选择一个安装路径,我选择的是/opt,并将下载的jdk-8u91-linux-x64.tar.gz文件复制到这个文件夹下$cd/opt$sudocp~/Download
dadadaplz
·
2016-05-04 20:54
Hadoop/Spark
Hadoop安装&单机/伪分布式配置_Hadoop
2.7.2
/Ubuntu14.04
一、安装Java1.下载jdk-8u91-linux-x64.tar.gz文件,网址为:http://www.oracle.com/technetwork/java/javase/downloads/index.html2.安装:#选择一个安装路径,我选择的是/opt,并将下载的jdk-8u91-linux-x64.tar.gz文件复制到这个文件夹下$cd/opt$sudocp~/Download
panglinzhuo
·
2016-05-04 20:00
hadoop
单机模式
伪分布模式
VirtualBox5.0.18+CentOS7.2+Hadoop
2.7.2
配置与开发(2)用YARN完成WordCount作业
$cd/usr/hadoop-
2.7.2
$sbin/start-dfs.sh$sbin/start-yarn.sh在/usr/hadoop-
2.7.2
中新建目录userData,userData内存放两个文本文件
杜工成都
·
2016-05-03 00:08
linux
云计算
互联网
java开发
VirtualBox5.0.18+CentOS7.2+Hadoop
2.7.2
配置与开发
VirtualBox5.0.18+CentOS7.2+Hadoop
2.7.2
配置与开发作者:
[email protected]
密码设置:超级用户root密码设置为:qwqwqw;用户hadoop的密码设置为:hadoop123
杜工成都
·
2016-05-01 22:52
linux
云计算
NoSQL之Redis(五)--- Redis测试以及其与Spring的集成
笔者用的是Jedis-
2.7.2
.jarRedis安装测试接着这上文,我们先简单的写一个测
cody0909
·
2016-04-30 15:03
NoSQL之Redis
NoSQL之Redis(五)--- Redis测试以及其与Spring的集成
笔者用的是Jedis-
2.7.2
.jar
Senior_lee
·
2016-04-30 15:00
redis
cluster
jedis
kylin 安装配置实验
一、实验环境3台CentOSrelease6.4虚拟机,IP地址为192.168.56.101master192.168.56.102slave1192.168.56.103slave2hadoop
2.7.2
hbase1.1.4hive2.0.0zookeeper3.4.8kylin1.5.1
wzy0623
·
2016-04-29 17:00
[置顶] Hadoop
2.7.2
源码在64位Centos Linux下编译
一.在Hadoop官网上下载源码包 1.在Hadoop官网上下载hadoop-
2.7.2
的源码包,下载地址:http://mirrors.noc.im/apache/hadoop/common/hadoop
wanmeilingdu
·
2016-04-28 22:00
源码
hadoop
linux
centos
64位
Spring+Redis Cluster3.0.x
Redis3.0集群搭建方法: http://hot66hot.iteye.com/blog/2050676Redis3.0.x使用方法Maven依赖 redis.clients jedis
2.7.2
满小茂
·
2016-04-28 15:00
重新编译Hadoop
2.7.2
native以支持snappy
问题提出:在运行kylinsample时出现以下错误:org.apache.hadoop.hive.ql.metadata.HiveException:nativesnappylibrarynotavailable:thisversionoflibhadoopwasbuiltwithoutsnappysupport.造成以上错误的原因是Hadoop的二进制安装包中没有snappy支持,需要手工重新
wzy0623
·
2016-04-27 17:00
Python实现新浪博客备份的方法
分享给大家供大家参考,具体如下:Python
2.7.2
版本实现,推荐在IDE中运行。
阿涵-_-
·
2016-04-27 11:30
Python2.7简单连接与操作MySQL的方法
环境:Python
2.7.2
、MySQL5.51.安装MySQL驱动程序。下载自动安装包,双击安装即可,非常简单。2.连接MySQL,下面是Python示例
阿涵-_-
·
2016-04-27 11:09
hadoop
2.7.2
window win7 基础环境搭建
hadoop环境搭建相对麻烦,需要安装虚拟机过着cygwin什么的,所以通过查资料和摸索,在window上搭建了一个,不需要虚拟机和cygwin依赖,相对简便很多。下面运行步骤除了配置文件有部分改动,其他都是参照hadoop下载解压的share/doc/index.html。hadoop下载:http://apache.opencas.org/hadoop/common/解压至无空格目录下即可,下
t0mCl0nes
·
2016-04-26 14:32
hadoop
win7
hadoop
hadoop
2.7.2
window win7 基础环境搭建
hadoop环境搭建相对麻烦,需要安装虚拟机过着cygwin什么的,所以通过查资料和摸索,在window上搭建了一个,不需要虚拟机和cygwin依赖,相对简便很多。下面运行步骤除了配置文件有部分改动,其他都是参照hadoop下载解压的share/doc/index.html。hadoop下载:http://apache.opencas.org/hadoop/common/解压至无空格目录下即可,下
fly_leopard
·
2016-04-26 14:00
hadoop
win7
Hbase 安装配置实验
一、实验环境3台CentOSrelease6.4虚拟机,IP地址为192.168.56.101master192.168.56.102slave1192.168.56.103slave2hadoop
2.7.2
hbase1.2.1hbase
wzy0623
·
2016-04-25 13:00
Hadoop程序开发之——hadoop安装
当前为
2.7.2
.格式为.tat.gz的压缩文件。这是编译好的二进制文件。另一种包含src的是源文件,需要编译才能使用。下载时,建议下载对应的mds文件。便于后面对比下载的hadoop文件是否完整。
qq_23617681
·
2016-04-24 14:00
hadoop
ubuntu16.04搭建Hadoop
2.7.2
+spark1.6.1+mysql+hive2.0.0伪分布学习环境
按步骤走就行:(1)raini@biyuzhe:~$gedit.bashrc#javaexportJAVA_HOME=/home/raini/app/jdk1.7.0_79exportJRE_HOME=${JAVA_HOME}/jreexportCLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib:$CLASSPATHexportPATH=${JAVA_HOME
Raini.闭雨哲
·
2016-04-23 14:43
spark
hadoop
hive
mysql
实验室Hadoop环境搭建
Hadoop分布式集群搭建流程记录软件环境Hadoop版本:hadoop-
2.7.2
.tar.gzJAVA版本:jdk-8u77-linux-x64.tar.gzLinux版本:Ubuntu15.04(
CaptainXero
·
2016-04-21 20:06
CentOS7编译Hadoop-
2.7.2
详解
到hadoop官网,点击source下载hadoop-
2.7.2
-src.tar.gz。解压之tar-z
pmos
·
2016-04-21 16:00
编译Hadoop-2.7.2
如何查看Hadoop是32位还是64位
我们从官网下载的hadoop-
2.7.2
.tar.gz安装包hadoop是32位还是64位,我们查看本地库即可。即进入$hadoop_home
pmos
·
2016-04-21 15:00
Hadoop版本
hadoop的live node为0
1、重新格式化namenodecd~ rm-rfname mkdirname rm-rfhadoop-
2.7.2
/logs/ mkdirhadoop-
2.7.2
/logs/ hadoop
凌度
·
2016-04-18 16:00
企业级hadoop-
2.7.2
集群的实施
企业级hadoop-
2.7.2
集群的实施企业级hadoop-272集群的实施环境介绍在10个节点中创建hadoop用户架设DNS服务器架设NFS服务器安装JDK配置集群分布式环境首次启动hadoop正常启动界面总结环境介绍操作系统
jpzhu16
·
2016-04-17 15:00
jdk
hadoop
centos
操作系统
企业级
MR程序的几种提交运行模式
程序的几种提交运行模式本地模型运行1/在windows的eclipse里面直接运行main方法,就会将job提交给本地执行器localjobrunner执行 ----配置path:D:\hadoop-
2.7.2
zengmingen
·
2016-04-15 16:00
hadoop
跟我一起学习MySQL技术内幕(第五版):(第二章学习日记5)
2.6.5更改表结构2.7获取数据库元数据2.7.1使用show语句获取元数据
2.7.2
借助information_schema获取元数据2.7.3从命令行获取元数据Altertabletable_nameaction
CCyutaotao
·
2016-04-14 23:00
mysql
[hadoop
2.7.2
]搭建eclipse源码阅读环境
有的小伙伴在问我如何在windows下搭建一个eclipse的hadoop源码阅读环境,今天就以hadoop
2.7.2
为例,简单介绍下如何搭建。
tenght
·
2016-04-13 16:00
python链接Mysql数据库
也要遵循上面的几步.让我们一步步的进行.1、MySQL数据库要用MySQLdb模块,但Python用来链接MySQL的第三方库MySQLdb不支持Python3.x特别说明:我在我的电脑上实验时,我的python是
2.7.2
AnneQiQi
·
2016-04-11 16:00
Hadoop
2.7.2
集群的部署
原文地址:http://happyshome.cn/blog/deploy/centos/hadoop
2.7.2
/cluster.html本文使用了4台虚拟机成功的部署了hadoop
2.7.2
的集群开发环境
libingxin
·
2016-04-11 11:00
java
hadoop
centos
Centos上源码安装Hadoop
2.7.2
原文地址:http://happyshome.cn/blog/deploy/centos/hadoop
2.7.2
.html本篇文章中介绍了在Centos7中,如何编译安装Hadoop
2.7.2
源码。
libingxin
·
2016-04-08 15:00
java
源码
hadoop
centos
hadoop
2.7.2
基于centos完全分布式安装
hadoop使用
2.7.2
二、利用vmware安装三个节点。(此处可以先建立一个centos虚拟机,因为后面需要安装jdk,hadoop,还要配置环境变量,可以利用虚拟机克隆的方法得到另外两个
huanghui147258369
·
2016-04-08 09:00
hadoop
linux
centos
分布式
大数据
centos 7下Hadoop
2.7.2
伪分布式安装
centos7下Hadoop
2.7.2
伪分布式安装,安装jdk,免密匙登录,配置mapreduce,配置YARN。
dream_an
·
2016-04-03 09:00
java
mapreduce
jdk
hadoop
centos
Hive1.2.1的安装过程
一、环境说明:1、Ubuntu14.0.4的操作系统;2、Hadoop
2.7.2
的伪分布模式;在准备安装Hive之前要确保Hadoop能够正常运行;3、Hive必须部署在一台能够访问到HDFS的机器上;
初级以上
·
2016-03-30 22:23
Hadoop生态圈
Hive1.2.1的安装过程
一、环境说明:1、Ubuntu14.0.4的操作系统;2、Hadoop
2.7.2
的伪分布模式;在准备安装Hive之前要确保Hadoop能够正常运行;3、Hive必须部署在一台能够访问到HDFS的机器上;
Veechange
·
2016-03-30 22:00
hadoop
hive
selenium+Python+eclipse环境
先讲下selenium+Python的搭建1.安装Python下载地址:http://www.python.org/ftp/python/
2.7.2
/python-
2.7.2
.msi下载后单击安装即可安装完成后设置环境变量
ajiatutu
·
2016-03-30 10:00
Redhat hadoop
2.7.2
eclipse配置
下载hadoop2.7eclipse插件,并放到eclipseplugins目录。重启eclipse,设置hadoop安装路径。配置Map/ReduceLocations 打开Windows—OpenPerspective—Other点击Map/ReduceLocation选项卡,点击右边小象图标,打开HadoopLocation配置窗口:输入LocationName,任意名称即可.配置Map/R
vs412237401
·
2016-03-29 17:00
hadoop
Redhat hadoop
2.7.2
安装笔记
本次安装是在windows7环境下安装redhat虚拟机进行的,所需要的软件如下:VirtualBox-5.0.16-105871-Win.exerhel-server-5.4-x86_64-dvd.iso首先安装虚拟机软件,然后在此基础上安装redhat,安装redhat的时候记得关闭防火墙还有其它的一些服务都disabled掉。首先在windows7上开一个共享目录,将如下软件放入共享目录:j
vs412237401
·
2016-03-29 13:00
hadoop
虚拟机
red
hat
hadoop和hbase安装与配置
Mac10.10.3Yosemite安装方式:homebrew二、安装hadoop安装hadoop命令:brewinstallhadoop安装位置:这里写代码片/usr/local/Cellar/hadoop/
2.7.2
napoay
·
2016-03-28 15:00
hadoop
mac
hbase
brew
HBase HA高可用集群搭建及HBase Shell简单使用
1.先搭建HadoopHA集群(包含ZooKeeper搭建),请看这:HadoopHA高可用集群搭建(
2.7.2
)2.我只有五台机器,所以是这么规划的:drguo1/2HMasterdrguo3/4/5HRegionServer3
光于前裕于后
·
2016-03-27 17:28
Hadoop
大数据动物园
上一页
18
19
20
21
22
23
24
25
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他