E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop2.7.2
搭建Hive On Spark 编译Hive源码错误解决方法(spark2.1.0,
hadoop2.7.2
)
HiveOnSpark的搭建需要自行编译Spark源码 withoutHive然后部署。编译成功之后部署Spark集群,此处不描述如何部署集群了。然后本人自行从Hive官网下载Hive2.1.1安装包进行安装,之后启动运行Hive发现出现Class不兼容异常,经过Google得知版本冲突,导致自行编译Hive源码。本人第一次是在archive.apache.org官方下载hive源码进行编译得到如
Dax1n
·
2017-02-28 14:00
CentOS 6.7安装Storm 0.9.7
之前已经在CentOS6.7上安装部署
Hadoop2.7.2
(http://blog.csdn.net/noob_f/article/details/53366756),并正常启动Hadoop集群。
Noob_f
·
2016-12-01 20:28
Linux
Storm
Hadoop2.7.2
的三种安装模式
虚拟机使用的oraclevm,安装的操作系统是centOs7本地模式1.安装JDKHadoop是要安装在JVM上运行的,所以都要安装JDK。所以必须安装JVM。1.1下载JDK下载网址:http://www.oracle.com/technetwork/cn/java/javase/downloads/jdk8-downloads-2133151-zhs.html选择linux64位系统,压缩后缀
duanpeng198738
·
2016-11-21 23:34
Hadoop
Hadoop
hadoop学习之HIVE(3.2):
hadoop2.7.2
下配置hiveserver2启动远程连接
./hive只是启动本地客户端,往往用来测试,我们可以启动hiveserver2服务器用于远程连接,方便开发。前提是配置好hadoop和hive1,开启hiveserver服务:bin/hiveserver2可查看服务是否开启:netstat-nplt|grep100002,新开一个窗口,启动客户端,测试能否连接服务器:$bin/beelinebeeline>!connectjdbc:hive2:
name_s_Jimmy
·
2016-11-10 10:31
hadoop
hive
hiveserver2
简明Hadoop配置(1)——配置jdk以及Hadoop
注意:以下实践实在Ubuntu14.0.4以及
Hadoop2.7.2
所做的,如果环境不同,效果可能不理想。
lqadam
·
2016-10-07 14:02
Hadoop
Spark-Scala-RDD 入门问题汇总
系统运行版本是:
Hadoop2.7.2
/Spark2.0.0/Scala2.11.8编辑器:IDEA1:在Spark上如何运行程序编写的程序必须打包并在终端运行。
左手121
·
2016-08-17 17:13
spark
大数据基础(九)Maven构建Hadoop日志清洗项目(一)
MavenHadoop日志清洗项目(一)
hadoop2.7.2
参考:MavenHadoop:http://www.cnblogs.com/Leo_wl/p/4862820.htmlhttp://blog.csdn.net
dst1213
·
2016-08-13 19:12
大数据开发基础
记录hbase遇到的问题
软件版本:
hadoop2.7.2
、zookeeper3.4.8、hbase1.2.2 1、瞎捣鼓,通过hdfs将/hbase目录删除了,此时执行在hbaseshell中执行list命令是看不到表了
zk_chs
·
2016-08-04 11:00
hbase
记录hbase遇到的问题
软件版本:
hadoop2.7.2
、zookeeper3.4.8、hbase1.2.21、瞎捣鼓,通过hdfs将/hbase目录删除了,此时执行在hbaseshell中执行list命令是看不到
zk_chs
·
2016-08-04 11:00
hbase
记录hbase遇到的问题
软件版本:
hadoop2.7.2
、zookeeper3.4.8、hbase1.2.21、瞎捣鼓,通过hdfs将/hbase目录删除了,此时执行在hbaseshell中执行list命令是看不到
zk_chs
·
2016-08-04 11:00
hbase
CentOS7.2下
Hadoop2.7.2
的集群搭建 v1.3
1.基本环境:操作系统:Centos7.2.1511三台虚机:192.168.163.224master192.168.163.225node1192.168.163.226node2软件包hadoop-2.7.2.tar.gzjdk-7u79-linux-x64.tar.gz2.配置系统环境配置ntp时间同步参考http://bigtrash.blog.51cto.com/8966424/182
退而结网ZP
·
2016-07-26 22:31
集群
hadoop
hdfs
hadoop
Ubuntu16.04上搭建
Hadoop2.7.2
的单机模式和伪分布式模式
对于搭建所需的平台和软件如下:Ubuntu16.04、
Hadoop2.7.2
、java、sshd。以上软件都是到目前为止最新的版本。以下由于只是单机学习的目的,不考虑系统使用上的安全性,因此直接使用
monkeys2012
·
2016-07-20 21:10
hadoop2.7.2
单机模式安装(win7无需cygwin)
阅读更多本文安装环境概述:windows764bitjdk1.7.0_7264bithadoop2.7.2Hadoop从v2以后,单机模式已经可以在Windows上运行了,而且无需cygwin。而单机伪分布式模式理论上也是可以运行的,但是笔者在运行时遇到了形形色色的问题,所以这里就不讨论了。本文记录单机模式安装。1.下载hadoophttp://hadoop.apache.org/releases
xpenxpen
·
2016-07-15 16:00
hadoop
CentOS6.5 下搭建
Hadoop2.7.2
单机伪分布式环境
设置固定IP地址及网关设置IP#vi/etc/sysconfig/network-scripts/ifcfg-eth0DEVICE=eth0HWADDR=08:00:27:BD:9D:B5#不用改TYPE=EthernetUUID=53e4e4b6-9724-43ab-9da7-68792e611031#不用改ONBOOT=yes#开机启动NM_CONTROLLED=yesBOOTPROTO=st
isgiker
·
2016-07-14 10:50
ubuntu 16.04搭建
hadoop2.7.2
(Vmware 12.0搭建完全分布式三台虚拟机)
此做法无实际意义,只是用来学习搭建过程和了解hadoop相关配置。版本:Ubuntu16.04hadoop2.7.2(一台电脑开三台虚拟机完全分布式)主结点:192.168.150.112Caxiongyu1从结点:192.168.150.113Caixiongyu2192.168.150.114Caixiongyu3添加用户hadoop为新用户添加权限:安装JDK及配置环境变量:/etc/pro
BearFishCai
·
2016-06-30 00:05
云计算
Hadoop2.x实战:WordCount实例运行
摘要:本文主要讲了
hadoop2.7.2
自带的WordCount实例运行 操作系统:Ubuntu14.04 hadoop版本:2.7.2实例测试wordCount1、启动hadoop/usr
Evankaka
·
2016-06-28 08:00
wordcount
hadoop2.x
Hadoop2.x实战:Hadoop安装与配置
转载请注明出处http://blog.csdn.net/evankaka摘要:本文主要讲了
Hadoop2.7.2
在Ubuntu14.04上的安装与配置过程一、JDK1、安装JDK比较简单,不懂可以看这里
Evankaka
·
2016-06-27 11:19
Hadoop安装与配置
Hadoop实战演练
Hadoop2.x实战:Hadoop安装与配置
转载请注明出处http://blog.csdn.net/evankaka 摘要:本文主要讲了
Hadoop2.7.2
在Ubuntu14.04上的安装与配置过程一、JDK1、安装JDK比较简单,不懂可以看这里
Evankaka
·
2016-06-27 11:00
Hadoop安装与配置
Hadoop2.7.2
之集群搭建(三台)
原文地址:http://blog.csdn.net/uq_jin/article/details/51513307如果你还没有虚拟机,请参考:http://blog.csdn.net/uq_jin/article/details/51355124如果你还没有试过单机模式,请参考:http://blog.csdn.net/uq_jin/article/details/51451995参考:http:
u010435203
·
2016-05-27 12:00
hadoop
集群
Hadoop2.7.2
之集群搭建(高可用)
原文地址:http://blog.csdn.net/uq_jin/article/details/51487439如果你还没有虚拟机,请参考:http://blog.csdn.net/uq_jin/article/details/51355124如果你还没有试过单机模式,请参考:http://blog.csdn.net/uq_jin/article/details/51451995如果你还没有试过
u010435203
·
2016-05-25 21:00
hadoop
集群
高可用
部署
hadoop2.7.2
集群 基于zookeeper配置HDFS HA+Federation
注:本文基于官方文档以及其他资料,整合hadoop1的核心组成是两部分,即HDFS和MapReduce。在hadoop2中变为HDFS和Yarn。新的HDFS中的NameNode不再是只有一个了,可以有多个(目前只支持2个)。每一个都有相同的职能。两个NameNode当集群运行时,只有active状态的NameNode是正常工作的,standby状态的NameNode是处于待命状态的,时刻同步ac
gao634209276
·
2016-05-19 14:21
hadoop2.x
hdfs
Hadoop2.7.2
之集群搭建(单机)
原文地址:http://blog.csdn.net/uq_jin/article/details/51451995如果你还没有虚拟机,请参考:http://blog.csdn.net/uq_jin/article/details/51355124如果你还没有配置JAVA,请参考:http://blog.csdn.net/uq_jin/article/details/51356799参考:http:
u010435203
·
2016-05-19 13:00
hadoop
wordcount
hdfs
yarn
CentOS7
hadoop2.7.2
分布式集群搭建和生态系统配置
本文只介绍集群环境安装配置,其中的功能使用不做过多说明.详情参考其他资料集群没有配置HA,详情参考其他资料,或本人接下来的文章一版本搭配问题:hadoop使用的是目前比较新的稳定版本hive27June2015:release1.2.1availableThisreleaseworkswithHadoop1.x.y,2.x.y当然还有2.0.0版本,当时也没直接选了1.2.1后来也不想改动了hiv
gao634209276
·
2016-05-15 21:35
hadoop2.x
ubuntu
hive
hbase
hdfs
yarn
hadoop2.7.2
集群hive-1.2.1整合hbase-1.2.1
本文操作基于官方文档说明,以及其他相关资料,若有错误,希望大家指正根据hive官方说明整合hbase链接如下https://cwiki.apache.org/confluence/display/Hive/HBaseIntegration文中指出hive0.9.0匹配的Hbase版本至少要0.92,比这更早的hive版本要匹配Hbase0.89或者0.90自Hive1.x后,hive能够兼容Hba
gao634209276
·
2016-05-12 14:10
hadoop2.x
hive
hbase
hadoop2.7.2
集群搭建之虚拟机安装
一、首先我是准备了7台centos虚拟机,所以首先简单介绍一下centos虚拟机的安装镜像文件:CentOS-7-x86_64-Minimal-1511.iso(因为是虚拟机,所以我选择的是最小化安装板,自己可以去centos官网上下载镜像文件)接下来两项默认下一步就好了点击关闭–》完成—》进入启动界面开启虚拟机选择installcentos7enter键进入图形安装界面continuedone键
u013821825
·
2016-05-11 00:00
虚拟机
hadoop
centos
hadoop 2.7.2 (hadoop2.x)使用ant制作eclipse插件hadoop-eclipse-plugin-2.7.2.jar
之前介绍了我在Ubuntu下组合虚拟机Centos6.4搭建
hadoop2.7.2
集群,为了做mapreduce开发,要使用eclipse,并且需要对应的hadoop插件hadoop-eclipse-plugin
gao634209276
·
2016-05-10 12:05
hadoop2.x
ubuntu
java
hadoop 2.7.2 (hadoop2.x)使用ant制作eclipse插件hadoop-eclipse-plugin-2.7.2.jar
之前介绍了我在Ubuntu下组合虚拟机Centos6.4搭建
hadoop2.7.2
集群,为了做mapreduce开发,要使用eclipse,并且需要对应的hadoop插件hadoop-eclipse-plugin
gao634209276
·
2016-05-10 12:00
java
eclipse
hadoop
ant
eclipse插件
Hadoop安装&单机/伪分布式配置_
Hadoop2.7.2
/Ubuntu14.04
一、安装Java1.下载jdk-8u91-linux-x64.tar.gz文件,网址为:http://www.oracle.com/technetwork/java/javase/downloads/index.html2.安装:#选择一个安装路径,我选择的是/opt,并将下载的jdk-8u91-linux-x64.tar.gz文件复制到这个文件夹下$cd/opt$sudocp~/Download
dadadaplz
·
2016-05-04 20:54
Hadoop/Spark
Hadoop安装&单机/伪分布式配置_
Hadoop2.7.2
/Ubuntu14.04
一、安装Java1.下载jdk-8u91-linux-x64.tar.gz文件,网址为:http://www.oracle.com/technetwork/java/javase/downloads/index.html2.安装:#选择一个安装路径,我选择的是/opt,并将下载的jdk-8u91-linux-x64.tar.gz文件复制到这个文件夹下$cd/opt$sudocp~/Download
panglinzhuo
·
2016-05-04 20:00
hadoop
单机模式
伪分布模式
[置顶]
Hadoop2.7.2
源码在64位Centos Linux下编译
一.在Hadoop官网上下载源码包 1.在Hadoop官网上下载hadoop-2.7.2的源码包,下载地址:http://mirrors.noc.im/apache/hadoop/common/hadoop-2.7.2/hadoop-2.7.2-src.tar.gz 2.把下载下来的源码包,上传到linux上,在这里我放在了/home/soft/下二.准备linux上运行环境 1.上传jdk、an
wanmeilingdu
·
2016-04-28 22:00
源码
hadoop
linux
centos
64位
hadoop2.7.2
window win7 基础环境搭建
hadoop环境搭建相对麻烦,需要安装虚拟机过着cygwin什么的,所以通过查资料和摸索,在window上搭建了一个,不需要虚拟机和cygwin依赖,相对简便很多。下面运行步骤除了配置文件有部分改动,其他都是参照hadoop下载解压的share/doc/index.html。hadoop下载:http://apache.opencas.org/hadoop/common/解压至无空格目录下即可,下
t0mCl0nes
·
2016-04-26 14:32
hadoop
win7
hadoop
hadoop2.7.2
window win7 基础环境搭建
hadoop环境搭建相对麻烦,需要安装虚拟机过着cygwin什么的,所以通过查资料和摸索,在window上搭建了一个,不需要虚拟机和cygwin依赖,相对简便很多。下面运行步骤除了配置文件有部分改动,其他都是参照hadoop下载解压的share/doc/index.html。hadoop下载:http://apache.opencas.org/hadoop/common/解压至无空格目录下即可,下
fly_leopard
·
2016-04-26 14:00
hadoop
win7
[
hadoop2.7.2
]搭建eclipse源码阅读环境
有的小伙伴在问我如何在windows下搭建一个eclipse的hadoop源码阅读环境,今天就以
hadoop2.7.2
为例,简单介绍下如何搭建。
tenght
·
2016-04-13 16:00
Hadoop2.7.2
集群的部署
原文地址:http://happyshome.cn/blog/deploy/centos/
hadoop2.7.2
/cluster.html本文使用了4台虚拟机成功的部署了
hadoop2.7.2
的集群开发环境
libingxin
·
2016-04-11 11:00
java
hadoop
centos
Centos上源码安装
Hadoop2.7.2
原文地址:http://happyshome.cn/blog/deploy/centos/hadoop2.7.2.html本篇文章中介绍了在Centos7中,如何编译安装
Hadoop2.7.2
源码。
libingxin
·
2016-04-08 15:00
java
源码
hadoop
centos
hadoop2.7.2
基于centos完全分布式安装
作为linux和hadoop小白,初次安装hadoop真是心累,用了两天时间才安装成功。下面就介绍下Hadoop安装:一、机器配置和安装说明 一台笔记本、 vmware 、I7处理器。centos—7系统。hadoop使用2.7.2二、利用vmware安装三个节点。(此处可以先建立一个centos虚拟机,因为后面需要安装jdk,hadoop,还要配置环境变量,可以利用虚拟机克隆的方法得到另外两个
huanghui147258369
·
2016-04-08 09:00
hadoop
linux
centos
分布式
大数据
centos 7下Hadoop 2.7.2 伪分布式安装
centos7下
Hadoop2.7.2
伪分布式安装,安装jdk,免密匙登录,配置mapreduce,配置YARN。
dream_an
·
2016-04-03 09:00
java
mapreduce
jdk
hadoop
centos
Hive1.2.1的安装过程
一、环境说明:1、Ubuntu14.0.4的操作系统;2、
Hadoop2.7.2
的伪分布模式;在准备安装Hive之前要确保Hadoop能够正常运行;3、Hive必须部署在一台能够访问到HDFS的机器上;
初级以上
·
2016-03-30 22:23
Hadoop生态圈
Hive1.2.1的安装过程
一、环境说明:1、Ubuntu14.0.4的操作系统;2、
Hadoop2.7.2
的伪分布模式;在准备安装Hive之前要确保Hadoop能够正常运行;3、Hive必须部署在一台能够访问到HDFS的机器上;
Veechange
·
2016-03-30 22:00
hadoop
hive
Redhat
hadoop2.7.2
eclipse配置
下载hadoop2.7eclipse插件,并放到eclipseplugins目录。重启eclipse,设置hadoop安装路径。配置Map/ReduceLocations 打开Windows—OpenPerspective—Other点击Map/ReduceLocation选项卡,点击右边小象图标,打开HadoopLocation配置窗口:输入LocationName,任意名称即可.配置Map/R
vs412237401
·
2016-03-29 17:00
hadoop
Redhat
hadoop2.7.2
安装笔记
本次安装是在windows7环境下安装redhat虚拟机进行的,所需要的软件如下:VirtualBox-5.0.16-105871-Win.exerhel-server-5.4-x86_64-dvd.iso首先安装虚拟机软件,然后在此基础上安装redhat,安装redhat的时候记得关闭防火墙还有其它的一些服务都disabled掉。首先在windows7上开一个共享目录,将如下软件放入共享目录:j
vs412237401
·
2016-03-29 13:00
hadoop
虚拟机
red
hat
Hadoop2.x配置HA
NameNodeDataNodeZookeeperZKFCJournalNodeResourceManagerNodeManagernode11111node2111111node31111node4111文件配置:core-site.xml hadoop.tmp.dir /csh/hadoop/
hadoop2.7.2
u011642663
·
2016-03-27 12:00
hadoop
HA
hadoop2.7.2
伪分布模式安装教程
hadoop2.7.2
伪分布模式安装教程 安装环境:Ubuntu14.04-server 1. 创建hadoop用户若安装Ubuntu时已创建hadoop用户,可跳过此步骤。
codeman_cdb
·
2016-03-26 13:00
hadoop
CentOS7安装
Hadoop2.7.2
实录整理
另一篇相关文章地址:http://blog.csdn.net/nisjlvhudy/article/details/493388511、安装环境4台CentOS7,64位,Hadoop2.7需要64位Linux版对应的HOSTS文件内容:10.91.99.101master10.91.99.102slave110.91.99.103slave210.91.99.104slave32、更改Hostn
BabyFish13
·
2016-03-23 15:28
BigData
Hadoop
CentOS7安装
Hadoop2.7.2
实录整理
另一篇相关文章地址:http://blog.csdn.net/nisjlvhudy/article/details/493388511、安装环境4台CentOS7,64位,Hadoop2.7需要64位Linux版对应的HOSTS文件内容:10.91.99.101master10.91.99.102slave110.91.99.103slave210.91.99.104slave32、更改Hostn
BabyFish13
·
2016-03-23 15:00
hadoop
centos
安装
服务器
64位
Hadoop NFS GateWay部署深入详解
系统版本[root@WEB-W031sbin]#cat/etc/issue CentOSrelease5.8(Final)2)Hadoop版本[root@WEB-W031/]#hadoopversion
Hadoop2.7.2
wojiushiwo987
·
2016-03-12 13:00
hadoop
部署
gateway
nfs
HADOOP安装指南-Ubuntu15.10和
hadoop2.7.2
Ubuntu15.10中安装
hadoop2.7.2
安装手册太初目录1.
taichu
·
2016-03-11 07:00
Spark 安装配置实验
安装前准备
hadoop2.7.2
安装,参考http://blog.csdn.net/wzy0623/article/details/50681554hive2.0.0安装,参考http://blog.csdn.net
wzy0623
·
2016-03-10 17:00
Ubuntu14.0.4下,shell编译-打包-运行
Hadoop2.7.2
的MapReduce程序
本文实例环境: Ubuntu14.0.4
Hadoop2.7.2
运行在本地模式 本文是根据对网上【作者:给力星】的文件的实践,作者原文在: http://www.powerxing.com
Veechange
·
2016-03-08 12:00
java
mapreduce
linux
hadoop
shell
hadoop2.7.2
HA搭建
配置文件1.core配置:[qujian@masterhadoop]$vimcore-site.xml fs.defaultFS hdfs://mycluster io.file.buffer.size 4096 hadoop.tmp.dir file:/home/qujian/hadoop-2.7.2/tmp ha.zookeeper.quorum master.hadoop.cn:2181,s
zhuxtqw
·
2016-03-06 18:55
搭建
hadoop2.7.2
上一页
1
2
3
4
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他