E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop安装
CLOUD 03:hadoop
hadoop安装
(单机模式)禁用selinux和iptables禁用selinux和iptables禁用selinux和iptables配置/etc/hosts保证所有主机域名能够相互解析配置/etc/
sweak_h
·
2018-03-02 10:32
hadoop
CLOUD
七.大数据技术之hadoop(3)
介绍hadoop环境的搭建
hadoop安装
模式有三种,本地模式,伪分布模式,全分布模式,本地模式不做介绍,本次介绍hadoop伪分布模式的搭建(一台linux虚拟机),后面介绍全分布模式的搭建(至少三台
free_ygh
·
2018-03-01 15:51
大数据
使用Hadoop的JAVA API远程访问HDFS
之前分别介绍了使用Hadoop的CAPI操作HDFS和使用Hadoop的JavaAPI操作HDFS,在介绍Java访问方式时(CAPI不存在这样的问题),程序是部署在
Hadoop安装
环境的,这具有一定的局限性
cjf_wei
·
2018-02-10 10:58
hadoop
大数据
JAVA
Mac下Hadoop伪分布式安装及出现的问题(JDK版本,Hadoop本地库编译)。
安装
Hadoop安装
基本是参照网上现有的介绍。
跪求一个offer
·
2018-01-30 15:41
Hadoop集群部署实战
Hadoop集群搭建目录集群简介服务器准备环境和服务器设置JDK环境安装
Hadoop安装
部署启动集群测试集群简介在进行集群搭建前,我们需要大概知道搭建的集群都是些啥玩意。
我不是九爷
·
2018-01-24 13:36
Hadoop
集群部署
HDFS
HBASE
Hadoop安装
pdsh localhost Connection refused
本地安装hadoop单机模式的时候需要启动namenode。我使用的是hadoop3.0,配置文件如下:site-core.xmlfs.defaultFShdfs://localhost:9000hdfs.xmldfs.replication1使用如下可以生成谜钥免密码登录:$ssh-keygen-trsa-P''-f~/.ssh/id_rsa$cat~/.ssh/id_rsa.pub>>~/.s
micro_hz
·
2018-01-21 15:52
经验总结
阿里云
hadoop安装
教程_完全分布式_Hadoop 2.7.4/CentOS 7.4
一、环境本教程中使用两台阿里云服务器,其配置为单核CPU,2G内存,操作系统为CentOS7.4。使用JDK1.8及Hadoop2.7.4进行安装。二、配置服务器hostname进入实例的基本信息页面,点击修改信息修改HostName,NameNode节点对应的HostName为master,DataNode节点对应的HostName为node1三、修改hosts(最好使用内网IP)四、SSH无密
BQW_
·
2018-01-19 10:30
hadoop
完全分布式
阿里云
hadoop2.7.4
CentOS7.4
hadoop
hadoop的伪分布式在centos下安装
虽然自己搞hadoop也有一段时间了,但是在和网友交流过程中,发现很有朋友对
hadoop安装
的还是有很大的问题,网上的博客也是乱的一塌糊涂,对新手造成很大的误解,所以自己写篇博客分享给网友,同时也加强自己记忆吧
社会波
·
2018-01-08 13:30
hadoop
hadoop docker安装部署
前置条件1.jdk镜像2.
hadoop安装
包解压安装包tar-zxvfcenos-6.5-hadoop-2.6.4.tar.gz-C/usr/localcd/usr/localmvhadoop-2.6.4hadoop
a60782885
·
2018-01-07 23:31
docker
Hadoop
全Hadoop2.x版本安装套路(以Hadoop2.6.0为例)
引言本人是一枚大学生,初探大数据
Hadoop安装
套路,详细描述安装过程及其我所认知的步骤因果,作为一段时间学习的成果,也希望能与大家一起交流。
chanson_22
·
2018-01-07 20:28
hadoop安装
【大数据】10分钟搞定Windows环境下
hadoop安装
和配置
Hadoop是大数据的核心武器,下面来介绍在Windows环境下Hadoop的安装和配置1.下载Hadoophttp://www.apache.org/dyn/closer.cgi/hadoop/common2.解压hadoop-2.7.3.tar.gz点右键“解压到hadoop-2.7.3”文件夹路径xxx/xxxx/hadoop-2.7.3复制hadoop-2.7.3文件夹到d盘或者e盘的根目
符智生
·
2018-01-05 22:03
大数据
【大数据】10分钟搞定Windows环境下
hadoop安装
和配置
Hadoop是大数据的核心武器,下面来介绍在Windows环境下Hadoop的安装和配置1.下载Hadoophttp://www.apache.org/dyn/closer.cgi/hadoop/common2.解压hadoop-2.7.3.tar.gz点右键“解压到hadoop-2.7.3”文件夹路径xxx/xxxx/hadoop-2.7.3复制hadoop-2.7.3文件夹到d盘或者e盘的根目
符智生
·
2018-01-05 22:03
大数据
1、
Hadoop安装
教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
Hadoop安装
教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04给力星2014年8月10日(updated:2017年11月21日)107822当开始着手实践Hadoop时,安装
平江
·
2017-12-31 19:29
大数据
centos7下
hadoop安装
centos7下
hadoop安装
jdk安装1.centos下默认安装的是openjdk,需要先卸载。
jackllvv
·
2017-12-25 21:09
hadoop
Ubuntu中的Hadoop
Hadoop下载Apache官网下载地址:http://hadoop.apache.org/releases.html选binary
Hadoop安装
1.通过windows挂载硬盘将文件复制到Linux下
涛声依旧goon
·
2017-12-18 23:38
hadoop
单节点
hadoop安装
版本:hadoop-2.6.0-cdh5.7.0.tar.gzhadoop下载安装下载:cdh5解压配置环境变量:vi~/.bash_profile生效环境变量文件:source~/.bash_profile检测:$HADOOP_HOME配置文件:配置文件目录:cdetc/hadoop1.hadoop-env.shexportJAVA_HOME=/root/soft_install/jdk1.8.
上善若水211
·
2017-12-14 11:03
hadoop
大数据
大数据
hadoop
Linux环境下安装Hadoop
尽管安装其实很简单,书上有写到,官方网站也有
Hadoop安装
配置教程,但由于对Linux环境不熟悉,书上跟官网上简略的安装步骤新手往往Hold不住。
lemon_LLo
·
2017-12-12 09:04
Linux环境下安装Hadoop
尽管安装其实很简单,书上有写到,官方网站也有
Hadoop安装
配置教程,但由于对Linux环境不熟悉,书上跟官网上简略的安装步骤新手往往Hold不住。
lemon_LLo
·
2017-12-12 09:04
hadoop安装
详细教程
对于本教程的说明:本教程较为详细适合初学者教程中内容详见给力星:给力星教程对于给力星教程的一些说明:步骤应该按照给力星教程中所示,按照步骤来。其中vim可以不用装(vim详细教程见Vim教程)我安装的时候是JDK1.8+hadoop2.7.4安装JDK时只需要将给力星教程中安装Java环境一节代码改为sudoapt-getinstallopenjdk-8-jreopenjdk-8-jdk如果修改.
春风洛城
·
2017-12-11 05:25
Hadoop, Spark, Hive, Sqoop, Oracle, DB2等环境安装
JDK,Scala,Spark,
Hadoop安装
参考链接:www.cnblogs.com/whyhappy/p/6561581.htmlHadoop配置参考链接:www.cnblogs.com/wuxun1997
南山山大王
·
2017-12-10 05:42
hadoop安装
hadoop下载地址:wgethttp://mirror.bit.edu.cn/apache/hadoop/common/hadoop-1.2.1/hadoop-1.2.1.tar.gz环境:ubuntu+java目录:/opt/hadoop-1.2.1配置:在/opt/hadoop-1.2.1/conf/编辑hadoop-env.shexportJAVA_HOME=/usr/lib/jvm/ja
兔头咖啡
·
2017-12-08 23:21
Hadoop本地模式、伪分布模式的安装
1.将
Hadoop安装
包hadoop-2.7.3.tar.gz上传到/root/training/tools目录 2.将安装包解压到/root/training/目录 tar-zxvfhadoop-2.7.3
BokeyGeGe
·
2017-12-08 01:26
大数据
IDEA 运行 Hadoop WordCount示例
1、在本地解压
hadoop安装
包,然后修改系统变量,增加HADOOP_HOME及HADOOP_USER_NAME,HADOOP_USER_NAME为实际集群运行用户2、修改项目的Pom文件org.apache.hadoophadoop-common2.9.0org.apache.hadoophadoop-client2.9.0org.apache.hadoophadoop-hdfs2.9.0org
Leon-Zheng
·
2017-12-05 19:05
Hadoop
java程序员的AI之路-大数据篇
hadoop安装
java程序员的AI之路-大数据篇
hadoop安装
最近AI(人工智能)是一大风口啊,乌镇互联网大会各个大佬们记们谈论点都是AI了,在这样的行情下,怎么能不沾一沾Ai的潮流,拥抱人工智能的热浪中去呢
DrakKing
·
2017-12-04 00:00
大数据
Hadoop学习笔记(二)设置单节点集群
本文描述如何设置一个单一节点的
Hadoop安装
,以便您可以快速执行简单的操作,使用HadoopMapReduce和Hadoop分布式文件系统(HDFS)。
锐湃
·
2017-12-02 01:14
hadoop
虚拟机配置伪分布式hadoop
安装Hadoop前提:1、Ubuntu14.04虚拟机2、JDK3、
Hadoop安装
包前面的条件就不说了,默认已经安装了VMware并安装好了Ubuntu14.04,配置好了Java环境。
Fly_TheWind
·
2017-11-30 19:11
Ubuntu
hadoop安装
(3)
zookeeper和hbase安装#--hbase是Hadoop的数据库,依赖于zookeeper,默认的hbase自带zookeeper#不是很好用,这里我们自己安装zookeeper1.下载软件&解压软件zookeeper.apache.orghbase.apache.org$tar-zxvfzookeeper-3.4.11.tar.gz-C/usr/local$tar-zxvfhbase-1
abcwayne
·
2017-11-29 20:33
Hadoop
zookeeper
Hadoop
Hadoop安装
(2)
hive2.3.2版本安装/***hive组件需要依赖于Hadoop集群,可以是伪分布式,或完全分布式,Hadoop集群自行安装*/1.获取hive安装包hive.apache.org//这里是apache基金委员会的hive组件$tar-zxvfapache-hive-2.3.2-bin.tar.gz-C/usr/local2.配置hive的环境变量$whoamihadoop$vim~/.bas
abcwayne
·
2017-11-29 20:12
hadoop
hive
Hadoop
Spark在Hadoop的HDFS中读取数据
Spark在Hadoop的HDFS中读取数据本文的前提是已经安装了Spark和Hadoop,安装方法可以参考我之前的两篇文章
Hadoop安装
及配置——MacOSHighSierra和Spark笔记|教程
N先生
·
2017-11-24 08:10
大数据
Hive安装及启动异常解决
前期准备1、关于Hive的安装包和文档可以从这里获取:Hive官方文档Hive下载地址Hive源码地址2、Hive依赖于Hadoop,关于Hadoop的安装可以查看这里:
Hadoop安装
——启动模式,基本配置
he_321
·
2017-11-20 22:20
Hive
大数据组件服务的启动与关闭命令
1、Hadoop集群(1)启动方式切换到主节点的
hadoop安装
目录下的sbin目录下a)/start-dfs.sh./start-yarn.sh(建议使用)b).
杨先森的博客
·
2017-11-18 17:22
随心随性
guard.: ssh: Could not resolve hostname guard.: Name or service not known to: ss
阅读更多
hadoop安装
的时候,报错信息guard.:ssh:Couldnotresolvehostnameguard.
knight_black_bob
·
2017-11-16 14:00
hadoop
exception
guard.: ssh: Could not resolve hostname guard.: Name or service not known to: ss
阅读更多
hadoop安装
的时候,报错信息guard.:ssh:Couldnotresolvehostnameguard.
knight_black_bob
·
2017-11-16 14:00
hadoop
exception
Hadoop、Hbase伪分布式安装
操作系统:Centos7Hadoop:2.7.3Hbase:1.2.3
Hadoop安装
JAVA_HOME环境变量配置由于Hbase是基于HDFS的,所以我们首先部署Hadoop。
扑火的蛾
·
2017-11-13 00:00
分布式文件系统
Hadoop 安装完之后,做一个简单的测试
然后接着上一篇的
Hadoop安装
开始,安装成功之后,我们接下来做一个简单的测试。看到上面的图没?我是这样进行操作的,我先获取了ROOT权限,然后进入根目录。从根目录切换到我之前安装的Ha
学术袁
·
2017-11-09 21:03
Hadoop
Hadoop-学习
centos6.5安装hadoop集群过程及遇到的问题
1.
hadoop安装
过程及命令1.1安装虚拟机打开VMware,新建虚拟机,安装centos6.5系统,网络连接选择NET,为虚拟机命名为master,将虚拟磁盘存储成单个文件。
ls_6468
·
2017-11-05 19:15
大数据
Hadoop实战(7)_Apache
Hadoop安装
和配置Hue
系列目录:Hadoop实战(1)_阿里云搭建Hadoop2.x的伪分布式环境Hadoop实战(2)_虚拟机搭建Hadoop的全分布模式Hadoop实战(3)_虚拟机搭建CDH的全分布模式Hadoop实战(4)_Hadoop的集群管理和资源分配Hadoop实战(5)_Hadoop的运维经验Hadoop实战(6)_搭建ApacheHadoop的Eclipse开发环境配置Hue的主要步骤:安装所需的rp
padluo
·
2017-10-31 23:05
Hadoop
Hadoop
hadoop 2.7.4 单机版安装
common/hadoop-2.7.4/hadoop-2.7.4.tar.gz解压:tar-zxvfhadoop-2.7.4.tar.gz拷贝到工作目录:mvhadoop.xxxxx/usr/local/
hadoop
isoleo
·
2017-10-30 16:11
hadoop
hadoop搭建之
hadoop安装
1.下载hadoop,推荐去官网下载:请点击官网地址(我下载的是2.6.5版本的)2,把它进行拷贝到linux中;3,在usr下解压其压缩文件命令【tar-zxvf+文件名】4,删除压缩包命令【rm-rf+文件名】5,将解压后的文件改名为“hadoop”命令【mv+旧文件名+hadoop】6,根据hadoop文件的位置编辑它的环境变量命令【vim/etc/bashrc】添加以下内容:#sethad
张今天
·
2017-10-23 12:05
——Hadoop集群
Hadoop 2.6.5 Windows环境下安装
http://pan.baidu.com/s/1i4YfUID密码:1jflwindows下安装并启动hadoop2.6.564位windows安装hadoop没必要倒腾Cygwin,直接解压官网下载
hadoop
土豆拍死马铃薯
·
2017-10-22 17:02
大数据
Hadoop安装
与集群配置
1.软件及版本a.VMwareWorkstationProb.CentOS-6.8-x86_64-minimalc.hadoop-2.7.3.tard.jdk-8u91-linux-x64e.XShell5f.Xftp52.安装VMware和正常软件一样双击安装输入序列号http://www.epinv.com/post/6304.html3.配置虚拟机安装注册完成后打开VMware进行虚拟网络的
0_9f3a
·
2017-10-20 16:19
CentOS7-64bit 编译 Hadoop-2.7.4,并伪分布式安装
1.安装环境说明本机操作系统macOSSierra10.12.6采用的虚拟机VirtualBox5.1.28虚拟机镜像CentOS764bit2.为什么要编译因为我们从官方下载的
Hadoop安装
压缩包(
Micheal-Yan
·
2017-10-19 19:23
hadoop
Hadoop安装
阅读更多一Hadoop的安装步骤第一步:准备Linux环境第二步:安装JDK第三步:配置Hadoop二准备Linux环境方法一:在window上安装虚拟机,然后在虚拟机上安装Linux方法二:租用云主机、阿里云、UnitedStack等三安装JDK和设置环境变量[
[email protected]
]#yuminstall-yjava-1.7.0-openjdk.x86_64[roo
cakin24
·
2017-10-15 09:00
Hadoop安装
ubuntu16.04
Hadoop安装
主要参考:在Ubuntu14.04LTS上安装部署Hadoop2.7.1(伪分布式)配置ssh免密码登录安装sshserver:sudoapt-getinstallopenssh-servercd~/.ssh/#若没有该目录,请先执行一次sshlocalhostssh-keygen-trsa#会有提示,都按回车就可以catid_rsa.pub>>authorized_keys#加入授权使用sshl
约瑟夫的杂货店
·
2017-10-02 21:09
大数据技术
hadoop安装
/JDK安装
1.准备三台机器修改host的namevim/etc/hosts192.168.119.144hadoop1192.168.119.145hadoop2192.168.119.146hadoop32.安装jdk解压jdk到指定的文件夹重命名文件夹mv原文件夹的名字新文件夹的名字配置文件vim/etc/profileJAVA_HOME=/usr/local/jdkJRE_HOME=/usr/loca
平凡但不平庸的码农
·
2017-09-29 10:45
IT技术分享
搜集的86道hadoop面试真题
答:1使用root账户登录2修改IP3修改host主机名4配置SSH免密码登录5关闭防火墙6安装JDK7解压
hadoop安装
包8
away30
·
2017-09-27 13:04
hadoop学习
mac环境下
hadoop安装
本文主要讲述在mac环境下安装hadoop,目标读者为大数据初学者或者有意进入大数据行业的研发人员。1、安装homebrew/usr/bin/ruby-e"$(curl-fsSLhttps://raw.githubusercontent.com/Homebrew/install/master/install)"2、配置sshdsudossh-keygen-tdsa-f/etc/ssh/ssh_ho
尹小凯
·
2017-09-05 09:32
pySpark 在windows下环境搭建
本人系统是windows,64位要想在windows下搭建Spark(python版本)主要分为:JDK安装配置Scala安装配置Spark安装配置
Hadoop安装
配置Python安装配置PyCharm
黄大芬
·
2017-09-02 17:23
机器学习
python
大数据平台搭建-简单说
VMware8.0)2.在虚拟机中安装centos操作系统(centos7)3台以上3.安装SSH(在windows平台远程管理Linux系统的工具)BvSshClient-Inst4.配送SSH免密登录5.
hadoop
Osborn521
·
2017-08-19 11:43
IT基础
Hadoop安装
之二:使用Docker搭建Hadoop集群
(搭建集群部分借鉴了kiwenlau/hadoop-cluster-docker中的内容,不过那里的基础环境是Ubuntu,本人这里是用的CentOS7,因此也糟了不少坑!)目录索引一、编辑Hadoop运行环境中的配置文件二、使用Dockerfile制作Hadoop的镜像三、激情的排坑之旅四、最终的文件内容—config/core-site.xml—config/hadoop-env.sh—con
ProteanBear
·
2017-08-17 16:33
上一页
23
24
25
26
27
28
29
30
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他