E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Hadoop安装
初识Hadoop
原文链接:http://blog.51cto.com/2290153/2312517
Hadoop安装
Ubuntu环境192.168.1.64HNClient192.168.1.65HNNameSUSE,
helloxielan
·
2018-11-03 15:21
hadoop的问题--WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform
问题描述发现hadoop集群,经常出现WARNutil.NativeCodeLoader:Unabletoloadnative-hadooplibraryforyourplatform这个错误,所以在
hadoop
daiqinge
·
2018-10-30 17:23
Linux
超详细hadoop集群服务器安装配置教程
本篇主要就hadoop服务器操作系统配置进行详细说明,
hadoop安装
会在下一篇文章中详细的介绍。
本宫没空8
·
2018-10-27 10:43
超详细hadoop集群服务器安装配置教程
本篇主要就hadoop服务器操作系统配置进行详细说明,
hadoop安装
会在下一篇文章中详细的介绍。
本宫没空1
·
2018-10-27 09:40
支持
Hadoop伪分布式环境搭建之Linux操作系统安装
Hadoop伪分布式环境搭建之Linux操作系统安装本篇文章是接上一篇《超详细hadoop虚拟机安装教程(附图文步骤)》,上一篇有人问怎么没写
hadoop安装
。
本宫没空1
·
2018-10-26 19:23
支持
Hadoop小笔记
Hadoop安装
和启动执行hadoopnamenode–format格式化hadoop执行start-all.sh启动hadoop执行jps显示当前所有java进程2642DataNode3386Jps2538NameNode2860JobTracker2769SecondaryNameNode2982TaskTracker
bug发现与制造
·
2018-10-26 11:00
Hadoop
hive( 一)--hive安装
二、安装步骤1、准备a、安装hadoop,并启动hdfs和MapReduce(hadoop的安装过程在此略过,详情请查看本博客
hadoop安装
);b、安装mysql,并启动;2、下载hivewgethttps
panda-star
·
2018-10-24 22:05
大数据
HADOOP安装
前SSH免密登录配置(CENTOS)
1、假设master机器需要免密访问slave1,slave2机器(注意:访问的用户名和登录用户一致如:三台机器都有hadoop用户,以下的行为都基于同一用户)在master机器上运行ssh-keygen运行结束以后,默认在~/.ssh目录生成两个文件:id_rsa:私钥id_rsa.pub:公钥2.导入公钥到认证文件,更改权限导入本机(master)cat~/.ssh/id_rsa.pub>>~
swimhigh
·
2018-10-18 16:01
大数据
hadoop
eclipse 操作 hadoop的hdfs准备工作
搭建好HDFSHA集群后,我们来配置客户端,用来操作HDFSHA集群首先我们选择一台客户机,任意选择,只要能与集群通信即可,这里就使用真机将集群中配置好的
hadoop安装
包拷贝到真机上配置hadoop的环境变量和参数
For_ZZHacker
·
2018-10-18 12:40
hadoop生态圈
hdfs
Hadoop分布式环境搭建
本笔记是个人参照林子雨老师教学文档进行撰写,详细请看厦门大学数据库实验室观看个人搭建hadoop平台实用的环境:Ubuntu14.0464位*3、JDK1.8、Hadoop2.6.5(apache)一、
Hadoop
Ares_song
·
2018-10-17 17:39
hadoop
YARN 安装
datanode装一起Resourcemanager应该独立装Resourcemanage整个过程的调度者Job客户端需求,resourcemanager分配Nodemanage这个不需要单独的安装,都在
hadoop
飞翔的山药蛋子
·
2018-10-15 15:00
Hadoop安装
教程——单机/伪分布/完全分布式配置
单机模式1.1.1安装前装备(1)安装Linux下载Ubuntu16.04,下载地址:http://ftp.sjtu.edu.cn/ubuntu-cd/16.04.5/(a)Desktop-->桌面版,默认带了界面ubuntu-16.04.5-desktop-amd64.iso(b)Server-->服务器版,默认没有带界面ubuntu-16.04.5-server-amd64.iso(2)查看防
MayerBin
·
2018-10-14 01:54
eclipse操作HDFS
eclipse操作HDFS1.配置hadoop环境变量①在系统变量里添加HADOOP_HOME,value为
hadoop安装
路径②在path中添加%HADOOP_HOME%\bin2.将hadoop的插件放入
CodeTravell
·
2018-10-13 23:15
大数据学习日记
eclipse操作HDFS
eclipse操作HDFS1.配置hadoop环境变量①在系统变量里添加HADOOP_HOME,value为
hadoop安装
路径②在path中添加%HADOOP_HOME%\bin2.将hadoop的插件放入
CodeTravell
·
2018-10-13 23:15
大数据学习日记
Hadoop2.8.5 安装过程
1下载
hadoop安装
版本:CentOS7Hadoop2.8.5JDK1.8说明:Hadoop从版本2开始加入了Yarn这个资源管理器,Yarn并不需要单独安装。
Source_00
·
2018-10-12 19:25
hadoop
Hadoop集群搭建
Hadoop的安装配置
Hadoop安装
步骤大致分8步:安装运行环境修改主机名和用户名配置静态IP地址配置SSH无密码连接安装JDK配置Hadoop格式化HDFS启动Hadoop并验证安装安装运行环境〉〉〉〉见Centos安装修改主机名和用户名修改用户名要先添加用户
Arvin_SC
·
2018-10-05 22:12
大数据架构
Centos基于
Hadoop安装
Hive
安装前说明:安装hive前提是要先安装hadoop集群,并且hive只需要在hadoop的namenode节点集群里安装即可(需要再所有namenode上安装),而不需要在datanode节点的机器上安装。另外还需要说明的是,虽然修改配置文件并不需要你已经把hadoop跑起来,但是本文中用到了hadoop命令(创建文件夹时使用过),在执行这些命令前你必须确保hadoop是在正常跑着的,而且启动hi
TaoismLi
·
2018-10-02 22:40
Hadoop
Hive
Centos
大数据生态
在VMware workstation Pro上搭建CentOS 7 Linux系统并安装Hadoop 1
1.Hadoop学习的两个方向2.安装前的准备3.安装CentOS74.在Linux系统中进行基本的操作5.配置网络连接6.安装JDK7.虚拟机克隆8.设置虚拟机SSH免登陆9.安装Hadoop10.
Hadoop
qq_35784151
·
2018-10-02 16:12
Hadoop学习
Hadoop安装
Hadoop安装
一、Hadoop1、安装安装并配置hadoop-2.6.4(在master中)(1)将hadoop-2.6.4.tar.gz安装包复制到hadoop文件目录下(与windows环境下类似
bigleft
·
2018-09-30 20:14
hadoop安装
与配置()
此步骤是在虚拟机上所做的实验第一步:关闭防火墙首先进入特权用户模式,serviceiptablesstop:关闭防火墙chkconfigiptablesoff:关闭开机启动防火墙serviceiptablesstatus:查看防火墙状态第二步:设置网络首先在虚拟机的"编辑"工具栏中找到虚拟网络设置,进入"NET模式"查看一下本机的IP地址和网关,然后进入虚拟机,右键点击虚拟机顶部的两个重叠的电脑图
Tempore
·
2018-09-19 12:10
环境配置
hadoop2.7第一个python实例(超详细)
archive/2012/08/13/2636175.html集群组成:VMwawre14.1+CentOS6.5+hadoop2.7, 3个虚拟机节点,分别为master、slave1,slave2
hadoop
acecai01
·
2018-09-16 17:42
Hadoop
hadoop 开发&调试
首先本地下载一个和服务器相同版本的
hadoop安装
包。然后配置一个HADOOPHOME环境变量还
Yeung先森
·
2018-09-13 21:19
Hadoop
Maven
大数据面试题 (附答案)
MapRedcueExecutor执行延迟高低可扩展性高低数据规模大小Hadoop的流程1.创建hadoop用户2.修改IP3.安装JDK,并配置环境变量4.修改host文件映射5.安装SSH,配置无秘钥通信6.上传解压
hadoop
qq_39188446
·
2018-09-04 12:07
Python学习笔记——大数据之Spark简介与环境搭建
目录spark生态系统spark的存储层次sparkonyarn1.hadoop集群搭建(master+slave01)集群机器准备配置ssh无密码访问集群jdk与
hadoop安装
包安装1.2.配置hadoop
唯恋殊雨
·
2018-09-03 20:28
Python开发
hadoop hive 安装
雷顿学院大数据:http://www.leidun.site/https://segmentfault.com/a/1190000009103629
hadoop安装
datanode无法启动https:/
雷顿学院
·
2018-08-29 18:46
hive
hadoop
安装
大数据
在Mac下安装Hadoop的坑
运行所有的东西在无后台的单独的JVM中,这种模式适合在开发阶段测试与DebugMapReduce程序伪分布式Hadoop做为后台应用运行在本地机器,模拟小集群全分布式Hadoop做为后台应用运行真实的集群电脑中
Hadoop
hellocsz
·
2018-08-25 20:00
hadoop安装
与配置
本文hadoop的版本为hadoop-2.7.4一、安装javajdk1、下载javajdk1.7版本,放在/home/software目录下,2解压:tar-zxvfjava-jdk*****.jar3、vim/etc/profile12345#在文件最后添加exportJAVA_HOME=/home/software/jdk1.7exportPATH=$PATH:$JAVA_HOME/bin#
CrazyAlisca
·
2018-08-25 09:49
集群搭建
大数据(一):Hadoop的安装与本地模式、伪分布式模式、完全分布式模式配置
nameNode+dataNode+secondaryNameNodehadoopyarn:包括的进程resourceManager+nodeManagerhadoopmapreduce(mr)三、安装
hadoop
敲代码的旺财
·
2018-08-24 13:27
大数据
史上最详细搭建分布式Hadoop(四)之
Hadoop安装
一、Hadoop文件复制把Hadoop文件复制到所有机器的/usr/local/src/下面cphadoop-1.2.1-bin.tar.gz/usr/local/src/scp-rphadoop-1.2.1-bin.tar.gz192.168.116.11:/usr/local/src/二、开始安装cd/usr/local/srctarxvzfhadoop-1.2.1-bin.tar.gz创建一
lbship
·
2018-08-24 10:56
Hadoop
大快搜索hadoop入门基础教程之安装问题整理
DK
Hadoop安装
问
adnb34g
·
2018-08-22 10:43
hadoop
HDFS基本操作
本人已经设置了环境变量,则可以在任意的路径下可直接使用hdfs,否则进入
hadoop安装
路径HADOOP_HOME后,使用如下指令:.
china_xin1
·
2018-08-16 21:37
Windows10下配置Hadoop及相关问题解决办法
Windows10下
Hadoop安装
步骤(默认安装好了JDK且配置成功):1.Hadoop下载,官网或到http://www.apache.org/dyn/closer.cgi/hadoop/common
White_Hou
·
2018-08-13 15:51
杂论
DK
hadoop安装
包下载与监控参数说明
关于DK
hadoop安装
包下载也只是顺带说了一下,但好像大快搜索的服务器在更新,新的下载页面还不好用!有好些朋友留言说了大快搜索网站上无法下载。
adnb34g
·
2018-08-13 13:00
hadoop
问题解决sqoop:Error: /usr/lib/hadoop does not exist! Please set $HADOOP_COMMON_HOME to the root of your
Pleaseset$HADOOP_COMMON_HOMEtotherootofyourHadoopinstallation.根据错误提示缺少的
hadoop安装
路径配置,需修改sqoop配置文件。
Bamboo_Shui
·
2018-08-13 12:47
sqoop
问题解决
Ubuntu16.04虚拟机中Hadoop分布式集群构建(一)
country=CN&version=18.04.1&architecture=amd643.
Hadoop安装
包:链接:ht
Alexwym
·
2018-08-12 16:38
大数据与机器学习
Hadoop安装
教程 HA高可用模式
系统准备一共三台机器hadoop-01、hadoop-02、hadoop-02hadoop-01做NameNode(active);hadoop-02做NameNode(standby)hadoop-02做ResourceManager(active);hadoop-03做ResourceManager(standby);三台机器都充当DataNode和NodeManger三台机器都充当Journ
hongyuzhou
·
2018-08-07 09:41
大数据面试题hadoop部分及答案(16道)
1.
Hadoop安装
步骤(九部曲)?
QianShiK
·
2018-08-06 16:27
hadoop伪分布式配置
书接上文linux安装hadoop进入
hadoop安装
目录,将配置文件复制出一份用于修改,下图中hadoop_pseudo就是复制出来的配置目录进入到新复制的hadoop_pseudo目录中1、修改core-site.xml2
炭烤大橙子
·
2018-08-03 17:14
hadoop
Hadoop单机伪分布式搭建
1:首先去下载
Hadoop安装
包2:安装hadooptar-zxvfhadoop-2.7.5.tar.gz-C/opt3:配置/etc/hostsvim/etc/hosts注:要保证IP在同一个网段4:
灥灥
·
2018-08-03 10:11
学习随笔
hadoop服务器基础环境搭建之Hadoop服务器配置教程
本篇主要就hadoop服务器操作系统配置进行详细说明,
hadoop安装
会在下一篇文章中详细的介绍。
adnb34g
·
2018-08-01 11:36
hadoop
eclipse中集成hadoop插件
1.下载并安装eclipse2.https://github.com/winghc/hadoop2x-eclipse-plugin3.下载插件到eclipse的插件目录4.配置
hadoop安装
目录打开eclipsewindow
Yeung先森
·
2018-07-30 16:48
Hadoop
Hadoop伪分布式环境搭建之Linux系统安装教程
本篇文章是接上一篇《超详细hadoop虚拟机安装教程(附图文步骤)》,上一篇有人问怎么没写
hadoop安装
。
adnb34g
·
2018-07-30 13:00
hadoop
CentOS搭建Hadoop单机版遇到的坑
Hadoop安装
1.hadoop官网2.选择合适的版本的binary版本,这里博主选择的是hadoop-2.9.0,Linux下使用wget命令直接下载3.解压tarzxfhadoop-2.9.0.tar.gzHadoop
-madongyu-
·
2018-07-30 12:31
hadoop
大数据(四)-----zookeeper安装
阅读更多1.安装规划见大数据(一)-----
HADOOP安装
2.zookeeper安装下载并解压ZooKeeper-3.4.6.tar.gz,安装目录为:/home/hadoop/zookeeper-3.3.6
renhanxiang
·
2018-07-24 18:00
大数据(一)-----
HADOOP安装
阅读更多1.安装总览软件版本hadoop-2.7.2spark-2.0.1-bin-hadoop2.7scala-2.11.8sqoop-1.4.6mysql-5.6.15hbase-0.98.24-hadoop2apache-hive-2.1.1apache-kylin-2.0.0zookeeper-3.3.6apache-flume-1.7.0-bin安装规划机器IP主机名称组件用户密码10.
renhanxiang
·
2018-07-24 18:00
大数据(二)-----Spark安装
阅读更多1.安装规划见【大数据(一)-----
HADOOP安装
】2.scala安装在10.112.171.47机器上安装scala,安装目录为/usr/scala/scala-2.11.8配置环境变量vi
renhanxiang
·
2018-07-24 17:00
Hadoop安装
与部署
Hadoop安装
与部署1.下载hadoop、jdk安装包到hadoop用户家目录[root@server1~]#lshadoop-2.7.3.tar.gzjdk-7u79-linux-x64.tar.gz
Hannah_zh
·
2018-07-23 16:10
Linux
HDP-
hadoop安装
部署
一、官方链接官方搭建文档:https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/ch_Getting_Ready.html离线搭建yum源,包下载列表:https://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_amb
DU_XXRS
·
2018-07-20 14:29
hive
Hadoop入门——伪分布式环境的搭建
192.168.159.130/etc/hosts中配置如下:192.168.159.130hdserver1192.168.159.131hdserver2二.安装jdk等基础环境三.安装Hadoop1.上传
hadoop
东天里的冬天
·
2018-07-18 14:08
Hadoop
Hadoop入门教程
hadoop安装
环境准备
我虚拟机里有四台服务器,分别为192.168.116.128192.168.116.129192.168.116.130192.168.116.131他们每一台里的/etc/hostname分别为shizhan01shizhan02shizhan03shizhan04他们每一台里的/etc/hosts分别为192.168.116.128shizhan01192.168.116.129shizhan
Java枫
·
2018-07-14 14:33
从零学习大数据
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他