Hadoop安装

Hive 2.3.x 使用 MySQL存储元数据 安装部署

1、集群规划本文前置基础Hadoop安装部署参照之前的Hadoop集群搭建的那篇博客：CentOS7环境下Hadoop3NameNodeResourceManagerHA集群搭建现在NameNode1节点上安装部署
青羿之羽·2020-07-11 22:39

Hadoop集群的搭建——完全分布式的安装配置（3节点）

目录集群节点分配准备工作hadoop安装配置配置hadoop-env.sh配置core-site.xml配置hdfs-site.xml配置mapred-site.xml配置yarn-site.xml配置
咕噜oo·2020-07-11 21:02

Hadoop-Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster

wordCount出现以下错误：Error:Couldnotfindorloadmainclassorg.apache.hadoop.mapreduce.v2.app.MRAppMaster根据报错提示找到hadoop
Sun-wz·2020-07-11 17:47

MacOS Sierra Hadoop3.0.0安装与配置

参考文章：点击打开链接1.安装hadoop输入命令：$brewinstallHadoop安装下来是3.0.0版本，记得记住安装目录2.ssh免密匙登陆：依次输入命令：$ssh-keygen-tdsa-P
苍崎晨子·2020-07-11 17:19

flume实时监控日志文件到hdfs

既然flume操作hdfs，就需要对应的jar，就要到hadoop安装目录下的share目录下查找使用winscp软件将jar文件考本到windows本地桌面上将上面jar文件拷贝到flume安装目录下的
海涛高软·2020-07-11 15:22

(解决问题)hadoop Live Nodes :0

hadoop的时候，进入http://namenode:50070发现如下图：意思就是Namenode起来了，其他的datanode没有起来解决方法如下：1.查看datanode中hadoop的日志文件在hadoop
如墨_·2020-07-11 15:27

hadoop安装部署

0.20.2.tar.gz2.修改/etc/hosts文件，添加所有节点的ip-host映射192.168.221.174h1192.168.221.175h2192.168.221.176h33.修改hadoop
laiwusheng·2020-07-11 10:26

Mac-单机Hive安装与测试

78401103https://www.cnblogs.com/kinginme/p/7233315.html前提本机已经安装单机hadoop和mysqlmysql安装：Mac安装Mysql_解决中文乱码_JDBC访问操作hadoop
hjw199089·2020-07-11 07:28

CentOS8 安装 Hadoop3.2.1 独立模式、伪分布模式

releases.html安装文档：https://hadoop.apache.org/docs/stable/hadoop-project-dist/hadoop-common/SingleCluster.htmlHadoop
爱多娇·2020-07-11 07:45

【分布式】hadoop安装篇（11）CDH安装中的问题：swappiness

现象在运行的过程中，即使我们看到host的内存仍富有余量，但是健康检查亮橙灯，会有SwappingConcerning的提示，例如6pageswereswappedtodiskintheprevious15minute(s).Warningthreshold:any.其实在安装过程中的自检中，也看到有关的warningClouderarecommendssetting/proc/sys/vm/sw
恺风·2020-07-11 06:42

hbase1.0.0完全分布式安装

前提:jdk安装，ssh免秘钥登录，hadoop安装，zookeeper安装。
luffy5459·2020-07-11 05:35

Hadoop2.7.3+Hbase-1.2.6完全分布式安装部署

Hadoop安装部署基本步骤：1、安装jdk，配置环境变量。
dd321211·2020-07-11 04:20

Hadoop入门（1）安装配置篇（JDK、Hadoop分布式的安装，克隆服务器，SSH免密码登录等）

本章目的介绍了基于Linux的Hadoop安装与配置。包括虚拟机创建、Linux系统和JDK安装、Hadoop安装及Hadoop分布式安装。还介绍了克隆服务器和SSH免密码登录。
aic1999·2020-07-11 01:06

hadoop启动namenode后，jps找不到对应进程

解决思路：去hadoop安装路径下的log文件夹内，找到对应的namenode的log文件，查看原因。问题解决：我发现日志提示的问题是端口被占用。然后
OUCFSB·2020-07-10 23:22

JDK+Hadoop安装配置、集群模式搭建

这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML图表FLowchart流程图导出与导入导出导入以下操作在Sec
流浪的绿叶·2020-07-10 11:16

Hadoop3 修改日志大小及数量

使用log4j管理日志文件，在log4j配置文件/你的hadoop安装目
陈yy哦·2020-07-10 10:46

hadoop搭建的步骤

hadoop搭建的步骤1使用root账户登录2修改IP3修改host主机名4配置SSH免密码登录5关闭防火墙6安装JDK6解压hadoop安装包7配置hadoop的核心文件hadoop-env.sh，core-site.xml
不由不该-·2020-07-10 10:22

centos7安装hadoop2.9.1和spark without hadoop

hadoop环境，下载hadoop-2.9.1安装，配置环境变量（系统的/etc/profile文件下）先要安装jdk（我之前装的是jdk11，后来发现和hadoop不兼容，又换成了jdk1.8）再去hadoop
wang_feng0·2020-07-10 05:03

Spark的安装和配置

1本文是在hadoop正确安装的前提的条件上进行的Hadoop安装请参考：hadoop的安装和配置.docx（http://blog.csdn.net/tian_li/article/details/49103603
探索者tl·2020-07-10 03:19

hadoop+zookeeper+hbase 集群部署（Linux版）

准备环境1.1.安装包1）准备至少3台PC或虚拟机2）Linux系统：CentOS-7.0-1406-x86_64-DVD.iso3）Java安装包：jdk-8u161-linux-x64.tar.gz4）Hadoop
ssxueyi·2020-07-10 02:39

Hadoop-搭建window下hadoop开发环境,查看hdfs上的文件,随机读取数据,写入数据,创建文件夹,获取文件状态

把jar包倒在eclipse安装路径的plugins.zip解压放置到对应目录重启eclipseeclpise调整到map/reduce视图配置hadoop安装目录window-》preferences
蘑菇一小只·2020-07-10 00:16

Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Wi

目前是hadoop学习初期想通过本地直接运行不再用打成jar包的形式进行测试win10配置hadoop的时报错这里对hadoop安装配置就不再多说了大家可以参考这里Win10安装Hadoop详解做了简单的配置后在本地运行时报
旋奘·2020-07-10 00:03

大数据开发--hadoop压缩 snappy测试

摘要：  我们用Apache或者CDH下载下来的hadoop安装包来安装hadoop是不支持snappy压缩的，我们可以查看$HADOOP_HOME/lib/native,最开始里面是空的。
夏至1208·2020-07-09 22:18

Hadoop组件学习(一) —— 单点与集群的配置

分布式文件存储系统HDFS(HadoopDistributedFileSystem)2.资源管理系统YARN(YetAnotherResourceNegotiator)3.分布式计算框架MapReduce二、Hadoop
巨坑大数据·2020-07-09 20:08

HDFS 启动与关闭

HDFS启动过程如下：1）进入到NameNode对应节点的Hadoop安装目录下。
lzxyzq·2020-07-09 20:47

大数据学习笔记2--hdfs工作原理及源码分析

windows下配置hadoophadoop安装包解压，路径不要有特殊字符lib和bin直接解压出来的不可用，需要自己重新编译配置环境变量：HADOOP_HOME,path中添加：bin目录namenode
程序小小望·2020-07-09 18:01

大数据学习过程笔记——第一阶段

大数据学习过程笔记大数据学习视频网址推荐博客Hadoop安装配置说明页Hadoop架构介绍—>CentOS可能会用到的依赖：yum-yinstallgccgcc-c++autoconflibjpeglibjpeg-devellibpnglibpng-develfreetypefreetype-devellibxml2libxml2
尤小硕·2020-07-09 15:54

阿里云CentOS7 安装hadoop2.9.2+java1.8.0

hadoop安装教程hadoop的核心Hadoop的核心就是HDFS和MapReduce，而两者只是理论基础，不是具体可使用的高级应用，Hadoop旗下有很多经典子项目，比如HBase、Hive等，这些都是基于
ZDZA_·2020-07-09 12:50

云计算技术课程实验

安装Hadoop使用brewinstallhadoop安装Hadoop。测试Hadoop单机模式使用Hadoop附带的示例来测试单机模式是否运行正常。通过brew
Unbreakablewxk·2020-07-09 12:19

IDEA搭建hadoop开发环境

准备工作：1、在官网下载hadoop包https://hadoop.apache.org/releases.html2、有两个包，hadoop-2.8.4.tar.gz是hadoop安装包；hadoop
剑行极锋·2020-07-09 12:59

hadoop HA启动时 两个namenode节点都是standby，解决办法

首先你要确定不用ha的时候你的hadoop集群是正常的，不然找错误的方向就偏离了如果都正常，配置ha需要zookeeper，先要看看是不是zookeeper没有配置好的问题如果都正常，在hadoop安装目录执行
SunmonDong·2020-07-09 08:14

Hadoop高可用集群的搭建

Hadoop高可用集群搭建搭建高可用集群，需要涉及到8个配置文件1.zookepper节点的zkdata文件目录下的myid2.zookepper节点的zkdata文件目录下的zoo.cfg3.hadoop
纯净天空7·2020-07-09 07:18

从jdk安装到hadoop集群安装全部过程

文章目录jdk的安装hadoop安装和jdk修改linux主机之间实现免密登录安装过程中遇到的问题hadoop3.1.2集群启动过程中出现Permissiondenied(publickey,gssapi-keyex
Ethan-bigdata·2020-07-09 02:24

Hadoop环境的配置

Hadoop安装1.1单机模式1.1.1安装前准备安装Linux下载Ubuntu16.04，下载地址：http://ftp.sjtu.edu.cn/ubuntu-cd/16.04.5/（a）Desktop
老.谭·2020-07-08 21:48

CDH版本hadoop的源码编译

在安装CDH版本的hadoop的时候,我们下载下来的CDH的hadoop安装包中,并没有native包,所以我们在使用本地库(本地库可以用来做压缩,以及支持C程序等等)的时候就会出问题,好了废话不多说,
骚年真骚·2020-07-08 20:24

【记录】安装hive过程遇到的问题

1、hadoop安装不做赘述；2、安装hive：①下载hive**.tar.gz到指定位置：wgethttp://mirror.bit.edu.cn/apache/hive/hive-2.3.6/apache-hive
萌新_程序媛·2020-07-08 20:55

【wordcount】mapreduce.Job: Running job: job_1553100392548_0001

hadoop配置查看yarn-site.xml配置文件位置：/usr/local/hadoop/etc/hadoop/yarn-site.xml#我的hadoop安装目录：/usr/local/hadoop
悠然大月季·2020-07-08 18:07

Ubuntu13.04 Eclipse下编译安装Hadoop插件及使用小例

hadoop安装在/opt/hadoop，所以源代码的目录是hadoop根路径下的src/contrib/eclipse-plu
weixin_34402090·2020-07-08 18:26

Hadoop 安装部署

1.Hadoop安装部署1.1.机器说明总共4台机器：test161.sqa,test162.sqa,test163.sqa,test164.sqaIP地址分别为：192.168.207.161……192.168.207.164
weixin_34304013·2020-07-08 17:39

Censtos Hadoop安装

本文是在centos6上安装hadoop成功后，写的一个安装手册，适用于有linux基本操作知识的人群。1准备工作本文使用的系统是CentOS-6.2-i386-minimal版；准备三台虚拟机，一台为hadoop-namenode，另外两台作为hadoopdatanode01，hadoopdatanode02；下载：jdk-6u35-linux-i586-rpm.bin36443.htmlhtt
weixin_30621959·2020-07-08 14:11

马踏飞燕——奔跑在Docker上的Spark

目录为什么要在Docker上搭建Spark集群网络拓扑Docker安装及配置ssh安装及配置基础环境安装Zookeeper安装及配置Hadoop安装及配置Spark安装及配置集群部署总结参考资料1为什么要在
CGGAO·2020-07-08 14:25

mac关于Hadoop安装

下面讲述如何正确配置Hadoop安装，留作记录，以备不时之需。1.安装JDK1.1
vernwang·2020-07-08 05:13

Windows下 配置Hadoop3.0.0

文章参考:符智生:10分钟搞定Windows环境下hadoop安装和配置1.下载Hadoop挂载VPN,登陆Apache公共软件档案馆http://archive.apache.org/dist/由于该页面仅提供当前最新的软件版本
FawkesDoris·2020-07-07 21:02

hadoop学习总结（一）

一、如何安装配置apache的一个开源hadoop集群使用root账户登录修改IP修改host主机名配置SSH免密码登录关闭防火墙安装JDK并配置jdk环境变量解压hadoop安装包配置hadoop的核心文件
⑨笙清栀·2020-07-07 16:25

5分钟搞定Windows环境下hadoop安装和配置

1.下载Hadoophttp://www.apache.org/dyn/closer.cgi/hadoop/common2.解压hadoop-2.7.3.tar.gz点右键“解压到hadoop-2.7.3”文件夹路径xxx/xxxx/hadoop-2.7.3复制hadoop-2.7.3文件夹到d盘或者e盘的根目录（在这里我安装到了E盘）3.原版的Hadoop不支持Windows系统，我们需要修改一
梦捷者·2020-07-07 15:12

Hadoop2.7.3+Hbase-1.2.6完全分布式安装部署

Hadoop安装部署基本步骤：其他HBASE配置说明请看：https://www.cnblogs.com/judylucky/p/5692147.html需要把配置好的hbase复制到其他节点的相同目录下
lhyxcxy·2020-07-07 13:33

hadoop学习之hadoop安装--HDFS安装

http://archive.cloudera.com/cdh5/cdh/5/1.下载：拷贝本地安装包hadoop-2.6.0-cdh5.15.1.tar.gz到服务器的software安装包目录使用[email protected]:~/software/此时服务器端的情况：2.解压：~/app在softwa
level_Tiller·2020-07-07 13:15

Apache Hadoop安装

1.建立jdk环境>>>jdk与hadoop关系参见：http://wiki.apache.org/hadoop/HadoopJavaVersions>>>至少选择oraclejdk1.6.0_20或者以上.本次编译选择jdk1.7.0_21.[bruce@iRobothadoop-install]$cat~/.bash_profile#.bash_profile#Getthealiasesand
魔方泥瓦匠·2020-07-07 12:45

Hadoop安装教程_单机/伪分布式配置_Hadoop2.7.3/Ubuntu16.04

尽管安装其实很简单，书上有写到，官方网站也有Hadoop安装配置教程，但由于对Linux环境不熟悉，书上跟官网上简略的安装步骤新手往往Hold不住。
不二IT小伙·2020-07-07 05:22

Hadoop安装与集群配置(二)

开机后将各个虚拟机的ip修改好之后，将三个节点的ip以及hostname都加上可以使用xshell的工具，将命令一次性发送到各个窗口。三台虚拟机必须一致准备工作完毕！开始集群配置配置core-site.xml在所有的节点上都应该修改/etc/hadoop/core-site.xml.注意：需要修改tmp目录，不然默认是linux的tmp目录，这样会出现意想不到的错误，因为linux重启后，会删除/
尼古拉斯_谭·2020-07-06 21:20
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他