Hadoop安装

localhost: Error: JAVA_HOME is not set and could not be found.

JAVA_HOMEisnotsetandcouldnotbefound.但是JAVA环境变量已经配好了，终端输入java-version也会显示版本信息解决方案如下修改hadoop-env.sh(我的hadoop
仰望神的光·2020-08-25 16:52

Hadoop基础知识面试题整理

安装JDK并配置环境变量（/etc/profile）关闭防火墙配置hosts文件，方便hadoop通过主机名访问（/etc/hosts）设置ssh免密码登录解压缩hadoop安装包，并配置环境变量修改配置文件
吴国友·2020-08-25 15:25

hadoop程序员用自己5年的实战经验告诉你大数据是这样搭建环境

安装前设置在将Hadoop安装到Linux环境之前，我们需要使用ssh（SecureShell）来设置Linux。按照以下步骤设置Linux环境。创建用户在开始时，
铁拳虎·2020-08-25 06:01

大数据学习——jdk安装和hadoop安装

1、centos7修改主机文件：masterslave1slave2vim/etc/hosts192.168.58.10master192.168.58.11slave1192.168.58.12slave2检测是否能ping通：pingmasterpingslave1pingslave1(三台机子分别执行)2、centos7SSH互信配置：masterslave1slave2ssh-keygen
Junh.K·2020-08-25 04:43

一文搞定hadoop及其生态圈组件的安装，赶紧收藏起来吧！

大数据项目综合能力练习前言虚拟机的安装Hadoop集群环境搭建centos7安装centos7基础环境配置克隆两台虚拟机作为从节点修改主机名配置hosts文件关闭防火墙时间同步配置ssh免密登录安装jdk安装zookeeper安装hadoop
shy-2·2020-08-25 02:18

Hadoop安装部署的预备条件

1、目的这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会，比如在HDFS上运行示例程序或简单作业等。
ItStar·2020-08-25 01:04

hive2.1.1 部署安装

http://blog.csdn.net/u013310025/article/details/70306421安装hive之前，要保证hadoop安装成功，本教程对应的是hadoop版本为2.6.4,
XianMing的博客·2020-08-24 18:50

hadoop学习笔记之hadoop伪集群安装

hadoop安装实际也是很简单的,关键是有些坑不要踩了就好了,hadoop实际就是一个java的程序,跑起来很简单的,前期配置和准备工作做好就能一步安装成功准备工作1安装linux虚拟机,注意安装的时候不要忘记网络设置
xuehanxin·2020-08-24 18:45

hadoop 安装

.tar.gz2.解压:tar-zxvfhadoop-2.8.4.tar.gz3.设置环境变量:vim/etc/profile添加以下内容(/opt/soft/hadoop/hadoop-2.8.4为Hadoop
Liulin_Think·2020-08-24 15:07

Yarn 搭建及提交任务，java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$W异常处理

Hadoop安装的时候，默认的Yarn里面已经含有，我们希望将job提交Yarn的时候，我们首先要启动Yarn的集群环境。首先Yarn是啥？为啥要用它？
smartjiang·2020-08-24 14:10

Flume采集文件到HDFS

Flume采集文件到HDFS在flume和Hadoop安装好的情况下1.遇到的坑在安装Hadoop时，配置core-site.xml文件一定要注意。
Joker_Jiang3·2020-08-24 13:03

进阶3： zookeeper-3.4.9.tar.gz和hbase-1.2.4-bin.tar.gz 环境搭建(hbase 伪分布式)

前提条件：成功安装了jdk1.8,hadoop2.7.3注意条件：zookeeper,hbase版本必须要和hadoop安装版本相互兼容，否则容易出问题；本次：安装包zookeeper-3.4.9.tar.gz
weixin_30247781·2020-08-24 12:24

HADOOP理解：HDFS、YARN、MapReduce、Flume

、Flume一、简介1．HDFS：解决海量数据的存储2．YARN：资源调度系统（编程模型MAPR、Spark、Storm、MPI）3．MapReduce：分布式数据计算4．Flume：数据采集工具二、Hadoop
沒·2020-08-24 11:06

hadoop安装

Hadoop安装1、安装javajdk版本jdk1.8.0_141步骤：1、创建/opt/SoftWare/java并将jar包拉进去命令tar-zxvfjdk1.8.0_141.tar.gz解压2、配置
蘇 jsu·2020-08-24 09:02

VMware中创建的linux系统中安装hadoop

一、hadoop的安装hadoop安装的三种形式：单机模式伪分布式基于yarn的完全分布式模式安装前的准备：一个纯净版的centos7虚拟机，配置好静态ip，主机名，主机映射配置静态ip：vi/etc/
Smile to everyday·2020-08-24 05:32

win7下spark+hadoop安装

安装http://www.cnblogs.com/eczhou/p/5216918.html1.1、jdk安装安装oracle下的jdk，我安装的是jdk1.7，安装完新建系统环境变量JAVA_HOME，变量值为C:\ProgramFiles\Java\jdk1.7.0_79，视自己安装路径而定。同时在系统变量Path下添加C:\ProgramFiles\Java\jdk1.7.0_79\bin和
analanxingde·2020-08-24 00:18

普通用户实现ssh无密码登录

否则AgentadmittedfailuretosignusingthekeyPS:hadoop安装配置要在普通用户下进行，root启动不了hadoop相关进程
zzhqun·2020-08-23 22:32

hadoop安装及HDFS的简单操作

1.hadoop集群的安装实际开发的真实部署学习中的部署1.准备Linux环境1.0先将虚拟机的网络模式选为NAT1.1修改主机名vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=itcast###1.2修改IP两种方式：第一种：通过Linux图形界面进行修改（强烈推荐）进入Linux图形界面->右键点击右上方的两个小电脑->点击Editconnecti
逐 影·2020-08-23 18:23

Hadoop完整搭建过程（二）：伪分布模式

2Hadoop配置文件修改Hadoop安装目录下的三个配置文件：etc/hadoop/core-site.xmletc/hadoop/hdfs-site.xmletc/hadoop/hadoop-env.sh2.1core-site.xml
氷泠·2020-08-23 11:13

Hadoop完整搭建过程（二）：伪分布模式

2Hadoop配置文件修改Hadoop安装目录下的三个配置文件：etc/hadoop/core-site.xmletc/hadoop/hdfs-site.xmletc/hadoop/hadoop-env.sh2.1core-site.xml
氷泠·2020-08-23 09:13

hadoop启动后jps查不到namenode的解决办法

1.如果是先启动了namenode，没有启动datanode就报错了，你需要去查看一下hadoop的日志文件（hadoop安装目录/logs），找到namenode的log文件（我的是hadoop-test-namenode-ubutun
holiday_gao·2020-08-23 05:34

Linux安装Hbase详细步骤

一、准备工作安装好虚拟机（ubuntu16.04)安装好Hadoop2.7.3hadoop安装好winscp（window向linux文件传输用)安装好jdk1.8jdk1.8下载好hbasehbase
谢同学咯·2020-08-22 19:11

记Hadoop安装中出现的各种问题

Hadoop安装中出现的各种问题及解决办法目录前言关于VBox安装关于Ubuntu安装及使用关于Hadoop安装及调试关于虚拟机和电脑间数据传输关于Linux的提示涉及Hadoop的常用命令Linux系统的常用命令及基本练习本文涉及名词解释结语前言经历了几天的不断尝试
Finderme·2020-08-22 12:36

Hadoop 配置eclipse

（1）安装好eclipse省略，参加网上其他博客（2）找到安装hadoop安装目录下的contrib/eclipse-plugin的jar文件。这是hadoop给eclipse插件。
zoux·2020-08-22 11:05

Hadoop、Hbase伪分布式安装

操作系统:Centos7Hadoop:2.7.3Hbase:1.2.3Hadoop安装JAVA_HOME环境变量配置由于Hbase是基于HDFS的，所以我们首先部署Hadoop。
扑火的蛾·2020-08-22 10:35

用 Hadoop 进行分布式并行编程, 第 2 部分

分析WordCount程序我们先来看看Hadoop自带的示例程序WordCount，这个程序用于统计一批文本文件中单词出现的频率，完整的代码可在下载的Hadoop安装包中得到(在src/examples
原文链接·2020-08-22 02:44

Hadoop 3.2.1Yarn虚拟机集群启动配置

Hadoop3.2.1Yarn虚拟机集群启动配置主要配置2个文件1.yarn-site.xml这个文件位置在hadoop安装目录的etc下，我的目录如下/opt/apps/hadoop-3.2.1/etc
闻香识代码·2020-08-21 23:49

Hadoop安装流程&使用CDH版的Hadoop搭建HDFS环境

hadoop的操作网址/参考文档：http://hadoop.apache.org/docs/r2.6.0/hadoop-project-dist/hadoop-common/SingleCluster.html软件下载cdh-hadoop2.6.0http://archive.cloudera.com/cdh5/cdh/5/jdk1.8https://www.oracle.com/java/te
艾艾猫dori·2020-08-21 19:16

格式化HDFS出现java.io.IOException: Cannot create directory /opt/hdfs/name/current错误

格式化HDFS时出现如上错误，解决的方法是为当前正在使用的用户增加相应的文件夹权限：注：我将hadoop安装在/opt目录下；当前使用的用户名为brucechown-Rbruce/opt
农夫不相信·2020-08-21 19:00

Hadoop集群启动NameNode错误 JAVA.IO.IOEXCEPTION: NAMENODE IS NOT FORMATTED

NAMENODEISNOTFORMATTED.新创建的HADOOP集群启动时报错NAMENODE没有启动成功出现的错误:出错的原因:hadoop集群创建完成之后namenode没有进行初始化解决方法以下均是在主节点操作我的hadoop
fa124607857·2020-08-21 19:11

hadoop安装的时候，提前确认hadoop版本是32位还是64位。

hadoop在安装的时候，需要知道hadoop版本是32位还是64位。hadoop官网原来提供的都是32位，因为我们大部分服务器都是64位，所以不得不重新编译。后来官网从hadoop2.5版本开始就提供了64位。我们来从官网下载的hadoop2.4.1安装包.hadoop是32位还是64位，我们查看本地库即可。即进入$hadoop_home/lib/native，使用file命令#########
levy_cui·2020-08-21 14:51

MRUnit的安装和使用

但是它没有集成在Hadoop安装环境中，如果想在开发MapReduce程序时使用这个工具，就需要自己安装。
Warren_Hoo·2020-08-21 14:31

hadoop hdfs 全分布式（Fully-Distributed Operation） 部署

一、架构简介：本文档介绍如何设置和配置单节点Hadoop安装，以便您可以使用HadoopMapReduce和Hadoop分布式文件系统（HDFS）快速执行简单操作。
ccx_jy·2020-08-21 13:58

linux中spark启动进程命令以及顺序

linux中spark启动进程命令以及顺序1）首先启动hadoop①在Master节点上进入hadoop安装目录下，执行sbin/start-dfs.sh②在Slave1节点上进入hadoop安装目录下
AsItachi·2020-08-21 04:09

Spark集群下开启history server

1.创建存放log文件的路径cd/usr/local/hadoop/bin#hadoop/bin的路径，若设hadoop安装路径为环境变量，则不用运行上述命令hdfsdfs-mkdir-phdfs://
T_Q_·2020-08-21 00:29

windows下安装并启动hadoop2.6.1

64位windows安装hadoop没必要倒腾Cygwin，直接解压官网下载hadoop安装包到本地->最小化配置4个基本文件->执行1条启动命令->完事。
trista0929·2020-08-20 22:43

windows7下java代码从远程hadoop服务上下载文件

1.在windows7下无法下载远程hdfs服务上的文件1.问题原因hadoop官方不支持windows平台,没有windows版本的hadoop,想在windows上运行hadoop很麻烦官方下载的hadoop
翱翔的江鸟·2020-08-20 20:26

java调用hadoop接口,实现文件的上传、下载、删除、新建文件夹

details/86647585hadoop的dfs命令参照：https://blog.csdn.net/u010476739/article/details/86686725打开eclipse新建工程demo将hadoop
jackletter·2020-08-20 18:28

Hadoop Shell 命令 与 WordCount

前言在前2章内,我们分别介绍了Hadoop安装的3种形式(Standalonemode/Pseudo-Distributedmode/Clustermode).本章,我们介绍如何使用HDFS命令进行一些基本的操作
在风中的意志·2020-08-20 18:55

Eclipse Hadoop之WordCount运行

现在来做个总结视频1视频2目录结构如下代码下载密码:0uwj在eclipse中打开是这样的：准备工作hdfs开启/hadoop安装目录/sbin/start-dfs.shyarn开启/hadoop安装目录
她家的猫·2020-08-20 17:10

Hadoop插件安装

安装步骤:1.下载hadoop插件，注意:插件的版本要和用的hadoop版本保持一致2.将插件jar包放在eclipse安装目录的plugins目录下3.将hadoop安装包解压到指定的一个目录（后面要用这个安装目录
李先生1994·2020-08-20 17:17

安装部署Hadoop集群的方法

$JAVA_HOME,$CLASSPATH及$PATH等环境变量2.打通这三台机器的SSH访问集群部署****以下步骤需要在每台Node节点机器上完成****1.下载最新的Hadoop压缩包，在指定的Hadoop
victorunique·2020-08-20 12:40

Linux环境下hadoop安装过程

一实验环境：1.三台物理机（可以虚拟机虚拟出的三台主机），其中一台做为主节点（namenode）ip：192.168.30.50，两台做为从节点（datanode）ip:192.168.30.51/192.168.30.522.为每一台主机安装JDK1.6以上，并设置好环境变量，推荐（如：JAVA_HOME=/usr/java/java1.7.0_17)，配置好后可以通过：java-version
小许·2020-08-20 09:19

hadoop 并发编程

/os-cn-hadoop2/index.html分析WordCount程序我们先来看看Hadoop自带的示例程序WordCount，这个程序用于统计一批文本文件中单词出现的频率，完整的代码可在下载的Hadoop
tylgoodluck·2020-08-20 08:32

（5）HBase 1.2.6伪分布安装

引言Hadoop安装HBase安装1使用HBase自带的zookeeper2将HBase解压到usrlocal文件夹并改名3修改配置文件confhbase-envsh4修改配置文件confhbase-sitexml
GISer.Wang·2020-08-20 05:16

Hadoop安装问题汇总

1、hdfsnamenode-format时出现如下报错18/08/0111:04:01WARNnamenode.NameNode:Encounteredexceptionduringformat:java.io.IOException:Cannotcreatedirectory/home/zkpk/hadoopdata/dfs/name/currentatorg.apache.hadoop.hd
locker_c·2020-08-19 10:33

大数据Hadoop入门，Hadoop安装与配置,HDFS伪分布式部署(一)

一、概述（部署请跳到第二节）1.大数据的由来随着计算机技术的发展，互联网的普及，信息的积累已经到了一个非常庞大的地步，信息的增长也在不断的加快，随着互联网，物联网建设的加快，信息更是爆炸式增长，收集检索，统计这些信息越发困难，传统的数据库结构难以应对这种变化，必须使用新的技术来解决这些问题2.什么是大数据－大数据指无法在一定时间范围内用常规工具进行捕捉，管理和处理的数据集合－大数据需要新处理模式才
JJH的创世纪·2020-08-19 06:38

Hadoop：Centos6.5（64bit）Hadoop2.5.1伪分布式安装记录

单节点的hadoop安装出现的问题会在如下几个方面：JDK环境的配置、防火墙是否关闭、root用户和hadoop用户的不同操作等。在搭建的过程中细心一点，按照下面的步骤做，基本
weixin_30781631·2020-08-19 04:47

Hadoop快速入门

目的这篇文档的目的是帮助你快速完成单机上的Hadoop安装与使用以便你对Hadoop分布式文件系统(HDFS)和Map-Reduce框架有所体会，比如在HDFS上运行示例程序或简单作业等。
ssyan·2020-08-19 00:29

【大数据day09】—— Hadoop集群安装和配置（appache版本hadoop重新编译，Hadoop安装，配置三台虚拟机集群环境）

Hadoop集群安装和配置1、Hadoop的介绍2、hadoop的历史版本和发行版公司2.1Hadoop历史版本2.2Hadoop三大发行版公司3、hadoop的架构模型1.x的版本架构模型介绍2.x的版本架构模型介绍四种4、appache版本hadoop重新编译4.1为什么要编译hadoop4.2编译环境的准备4.2.1：准备linux环境4.2.2：虚拟机联网，关闭防火墙，关闭selinux4
我不是靓仔ing·2020-08-18 11:48
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他