HADOOP_HOME

Hive 0.8.1 with MapReduce 0.23.1 单机测试安装

2)修改配置，加入环境变量$hadoop_home/etc/hadoop/yarn-env.sh在最前面加入配置：exportJAVA_HOME=/opt/J
cxhzqhzq·2020-08-01 11:05

Hadoop入门学习之（四）windows下缺少windutils.exe和hadoop.dll的解决方法

1、到githup找到相应版本的文件，如本文使用的是2.8.1下载winutils:https://github.com/steveloughran/winutils2、解压下载的文件，放到$HADOOP_HOME
staconfree·2020-08-01 11:25

windows下通过idea连接hadoop和spark集群

###windows下链接hadoop集群1、假如在linux机器上已经搭建好hadoop集群2、在windows上把hadoop的压缩包解压到一个没有空格的目录下，比如是D盘根目录3、配置环境变量HADOOP_HOME
weixin_30639719·2020-08-01 03:56

大数据学习系列5-Centos6.7 hadoop-2.6.5下hive-1.2.1的安装部署

apps/3.配置hive，默认是内置的derby，本文选择mysql作为数据源的数据库，数据库安装在mini4主机中（a）配置HIVE_HOME环境变量viconf/hive-env.sh配置其中的$hadoop_home
dream-on·2020-07-30 20:36

大数据技术之Hadoop之HDFS(3)—— win10安装hadoop3.1.2

并配置环境变量3、安装配置hadoop3.1、下载到hadoop官网下载hadoop的最新版本压缩包，下载地址：Hadoop3.1.2，解压过后目录如下所示：3.2、解压并配置环境变量在环境变量中新建HADOOP_HOME
张反水·2020-07-30 18:56

hive相关错误:java.lang.RuntimeException: Error in configuring object

没办法，只能去hadoop_home下去看看了，
liyaohhh·2020-07-30 12:17

MapReduce编程

不想放本地了直接扔这里来好了环境变量exportJAVA_HOME=/opt/jdk1.8.0_241exportHADOOP_HOME=/opt/hadoop-2.7.3exportPATH=$JAVA_HOME/bin:$HADOOP_HOME
辜 月·2020-07-29 14:21

hadoop踩坑记录（1）

之后将解压目录设置环境变量HADOOP_HOME。然后配置配置文件。在sbi
_Tucci·2020-07-29 05:46

Hadoop集群运维-基础、均衡器

1、基础运维1.1启动/停止Hadoop在Hadoop_HOME/bin下执行./start-all.sh或者./stop-all.sh命令。
洋葱ycy·2020-07-29 01:56

hadoop系统监控脚本

可能会需要dstat-0.7.2-1.el5.rfx.noarch.rpm部署时先执行init.sh再修改allserver-collect.sh的$HADOOP_HOME和dstat命令参数，现在的参数可是只输出
weixin_34308389·2020-07-28 19:50

运行jar包所需要的环境依赖

```hadoop_HOME="/opt/cloudera/parcels/CDH-5.6.0-1.cdh5.6.0.p0.45/bin/..
weixin_34268843·2020-07-28 19:50

hadoop学习之java操作hdfs

使用的是分布式模式hdfs的介绍此处不赘述,可以自己去查阅相关资料进行了解一本地配置hadoop环境变量此处默认已经具备jdk环境.将hadoop的压缩包解压到任意目录image.png在环境变量中配置HADOOP_HOME
你看见皮卡丘了吗·2020-07-28 14:10

hive中对lzo压缩文件建立索引实现并行处理

1,确保创建索引$HADOOP_HOME/bin/hadoopjar$HADOOP_HOME/lib/hadoop-lzo-0.4.10.jarcom.hadoop.compression.lzo.DistributedLzoIndexer
rolin-刘瑞·2020-07-28 13:08

hadoop jar命令解读

1、首先，在${HADOOP_HOME}/bin/hadoop脚本中我们可以看到有如下代码：由于这里$st
呼啦圈521·2020-07-28 04:08

Hadoop KMS 使用

hdfs配置1）下载hadoop2.6以上的版本，解压之后，配置HADOOP_HOMEexportHADOOP_HOME=/root/hadoop-2.7.4exportPATH=${PATH}:${HADOOP_HOME
mnasd·2020-07-28 03:04

hadoop本地库与系统版本不一致

suse11上部署hadoop2.6遇到的问题，网上搜的资料，待验证)集群中设置支持gziplzo压缩后，在对压缩文件进行读取或者对输入文件压缩的时候要使用到hadoop的本地库，本地库的默认位置在$HADOOP_HOME
ichsonx·2020-07-28 00:03

Hadoop脚本——Hadoop实战初级部分学习笔记

4、Hadoop脚本1、bin目录hadoop：hadoopshellhadoop-config.sh给hadoop的一些变量赋值HADOOP_HOME、HADOOP_CONF等hadoop-deamon.shcallsalves.shstart-all.shstart-dfsshstart-balancershstart-jobhistoryservershstart-mapred.sh
hdngbj·2020-07-27 23:42

Hadoop KMS 使用

hdfs配置1）下载hadoop2.6以上的版本，解压之后，配置HADOOP_HOMEexportHADOOP_HOME=/root/hadoop-2.7.4exportPATH=${PATH}:${HADOOP_HOME
eyoulc123·2020-07-27 21:53

Hadoop搭建IDE

查找hadoop的依赖jar包在{hadoop_home/share}目录下查找文件，复制后拷贝至{hadoop_home}/_jar/在{hadoop_home}/_jar/目录下查找文件，剪切后拷贝至
一陆向光·2020-07-27 16:37

HDFS客户端及API的操作

HDFS客户端环境准备1.根据本机windows操作系统使用对应编译hadoop的jar包到非中文目录下（目录不能包含空格，如:D:\Develop\hadoop-2.7.2）2.配置HADOOP_HOME
学习大数据入门到放弃·2020-07-23 16:00

java.lang.IllegalArgumentException: java.net.UnknownHostException: user 错误解决

action操作，总出现错误：java.lang.IllegalArgumentException:java.net.UnknownHostException:user有的说修改hosts、有的说将$HADOOP_HOME
heming621·2020-07-15 23:56

解决：运行sbin下的start-hdfs.sh时报WARN util.NativeCodeLoader: Unable to load native-hadoop

training/jdk1.8.0_144exportHADOOP_HOME=/root/training/hadoop-2.7.3exportHADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME
曲健磊·2020-07-15 19:12

hadoop 2.x 安装及使用

一、准备要求安装好hadoop2.x版本的三节点集群,并配置好JAVA_HOME和HADOOP_HOME两个环境变量。
cherish-zp·2020-07-15 13:20

hadoop 2.7伪分布安装

而且其它xxx-core.xml里的参数很多也可以省略，下面是几个关键的配置：（安装JDK、创建用户、设置SSH免密码这些准备工作，大家可参考hadoop2.6全分布安装一文，以下所有配置文件，均在$HADOOP_HOME
youzhouliu·2020-07-15 11:09

window环境hadoop客户端安装

并解压到你想要的目录下，我放在D:\dev\hadoop-2.5.2二、配置hadoop环境变量1.windows环境变量配置右键单击我的电脑–>属性–>高级环境变量配置–>高级选项卡–>环境变量–>单击新建HADOOP_HOME
ye826263369·2020-07-15 11:46

HDFS：NN、SNN、DN剖析

namenode被格式化之后，将在HADOOP_HOME/tmp/dfs/name/current（默认）产生以下文件：参数：core-site.xml：hadoop.tmp.dir指定hadoop运行时产生文件的存储目录参数
Exzzla·2020-07-15 08:57

Windows下hadoop2.7.6安装及配置教程

）：http://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common三、接下来就到了我们的配置过程啦~1.配置环境变量系统变量Java_Home系统变量Hadoop_Home
weixin_39025364·2020-07-15 06:09

hadoop开发-开发环境与操作HDFS的例子

在windows环境下的eclipse中开发hadoop应用，需要在系统参数中指定HADOOP_HOME，否则会报错"Failedtolocatethewinutilsbinaryinthehadoopbinarypath
wanghan1977·2020-07-15 02:47

LINUX下单机安装HADOOP+HIVE手册

tar.gz2.HADOOP的安装路径添加到环境文件/etc/profile中：exportHADOOP_HOME=/home/hadoop/setup/hadoop-0.19.2exportPATH=$HADOOP_HOME
w98degrees·2020-07-15 02:13

IDEA 连接远程spark操作hive的操作和遇到的坑

在搭建IDEA使用遇到了一些坑和解决了下面废话不多说，附上步骤1.配置本地HADOOP_HOME下载winutils的windows的版本，地址：https://github.com/srccodes/
qq_17734605·2020-07-14 16:49

大数据 - Java实现提交作业到Hadoop集群

配置windows环境变量Java环境变量就不写了，都应该知道变量名：HADOOP_HOME路径：E:\hadoop\
蒙蒙的林先生·2020-07-14 14:06

hadoop之操作window下HDFS API编程(8)

目录代码操作HDFS1.准备:window10下配置hadoop环境配置环境变量拷贝2个文件到HADOOP_HOME/bin下2.pom相关的依赖3.通过API操作HDFS1)HDFS获取文件系统2）HDFS
怒放de生命2010·2020-07-14 07:41

window操作系统搭建Spark开发调试环境

1搭建环境前写个demo代码；2安装配置jdk1.8；3安装配置scala2.11.18；4导入pom.xml中依赖jar；5下载Hadoop的bin包,设定环境变量HADOOP_HOME，值为解压后的目录
andyliuzhii·2020-07-14 07:35

Eclipse连接Hadoop集群及WordCount实践

/pan.baidu.com/s/1i51UsVN3、Hadoop下载与配置下载解压即可，下载地址：https://pan.baidu.com/s/1i57ZXqt配置环境变量：在系统变量中新建变量：HADOOP_HOME
weixin_33690367·2020-07-14 02:06

使用命令行编译打包运行自己的MapReduce程序

使用命令行运行mapreduce程序在~/.bashrc中增加如下几行中添加：exportHADOOP_HOME=/usr/local/hadoopexportCLASSPATH=$($HADOOP_HOME
小柒sy·2020-07-13 19:07

HBase深入（二）结合MapReduece

HBase,MapReduce,andtheCLASSPATH$HADOOP_CLASSPATH=`${HBASE_HOME}/bin/hbaseclasspath`\${HADOOP_HOME}/bin
Gallin_Qiu·2020-07-13 14:48

Hadoop安装部署的三种模式

.bash_profile```###addforhadoopHADOOP_HOME=/root/ubuntu/training/hadoop-2.7.3exportHADOOP_HOMEPATH=$HADOOP_HOME
随我逐流·2020-07-13 10:33

hadoop的HDFS部分配置说明

1.Core-site.xml配置说明（文件所在目录：${Hadoop_Home}/etc/hadoop/）（1）配置namdenode节点URIfs.defaultFShdfs://bigdata1:
枫叶的记忆·2020-07-13 09:49

window下java客户端实现Linux下HDFS文件的上传与下载

1、下载并解压hadoopwindow平台的包下载地址2、配置window下的hadoop的环境变量新建系统环境变量HADOOP_HOME值为hadoopwindow平台包的解压路径将变量;%HADOOP_HOME
众里寻她千百回·2020-07-13 00:46

Hadoop配置文件详解

Hadoop有多个配置文件，这里列举最重要的几个，都在$HADOOP_HOME/etc/hadoop目录下。
andyguan01_2·2020-07-12 21:09

hadoop 3.x 无法访问hdfs(50070,8088)的web界面

界面的端口修改hdfs-site,xml中加上如下配置再次启动后,netstat-nltp|grep5070,仍然没有该端口号信息的话说明namenode可能没有成功启动,建议先jps下如果没有再去$HADOOP_HOME
weixin_30725467·2020-07-12 06:21

hadoop项目

:$HADOOP_HOME/shar
sunsi_10·2020-07-12 00:58

Hadoop-Error: Could not find or load main class org.apache.hadoop.mapreduce.v2.app.MRAppMaster

：Error:Couldnotfindorloadmainclassorg.apache.hadoop.mapreduce.v2.app.MRAppMaster根据报错提示找到hadoop安装目录下$HADOOP_HOME
Sun-wz·2020-07-11 17:47

mac安装配置hive2.0

blog.csdn.net/an342647823/article/details/46048403http://andrewliu.in/2015/04/25/Mac下安装Hive及使用/##配置hadoop2.6.0$$HADOOP_HOME
铁头乔·2020-07-11 14:59

Hive集群搭建

1、下载hive压缩包解压到指定的目录：2、修改配置进入hive配置文件夹添加配置文件 mvhive-env.sh.templatehive-env.shvihive-env.sh配置HADOOP_HOME
fengchengwu2012·2020-07-11 05:20

Hive-1.2.2安装（本地模式）

Hive-1.2.2安装（本地模式）必要条件Java1.7(Hive1.2及以上版本需要Java1.7或更高版本)Hadoop2.x(推荐),1.x(不支持Hive2.0.0以上版本).配置好环境变量HADOOP_HOME
chennaihuan0842·2020-07-11 03:37

执行hadoop jar命令时报Not a valid JAR

hadoopjar$HADOOP_HOME/share/hadoop/common/hadoop-lzo.jar\com.hadoop.compression.lzo.LzoIndexer/user/hive
蔡大远·2020-07-11 03:30

【大数据入门笔记系列】第五节 SpringBoot集成hadoop开发环境（复杂版的WordCount）

大数据入门笔记系列】第五节SpringBoot集成hadoop开发环境（复杂版的WordCount）前言环境清单创建SpringBoot项目创建包创建yml添加集群主机名映射hadoop配置文件环境变量HADOOP_HOME
Jack_Roy·2020-07-10 22:52

hadoop namenode进程参数调整

修改hadoop-env.sh添加vi$HADOOP_HOME/conf/hadoop-env.shexportHADOOP_NAMENODE_OPTS="-Xmx16384m-Xms4096m-Xmn2048m-verbose
wuzhilon88·2020-07-10 12:54

hadoop2.7.7完全分布式及HA步骤安装（二）之真的很扎心的hbase-1.4.9的安装(史上最全)

环境变量exportHBASE_HOME=/usr/local/hbase-1.4.9exportPATH=$HBASE_HOME/bin:$HADOOP_HOME/sbin:$ZOOKEEPER_HOME
妹妹叫朕咕咕哒·2020-07-10 10:04
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他