hadoo

Hadoop基础入门

Hadoop生态圈技术栈：|Hadoop技术栈||||Hadoo
女友在高考·2022-07-30 08:00

docker是什么，能做什么，如何用

环境配置是十分的麻烦，每一个及其都要部署环境(集群Redis、ES、Hadoo
奔走的王木木Sir·2022-07-19 16:09

hadoop分布式互信密钥

.ssh-coip-idhadoop103主机hadoop1021.ssh-coip-idhadoop1012.ssh-coip-idhadoop1023.ssh-coip-idhadoop103主机hadoo
m0_67401761·2022-06-11 12:23

大数据平台技术栈

通常用于从其他系统搜集数据，如web服务器产生的日志，通过Flume将日志写入到Hadoo
超哥的杂货铺·2022-05-25 07:03

Hadoop简介和体系架构

分布式计算框架MapReduce2．2．3分布式资源调度系统YARN2.2.4三大发行版本2．1Hadoop简介自从大数据的概念被提出后，出现了很多相关技术，其中对大数据发展最有影响力的就是开源分布式计算平台Hadoo
G不来也不去·2022-03-18 07:46

hdfs 启动时报出mv: 无法获取 文件状态

没有那个文件或目录将集群下的所有虚拟机的hadoop目录下的/etc/hadoop/下的slaves文件进行修改执行vi/usr/local/hadoop/etc/hadoop/slaves删除localhost进入hadoo
路过敬老院·2022-03-07 15:42

Geoserver+Geomesa+HBase时空大数据环境搭建

1.1Hadoo
峥嵘37·2022-02-28 10:57

StarRocks#StarRocks(部署)

以上创建元数据目录分发，启动FE节点启动mysql客户端，访问FE，查看FE状况查看FE状态mysql>SHOWPROC'/frontends'\G添加其他FE节点，角色也分为FOLLOWER,OBSERVER启动hadoo
冰菓_·2022-01-15 23:08

【hadoop】完全分布式部署

核心配置文件配置：hadoop-env.sh（在/opt/module/hadoop-3.1.3/etc/hadoo
鲸落……·2021-12-09 14:28

大数据开发之Hadoop集群安装教程

2、配置cd/export/server/hadoop-3.0.0/etc/hadoo
·2021-10-27 12:55

使用jdbc连接hive报错：java.lang.RuntimeException: org.apache.hadoop.ipc.RemoteException(org.apache.hadoo...

使用jdbc连接hive报错：Connectingtojdbc:hive2://node002:1000021/08/0122:12:31[main]:WARNjdbc.HiveConnection:Failedtoconnecttonode002:10000CouldnotopenconnectiontotheHS2server.PleasechecktheserverURIandiftheUR
JunGeiger·2021-08-01 23:36

Hadoop2.8.5伪分布运行wordcount

Java进程很可能运行失败，查一下自己Hadoop配的是否正确可以参照我的Hadoop2.8.5伪分布安装步骤创建file文件夹创建名称为file的文件夹并向里面写点东西，我这里创建的路径为/usr/hadoo
菠菜本菠·2021-06-23 09:08

2021年 全网最细大数据学习笔记（六）：Hadoop 之 HDFS 进程详解

读数据流程八、HDFS的回收站九、NameNode、HDFS的元数据辅助管理详解十、HDFS的高可用和高扩展机制10.1高可用10.2高扩展机制一、学前必备知识2021年全网最细大数据学习笔记（一）：初识Hadoo
Amo Xiang·2021-06-18 20:10

Apache Ambari部署

管理Hadoo
区块鱼·2021-06-08 12:27

关于JAVA_HOME is incorrectly set 的问题

:\ProgramFiles\Java,可以发现ProgramFiles中间有空格，这就是yarn报错的原因，将jdk放在不带空格的目录下就OK了接下来就是“改变jdk位置时IDEA里的项目报错”由于Hadoo
Vics异地我就·2021-05-27 20:33

大数据之安装Hadoop—科多大数据

1、上传tar.gz的文件到linux上2、解压:tar-zxvfhadoop-2.6.5.tar.gz3、配置hadoop需要进入到：/keduox/hadoo
大数据在说话·2021-05-21 10:16

Linux系统-LNMP部署农场牧场

1.安装nginx[root@hadoo
Mr.zhou_Zxy·2021-05-10 22:53

Intellij IDEA2.6 + Hadoop2.9.0 本地开发MapReduce并提交到集群

到指定目录，并且配置环境变量HADOOP_HOME=C:\Work\hadoop-2.9.0HADOOP_BIN_PATH=%HADOOP_HOME%\binHADOOP_PREFIX=C:\Work\hadoo
2010jing·2021-05-08 20:02

大数据｜HDFS的shell操作及基本工作机制（四）

hadoo
小怪聊职场·2021-04-25 11:42

Hadoop:windows 上 hadoop项目遇到的一些问题

hadoophdfsnodenameclusterid和datanodeclusterid不一定，导致hadoo
李逍遥JK·2021-04-23 13:33

Hadoop Namenode双缓冲写原理(demo)

(1)https://zhuanlan.zhihu.com/p/363696752(2)https://juejin.cn/post/6844904019530350599#heading-2最近我司hadoo
_Kantin·2021-04-17 11:55

大数据学习总结（2021版）---Hadoop（入门）

的资源管理器1.2.3MapReduce架构：Map（并行处理数据）和Reduce（数据结果汇总）1.3大数据技术生态体系1.4推荐系统框架图1.5HDFS、YARN、MapReduce三者关系第2章Hadoo
亿钱君·2021-03-19 15:52

大数据学习之路~Hadoop

学习之路（四）Hadoop集群搭建和简单应用Hadoop学习之路（五）Hadoop集群搭建模式和各模式问题Hadoop学习之路（六）HDFS基础Hadoop学习之路（七）Hadoop集群shell常用命令Hadoo
素颜vv风之殇·2020-11-28 15:30

Hadoop安装、伪分布式配置及运行Hadoop示例wordcount

本博客默认所有读者均已安装Java环境1、Hadoop下载下载Hadoop请前往官网官网地址：http://hadoop.apache.org/点击Download跳转至下载页面我这里选择的是3.3.0版本的Hadoo
风在哪·2020-09-16 19:15

hadoop报错 is longer than maximum configured RPC length 67108864

ipc实际通讯的数据包大于默认最大的数据包配置64MB解决办法：提高这个参数到128MB1、在下面3个配置中同时加上vi/data/usr/hadoop-2.7.3/share/doc/hadoop/hadoo
我的八仙桌·2020-09-16 18:19

windows+eclipse 连接hadoop集群

该hadoop目录为在集群中配置好的的hadoo
红叶幽香·2020-09-15 03:34

Hadoop运行模式—本地运行模式

xml配置文件复制到input[[email protected]]$cpetc/hadoop/*.xmlinput 3.执行share目录下的mapreduce程序[admin@hadoo
AngeJT·2020-09-15 03:11

大数据＋零基础＋大数据入门（一）

每个组件都会对应一个用户组件用户hdfshdfsyarnyarnzookeeperzookeeperhbasehbase一.安装①创建hadoop用户：[root@hadoop002~]#useraddhadoop[root@hadoo
running_water·2020-09-15 02:53

Hadoop-02

cloudera公司目录结构apache目录结构:bin:对集群操作的命令hdfsdfs和hadoopfssbin:对集群的启动和关闭的命令etc/hadoop/:hadoop的配置文件放置目录share:存储hadoo
张大坏·2020-09-15 02:20

linux基础

/bin/hadoo
shirley_pp·2020-09-14 13:54

hadoop fs -count的结果含义

9000/sunwg第一个数值2表示/sunwg下的文件夹的个数，第二个数值1表是当前文件夹下文件的个数，第三个数值108表示该文件夹下文件所占的空间大小，这个大小是不计算副本的个数的[sunwg]$hadoo
weixin_33804582·2020-09-14 01:05

4、记录1----获取hdfs上FileSystem的方法 记录2：正则匹配路径：linux、hdfs

publicstaticConfigurationgetHadoopConfig(StringhadoopConfPath){Configurationconf=newConfiguration();conf.addResource(newPath(hadoo
weixin_30466421·2020-09-14 01:55

HDFS实战之打开文件

importjava.io.InputStream;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoop.fs.FileSystem;importorg.apache.hadoo
LawsonAbs·2020-09-14 00:24

Spark on Yarn

running-on-yarn.html1.在spark-env.sh中配置HADOOP_CONF_DIR或者YARN_CONF_DIRHADOOP_CONF_DIR=/opt/bigdata/hadoop-2.7.3/etc/hadoo
那山的狐狸·2020-09-14 00:21

hdfs文件操作命令

/input将本地文件放到hdfs上：bin/hadoopfs-put/home/fl/input/wordcount.txt/user/fl/input/删除hdfs上的文件夹output：bin/hadoo
fan504·2020-09-14 00:06

hadoop job -kill 与 yarn application -kii

如果还是出现这个问题的话，则MapReduce任务运行到runningjob卡住关于这里参数配置的解释，见Hadoo
AcceptedLin·2020-09-13 20:48

【实战Apache-Flume采集DB数据到kafka】

root@hadoop0bigdata]#wgethttp://apache.fayea.com/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz2、解压缩[root@hadoo
lijieshare·2020-09-13 19:54

Hadoop 学习笔记 （十） MapReduce实现排序 全局变量

会乱序吧~输入数据：file1232654321575665223file259562265092file326546importjava.io.IOException;importorg.apache.hadoo
weixin_33724659·2020-09-13 18:40

大数据技术与应用——熟悉常用的Linux操作

建议单独建立一个普通用户hadoo
qq_41490629·2020-09-13 16:41

菜鸟学习Hadoop系列一----安装Hadoop

下载hadoo
W170532934·2020-09-13 11:14

尚硅谷直播课:（韩顺平）2020大数据学习路线图、大数据开发课程笔记

此链接放这只为方便自己查阅，无恶意分享他人劳动成果之意)大数据以集群方式运行，多个服务器构成一个集群，分为主服务器和从服务器Flume做数据采集Zookeeper做数据管理和配置Kafka做数据传输，同时对数据清洗，去杂质Hadoo
ningmengshuxiawo·2020-09-12 19:13

hbase HbaseUtil 工具类

importjava.util.Map;importjava.util.Properties;importorg.apache.hadoop.conf.Configuration;importorg.apache.hadoo
shawn.xiao·2020-09-11 11:37

大数据第一步：Scala+Hadoop+Spark环境安装

二、安装hadoop1、新增名为hadoo
南方有木·2020-09-11 08:43

Spark java实现打印 JavaPairRDD

configuration.set("io.serializations","org.apache.hadoop.io.serializer.WritableSerialization,org.apache.hadoo
杨鑫newlfe·2020-09-11 04:12

【大数据】大数据初识

(速度快)：数据增长速度快，时效性高Variety(多样性)：数据种类和来源多样化----结构化数据、半结构化数据、非结构化数据Value(价值密度低)：需挖掘获取数据价值固有特征：时效性不可变性3.hadoo
snacksindesks·2020-09-11 03:38

初识Hadoop之HDFS - Java API篇

org.apache.hadoo
名字想好没·2020-08-24 15:50

大数据三分钟不入门之二: 一统江湖Spark

在某种程度上，Hadoop就是大数据，大数据就是Hadoo
北美枫叶·2020-08-24 15:51

人大云计算检测系统——1003题

importorg.apache.hadoop.fs.Path;importorg.apache.hadoop.io.Text;importorg.apache.hadoop.mapreduce.Job;importorg.apache.hadoo
qwurey·2020-08-24 04:15

Hadoop基础之MapReduce

core-default.xmlhdfs-default.xmlyarn-default.xmlmapred-default.xml（2）Site-specificconfiguration：etc/hadoop/core-site.xmletc/hadoo
imarklei·2020-08-24 00:32

MapReduce

importorg.apache.hadoop.io.IntWritable;importorg.apache.hadoop.io.LongWritable;importorg.apache.hadoop.io.Text;importorg.apache.hadoo
逐 影·2020-08-23 18:23
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他