E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
HadoopCore
一个大数据架构师应该掌握的技能
专业工具平台海致BDP永洪易观4)APP分析平台mixpanelgrowingIO神策诸葛IO2.技术选型1)CDH2)HDP+HDF3)MAPR4)Transwarp3.平台架构1)HDPCore(平台核心也是
Hadoopcore
潘永青
·
2023-12-05 02:13
大数据开发
hadoop
big
data
hive
Hadoop Core - HDFS, MapReduce, YARN
HadoopCore
-HDFS,MapReduce,YARN参加拉勾教育大数据训练营课程笔记引用:《Hadoop-TheDefinitiveGuide,4thEdition》,《拉勾导师笔记》简介大数据特性
DataPeak
·
2023-12-02 19:13
大数据
hadoop
big
data
java
新手必备:大数据框架Hadoop主要模块解析
hadoopCommon:包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
weixin_34185364
·
2023-10-28 21:00
Hadoop-HA-Hive-on-Spark 4台虚拟机安装配置文件
Hadoop-HA-Hive-on-Spark4台虚拟机安装配置文件版本号步骤
hadoopcore
-site.xmlhdfs-site.xmlmapred-site.xmlslavesworkersyarn-site.xmlhivehive-site.xmlspark-defaults.confsparkhdfs-site.xmlhive-site.xmlslavesyarn-site.xmlsp
轻夏
·
2023-10-14 02:13
hadoop
hadoop
hive
spark
新手必备:大数据框架Hadoop主要模块解析
hadoopCommon:包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
丨程序之道丨
·
2023-04-19 04:00
大数据框架Hadoop基础入门模块
hadoopCommon:包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
大数据架构师
·
2023-04-16 01:31
关于是否在intellij idea 的工程下的resources目录下添加core-site.xml 的区别?
hadoopcore
-site.xml中通常有核心的配置项,比如:fs.defaultFShdfs://localhost:9000hadoop.tmp.dir/Users/user1/software_install
alexlee666
·
2023-02-05 23:09
搭建伪分布式集群笔记(2)
目录下解压到/usr/local目录下tar-zxfhadoop-2.6.0.tar.gz-C/usr/local一些常用的目录解读2.修改配置文件cd/usr/local/hadoop-2.6.0/etc/
hadoopcore
-si
_52394320
·
2021-01-20 17:11
Hadoop基础
hadoop
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException
2019独角兽企业重金招聘Python工程师标准>>>恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置 io.compression.codecs
weixin_34124651
·
2020-09-12 20:50
搭建oozie3.3.2CDH4.4.0
1.下载extjs2.22.在
Hadoopcore
-site.xml下添加hadoop.proxyuser.
sunmeng_Alex
·
2020-08-13 19:32
Oozie
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException: Class com.hadoop.compression.lzo.LzoCodec...
恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置io.compression.codecsorg.apache.hadoop.io.compress.GzipCodec
weixin_30817749
·
2020-08-08 23:52
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException: Class com.hadoop.compression
恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置 io.compression.codecs org.apache.hadoop.io.compress.GzipCodec
iteye_6622
·
2020-08-07 14:59
spark
hadoop
lzo压缩
class
Hadoop 四大组件总结
Hadoop的四大组件:common、HDFS、MapReduce、YARNcommon(工具类):包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
小晓酱手记
·
2020-08-01 09:09
Hadoop
hadoop常用四大模块及五大进程节点介绍
1.1hadoop常用四大模块文件:1.1.1core-site.xml(工具模块)包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
DoveFeng
·
2020-08-01 09:38
Hadoop
Hadoop的基本结构介绍(原创)
Hadoop的基本结构介绍(原创)概述:这是我看了
Hadoopcore
0.17.0文档只有做的一些总结,有不对的地方请给我指出。什么是Hadoop?
fly_hyp
·
2020-08-01 09:11
hadoop
Hadoop中的配置文件
文件名称格式描述hadoop-env.shBash脚本记录配置Hadoop运行所需的环境变量,以运行
Hadoopcore
-site.xmlHadoop配置XMLHadoopcore的配置项,如HDFS和
应龙与巨蜥
·
2020-07-13 20:51
大数据
hadoop
详解Hadoop六个配置文件的作用
详解Hadoop六个配置文件的作用主要常用的文件夹六个配置文件的作用etc/
hadoopcore
-site.xmlhdfs-site.xml额外知识点hadoop-env.shmapred-site.xmlyarn-site.xml
苏朗轩
·
2020-07-13 10:44
大数据技术之路
hadoop整理
hadoop核心模块hadoopCommon:hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来HadoopDistributedFileSystem(HDFS):分布式文件系统,提供对应用程序数据的高吞吐量
铁憨憨丶
·
2020-06-29 04:34
hadoop
面试题
【Hadoop】完全分布式安装
,两个从结点一、集群搭建之主节点1、下载安装包及测试文档2、安装JavaJDK3、Hadoop安装4、修改hosts文件5、创建数据文件夹6、修改hadoophadoop-env.sh文件配置7、修改
hadoopcore
-site.xml
Mr-Hunter
·
2020-06-25 19:56
云计算/大数据
全面解析大数据框架Hadoop主要模块
hadoopCommon::包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
数据工程师大牛
·
2020-06-23 00:29
大数据
大数据架构师
专业工具平台海致BDP永洪易观4)APP分析平台mixpanelgrowingIO神策诸葛IO2.技术选型1)CDH2)HDP+HDF3)MAPR4)Transwarp3.平台架构1)HDPCore(平台核心也是
Hadoopcore
风神修罗使
·
2020-06-22 08:10
架构
领域驱动设计
配置伪分布式 Hadoop系统
core-site.xmlhdfs-site.xmlyarn-site.xml)上述三个文件夹均在此目录下:cd/usr/local/hadoop/etc/hadoop把配置信息里面的所有hadoopm换成自己的主机名
Hadoopcore
-site.xml
九点六
·
2020-04-06 18:00
hadoop本地模式安装及配置
目录创建普通用户下载jdk下载hadoop安装配置
hadoopcore
-site.xmlcore-site.xmlhdfs-site.xmlhadoop-env.shmapred-site.xmlyarn-site.xmlhadoop
anyux
·
2019-12-06 14:00
HBase使用场景和成功案例
分布式集群框架通常是Hadoop+Hbase+Zookeeper做分布式集群ZooKeeper跟
HadoopCore
、HBase有什么关系呢?ZooKeeper都提供了哪些服务呢?
Mango_yes
·
2019-11-30 02:34
好程序员大数据学习路线分享hadoop常用四大模块文件
1.1.1core-site.xml(工具模块)包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
wx5d42865f47214
·
2019-08-27 15:19
hadoop
大数据
好程序员
大数据培训
全面解析大数据框架Hadoop主要模块
hadoopCommon:包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
Joker_影
·
2019-03-26 11:46
大数据
Janusgraph分布式环境,相关配置文件配置
hadoopcore
-site.xmlfs.defaultFShdfs://Janusgraph01:9000Janusgraph01是主机名,也可以用ip地址,9000为端口号io.file.buffer.size131072
UP_2017
·
2019-01-07 10:56
JanusGraph
Mac 安装Hadoop-2.6.0-cdh5.7.0伪分布式
单机下载自己需要的版本,我下载的是hadoop-2.6.0-cdh5.7.0一.解压tar-zxvfhadoop-2.6.0-cdh5.7.0.tar.gz-Cxxxxxxxx(自己想放的路径)二.配置进入etc/
hadoopcore
-site.xmlfs.defaultFShdfs
A_ChunUnique
·
2018-09-24 20:30
Hadoop
Hadoop、HBase、ZooKeeper三者部署与关系
2.ZooKeeper跟
HadoopCore
、HBase有什么关系呢?ZooKeeper都提供了哪些服务呢?主要有:管理Hadoop集群中的Na
奔跑的蜗牛-
·
2018-07-02 11:05
hadoop常用四大模块及五大进程节点介绍
1.1hadoop常用四大模块文件:1.1.1core-site.xml(工具模块)包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
流一&
·
2018-05-19 12:23
hadoop篇
在 Windows 上构建和安装 Hadoop 2.x 或更新版本
2.构建适用于Windows的
HadoopCore
2.1
好_快
·
2018-04-29 22:22
Hadoop
大数据框架Hadoop主要模块介绍
核心模块:HadoopCommon:包括Hadoop常用的工具类,由原来的
Hadoopcore
部分更名而来。
巴黎圣母小院
·
2017-08-24 16:29
hadoop +hbase +zookeeper 完全分布搭建 (版本二
2.ZooKeeper跟
HadoopCore
、HBase有什么关系呢?ZooKeeper都提供了哪些服务呢?主要有:管理Hadoop集群中的Na
u013378306
·
2016-05-29 09:00
Hadoop书籍和网络资源介绍
本文介绍
HadoopCore
(MapReduce和HDFS)相关的书籍和网络资源。
GarfieldEr007
·
2016-03-25 13:00
hadoop
书籍
教程
网络资源
0128 Hadoop+HBase+ZooKeeper三者关系与安装配置
2.ZooKeeper跟
HadoopCore
、HBase有什么关系呢?ZooKeeper都提供了哪些服务呢?主要有:管理Hadoop集群中的Na
abandon9527
·
2015-09-18 18:10
zookeeper
hadoop
hbase
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException: Class com.hadoop.compression
恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置 io.compression.codecs org.apache.hadoop.io.compress.GzipCodec
Stark_Summer
·
2015-09-17 14:00
hadoop
spark
Class
lzo压缩
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException: Class com.hadoop.compression
阅读更多恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置 io.compression.codecs org.apache.hadoop.io.compress.GzipCodec
Stark_Summer
·
2015-09-17 14:00
spark
hadoop
lzo压缩
class
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException
恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置 io.compression.codecs org.apache.hadoop.io.compress.GzipCodec
stark_summer
·
2015-09-17 14:00
hadoop
spark
Class
lzo压缩
spark取得lzo压缩文件报错 java.lang.ClassNotFoundException: Class com.hadoop.compression.lzo.LzoCodec
恩,这个问题,反正是我从来没有注意的问题,但今天还是写出来吧配置信息
hadoopcore
-site.xml配置 io.compression.codecs org.apache.hadoop.io.compress.GzipCodec
stark_summer
·
2015-09-11 17:00
hadoop
spark
Class
lzo压缩
伪分布式hadoop环境搭建
很多必要的步骤没提到),所以自行网上找教程.在这里整理一下:假设java_home已经配置完成,ssh也可连通1.修改配置文件以下文件均在%HADOOP_HOME%/conf/下core-site.xml:
HadoopCore
q291611265
·
2015-08-31 22:00
mapreduce
hadoop
分布式
Hadoop tutorial - 1 - 环境搭建 2015-3-17
hadoopcore
:http://www.apache.org/dyn/closer.cgi/hadoop/core/书籍:hadoop权威指南(hadoopthedefinitiveguide)粗略读
jayronwang
·
2015-03-17 22:00
hadoop、hbase、zookeeper伪集群搭建
1、
hadoopcore
-site.xmlfs.defaultFShdfs://redhat:9000默认值: /tmp 说明: 尽量手动配置这个选项,否则的话都默认存在了里系统的默认临时文件/tmp里
晓阳
·
2014-11-18 13:00
Hadoop主要子项目介绍(Pig Zookeeper Hbase Hive Sqoop Avro Chukwa Cassandra )
1、HadoopCommon从Hadoop0.20版本开始,
HadoopCore
项目便更名为Common。Common是为
u011067360
·
2014-04-24 21:00
hadoop
搭建oozie3.3.2CDH4.4.0
1.下载extjs2.22.在
Hadoopcore
-site.xml下添加 hadoop.proxyuser.
sunmeng_Alex
·
2013-11-26 16:00
Hadoop+HBase+ZooKeeper三者关系
2.ZooKeeper跟
HadoopCore
、HBase有什么关系呢?ZooKeeper都提供了哪些服务呢?主要有:管理Hadoop集群中的NameNode,HBa
zmycoco2
·
2013-11-04 16:00
Hadoop云计算系统概述
Hadoop主要由以下几个子项目构成:(1)HadoopCommon:原来的
HadoopCore
,是Hadoop项目的计算核心,其他的子项目都是在这个核心的基础上发展的
mw08091020
·
2013-07-26 16:03
数据库
Microsoft
Google
数据采集
云计算平台
Hadoop书籍和网络资源介绍
:Dong|新浪微博:西成懂|可以转载,但必须以超链接形式标明文章原始出处和作者信息及版权声明网址:http://dongxicheng.org/mapreduce/hadoop-books/本文介绍
HadoopCore
Dong
·
2013-01-27 10:00
hadoop
博客
书籍
网络资源
Changes of Hadoop 0.20笔记
HadoopCore
0.20.0在2009年4月22日发布。这一发布相对0.19发布,有很多用户使用层面上的改变。Core Hadoop中两个主要的组件是分布式文件系统(HDFS)和MapReduc
eryk86
·
2013-01-14 11:00
HBase与Hadoop配置
hbase与hadoop的版本需要匹配,版本不匹配会出现n种问题,如master起不来,连不上zookeeper之类的yuminstallhbase会提示安装hadoop和zookeeper,y回车配置
hadoopcore
-site.xmlhdfs-site.xmlmapred-site.xml
moxpeter
·
2012-03-29 15:00
Hadoop配置部分内容
HadoopCore
的配置项,例如HAFD和Mapredure常用的I/O设置等。hdfs-site.xm
hsyzijvaa
·
2012-02-04 15:00
java
工作
Hadoop配置部分内容
上一页
1
2
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他