E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
2.Hadoop
hadoop,hbase,hive版本整合兼容问题
2.hadoop
与hive哪些版本兼容?3.hbase与hive哪些版本兼容?4.hbase与zookeeper哪些版本兼容?
我就是隔壁老袁
·
2020-06-29 00:36
【Spark深入学习-11】Spark基本概念和运行模式
----本节内容-------1.大数据基础1.1大数据平台基本框架1.2学习大数据的基础1.3学习Spark的Hadoop基础
2.Hadoop
生态基本介绍2.1Hadoop生态组件介绍2.2Hadoop
weixin_34004750
·
2020-06-28 09:03
零基础学习hadoop到上手工作线路指导(编程篇)
2.hadoop
编程需要注意哪些问题?3.如何创建mapreduce程序及其包含几部分?4.如何远程连接eclipse,可能会遇到什么问题?5.如何编译hadoop源码?
weixin_33859844
·
2020-06-28 06:23
Windows下搭建hadoop 搭建本地hadoop开发环境
一、下载所需文件1.JDK下载地址:点击打开链接
2.Hadoop
下载地址:点击打开链接3.Windows下安装Hadoop工具下载地址:点击打开链接密码:yk9u二、jdk安装1.不会看这里点击打开链接三
王安镇
·
2020-06-27 12:47
Hadoop
大数据工程师面试题(七)
9.面试问题:1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂)
2.hadoop
的namenode宕机,怎么解决先分析宕机后的损失,宕机后直接导致
快乐真真
·
2020-06-27 01:32
hadoop背景介绍及在大数据、云计算中的位置和关系
1.hadoop背景介绍1.1.什么是hadoop1.hadoop是apache旗下的一套开源软件平台,可以通过http://apache.org/--->project-->hadoop打开
2.Hadoop
缘定三石
·
2020-06-26 19:36
Hadoop实战
大数据期末考试
1.分布式系统设计策略包括重试机制,心跳机制,副本机制
2.hadoop
核心组件由HDFS,MapReduce,Yarn这三大部分组成。
飞宙
·
2020-06-26 03:34
zookeeper
HBase部署
前提准备1.Zookeeper正常部署
2.Hadoop
正常部署HBase部署HBase的解压$tar-zxf~/softwares/in
liucw_cn
·
2020-06-24 18:54
Hadoop和Spark简单概述
文章目录Hadoop和Spark概述一.简单说说Hadoop1.Hadoop的产生背景
2.Hadoop
核心技术二.简单说说Spark1.Spark的官方定义2.Spark的核心技术3.Spark的内置项目
皮皮的雅客
·
2020-06-24 01:01
Hadoop&HDFS知识点整理
2.hadoop
为每个分片构建一个map任务,小文件会导致大量的map任务。一个合理的分片大小趋向于HDFS的一个块的大小,默认是128MB。3.m
追风dylan
·
2020-06-23 17:47
分布式存储
Hadoop
hadoop
hdfs
mac安装hbase伪分布式集群
1.安装jdk略
2.hadoop
伪分布式2.1下载解压hadoop2.7.7https://archive.apache.org/di...2.2修改etc/hadoop下文件core-site.xmlhadoop.tmp.dir
ch123
·
2020-06-23 13:51
hbase
hadoop
Python海量数据处理之_Hadoop(一)集群搭建
2.Hadoop
简介 如果有多台用于数据计
xieyan0811
·
2020-06-21 14:12
大数据
1.Hadoop简介
2.Hadoop
组成模块HadoopCommon:支持Hadoop自身其他模块的一
河北漂
·
2020-06-21 13:16
全网最详细Apache Kylin1.5安装(单节点)和测试案例
2121221/1.版本Hadoop2.7.2+HBase1.1.5+Hive2.0.0kylin-1.5.1Kylin1.5(apache-kylin-1.5.1-HBase1.1.3-bin.tar.gz)
2.
it_taojingzhan
·
2020-06-21 02:20
hadoop
大数据学习第二章:Hadoop(未完待续。。。)
Hadoop框架1.Hadoop是什么1.1Hadoop发展历史1.2Hadoop的发行版本1.3Hadoop的优缺点
2.Hadoop
架构组成2.1MapReduce架构原理2.1.1YARN架构原理3
Java小后生
·
2020-06-14 18:54
大数据
Hadoop
hadoop
大数据
Hadoop学习笔记
2.Hadoop
的运行模式(3种)3.Hadoop运行环境搭建4.Hadoop-HDFS分布式文件系统一、什么是Hadoop?
曹晟原
·
2020-05-10 15:00
2.Hadoop
起源及组件
hadoop是apachelucene创始人DougCutting创建的Hadoop起源于开源的网络搜索引擎apacheNUTCH,它本身也是Lucene的一部分Lucene是一个非常优秀的开源的全文搜索引擎;我们可以在它的上面开发出各种全文搜索的应用来。Lucene在国外有很高的知名度;现在已经是Apache的顶级项目;因为Lucene太复杂了,ELK的ES就是把Lucene封装了,然后提供了简
经纶先生
·
2020-04-12 09:20
(四)大数据学习之Hadoop环境搭建
1.hadoop目录结构Hadoop目录结构
2.Hadoop
安装准备工作:(1)安装好linux操作系统(2)关闭防火墙(3)在linux上安装JDK3.安装Hadoop(1)将Hadoop安装包拷贝到
Movle
·
2020-04-05 21:12
Hadoop单机部署2019-03-11
2.Hadoop
安装2.1安装javaHadoop是使用JAVA写的,所以需要先安装JAVA环境。本次安装的是hadoop-2.7.0,需要JD
叶慧琼脂
·
2020-03-31 05:14
【Geekband】系统设计.md
第一周1.分布式系统2.CAP理论3.数据库系统3.1ACID与BASE3.2具体结构设计4.异步通信5.一致性定义第二周1.系统设计基本意识
2.Hadoop
与MapReduce2.1Hadoop2.2MapReduce2.3BigTableThisisGoogle'sscalabledatabase.Itprovidesawaytocreatem
读书行路风雨兼程
·
2020-03-17 03:15
GeekBand 系统设计与实践
1.分布式系统2.CAP理论3.数据库系统3.1ACID与BASE3.2具体结构设计4.异步通信5.一致性定义第二周1.系统设计基本意识
2.Hadoop
与MapReduce2.1Hadoop2.2MapReduce2.3BigTableThisisGoogle'sscalabledatabase.Itprovidesawaytocreatemassivetablesofinformationind
bilinbilin
·
2020-03-12 08:08
1 Hadoop简介和编译 2018-05-11
1.Hadoop官网http://hadoop.apache.org/
2.hadoop
版本说明①.hadoop1.x:HDFS:分布式文件系统,存储MapReduce:分布式计算+资源调度和作业调度②.
lizhigang
·
2020-03-09 23:27
Hadoop权威指南学习笔记
1.关于MapReduce:map函数:reduce函数:combiner(合并函数):在reduce函数处理前,提前处理map函数产生的数据
2.Hadoop
分布式文件系统(HadoopDistributedFilesystem
hmaccelerate
·
2020-02-23 17:11
2018-06-13
1.hadoop是什么狭义指hadoop本身,广义指hadoop生态圈
2.hadoop
三大组件,分别做什么hdfs分布式文件系统,存储数据,mr计算,YARN资源调度3.hdfs默认块大小多少128MB4
CrUelAnGElPG
·
2020-02-15 16:05
2.Hadoop
伪分布式环境搭建和基本概念
1.Hadoop常用组件:1.hadoopcommons:hadoop基础模块。2.HDFS:存储数据(读-写),一次写入、多次读取。(1)namenode:元数据存储的位置。(2)datanode:存储数据。3.MapReduce:是一种计算模型,设计思想是“分而治之”。map:拆分阶段。reduce:合并阶段。4.Yarn:资源管理器,管理cpu、内存、虚拟代码。包括ResourceManag
奉先
·
2020-01-02 03:22
2018-06-14
原【若泽大数据实战第九天】Hadoop编译2018年05月14日10:07:54阅读数:97Hadoop:1.官网:http://hadoop.apache.org/
2.Hadoop
的狭义和褒义认识:狭义
cariya
·
2020-01-01 02:59
Hadoop大数据开发基础系列:一、初识Hadoop
目录结构1.Hadoop概述1.1Hadoop简介1.2Hadoop发展史1.3Hadoop特点
2.Hadoop
核心2.1分布式文件系统——HDFS2.2分布式计算框架——MapReduce2.3集群资源管理器
Nelson_hehe
·
2019-10-03 16:09
Hadoop基础
Spark入门(一): VMware虚拟机搭建Spark集群
文章目录一、搭建方法二、准备三、系统环境配置四、软件安装与配置1.软件下载安装
2.Hadoop
配置3.Spark配置五、虚拟机克隆六、启动集群七、踩坑经历分享一、搭建方法在虚拟机上搭建集群的方法通常有两种
Redemption1997
·
2019-09-29 16:09
Spark
Spark
hadoop 入门
hadoop入门1.hadoop介绍
2.Hadoop
发展史3.Hadoop特性优点4.Hadoop国内外应用1.hadoop介绍Hadoop是Apache旗下的一个用java语言实现的开源软件框架,是一个开发和运行处理大规模数据的软件平台
Zetang_Wu
·
2019-09-24 08:59
大数据基础面试题考点与知识点整理
1.分布式的三种模式
2.Hadoop
集群的运行模式Hadoop的运行模式分为3种:本地运行模式(独立模式,单机模式),伪分布运行模式,集群运行模式(完全分布式模式)伪分布模式就是在一台服务器上面模拟集群环境
菜鸟级的IT之路
·
2019-09-09 15:05
HDFS常用命令/API+上传下载过程(三)
文章目录1.Hadoop1.1Hadoop发展历程
2.Hadoop
的作用(解决了什么问题)/运行模式/基础组件及架构3.学会阅读HDFS源码,并自己阅读一段HDFS的源码(推荐HDFS上传/下载过程)4
dzysunshine
·
2019-07-31 14:06
Hadoop
Hadoop介绍与安装配置方法
1.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台
2.HADOOP
提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理3.HADOOP
天降e包only
·
2019-07-04 09:38
Hadoop技术全解析 深度挖掘大数据背后的秘密
2.Hadoop
是什么?3.大数据与Hadoop之间是什么关系?大数据概念:史上最全大数据解析hadoop是什么:分布式系统基础架构大数据与
大数据Arry
·
2019-05-09 21:57
大数据
互联网资讯
大数据资讯
人工智能
机器学习
深度学习
HADOOP HDFS/MR计算框架
2.Hadoop
是一个能够让用户轻松架构和使用的分布式计算的平台。用户可以轻松
yangeoo
·
2019-02-14 11:00
hadoop面试问题
2.hadoop
的namenode宕机,怎么解决先分析宕机后的损失,宕机后直接导致client无法访问,内存中的元数据丢失,但是硬盘中的元数据应该还存在,如果只是节点挂了,重启即可,如果是机器挂了,重启机器后看节点是否能重启
angel微笑
·
2019-02-13 16:58
Hive之DML数据操作
加载数据1.Load方式加载数据2.insert方式3.查询语句中创建表并加载数据4.创建表时通过Location指定加载数据路径5.Import数据到指定Hive表中2.数据导出1.insert导出
2.
文艺小卿年
·
2019-01-21 09:01
hive
Hive
spark集群环境搭建
2.hadoop
安装2.4.1是32位的,CentOS用的64位的。还需要在编译一次。编译一般用的protobuf还是挂在codegoogle下。还是先跳过了。
Damon__Wang
·
2019-01-13 23:20
学习
spark集群环境搭建
2.hadoop
安装2.4.1是32位的,CentOS用的64位的。还需要在编译一次。编译一般用的protobuf还是挂在codegoogle下。还是先跳过了。
Damon__Wang
·
2019-01-13 23:20
学习
Java转大数据之路--Hadoop学习笔记之Hadoop分布式集群搭建
文章目录1.基础环境准备1.1三台Linux服务器:CentOS71.2JDK1.81.3修改hosts1.4关闭防火墙1.5设置ssh免密码登录
2.Hadoop
集群安装2.1Hadoop安装包下载2.2
克己丶
·
2019-01-06 20:06
大数据
Hadoop
Java转大数据之路--Hadoop学习笔记之Hadoop简介
官方介绍百度百科介绍
2.Hadoop
的发展历程3.Hadoop核心组件3.1HDFS3.2YARN3.3MapReduce4.Hadoop的特点1.Hadoop是什么?
克己丶
·
2019-01-06 16:38
大数据
windos安装Hadoop2.7.1单机版
一、下载所需文件1.JDK下载地址:点击打开链接
2.Hadoop
下载地址:点击打开链接3.Windows下安装Hadoop:点击打开链接二、jdk安装1.不会看这里点击打开链接三、Hadoop环境配置1
luo627
·
2018-12-19 08:59
hadoop
06节、离线计算系统_第1天(HADOOP快速入门)
https://download.csdn.net/download/ieiqny1/108530631.HADOOP背景介绍1.1什么是HADOOP1.HADOOP是apache旗下的一套开源软件平台
2.
old_小书童
·
2018-12-15 21:34
大数据学习
大数据工程师面试题--7
/u011682879/article/details/558038479.面试问题:1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂)
2.
fct2001140269
·
2018-11-28 00:03
大数据技术
面试题
大数据hadoop 面试经典题
1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂)
2.hadoop
的namenode宕机,怎么解决先分析宕机后的损失,宕机后直接导致client
gongpulin
·
2018-11-19 15:00
Hadoop
大数据工程师面试题(七)
/u011682879/article/details/574012159.面试问题:1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂)
2.
fct2001140269
·
2018-10-05 00:17
大数据技术
面试题
大数据入门之Hadoop生态系统(3) -- Hadoop和HDFS环境搭建
JDK1.8(具体的安装步骤,网上都有很多,注意我们所有的东西都是安装在虚拟机上的,注意配置到系统环境变量中)
2.Hadoop
环境(伪分布式环境搭建)、HDFS环境搭建下载我们Hadoop使用的版本是:
Kiku_xq
·
2018-08-19 21:03
大数据
Hadoop
HDFS
从零开始搭建大数据平台系列之(0)——目录汇总
目录1.环境准备
2.Hadoop
平台搭建2.1ApacheHadoop2.x伪分布式环境搭建2.2ApacheHadoop2.x完全分布式环境搭建2.3CDH版Hadoop2.x伪分布式环境搭建2
魏晓蕾
·
2018-08-10 00:42
BigData
云计算大数据学习分享与沉淀
大数据环境搭建过程中各介质的下载地址
2.Hadoop
软件http://hadoop.apache.org/releases.html官网上有各种最新的版本
Ru_ach
·
2018-06-20 19:37
2018-06-13Morning Study — Day030
1.hadoop是什么
2.hadoop
三大组件,分别做什么3.hdfs默认块大小多少4.副本三份,块128M,一个文件260M,多少块,实际存储多少5.hdfs的nnsnndn启动顺序是什么6.hdfs
LY_babc
·
2018-06-13 08:44
大数据技术框架
大数据技术框架1.简介
2.Hadoop
框架2.1.Hadoop-MapReduce2.1.1.简介:2.1.2.特点2.1.3.架构2.1.4.执行流程:2.1.5.Wordcount例子2.1.6.缺点
奈文摩尔ST
·
2018-06-11 16:39
上一页
1
2
3
4
5
6
7
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他