【Hadoop生态圈】

Hive问题集锦 - Hadoop生态圈

Hive，是一个面向分析的存储系统。也就是所谓的数据仓库。其本质是将SQL转换为MapReduce的任务进行运算，底层由HDFS来提供数据的存储，可以将Hive理解为一个将SQL转换为MapReduce的任务的工具。所以，为什么要用Hive？1、采用类SQL语法去操作数据，提供快速开发的能力。2、避免了去写MapReduce，减少开发人员的学习成本。3、功能扩展很方便。接下来一起来了解下怎么使用h
DreamsonMa·2020-03-29 03:35

Zeppelin交互式分析/分析的可视化/

基于hadoop生态圈的数据仓库实践——OLAP与数据可视化（五）-wzy0623的专栏-博客频道-CSDN.NEThttp://blog.csdn.net/wzy0623/article/details
葡萄喃喃呓语·2020-03-29 02:22

[转]Apache Ranger剖析：Hadoop生态圈的安全管家

前言2016年，Hadoop迎来了自己十周岁生日。过去的十年，hadoop雄霸武林盟主之位，号令天下，引领大数据技术生态不断发展壮大，一时间百家争鸣，百花齐放。然而，兄弟多了不好管，为了抢占企业级市场，各家都迭代出自己的一套访问控制体系，不管是老牌系统(比如HDFS、Hbase)，还是生态新贵(比如Kafka、Alluxio)，ACL(AccessControlList)支持都是Roadmap里被
Austin_Brant·2020-03-28 03:09

spark基础

hadoop生态圈：分布式存储-hdfs；分布式批处理-mapreduce将大量数据进行处理，获取我们需要的有价值的信息弊端：频繁的写磁盘；网络磁盘io1hadoop已经远远无法满足对于数据的处理效率的需求
小太阳may·2020-03-25 22:10

“他们团队都是committer!”—— 小米Kudu开源实践 ｜小米技术立业

ApacheKudu作为一种对Hadoop生态圈的补充，它实现了对快速变化的数据做快速分析的存储层支持。Kud
小米手机·2020-03-20 00:00

仁人帮探索大数据技术

要使用大数据，你先必须有计算能力，大数据平台技术包括了数据的采集，存储，流转，加工所需要的底层技术，如hadoop生态圈，数加生态圈。数据的应用技术是指对数据进行加工，把数据转化成商业价
仁人帮·2020-03-19 00:48

飞起来的大象：Hadoop从离线到在线

时代在变迁，市场在变化，周边的软硬件环境也突飞猛进般的发展，同时企业的业务需求也不断升级，从规模到成本都有较高的要求，这刺激hadoop生态圈的变革。
小兎崽·2020-03-18 16:16

[Ambari]快速部署Hadoop大数据环境

Ambari快速部署Hadoop大数据环境-xinqiyang-博客园http://www.cnblogs.com/scotoma/archive/2013/05/18/3085248.html.了解Hadoop
葡萄喃喃呓语·2020-03-18 04:49

分布式离线/实时日志统计系统(Hadoop.Spark)

概要本文总结采用目前最流行的Hadoop生态圈和Spark生态圈搭建一套完整的分布式日志采集系统，支持离线和实时计算，可以满足多种需求，例如PV，UV，实时交易量等各个业务下的场景。
热血沸腾·2020-03-17 15:09

Hadoop生态圈初识

hadooop提供的功能：利用服务器集群，根据用户自定义的业务逻辑（利用hadoop的api），对海量数据进行分布式处理指的是一套开源软件平台，通常也指一个更广泛的概念-hadoop生态圈三大核心组件hdfs
pamperxg·2020-03-17 00:33

Hadoop生态圈小贴士

小贴士为你带来hadoop生态圈常用组件的基本原理，方便看官快速理解组件基本原理，构造hadoop生态圈的全貌。
采风JS·2020-03-15 07:23

七月在线Spark大数据实战班

课程大纲第一阶段：大数据spark入门介绍第一课：大数据入门概述知识点1：大数据技术发展史知识点2：大数据的应用以及未来知识点3：hadoop生态圈介绍知识点4：hadoop框架演变与发展知识点5：大数据存储系统
Ot4Wo08D·2020-03-06 12:01

Hadoop数据分析平台实战——010hadoop介绍安装

Hadoop的主要应用场景这里说的hadoop指的是以hadoop为中心的hadoop生态圈。场
Albert陈凯·2020-02-29 08:56

Apache Impala 性能优化

去年底，ApacheImpala已经成为Apache顶级项目，我还写文章介绍过，做为企业级SQLonHadoop解决方案，已经大规模商业应用，随着CDH的发展，家喻户晓，Hadoop生态圈的贡献不可限量
realXuJiang·2020-02-26 09:57

1-Spark概述

1大数据技术栈image.png2spark是什么快如闪电般的分布式计算框架：Lightning-fastcluster3MapReduce框架局限性image.png4Hadoop生态圈中的各种框架image.png5Spark
Achaichai·2020-02-26 08:05

Hadoop那点事

二、解决的问题海量数据的存储（HDFS），海量数据的分析（MapReduce），分布式资源调度（Yarn）三、可靠性Hadoop能自动维护数据的多份副本，并且在任务失败后能自动重新部署四、Hadoop生态圈五
BestFei·2020-02-26 02:31

Hbase生产实践

Hbase生产实践背景HBase是一个分布式的、面向列的开源数据库，它是hadoop生态圈的一员，有海量数据存储能力，对资源的消耗也相对较小，但同时查询能力也有局限，因此如何正确的使用hbase非常关键
思想决定架构·2020-02-24 13:54

Hadoop大数据 --HDFS

HDFS：Hadoop生态圈的基本组成部分是Hadoop分布式文件系统（HDFS
菜菜920·2020-02-17 12:00

2018-06-13

1.hadoop是什么狭义指hadoop本身，广义指hadoop生态圈2.hadoop三大组件，分别做什么hdfs分布式文件系统，存储数据，mr计算，YARN资源调度3.hdfs默认块大小多少128MB4
CrUelAnGElPG·2020-02-15 16:05

深信服

HDFS是一个分布式的文件存储系统，专门存储超大数据文件，为整个Hadoop生态圈提供了基础的存储服务，具有高容错性、高吞吐量等特点。
lxhao·2020-02-13 23:48

Hadoop生态圈技术概述

本文对hadoop生态圈技术做一个概要的介绍，文章中的前半部分的信息大多来自于网络，这里只是按照自己的学习思路整理了下。
我是老薛·2020-02-09 23:02

Hadoop介绍

Hadoop是由Apache基金会所开发的分布式系统基础架构主要解决，海量数据的存储和海量数据的分析计算问题广义上来说，Hadoop通常是指一个更广泛的概念—-Hadoop生态圈Hadoop发展历史Lucene
wbytts·2020-02-06 23:00

大数据面试题(一)----HADOOP 面试题

（ABC）A.单机版B.伪分布式C.完全分布式4.列举几个hadoop生态圈的组件并做简要描述Zookeeper:是一个开源的分布式应用程序协调服务,基于zo
暮光倾城·2020-02-05 16:00

【大数据面试宝典】 第一篇 Hadoop 面试题

Hadoop常见的端口Hadoop生态圈Hadoop配置文件以及简单的Hadoop集群搭建Hadoop参数调优项目经验之基准测试Hadoop宕机Hadoop高可用配置Hadoop常见的端口dfs.namenode.http-address
IT猿看视界·2020-01-08 17:00

一文看懂大数据的技术生态圈，Hadoop，hive，spar

大数据本身是个很宽泛的概念，Hadoop生态圈（或者泛生态圈）基本上都是为了处理超过单机尺度的数据处理而诞生的。你可以把它比作一个厨房所以需要的各种工具。锅碗瓢盆，各有各的用处，互相之间又有重合。
qingdsj·2020-01-07 10:48

大数据面试题(一)----HADOOP 面试题

4.列举几个hadoop生态圈的组件并做简要描述4.列举几个hadoo
北京小辉·2020-01-06 15:47

基于Storm构建实时热力分布项目实战

第1章课程导学介绍课程相关背景，学习建议等等第2章初识实时流处理StormStorm作为近几年Hadoop生态圈很火爆的大数据实时流处理框架，是成为大数据研发工程师必备的技能之一。
陈智键·2020-01-05 03:31

第一课 Hadoop生态圈与Zookeeper应用实践笔记

第一课Hadoop生态圈与Zookeeper应用实践一）相关原理以及知识点1.什么是分布式系统《分布式系统概念与设计》一书定义分布式系统是一个硬件或软件组件分布在不同的网络计算机上，彼此之间通过消息传递进行通信和协调的系统
随风如心·2020-01-04 08:58

【转载】Apache Ranger剖析：Hadoop生态圈的安全管家

前言2016年，Hadoop迎来了自己十周岁生日。过去的十年，Hadoop雄霸武林盟主之位，号令天下，引领大数据技术生态不断发展壮大，一时间百家争鸣，百花齐放。然而，兄弟多了不好管，为了抢占企业级市场，各家都迭代出自己的一套访问控制体系，不管是老牌系统(比如HDFS、HBase)，还是生态新贵(比如Kafka、Alluxio)，ACL(AccessControlList)支持都是Roadmap里被
木木与呆呆·2020-01-03 01:51

网易视频云：新一代列式存储格式Parquet的最佳实践

ApacheParquet是Hadoop生态圈中一种新型列式存储格式，它可以兼容Hadoop生态圈中大多数计算框
meng_philip123·2019-12-29 23:44

Hive

Hive：基于jdkhadoop生态圈数据仓库工具，通过类SQL(HQL)将结构性行文件映射为一张数据库表，通过类sql来统计数据，转换为MR，节省创建MR应用程序，实现快速统计查询。
CoderLHC·2019-12-29 06:44

Parquet与ORC：高性能列式存储格式

http://blog.csdn.net/yu616568/article/details/51868447背景随着大数据时代的到来，越来越多的数据流向了Hadoop生态圈，同时对于能够快速的从TB甚至
blablablala·2019-12-29 05:57

揭开hdfs的面纱

前言这一篇感觉是进入hadoop生态圈的第一步，了解hdfs的构造。hdfs设计的初衷其实hdfs是山寨的gfs，是开源社区的仿造关于gfs的那篇论文开发出来的分布式文件系统。
trieyouth·2019-12-24 04:06

Hadoop：1、Hadoop基础与编译

Hadoop基础大数据概述可以用“5V+1C”来概括：Variety(多样化）Volume(海量）Velocity(快速）Vitality(灵活）Value(价值性）Complexity(复杂）Hadoop与Hadoop
CoderF·2019-12-22 16:55

第一课 Hadoop生态圈 与Zookeeper应用实践笔记

一、大数据技术体系大数据应用领域互联网领域：搜索引擎、推荐系统、广告系统电商领域：用户画像、推荐系统、用户行为分析医疗领域：流行病预测、病情分析视频领域：用户标签系统、视频分析、广告系统金融领域：风控系统、欺诈分析二、如何学习大数据（老师建议）1.良好的自主学习能力和动手能力2.系统了解大数据生态系统技术框架3.找到学习切入点，不断拓展知识的广度（大数据平台开发、数据分析）4.抓住一个技术方向，不
neimengguzn·2019-12-22 10:19

新一代列式存储格式Parquet

http://blog.csdn.net/yu616568/article/details/50993491ApacheParquet是Hadoop生态圈中一种新型列式存储格式，它可以兼容hadoop生态圈中大多数计算框架
blablablala·2019-12-22 02:27

大数据学习笔记——HBase与其他大数据组件的整合

HBase与其他大数据组件的整合HBase作为一个以列作为存储形式的大数据组件，具有查询快，存储的数据量大等特点，那么，该组件是如何与Hadoop生态圈中的其他组件进行整合并进行数据的各种导入导出的呢，
终极菜鸡·2019-12-21 22:00

Hadoop实战：1、Hadoop基础与源码编译

Hadoop基础大数据概述可以用“5V+1C”来概括：Variety(多样化）Volume(海量）Velocity(快速）Vitality(灵活）Value(价值性）Complexity(复杂）Hadoop与Hadoop
ly稻草·2019-12-18 02:19

最全hadoop架构总结

③广义上来说，HADOOP通常是指一个更广泛的概念——HADOOP生态圈hadoop包括四个模块：HadoopHDFS：一个高可靠、高吞吐量的分布式文件系统。
堂哥000·2019-12-15 09:11

hadoop生态圈介绍

标记:hadoop,生态圈,ecosystem,yarn,spark,入门1.hadoop生态概况Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。具有可靠、高效、可伸缩的特点。Hadoop的核心是YARN,HDFS和Mapreduce。下图是hadoop生态系统，集成spark生态圈。在
xhh199090·2019-12-14 12:10

Hive中ORC数据文件参考

https://www.cnblogs.com/ITtangtang/p/7677912.html#ORCFile文件结构#ORC的全称是(OptimizedRowColumnar)，ORC文件格式是一种Hadoop
liuzx32·2019-12-13 13:51

第一章 Yarn简介

简介Yarn是Hadoop生态圈中的一个通用资源管理系统和调度平台，产生于Hadoop2。可为上层应用提供统一的资源管理和调度，它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。
super_wing·2019-12-11 10:55

Hadoop背景

hadoop核心组件有：HDFS:分布式文件系统HadoopdistributedfilesystemYARN运算资源调度系统MapReduce分布式运算编程框架广义上说，hadoop是指一个更广泛的概念，hadoop
阿太哥·2019-12-06 13:39

【大牛体验】HBase committer谈如何参与到开源项目的开发

基于Hadoop生态圈，我们搭建了小米内部的大数据
西七楼·2019-12-02 04:19

贵阳如何学习大数据？大数据学习路线安排

入门，了解什么是hadoop1、Hadoop产生背景2、Hadoop在大数据、云计算中的位置和关系3、国内外Hadoop应用案例介绍4、国内Hadoop的就业情况分析及课程大纲介绍5、分布式系统概述6、Hadoop
简单想法bigdata·2019-12-02 03:34

从Hadoop框架讨论大数据生态

广义上讲Hadoop通常指一个更为广泛的概念-Hadoop生态圈。Google是Hadoop的思想之源。
BlueSkyBlue·2019-12-01 18:12

[简介]Hadoop大数据生态系统及常用组件简介

Hadoop大数据生态系统及常用组件简介-CSDN.NEThttp://www.csdn.net/article/a/2016-07-28/3775摘要：云智慧的李林同学就为大家介绍一下Hadoop生态圈一些常用的组件
葡萄喃喃呓语·2019-12-01 11:58

分布式存储系统Kudu与HBase的简要分析与对比

Hadoop生态圈中的技术繁多，HDFS作为底层数据存储的地位一直很牢固。
yijian2595·2019-11-30 08:47

分布式存储系统Kudu与HBase的简要分析与对比

Hadoop生态圈中的技术繁多，HDFS作为底层数据存储的地位一直很牢固。
网易云社区·2019-11-29 15:30

hadoop面试问题

hadoop面试问题，不定期更新0x00什么是hadoop我们通常说的hadoop有两种意思，一种是hadoop生态圈，包含hadoop、hive、hbase等组件，另一种单纯指hadoop，包含hdfs
曹操a·2019-11-13 23:04
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他