大数据概念及Hadoop介绍

大数据概念及Hadoop介绍

    • 大数据概念
      • 数据存储单位
      • 大数据定义
      • 大数据的特点(5V特征)
      • 大数据部门组织架构
    • 分布式技术
      • 负载均衡
      • 故障转移
      • 伸缩性
      • 分布式技术总结
      • 分布式和集群的区别
    • Hadoop介绍
      • Hadoop核心组件
      • Hadoop发展简史
    • Hadoop特性优点与行业应用
      • Hadoop特性优点
      • 行业应用
    • Hadoop发行版本及架构变迁
      • Hadoop发行版本
      • Hadoop架构变迁

大数据概念

什么是数据?
数据的产生
大数据概念及Hadoop介绍_第1张图片


数据存储单位

大数据概念及Hadoop介绍_第2张图片


大数据定义


大数据的特点(5V特征)

大数据概念及Hadoop介绍_第3张图片


大数据部门组织架构

大数据概念及Hadoop介绍_第4张图片


分布式技术

大数据概念及Hadoop介绍_第5张图片


负载均衡

大数据概念及Hadoop介绍_第6张图片


故障转移

大数据概念及Hadoop介绍_第7张图片


伸缩性

大数据概念及Hadoop介绍_第8张图片


分布式技术总结

大数据概念及Hadoop介绍_第9张图片


分布式和集群的区别

分布式是多台机器,每台机器上部署不同的组件, 不同机器和组件相互配合。相当于把一个整体拆碎分布在不同的机器上。

集群也是多台机器,每台机器上的组件和功能是一样的,一个任务所有机器一起参与工作。


Hadoop介绍


Hadoop核心组件

  • Hadoop HDFS(分布式存储系统): 解决海量数据存储
  • Hadoop YARN(集群资源管理和任务调度框架): 解决资源任务调度
  • Hadoop MapReduce(分布式计算框架): 解决海量数据计算

大数据概念及Hadoop介绍_第10张图片

大数据概念及Hadoop介绍_第11张图片


Hadoop发展简史

大数据概念及Hadoop介绍_第12张图片


大数据概念及Hadoop介绍_第13张图片


大数据概念及Hadoop介绍_第14张图片


Hadoop特性优点与行业应用


Hadoop特性优点


行业应用

大数据概念及Hadoop介绍_第15张图片


大数据概念及Hadoop介绍_第16张图片


大数据概念及Hadoop介绍_第17张图片


Hadoop发行版本及架构变迁


Hadoop发行版本

大数据概念及Hadoop介绍_第18张图片


大数据概念及Hadoop介绍_第19张图片


Hadoop架构变迁

大数据概念及Hadoop介绍_第20张图片


你可能感兴趣的:(Hadoop,大数据,hadoop,hdfs)