hadoop(1-了解篇)

Hadoop家族

PigChukwaHiveHBase

MapReduceHDFSZooKeeper

CoreAvro



.Core:即Common   Hadoop核心

.Avro:数据序列化系统

.MapReduce:计算模型

.HDFS:存储系统

.Chukwa:数据收集系统,显示,监视,分析数据结果

.HBase:面向列存储的数据库,用于随机访问与实时读写数据

.Hive:基于Hadoop的数据仓库

.Pig:针对MapReduce编写了一套shell脚本,在此脚本中可以对加载出的数据进行排序,过滤,求和,分组,关联。对数据集进行的操作。

.ZooKeeper:是针对分布式系统的一个协调系统,提供:配置服务,名字服务,分布式同步,组服务等。目的是:封装关键易错的服务,暴露优良的接口提供给用户使用


你可能感兴趣的:(hadoop,hadoop成员体系)