Hadoop家族
PigChukwaHiveHBase
MapReduceHDFSZooKeeper
CoreAvro
.Core:即Common Hadoop核心
.Avro:数据序列化系统
.MapReduce:计算模型
.HDFS:存储系统
.Chukwa:数据收集系统,显示,监视,分析数据结果
.HBase:面向列存储的数据库,用于随机访问与实时读写数据
.Hive:基于Hadoop的数据仓库
.Pig:针对MapReduce编写了一套shell脚本,在此脚本中可以对加载出的数据进行排序,过滤,求和,分组,关联。对数据集进行的操作。
.ZooKeeper:是针对分布式系统的一个协调系统,提供:配置服务,名字服务,分布式同步,组服务等。目的是:封装关键易错的服务,暴露优良的接口提供给用户使用