大数据技术选型

数据采集传输

负责处理文件日志的:Flume
消息队列:Kafka
数据抽取:Sqoop、DataX

数据存储

MySql、HDFS、Hbase、Redis、MongoDB

数据计算

Hive、Tez、Spark、Flink

数据查询

Presto、Druid、Impala、Kylin

数据可视化

Echarts、QuickBI

任务调度

Azkaban、Oozie

集群监控

Zabbix

元数据管理

Atals

数据质量监控工具

Griffin

数据压力测试工具

jmeter

你可能感兴趣的:(大数据技术选型)