大数据小白系列——YARN(1)

这是大数据小白系列,YARN的第一篇,准确的说是介绍YARN的“前身”,即MapReduce第一版(下称MRv1)中的资源管理系统。

 

之前准备忽略这部分的内容,毕竟MRv1已经过时了,但为方便后续介绍YARN,这里还是(并不深入地)讲一讲。

 

Q:

为什么需要一个资源管理系统?

A:

在一个具有成百上千节点的集群上(这很常见),资源管理十分重要,一个好的资源管理系统可以充分发挥各节点的能力,避免一些节点忙碌,而另一些节点处饥饿状态,从而有助于整个集群的平稳高效运行,提高集群的生产力。

很多初学者,对大数据的概念都是模糊不清的,大数据是什么,能做什么,学的时候,该按照什么线路去学习,学完往哪方面发展,想深入了解,想学习的同学欢迎加入大数据学习qq群:957205962,有大量干货(零基础以及进阶的经典实战)分享给大家,并且有清华大学毕业的资深大数据讲师给大家免费授课,给大家分享目前国内最完整的大数据高端实战实用学习流程体系
 

JT & TT在Hadoop系统中的位置

大数据小白系列——YARN(1)_第1张图片

总体看来Hadoop分成两块:HDFS(浅绿色部分)、MR(前紫色部分),

你可能感兴趣的:(大数据,大数据,人工智能,机器学习,数据挖掘,数据分析)