Hadoop调度器

1.Hadoop调度器分为三类:
FIFO、Capacity Scheduler(容量调度器)和Fair Scheduler(公平调度器)。Hadoop 2.X默认的资源调度器是容量调度器。
2.区别
FIFO调度器:先进先出
Capacity Scheduler:支持多个队列源量进行限制,选择一个正在运行的任务数与其计算资源之间比例最小的队列,队列内任务按照作业优先级、提交时间、用户资源量限制和内存限制进行排序。
Fair Scheduler:支持多队列多用户,每个队列中的资源量可以配置,同一个队列中的作业公平共享队列中所有资源,每个队列中的job按照优先级分配资源,优先级越高分配越多。在资源有限的情况下,每个job理想获得的计算资源与真实获得的计算资源的差值叫作差额,同一队列中,job的资源缺额越大,越优先执行,可以多个任务同时运行。

Hadoop yarn任务调度策略介绍(转)

你可能感兴趣的:(Hadoop调度器)