大数据工作流_【大数据开发】OOZIE的工作流调度及功能架构(一)

OOZIE

工作流调度及功能架构(一)

大数据工作流_【大数据开发】OOZIE的工作流调度及功能架构(一)_第1张图片

常见的几个工作流调度框架

oozie的功能架构

常见的几个工作流调度框架

    什么是工作流?

大数据工作流_【大数据开发】OOZIE的工作流调度及功能架构(一)_第2张图片

常见的JBMP (工作流调度框架):

    1.Crontab:详情见

新闻网关指标

张景宇,公众号:数据信息化【大数据开发】Hive的高级应用之新闻网关键指标统计 (九)

    2.Azkaban

    3.Oozie + Hue

    4.Zeus

oozie的功能架构

1)Oozie是一个用于管理Apache Hadoop作业的工作流调度系统。

2)Oozie工作流作业是操作的有向非循环图(DAGs)。

31bffeb7993919ec9b822fddbde6a645.png

3)Oozie协调器作业是由时间(频率)和数据可用性触发的周期性Oozie工作流作业。

下文将着重介绍oozie的三个特性功能:

Workflow Functional Specification(mr,shell,hive,sqoop)Coordinator Functional Specification  (by time)Bundle Functional Specification  (Coordinator + Coordinator)

你可能感兴趣的:(大数据工作流)