Azkaban 架构 三大关键组件

Azkaban 架构 三大关键组件_第1张图片

1) AzkabanWebServer: AzkabanWebServer 是整个 Azkaban 工作流系统的主要管理者,
它用户登录认证、 负责 project 管理、 定时执行工作流、跟踪工作流执行进度等一
系列任务。
2) AzkabanExecutorServer: 负责具体的工作流的提交、执行,它们通过 mysql 数据库
来协调任务的执行。
3) 关系型数据库( MySQL) : 存储大部分执行流状态, AzkabanWebServer 和
AzkabanExecutorServer 都需要访问数据库。
 

第一步:定义自己的工作流程(配置文件)

第二步:在Web界面上传工作流程(上传之后这些文件会存在mysql中)

第三步: 如果立即执行工作,把请求发给executor

第四步:executor从mysql读取相应的配置文件

第五步: executor下载工作流,并不断把状态等信息存进mysql ,webserver从mysql中读取信息并展示

Azkaban 架构 三大关键组件_第2张图片

你可能感兴趣的:(大数据)