Hadoop下的调度工具

Hadoop下的调度工具

制作Azkaban作业调度,包含job、Flow之间的依赖关系,并成功执行:

第一步:到相应的host4上su – Azkaban

第二步:建各个job.

Hadoop下的调度工具_第1张图片

第三步:根据需求先画出需求图:

Flow需求图:

Hadoop下的调度工具_第2张图片

整体需求图:

Hadoop下的调度工具_第3张图片

然后根据图片写job:

-----vi a.job

#a.job

type = command

command = echo “此时此刻的我想吟诗一首:念奴娇·赤壁怀古”

-----vi b.job

type = command

dependencies = a

command = echo “大江东去,浪淘尽,千古风流人物。”

-----vi c.job

type = command

dependencies = a

command = echo “故垒西边,人道是,三国周郎赤壁。”

-----vi d.job

type = command

dependencies = b

command = echo “乱石穿空,惊涛拍岸,卷起千堆雪。”

------vi e.job

type = command

dependencies = b

command = echo “江山如画,一时多少豪杰。”

-----vi f.job

type = command

dependencies = d,e

command = echo “遥想公瑾当年,小乔初嫁了(liǎo),雄姿英(yīng)发。”

-----vi g.job

type = command

dependencies =f,c

command = echo “羽扇纶(guān)巾,谈笑间,樯橹灰飞烟灭。”

------vi h.job

type = command

dependencies =g

command = echo “故国神游,多情应笑我,早生华(huā)发。人生如梦,一尊还酹(lèi)江月。”

把各个jiob做成zip格式:

把zip下载到桌面:

下载成功:

创建端口转接:

Hadoop下的调度工具_第4张图片

打开网页:

127.0.0.1:8081

先创建项目:

Hadoop下的调度工具_第5张图片

上传zip:

Hadoop下的调度工具_第6张图片

运行:

 Hadoop下的调度工具_第7张图片

Hadoop下的调度工具_第8张图片

Hadoop下的调度工具_第9张图片

运行成功:

Hadoop下的调度工具_第10张图片

查看:

Hadoop下的调度工具_第11张图片

Hadoop下的调度工具_第12张图片


你可能感兴趣的:(大数据学习笔记)