【Azkaban】

Azkaban三种模式部署

简介Azkaban是LinkedIn开源的任务调度框架，类似于JavaEE中的JBPM和Activiti工作流框架。
wangpei1949·2018-03-11 23:53

Azkaban简单定时任务-使用教程

Azkaban是由Linkedin公司推出的一个批量工作流任务调度器，用于在一个工作流内以一个特定的顺序运行一组工作和流程。
vcancy·2018-03-07 21:59

Azkaban two server mode模式运行的一个坑

azkaban.utils.UndefinedPropertyException:Missingrequiredproperty'azkaban.native.lib'atazkaban.utils.Props.getString
疯狂呼呼呼·2018-03-03 00:14

Azkaban3.X安装搭建

安装azkaban时参考了网上的资料，结果没一篇能安装成功的。调试半天才成功，大部分的问题是资料版本太老，github上最新的源码不适用，或者提供的配置文件有问题。
天夭夭·2018-03-02 11:20

Azkaban 3.X 概述&编译&部署&简单使用

大数据场景中调度的作用：以ETL为例大数据场景中，较为常见的一个ETL流程：RDBMS===Sqoop===>Hadoop==Sqoop==>RDBMS/NoSQL/…完成上述场景需要经历3个过程：数据抽取01:003h==>凌晨1点开始数据抽取，需要3个小时数据处理04:004h==>凌晨4点开始数据处理，需要3个小时数据入库08:00一个完整的ETL过程，通常情况下是有多个作业一起协作来完成的
疯狂呼呼呼·2018-03-01 11:29

Hadoop下的调度工具

Hadoop下的调度工具制作Azkaban作业调度，包含job、Flow之间的依赖关系，并成功执行:第一步：到相应的host4上su–Azkaban第二步：建各个job.第三步：根据需求先画出需求图:Flow
不才一首歌·2018-02-27 13:19

分布式任务调度调研

需要管理跑批的依赖关系看看是否可以使用SpringBatch、Dangdang也有一个框架ElasticJob多个任务的组合、调度与监控解决方案重点解决各项目组的跑批任务调度问题，使用azkaban做分布式任务调度系统
凌霄羽·2018-02-27 09:31

Azkaban

1.Azkaban是什么？
clypm·2018-02-13 15:43

调度工具Rundeck安装使用

调度工具Rundeck1、常用的调度工具：crontab、azkaban、rundeck、xxl_job2、部署rundeck(先部署好满足版本要求的java)a.下载：rundeck.org-----
Mr_249·2017-12-19 19:26

Azkaban的安装与部署

Azkaban的安装与部署1.创建Azkaban目录,上传Azkaban的安装包并解压mkdirAzkaban执行服务器tar–zxvfazkaban-executor-server-2.5.0.tar.gzweb
bad-mood·2017-12-15 19:37

namenode安全模式产生原因及作用

Azkaban进行调度遇到问题:hadoopmkdir:Cannotcreatedirectory/usr.Namenodeisinsafemode.namenodeisinsafemode可以理解为安全模式
bad-mood·2017-12-14 22:58

3-Azkaban作业执行过程

Executor执行信息分析当服务器通过ExecutorManager中dispatch方法将服务器的提交信息交给flow的时候．Executor这边通过Azkaban-exec-server/ExecutorServlet
陌城小川·2017-11-07 10:24

Azkaban实战案例

1、Commond类型多job执行1）、编辑job内容第一个job（bar.jab）内容如下，依赖foo.job#bar.jobtype=commanddependencies=foocommand=echobar第二个job（foo.job）内容如下#foo.jobtype=commandcommand=echofoo2）、两个job打到一个zip包中（foobar.zip）3）、在azkaba
成都往右·2017-10-26 22:22

azkaban的安装部署、使用与常见问题解决

azkaban介绍为什么需要工作流调度系统一个完整的数据分析系统通常都是由大量任务单元组成：shell脚本程序，java程序，mapreduce程序、hive脚本等各任务单元之间存在时间先后及前后依赖关系为了很好地组织起这样的复杂执行计划
成都往右·2017-10-25 13:47

踩坑记——Azkaban Hdfs Plugin 安装

本文详细记录了：centos7.2,cdh5.12环境下azkaban3.20.0Hdfs插件的安装过程。
BalaBalaYi·2017-10-24 11:33

Azkaban安装

阅读更多一.下载https://github.com/azkaban/azkabangitclonehttps://github.com/azkaban/azkaban.git或wgetazkaban.versionurl
h_1_y_m·2017-10-10 18:00

工作流调度器Azkaban的安装配置

Azkaban安装部署准备工作AzkabanWeb服务器azkaban-web-server-2.5.0.tar.gzAzkaban执行服务器azkaban-executor-server-2.5.0.
ChinaUnicom110·2017-09-29 18:35

azkaban2.5.0安装

azkaban是一个工作流调度器，常见的工作流调度器有Oozie,Azkaban,Cascading,Hamake等下载地址:http://azkaban.github.io/downloads.html
bingo_liu·2017-09-07 22:10

azkaban基础操作

步骤：1、新建job文件2、将job资源文件打包成zip文件3、创建project4、上传zip文件5、执行ExecuteFlow->execute简单命令command.job#command.job type=command command=echo'hello'打包command.job工作流step1.job#step1.job type=command command=echoonest
bingo_liu·2017-09-07 00:00

Oozie和Azkaban的技术选型和对比

原文：http://blog.csdn.net/gaoqida/article/details/52165204Oozie和Azkaban的技术选型和对比一．Azkaban和Oozie的工作流程1.1Azkaban
u013063153·2017-08-23 17:28

【转载】Azkaban源码分析

转载自http://www.acyouzi.com/2017/06/15/azkaban/简介因为azkaban功能比较简单，所以在实际使用中存在一些需求用对azkaban进行定制，比如：跨Flow依赖在
hrayha·2017-08-20 20:12

Azkaban简介与使用

一、Azkaban简介Azkaban是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。
·2017-07-25 08:00

azkaban 创建工作流

azkban的特点就是可以创建工作流，每个工作流可以包含多个job，这些job之间可以有多种依赖关系，azkaban可以根据他们的依赖关系进行任务调度创建工作流创建job每个job以文件形式存在，后缀名为
若水三千你是一千·2017-04-08 16:28

azkaban配置

azkabanwebserver配置1.主要配置参数说明默认azkaban.nameazkaban网页UI显示名称Localazkaban.label对azkaban的描述MyLocalAzkabanazkaban.colorAzkabanUI
若水三千你是一千·2017-04-08 15:42

azkaban安装使用

什么是azkabanAzkaban是一款基于Java编写的任务调度系统任务调度任务调度:有四个任务脚A、B、C、D，其中任务A与任务B可以并行运行，然后任务C依赖任务A和任务B的运行结果，任务D依赖任务
若水三千你是一千·2017-04-07 18:07

azkaban java.lang.StackOverflowError thrown from the UncaughtExceptionHandler in thread "main"

执行/bin/azkaban-web-start.sh报错报错：Exception:java.lang.StackOverflowErrorthrownfromtheUncaughtExceptionHandlerinthread"main
若水三千你是一千·2017-04-07 13:29

Azkaban简介

一、Azkaban简介Azkaban作为开源的调度系统，在大数据中有广泛地使用。它主要有三部分组成：AzkabanWebserver、AzkabanExecutor、DB。
jackwxh·2017-04-01 15:29

什么是Azkaban

Azkaban是一款基于Java编写的任务调度系统任务调度:有四个任务脚A、B、C、D，其中任务A与任务B可以并行运行，然后任务C依赖任务A和任务B的运行结果，任务D依赖任务C的运行结果，此时整个过程可以等效为一个有向无环图
jackwxh·2017-04-01 14:23

azkaban安装使用

1、azkaban最好安装在有hivesqoop的机器上方便命令执行安装：1、解压安装包2、创建一个数据库createdatabaseazkaban;useazkaban;3、执行sql脚本source
power_kai·2017-04-01 09:16

Azkaban安装与任务调度

准备工作AzkabanWeb服务器azkaban-web-server-2.5.0.tar.gzAzkaban执行服务器azkaban-executor-server-2.5.0.tar.gzMySQL
小马哥的程序之路·2017-03-31 18:05

13. Oozie介绍

Hadoop常见调度框架：（1）LinuxCrontab：Linux自带的任务调度计划，在任务比较少的情况下，可以使用这种方式，直接执行脚本，例如添加一个执行计划：012***hive-fxxx.sql（2）Azkaban
奉先·2017-03-29 10:42

azkaban入门

======Azkaban入门======自整，懒得加图片了Azkaban是由Linkedin公司推出的一个批量工作流任务调度器，用于在一个工作流内以一个特定的顺序运行一组工作和流程，应用于Hadoop
han25926·2017-03-22 17:18

azkaban2.5安装

安装包：azkaban-executor-server-2.5.0.tar.gzazkaban-web-server-2.5.0.tar.gzazkaban-sql-script-2.5.0.tar.gzazkaban-jobtype
jackeychen100·2017-03-12 19:06

[tools]有没有好用的大数据ETL工具

1、hadoop的oozie和azkaban用了下感觉更适合小型任务的，但在数据仓库建设中感觉会十分麻烦。2、ETLAutomation、kettle等适合于oracle等，不太适合hadoop
葡萄喃喃呓语·2017-02-15 23:34

azkaban 配置jobtype plugins出现问题和解决

问题变量无法替换Exceptioninthread"main"azkaban.jobtype.JobTypeManagerException:azkaban.jobtype.JobTypeManagerException
wangqiaoshi·2017-02-05 15:26

Azkaban 2.5.0 搭建和一些小问题

安装环境：系统环境：ubuntu-12.04.2-server-amd64安装目录：/usr/local/ae/ankabanJDK安装目录：exportJAVA_HOME=/usr/local/ae/jdk1.7.0_51Hadoop安装目录exportHADOOP_HOME=/usr/local/ae/hadoop-1.2.1Mysql版本：mysql-server-5.5需要软件：azkab
weixin_30551963·2016-12-26 10:00

hadoop学习之azkaban（5.1）：azkaban的使用及示例

上一章我们已经安装好了azkaban的web-server和execute-server，下面我们来使用阿兹卡班进行任务调度。
name_s_Jimmy·2016-12-12 18:21

Azkaban 设置 Multiple Executor Mode

设置multipleExecutormode即在azkaban-web-server中的azkaban.properties添加：MultipleExecutorModeazkaban.use.multiple.executors
虾米在海飘·2016-12-01 16:39

Azkaban-2.5及Plugins的安装配置

Azkaban是由LinkedIn开发的调度工具，可以用于调度Hadoop中的相互依赖的Job。
dabokele·2016-08-17 23:00

Azkaban 使用问题及解决(一)

什么是AzkabanAzkaban是一款基于Java编写的任务调度系统任务调度:有四个任务脚A、B、C、D，其中任务A与任务B可以并行运行，然后任务C依赖任务A和任务B的运行结果，任务D依赖任务C的运行结果
PeTu·2016-08-07 20:02

Azkaban调研

Azkaban调研在作业设计器中，实用哪种作业工作流的引擎是最主要的，现在对Azkaban和Oozie进行调研。
一头大菜鸟·2016-08-07 15:36

crontab+shell 作业流程调度

今天我们在丰富下这些伪代码http://blog.csdn.net/haohaixingyun/article/details/51821444说明，在实际生产环境中，可能会部署一些成熟的作业流程调度引擎OozieorAzkaban
秉寒CHO·2016-07-19 23:52

自动化定时调度之Azkaban部署及使用

 azkaban的部署使用及如何结合项目的使用思考1 部署azkaban1.1准备工作,下载相关安装包,这里我使用的是2.5版本的官方:http://azkaban.github.io/downloads.html
sqh201030412·2016-05-31 19:00

Azkaban——使用指南

输入账号密码azkaban/azkanban（如果你之前没有更改的话）图1首页首页有四个菜单projects：最重要的部分，创建一个工程，所有flows将在工程中运行。
djd已经存在·2016-05-17 18:42

Azkaban——安装指南

最近项目迁移到新集群，试试同事推荐的开源任务调度程序－azkaban，azikaban主要用来解决hadoop依赖任务的执行，但是它本身支持linux和java程序，因此适合做小项目的任务调度管理程序。
djd已经存在·2016-05-17 18:04

hadoop工作流引擎azkaban

介绍Azkaban是twitter出的一个任务调度系统，操作比Oozie要简单很多而且非常直观，提供的功能比较简单。
wayhk·2016-05-13 12:00

azkaban 入门简介

前言80后的同学们看到azkaban这个词，第一反应就会想起哈利波特。没错，就是哈利波特系列的第三部：阿兹卡班的囚徒（HarryPotterandthePrisonerofAzkaban)。
bitcarmanlee·2016-05-05 10:08

azkaban 入门简介

前言80后的同学们看到azkaban这个词，第一反应就会想起哈利波特。没错，就是哈利波特系列的第三部：阿兹卡班的囚徒（HarryPotterandthePrisonerofAzkaban)。
bitcarmanlee·2016-05-05 10:00

大数据集群工作流及任务管理组件对比

注意日志的重定向，方便排错*/5****/opt/bin/hive_opt/synclog_5min.sh>/cronlog/syn_by_5min/synclog_5min.log2>&12、开源工作流Azkaban
kwu_ganymede·2016-04-28 11:00

关于JavaProcess的一些笔记

1）java进程退出时，退出码的选择要考虑代码内部的，azkaban-common/src/main/java/azkaban/jobExecutor/utils/process/AzkabanProcess.javaif
强子哥哥·2016-04-19 16:00
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他