Oozie

oozie server系统时钟偏差导致sqoop报错

使用oozie通过sqoop导数报错如下FailingOozieLauncher,Mainclass[org.apache.oozie.action.hadoop.SqoopMain],main()threwexception
men子烦高·2016-06-03 11:51

CDH5.7.0遇到Oozie缺少Ext JS library的解决方法

环境信息：CDH版本：5.7.0-1.cdh5.7.0.p0.45 问题：CDH环境搭建好之后，访问Oozie管理页面时，出现如下问题：解决方法：根据提示，我们可以发现缺少ExtJSlibrary，我们可以点击给出的网址链接
jiangshouzhuang·2016-06-01 10:00

Hadoop生态系统

如:HDFS、MapReduce、Yarn、Zookeeper、Hive、HBase、Oozie、Mahout、Pig、Flume、Sqoop。
沐茈静·2016-05-24 20:58

Hadoop项目之Cloudera 5.6.0.1（CDH）的安装部署

1.8ClouderaManager5.6.0.1HBaseVersion1.0.0HadoopVersion2.6.0,revision=c282dc6c30e7d5d27410cabbb328d60fc24266d9ZookeeperHive,Hue,Impala 2.1.0 OozieSpark1.6.1Sqoop2ZookeeperScalar2.10RESTfulAPI2
tanzhenchao·2016-05-20 14:18

CDH5.7Hue使用sqoop导出mysql数据报错

Hue使用sqoop导出mysql数据报错hadoop平台使用的是CDH5，在Hue中使用sqoop提交任务后报错Mainclass[org.apache.oozie.action.hadoop.SqoopMain
大数据菜鸟·2016-05-14 23:58

hadoop工作流引擎azkaban

介绍Azkaban是twitter出的一个任务调度系统，操作比Oozie要简单很多而且非常直观，提供的功能比较简单。
wayhk·2016-05-13 12:00

消费者端的Spring JMS 连接ActiveMQ接收生产者Oozie Server发送的Oozie作业执行结果

一，介绍Oozie是一个Hadoop工作流服务器，接收Client提交的作业（MapReduce作业）请求，并把该作业提交给MapReduce执行。
hapjin·2016-05-12 16:00

消费者端的Spring JMS 连接ActiveMQ接收生产者Oozie Server发送的Oozie作业执行结果

一，介绍Oozie是一个Hadoop工作流服务器，接收Client提交的作业（MapReduce作业）请求，并把该作业提交给MapReduce执行。
hapjin·2016-05-12 16:00

hue安装运行时候提示：oozie share lib not installed in default location.

hue安装运行时候提示：ooziesharelibnotinstalledindefaultlocation.运行：$mkdir/tmp/ooziesharelib $cd/tmp/ooziesharelib
ubuntu_yanglei·2016-05-11 18:00

hadoop之oozie配置

在Hadoop生态圈中，Oozie它让我们可以把多个Map/Reduce作业组合到一个逻辑工作单元中，从而完成更大型的任务。
u014439581·2016-05-11 08:00

Hue-安装-配置-添加Oozie

安装步骤参考http://gethue.com/how-to-build-hue-on-ubuntu-14-04-trusty/配置步骤参考http://shiyanjun.cn/archives/1002.html修改配置文件$vihue/desktop/conf/pseudo-distributed.ini启动hue服务#build/env/bin/supervisor&error：参考htt
闪电电·2016-05-09 21:36

Oozie JMS通知消息实现--根据作业ID来过滤消息

一，介绍本文使用Oozie的消息通知功能，并根据JMS规范中的消息选择器(Selector)实现根据作业的ID来过滤消息。
hapjin·2016-05-06 16:00

大数据集群工作流及任务管理组件对比

方便排错*/5****/opt/bin/hive_opt/synclog_5min.sh>/cronlog/syn_by_5min/synclog_5min.log2>&12、开源工作流Azkaban与Oozie
kwu_ganymede·2016-04-28 11:00

查询oozie的任务

ooziejobs-ooziehttp://192.168.0.1:11000/oozie-filter"status=RUNNING"-jobtypecoordinator-len10000|grep-E
zzuiezhangqihui·2016-04-21 09:00

Hadoop学习之路（一）——Hadoop家族学习路线图

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
_Mr_Computer_·2016-04-19 15:11

基于Zookeeper的分步式队列系统集成案例

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
nysyxxg·2016-04-17 09:00

Failing Oozie Launcher, Main class [org.apache.oozie.action.hadoop.ShellMain], exit code [1]

转：http://stackoverflow.com/questions/19323611/simple-oozie-shell-action-from-rest-api-failsSimpleoozieshellactionfromRESTAPIfailsupvote0downvotefavoriteI'musingoozie'sRESTAPItoinvokeshellscriptactions
KSCL·2016-04-13 23:18

Oozie

Oozie工作流是通过hPDL语言（一种XML过程定义语言）编写的Oozie层次结构Oozie服务器端组件
zipo·2016-04-07 13:00

Oozie的安装

hadoop中core-site.xml配置 hadoop.proxyuser.ycong.hosts * hadoop.proxyuser.ycong.groups * 解压oozie-4.0.0
yangcongyangling·2016-04-01 23:00

大数据作协框架Oozie

大数据作协框架Oozie标签（空格分隔）：大数据大数据作协框架Oozie一概述二Oozie的安装和部署三wordcount案例实现mapreduce运行四hive案例实现shell五coordinatetimetrigger
youfashion·2016-03-31 18:00

Mahout推荐算法API详解

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
·2016-03-26 00:00

使用HUE来管理hadoop集群

你可以在hue编写mr，查看修改hdfs的文件，管理hive的元数据，运行Sqoop，编写Oozie工作流等大量工作。
u010850027·2016-03-23 17:00

hue中使用oozie的workflow执行mr

workflow创建任务进入hue–Workflows–编辑器–workflow–创建拖一个mapreduce作业（在页面靠近顶端有一排选项图标）到页面中间虚线框中Jar路径必须是hdfs中jar包路径添加属性：key:mapred.output.dir value:${output}${}表示要运行时输入的key:mapred.input.dir value：/tmp/test/t1表示输入是固
ggz631047367·2016-03-15 21:00

Oozie workflow工作流action间参数传递实现

假设workflow里有两个action节点，shell和hive，hive需要用到shell节点里的值，shell脚本如下#!/bin/shday=`date'+%Y%m%d%H'`echo"day:$day"hive节点需传入day这个参数。需要用到shell节点里这个属性，如下${jobTracker}${nameNode}mapred.job.queue.name${queueName}$
men子烦高·2016-03-11 18:55

使用Azkaban调度Spark任务

Azkaban是一种类似于Oozie的工作流控制引擎，可以用来解决多个Hadoop（或Spark等）离线计算任务之间的依赖关系问题。
breeze_lsw·2016-03-08 22:08

使用Azkaban调度Spark任务

Azkaban是一种类似于Oozie的工作流控制引擎，可以用来解决多个Hadoop（或Spark等）离线计算任务之间的依赖关系问题。
lsshlsw·2016-03-08 22:00

hadoop 0.20.2 cdh3u6 运行单节点任务卡死，但不报错，问题分析。

使用oozie管理job。分析：   查看hadoop日志并没有发现错误，因此，怀疑配置文件出现问题。逐步检查配置文件出现问题的地方。
parker·2016-02-19 10:00

使用hbase版本异常

FailingOozieLauncher,Mainclass[org.apache.oozie.action.hadoop.JavaMain],main()threwexception,java.lang.NoSuchMethodError
dub_lys·2016-02-15 17:38

Hadoop家族学习路线图(干货系列)

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
J7A4V5A2W2E8B9e4e6·2016-02-05 10:00

hadoop学习路径（知乎）

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
doers123·2016-02-04 18:13

JDBC driver cannot be found（使用cloudera manger 安装oozie服务）

问题背景：在ServerA上安装oozie测试数据库时遇到该提示，我的数据库选择是serverB的mysql数据库，测试连通性时提示错误JDBCdrivercannotbefoundonServerA解决方案
shihuai355·2016-02-04 16:00

大数据系列文章汇总 - 更新到15篇

MapReduce大数据(五)-HBase大数据(六)-ZooKeeper大数据(七)-Flume大数据(八)-Sqoop大数据(九)-Hive大数据(十)-Pig大数据(十一)-Mahout大数据(十二)-Oozie
IT十年·2016-01-31 20:30

大数据系列文章汇总 - 更新到15篇

MapReduce大数据(五)-HBase大数据(六)-ZooKeeper大数据(七)-Flume大数据(八)-Sqoop大数据(九)-Hive大数据(十)-Pig大数据(十一)-Mahout大数据(十二)-Oozie
matthewei6·2016-01-31 20:00

Oozie工作流程定义详解

    Oozie工作流程定义是一个DAG（DirectedAcyclicalGraphs）图，它由控制流节点（ControlFlowNodes）或动作节点（ActionNodes）组成，各个节点又是通过表征转移的箭线
·2016-01-31 12:18

hadoop各个组件功能

HDFS分布式文件系统YARN资源管理系统MapReduce分布式计算框架ZooKeeper分布式协调服务Hbase分布式数据库Flume日志收集Sqoop数据同步工具Oozie作业流调度系统Ambari
紫赫·2016-01-25 09:20

Oozie4.2.0配置安装实战

软件版本：Oozie4.2.0，Hadoop2.6.0，Spark1.4.1，Hive0.14，Pig0.15.0，Maven3.2，JDK1.7，zookeeper3.4.6，HBase1.1.2，MySQL5.6
fansy1990·2016-01-23 23:00

大数据(十二) - Oozie

基本概念  目前计算框架和作业类型繁多：    MapReduceJava、Streaming、HQL、Pig等  如何对这些框架和作业进行统一管理和调度：    不同作业之间存在依赖关系（DAG）；    周期性作业    定时执行的作业    作业执行状态监控与报警  多种解决方案：    Crontab    自己设计调度系统    直接使用开源系统Hadoop作业流调度系统基本功能  对常
matthewei6·2016-01-21 13:00

cloudera manager 及CDH卸载

记录用户数据路径删除用户数据 中列出的用户数据路径 /var/lib/flume-ng/var/lib/hadoop*/var/lib/hue/var/lib/navigator/var/lib/oozie
黛玉他哥·2016-01-20 09:00

hive on spark 测试

ApacheHadoop2.7.1Centos6.5ApacheHadoop2.7.1ApacheHbase0.98.12ApacheHive1.2.1ApacheTez0.7.0ApachePig0.15.0Apacheoozie4.2.0ApacheSpark1.6.0CloudreaHue3.8.1
qindongliang1922·2016-01-18 18:00

Hive集成Tez让大象飞起来

ApacheHadoop2.7.1Centos6.5ApacheHadoop2.7.1ApacheHbase0.98.12ApacheHive1.2.1ApacheTez0.7.0ApachePig0.15.0Apacheoozie4.2.0ApacheSpark1.6.0CloudreaHue3.8.1
qindongliang1922·2016-01-15 16:00

Hive集成Tez让大象飞起来

ApacheHadoop2.7.1Centos6.5ApacheHadoop2.7.1ApacheHbase0.98.12ApacheHive1.2.1ApacheTez0.7.0ApachePig0.15.0Apacheoozie4.2.0ApacheSpark1.6.0CloudreaHue3.8.1
qindongliang1922·2016-01-15 16:00

Hive集成Tez让大象飞起来

ApacheHadoop2.7.1Centos6.5ApacheHadoop2.7.1ApacheHbase0.98.12ApacheHive1.2.1ApacheTez0.7.0ApachePig0.15.0Apacheoozie4.2.0ApacheSpark1.6.0CloudreaHue3.8.1
qindongliang1922·2016-01-15 16:00

Bug死磕之hue集成的oozie+pig出现资源任务死锁问题

这两天，打算给现有的ApacheHadoop2.7.1的集群装个hue，方便业务人员使用hue的可视化界面，来做一些数据分析任务，这过程遇到不少问题，不过大部分最终都一一击破，收获经验若干，折腾的过程，其实也是一个学习的过程，一个历练的过程，我相信优秀的人，都是经历过无数磨难成就的，并且有着坚持不放弃的心态，迎接各种挑战，如果你总是遇到困难就放弃，那么你永远也不能成为最优秀的人，废话不多说了，下面
dotedy·2016-01-14 23:18

Bug死磕之hue集成的oozie+pig出现资源任务死锁问题

这两天，打算给现有的ApacheHadoop2.7.1的集群装个hue，方便业务人员使用hue的可视化界面，来做一些数据分析任务，这过程遇到不少问题，不过大部分最终都一一击破，收获经验若干，折腾的过程，其实也是一个学习的过程，一个历练的过程，我相信优秀的人，都是经历过无数磨难成就的，并且有着坚持不放弃的心态，迎接各种挑战，如果你总是遇到困难就放弃，那么你永远也不能成为最优秀的人，废话不多说了，下面
qindongliang1922·2016-01-14 15:00

Bug死磕之hue集成的oozie+pig出现资源任务死锁问题

阅读更多这两天，打算给现有的ApacheHadoop2.7.1的集群装个hue，方便业务人员使用hue的可视化界面，来做一些数据分析任务，这过程遇到不少问题，不过大部分最终都一一击破，收获经验若干，折腾的过程，其实也是一个学习的过程，一个历练的过程，我相信优秀的人，都是经历过无数磨难成就的，并且有着坚持不放弃的心态，迎接各种挑战，如果你总是遇到困难就放弃，那么你永远也不能成为最优秀的人，废话不多说
qindongliang1922·2016-01-14 15:00

Bug死磕之hue集成的oozie+pig出现资源任务死锁问题

阅读更多这两天，打算给现有的ApacheHadoop2.7.1的集群装个hue，方便业务人员使用hue的可视化界面，来做一些数据分析任务，这过程遇到不少问题，不过大部分最终都一一击破，收获经验若干，折腾的过程，其实也是一个学习的过程，一个历练的过程，我相信优秀的人，都是经历过无数磨难成就的，并且有着坚持不放弃的心态，迎接各种挑战，如果你总是遇到困难就放弃，那么你永远也不能成为最优秀的人，废话不多说
qindongliang1922·2016-01-14 15:00

服务器时间没同步.---ntpdate

FailingOozieLauncher,Mainclass[org.apache.oozie.action.hadoop.JavaMain],main()threwexception,begin>endinrange
dub_lys·2016-01-12 11:07

#研发解决方案#分布式并行计算调度和管理系统Summoner

郑昀创建于2015/11/10最后更新于2015/11/12关键词：佣金计算、定时任务、数据抽取、数据清洗、数据计算、Java、Redis、MySQL、Zookeeper、azkaban2、oozie、
旁观者-郑昀·2016-01-08 10:00

#研发解决方案#分布式并行计算调度和管理系统Summoner

郑昀创建于2015/11/10最后更新于2015/11/12关键词：佣金计算、定时任务、数据抽取、数据清洗、数据计算、Java、Redis、MySQL、Zookeeper、azkaban2、oozie、
旁观者·2016-01-08 10:00

oozie ErrorCode 含义

E0000(XLog.STD,"Systemproperty'oozie.home.dir'notdefined"),E0001(XLog.OPS,"Couldnotcreateruntimedirectory
u010299467·2016-01-01 11:00
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他