E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
oozie
Hadoop的组成
Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如
Oozie
,ZooKeeper、Flume)。
djd1234567
·
2015-07-11 19:00
hadoop
数据挖掘
分布式文件系统
数据仓库
分布式应用
以Hadoop为核心的大数据开放平台建设
概要本次演讲将主要介绍如何建设以Hadoop为核心,以Avro为关键技术,融合Flume、
Oozie
、Hadoop、Spark、Storm、Solr等技术的大数据开放平台,并分享在分布式日志收集、基于大数据的统计分析方面的心得与经验
孙利兵
·
2015-07-08 00:00
以Hadoop为核心的大数据开放平台建设
概要本次演讲将主要介绍如何建设以Hadoop为核心,以Avro为关键技术,融合Flume、
Oozie
、Hadoop、Spark、Storm、Solr等技术的大数据开放平台,并分享在分布式日志收集、基于大数据的统计分析方面的心得与经验
孙利兵
·
2015-07-08 00:00
oozie
常见命令
oozie
admin -
oozie
http://localhost:11000/
oozie
-shareliblist pig
chengjianxiaoxue
·
2015-06-19 17:00
oozie
关于
Oozie
的input-events和done-flag
关于
Oozie
的input-events和done-flag工作流的执行条件当coordinator指定的一个workflow已经进入执行时间窗口时,
oozie
会首先检查所有的input-events是否都已
bluishglc
·
2015-06-16 10:00
oozie
success
coord
input-even
done-flag
oozie
使用中的一些总结(持续完善)
0 关于
oozie
寻找包寻找位置原则:
oozie
在运行的时候 只会去两个地方寻找自己需要的lib
chengjianxiaoxue
·
2015-06-09 18:00
oozie
oozie
安装
1 到http://archive.cloudera.com/cdh5/cdh/5 选择hadoop和
oozie
的对应版本,版本一定要对应,否则可能安装成功但运行时可能不成功
chengjianxiaoxue
·
2015-06-03 08:00
oozie
吐槽
Oozie
: 挖好坑,等你跳!
说说
Oozie
一些糟糕的地方吧,确实需要吐槽一下,作为开发者,因为使用的工具存在这样或那样的缺陷而导致话费大量时间去查找问题的根源是很不开心的一件事情,整体上,
Oozie
的完备性、文档的准确性以及很多细节的地方都需要改进和提
bluishglc
·
2015-06-01 07:57
大数据专题
吐槽
Oozie
: 挖好坑,等你跳!
说说
Oozie
一些糟糕的地方吧,确实需要吐槽一下,作为开发者,因为使用的工具存在这样或那样的缺陷而导致话费大量时间去查找问题的根源是很不开心的一件事情,整体上,
Oozie
的完备性、文档的准确性以及很多细节的地方都需要改进和提
bluishglc
·
2015-06-01 07:00
问题
文档
oozie
editor
hue
Hadoop: Hadoop
oozie
main sub workflow.xml configuration
Thejob.propertiesfilecontentjob.propertiesuser.name=admin
oozie
.use.system.libpath=truenameNode=hdfs:/
dijk
·
2015-05-31 16:18
Hadoop
[原]
Oozie
工作流属性配置的方式与策略
Oozie
工作流属性配置的三种方式
Oozie
有三种方法可以给工作流提供属性属性配置:App部署文件夹根目录下的:config-default.xml作业属性文件:job.properties在命令行中指定属性
bluishglc
·
2015-05-29 15:00
[原]
Oozie
工作流属性配置的方式与策略
Oozie
工作流属性配置的三种方式
Oozie
有三种方法可以给工作流提供属性属性配置:App部署文件夹根目录下的:config-default.xml作业属性文件:job.properties在命令行中指定属性
bluishglc
·
2015-05-29 07:00
(11.1.8)Hadoop,HBase,Storm,Spark到底是什么?
提供给SQL开发人员(通过HiveQL)的MapReduce,基于Hadoop的数据仓库框架Pig:基于Hadoop的语言开发的HBase:NoSQL数据库Flume:一个收集处理Hadoop数据的框架
Oozie
fei20121106
·
2015-05-27 18:00
oozie
默认系统库位置和java代码调用
oozie
指定具体位置jar写法
nbsp; http://blog.csdn.net/bluishglc/article/details/46005269 这个链接是说 关于
oozie
chengjianxiaoxue
·
2015-05-26 17:00
oozie
HIVE以及
OOZIE
添加第三方JAR包的方法
本文原文出处:http://blog.csdn.net/bluishglc/article/details/46005269严禁任何形式的转载,否则将委托CSDN官方维护权益!很多时候,我们需要在HIVE中引入第三方jar包或者是自己编写的“UDF”jar包。在HIVE中,涉及指定外部jar包的配置有两个地方:hive-site.xml中的配置项“hive.aux.jars.path”环境变量:H
bluishglc
·
2015-05-26 10:00
hive
jar
oozie
第三方
external
HDP 2.2.4 Hue
Oozie
Editor生成workflow.xml的几点问题
如果你想让你手写的workflow.xml成功的倒入到Hue的
Oozie
Designer里,你需要注意如下几点:关于chema的版本:
oozie
最高只能是0.4,hive-action最高只能是0.2,
bluishglc
·
2015-05-21 10:00
workflow
hive
oozie
editor
hue
Hadoop可视化分析利器之Hue
和文件浏览2,通过web调试和开发hive以及数据结果展示3,查询solr和结果展示,报表生成4,通过web调试和开发impala交互式SQLQuery5,spark调试和开发6,Pig开发和调试7,
oozie
qindongliang1922
·
2015-05-19 20:00
hadoop
hive
pig
hue
Hadoop可视化分析利器之Hue
和文件浏览2,通过web调试和开发hive以及数据结果展示3,查询solr和结果展示,报表生成4,通过web调试和开发impala交互式SQLQuery5,spark调试和开发6,Pig开发和调试7,
oozie
qindongliang1922
·
2015-05-19 20:00
hadoop
hive
pig
hue
Hadoop可视化分析利器之Hue
和文件浏览2,通过web调试和开发hive以及数据结果展示3,查询solr和结果展示,报表生成4,通过web调试和开发impala交互式SQLQuery5,spark调试和开发6,Pig开发和调试7,
oozie
qindongliang1922
·
2015-05-19 20:00
hadoop
hive
pig
hue
Hadoop可视化分析利器之Hue
和文件浏览2,通过web调试和开发hive以及数据结果展示3,查询solr和结果展示,报表生成4,通过web调试和开发impala交互式SQLQuery5,spark调试和开发6,Pig开发和调试7,
oozie
qindongliang1922
·
2015-05-19 20:00
hadoop
hive
pig
hue
Hadoop可视化分析利器之Hue
和文件浏览2,通过web调试和开发hive以及数据结果展示3,查询solr和结果展示,报表生成4,通过web调试和开发impala交互式SQLQuery5,spark调试和开发6,Pig开发和调试7,
oozie
qindongliang1922
·
2015-05-19 20:00
hadoop
hive
pig
hue
Hadoop可视化分析利器之Hue
和文件浏览2,通过web调试和开发hive以及数据结果展示3,查询solr和结果展示,报表生成4,通过web调试和开发impala交互式SQLQuery5,spark调试和开发6,Pig开发和调试7,
oozie
qindongliang1922
·
2015-05-19 20:00
hadoop
hive
pig
hue
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
九劫散仙
·
2015-05-19 15:00
hive
pig
工作流
oozie
haodop
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
u010454030
·
2015-05-19 15:00
apache
hadoop
工作流
任务调度
oozie
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
qindongliang1922
·
2015-05-19 15:00
apache
hadoop
workflow
oozie
hue
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
qindongliang1922
·
2015-05-19 15:00
apache
hadoop
workflow
oozie
hue
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
qindongliang1922
·
2015-05-19 15:00
apache
hadoop
workflow
oozie
hue
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
qindongliang1922
·
2015-05-19 15:00
apache
hadoop
workflow
oozie
hue
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
qindongliang1922
·
2015-05-19 15:00
apache
hadoop
workflow
oozie
hue
驭象者之Apache
Oozie
(1)Apache
Oozie
是什么?
Oozie
在英语中的释义指的是:驯象人,驭象者(多指缅甸那边的俗称),这个比喻相对与它的功能来说,还是很恰当的。
qindongliang1922
·
2015-05-19 15:00
apache
hadoop
workflow
oozie
hue
Hue -
Oozie
Editor: Retrying connect to server: localhost/127.0.0.1:8050 的错误解决方法
问题描述在当前版本的HUE(2.6.1-2)里,
oozie
editor存在一个糟糕的BUG:用户无法在workflow的配置中指定${jobTracker}和${nameNode}的值,尽管我尝试了所有可以尝试的地方
bluishglc
·
2015-05-19 12:00
localhost
oozie
hue
Retrying
8050
Hadoop家族学习路线图
Hadoop家族产品,常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa,新增加的项目包括,YARN,Hcatalog,
Oozie
michael_roshen
·
2015-05-18 18:00
Hadoop家族
Hue(一)介绍
生态系统紧密结合的WebUI应用程序,可以通过Hue来查看管理HDFS上面的文件(甚至修改文件内容和删除文件等)、通过Hue从界面编写sql语句对Hive进行查询,并使用图表直观的展示查询结果、可以与
Oozie
maomaosi2009
·
2015-05-11 15:00
hadoop
hue
Oozie
的web界面安装、配置和运行(CDH环境)
1问题描述和原因分析从clouderamanager界面进入
Oozie
的web界面的时候出现下面的错误原因是
oozie
的/var/lib/
oozie
目录里缺少EXT的包点击Documentation链接里
jethai
·
2015-05-08 19:27
js
ext
oozie
WEB界面
oozie
安装过程总结
hue由我一个同事搭建成功,我发现使用hue来创建工作流(workflow)时需要
oozie
的支持,以前只知道
oozie
是一个hadoop任务调度器,但是一直没使用过,今天正好趁这个机会尝试一下。
jiacai2050
·
2015-05-07 00:00
hue
oozie
hadoop
Hadoop:你不得不了解的大数据工具
Hive和Pig等技术也经常被提到,但是他们都有什么功能,为什么会需要奇怪的名字(如
Oozie
,ZooKeeper、Flume)。
chencheng126
·
2015-05-05 15:00
cloudera hue安装及
Oozie
的安装
下载hue1.2下载地址:https://github.com/cloudera/hue/downloads/HADOOP_HOME=/hadoop/hadoop0.20.2PREFIX=/hadoop/huemakeinstall复制代码以前叫clouderadesktop,使用django作为web框架1.安装waiting ......执行完会在PREFIX指定的路径下生成hue的服务程序
u010022051
·
2015-04-27 09:00
oozie
工作流相关入门整理
阅读更多
Oozie
支持工作流,其定义通过将多个HadoopJob的定义按照一定的顺序组织起来,然后作为一个整体按照既定的路径运行。
brandNewUser
·
2015-04-16 11:00
oozie
job
oozie
工作流相关入门整理
阅读更多
Oozie
支持工作流,其定义通过将多个HadoopJob的定义按照一定的顺序组织起来,然后作为一个整体按照既定的路径运行。
brandNewUser
·
2015-04-16 11:00
oozie
job
oozie
工作流相关入门整理
Oozie
支持工作流,其定义通过将多个Hadoop Job的定义按照一定的顺序组织起来,然后作为一个整体按照既定的路径运行。
brandNewUser
·
2015-04-16 11:00
job
oozie
oozie
学习参考资料
http://blackproof.iteye.com/blog/1928122 简介 配置文件介绍 写的比较清晰 http://arenzhj.iteye.com/blog/2198436 安装 写的比较清晰
chengjianxiaoxue
·
2015-04-09 15:00
oozie
hive的变量传递设置
今天同事在
oozie
的workflow中执行一个hive查询,但是直接就报异常:Variablesubstitutiondepthtoolarge:40,从网上查询可知,可以确认是由于语句中使用了过多的变量导致
超人学院
·
2015-04-07 10:00
hive
hive的变量传递设置
hive的变量传递设置今天同事在
oozie
的workflow中执行一个hive查询,但是直接就报异常:Variablesubstitutiondepthtoolarge:40,从网上查询可知,可以确认是由于语句中使用了过多的变量导致
孤独侠客123
·
2015-04-07 08:06
大数据
Oozie
安装
出处:http://shiyanjun.cn/archives/644.html 谢谢
Oozie
是一个开源的工作流调度系统,它能够管理逻辑复杂的多个Hadoop作业,按照指定的顺序将其协同运行起来。
arenzhj
·
2015-04-02 17:00
Oozie安装
oozie
--学习--01基础
出处: http://guoyunsky.iteye.com/blog/1243417 cloudera里面有基于
Oozie
的安装,但是通过sudo apt-get install
oozie
arenzhj
·
2015-03-18 15:00
oozie--学习--01基础
Alex 的 Hadoop 菜鸟教程: 第20课 工作流引擎
Oozie
本文基于Centos6.x+CDH5.x
Oozie
是什么简单的说
Oozie
是一个工作流引擎。
nsrainbow
·
2015-03-04 15:00
mapreduce
hadoop
oozie
oozie
on yarn
oozie
4.0.1 hadoop2.3.0 安装笔记
oozie
需要编译哦~~编译下载的依赖有800多m呢,,所以得找台网络好点的机器去编译。。。
myrainblues
·
2015-02-27 15:00
oozie
Oozie
Coordinator使用及详解
Oozie
Coordinator使用及详解2014-03-0523:39:29Yanjun
Oozie
所支持工作流,工作流定义通过将多个HadoopJob的定义按照一定的顺序组织起来,然后作为一个整体按照既定的路径运行
myrainblues
·
2015-02-27 11:04
oozie
Oozie
Coordinator使用及详解
Oozie
Coordinator使用及详解 2014-03-0523:39:29 Yanjun
Oozie
所支持工作流,工作流定义通过将多个HadoopJob的定义按照一定的顺序组织起来,然后作为一个整体按照既定的路径运行
·
2015-02-27 11:00
Oozie
工作流程定义详解
Oozie
工作流程定义详解更多0
Oozie
工作流程定义是一个DAG(DirectedAcyclicalGraphs)图,它由控制流节点(ControlFlowNodes)或动作节点(ActionNodes
myrainblues
·
2015-02-27 11:00
上一页
15
16
17
18
19
20
21
22
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他