oozie

Hadoop操作手册

第一章简介在hadoop之上的流行项目HivPigSqoopFlumeOozieWhirrHBaseZooKeeperHCatalog第二章HDFS大型存储区域网络(StorageAreaNetworkSAN
hixiaoxiaoniao·2018-07-10 11:11

Oozie4.3.1安装指南详解

一、环境支持Oozie4.3.1Centos6.5JavaJDK1.8Maven3.5.4Hadoop2.7.4Pig0.17Mysql5.5.28二、安装步骤详解Java的安装1、解压安装包tar-zxvfjdk
林夕1740·2018-07-09 19:16

最新Hadoop大数据学习路线分析及Hadoop生态架构技术

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
csdnzoutao·2018-07-03 11:59

2.3 基于IDEA开发第一个MapReduce大数据程序WordCount

Linux、Java、Hadoop、Spark、Sqoop、hive、pig、hbase、zookeeper、Oozie、f
王小雷-多面手·2018-06-24 15:22

2.2 Hadoop3.1.0完全分布式集群配置与部署

Linux、Java、Hadoop、Spark、Sqoop、hive、pig、hbase、zookeeper、Oozie、flink…etc本节主
王小雷-多面手·2018-06-20 20:19

1.3 virtualbox高级应用构建本地大数据集群服务器

Linux、Java、Hadoop、Spark、Sqoop、hive、pig、hbase、zookeeper、Oozie、flink…etc
王小雷-多面手·2018-06-20 13:09

HUE—大数据web管理器

你可以在hue编写mr，查看修改hdfs的文件，管理hive的元数据，运行Sqoop，编写Oozie工作流等大量工作。
少年阿峣_从零单排·2018-06-15 15:25

2.1 Hadoop伪分布式安装部署

Linux、Java、Hadoop、Spark、Sqoop、hive、pig、hbase、zookeeper、Oozie、flink…etc本节介绍如何在Linux
王小雷-多面手·2018-06-15 08:58

Hadoop工作流引擎之Azkaban-杨帅-专题视频课程

Oozie和Azkaban到底有哪些区别？我该如何成功的安装并使用Azkaban？课程收益为什么Hadoop需要工作流？工作流对Hadoop到底有哪些好处？Hadoop有哪些内置的工作流？
djt_20180507·2018-06-14 16:31

Centos6离线安装CDH5.14.2最全详细教程-4数据库

驱动包放入Java共享目录创建数据库及用户并添加权限下一部分概述文章写得很详细，很长所以这里分成了7个部分这里是第四部分,主要讲Mysql的安装及为后面的ClouderaManager监控服务及Hive,Oozie
荒野雄兵·2018-06-10 20:47

CDH集群oozie报错：Oozie web console is disabled

背景：最近计划大数据集群任务调度工具采用oozie，而我们CDH集群自带的oozie控制台页面打开报错，在此记录下解决方案1、错误这个问题网上也挺多人遇到，不知道是不是默认安装CDH都会有这个问题。
深寒丶·2018-05-29 23:30

大数据平台搭建 - cdh5.11.1 - oozie安装

一、简介oozie是hadoop平台开源的工作流调度引擎，用来管理hadoop作业，属于web应用程序，由oozieserver和oozieclient构成。
nicekk·2018-05-15 22:00

CDH安装Oozie/Hue，以及其基本使用

安装Oozie：关于Oozie安装Hue关于HueHue的入门级使用参考安装Oozie：1.登录数据库后：createdatabaseooziedefaultcharactersetutf8;grantallprivilegesonoozie
haixwang·2018-05-11 20:31

大数据集群优化

一个oozieaction先会启动一个oozielaucher作业消耗一个container，然后再启动实际的job，启动的job首先会用个cont
菜鸟级的IT之路·2018-05-11 07:12

AWS oozie sqoop action 调度mysql to hive

本文基于AWSS3，oozie4.5.0，sqoop1.4.7，sqoop自己安装，其余AWS安装。
Lyle-liang·2018-05-10 18:33

oozie简单使用

yyue=a21bo.50862.201879https://www.cnblogs.com/xing901022/p/6216456.html简要说明：使用oozie需要coordinator.xml
羽溪夜·2018-04-19 13:59

hadoop学习路径（知乎）

Hadoop家族产品，常用的项目包括Hadoop,Hive,Pig,HBase,Sqoop,Mahout,Zookeeper,Avro,Ambari,Chukwa，新增加的项目包括，YARN,Hcatalog,Oozie
冷暖己知·2018-04-13 09:35

作业流调度框架 oozie 使用 （二）

oozie任务调度处理标签（空格分隔）：协作框架一：oozieexample运行任务调度案例二：oozie运行自定的mapreduce的jar包三：oozie调度shell脚本四：oozie的coordinator
flyfish225·2018-04-12 13:29

作业流 oozie调度框架的配置与使用（一）

一：常见的调度框架一：oozie概述与功能二：oozie安装与配置一：常见的作用调度框架1.1linux下面的计划任务在工作量比较下的情况下使用linux下的crond使用定制计划任务*****后面接调度
flyfish225·2018-04-12 13:48

Oozie 介绍

Hadoop调度框架LinuxCrontabAzkabanhttps://azkaban.github.io/Ooziehttp://oozie.apache.org/Zeushttps://github.com
治辉料码·2018-04-05 16:39

WorkFlow中Sqoop Action运行案例

复制样例[beifeng@hadoop-senioroozie-4.0.0-cdh5.3.6]$cp-rexamples/apps/sqoopoozie-apps/样例重新命令mvsqoopsqoop-import
治辉料码·2018-04-05 16:04

解决To enable Oozie web console install the Ext JS library.

CDH安装Oozie时显示错误如下：页面提示内容如下：Ooziewebconsoleisdisabled.ToenableOoziewebconsoleinstalltheExtJSlibrary.RefertoOozieQuickStartdocumentationfordetails
WeiShenXiang·2018-03-28 09:20

oozie 命令行 中文

oozie用的比较的多了，自己再通过help做一下总结。遗憾是，一直没有用到bundle。以下，就是ooziehelp的命令显示出的内容，利用Google+有道+自己，翻译了一下。
白话·2018-03-23 18:03

kubernetes之CronJob介绍

在进行任务自动化的时候，Hadoop生态中有Oozie可以用来管理workflow，但是如果我们的任务是通过pod部署在了kubernetes上的话，我们就可以利用cronJob来进行job的定时与周期性的运行
Hello-BigData·2018-03-20 14:31

hadoop生态系统

（HDFS、MapReduce、Yarn、Zookeeper、Hive、HBase、Oozie、Pig、Flume、Sqoop）hadoop是一个开源框架，可以编写和运行分布式系统来处理大规模的数据集。
Wpixel·2018-03-19 11:48

Amabri安装HDP Hadoop集群

HDP(HortonworksDataPlatform)是Hortonworks开源的数据平台，几乎包含了Hadoop生态系统中的所有项目，如HDFS、MapReduce、Hive、HBase、Pig、Oozie
wangpei1949·2018-03-10 19:17

详解Linux运维工程师高级篇（大数据安全方向）

运维工程师高级篇（大数据安全方向）hadoop安全目录：kerberos（已发布）elasticsearch（已发布）https://blog.51cto.com/chenhao6/2113873knoxoozierangerapachesentry
cs312779641·2018-02-07 18:15

开源大数据周刊-第11期

E-MapReduce服务1.3.4版本(正在研发)升级jdk到1.8升级Hadoop到2.7.2添加python2.7.1及python3.4版本添加numpy库支持Presto、phoenix、jstorm、oozie
aliyun32183·2018-02-06 15:02

开源大数据周刊-第12期

E-Mapreduce团队1.3.4版本(已经发布)升级jdk到1.8升级Hadoop到2.7.2添加python2.7.1及python3.4版本添加numpy库支持Presto、phoenix、jstorm、oozie
aliyun32183·2018-02-06 15:54

开源大数据周刊-第13期

E-Mapreduce团队1.3.4版本(已经发布)升级jdk到1.8升级Hadoop到2.7.2添加python2.7.1及python3.4版本添加numpy库支持Presto、phoenix、jstorm、oozie
aliyun32183·2018-02-06 15:46

利用oozie，执行sqoop action将DB2中的数据导入到hive分区表中

测试：利用oozie，执行sqoopaction将DB2中的数据导入到hive分区表中。需要注意的地方：1，要添加hive.metastore.uris这个参数。否则无法将数据加载到hive表中。
白话·2018-01-26 16:19

Hue + Oozie + Sqoop 使用

有个刚接触的人不知道的是，Oozie自带sqoop、hive等常用组件，比如执行sqoop脚本命令时，并不是你主机里或者CDH里的的sqoop，而是HDFS下Oozie里的sqoop在起作用，这也是为什么总是报
afunyusong·2018-01-26 10:36

CDH Oozie 安装，使用，优化小技巧

前言突然想用oozie管理任务就安装了一个，把一些东西记录下来。在这之前的cdh我没有写，话不多说开干。
轻风细雨·2017-12-21 13:24

Setting up Oozie high availability

本文介绍如何搭建四节点的OracleLinux7集群以及oozie的HighAvailability。
candon123·2017-12-15 11:59

Apache Oozie Installation

oozie就是一个workflow协调系统，主要用来管理Hadoop作业(job)。属于web应用程序，由oozieclient和oozieserver两个组件构成。
candon123·2017-12-14 16:53

安装CDH找不到java_home的错误

以前没有注意这个问题,我们用tar包自己解压安装jdk的时候,应该要安装到/usr/java目录下,没有就新建.这样就不会报错了,否则在安装hive,oozie检测mysql连接的时候会报错.后面安装zookeeper
Elonyong·2017-12-05 09:21

Oozie-Bundle组件

BundleOverviewBundle是Oozie任务组织架构中higher-level的组织形式，在技术实现上，它是coordinator应用的一个集合，在业务上用户可以将多个coordinator
PunyGod·2017-12-03 07:27

OOZIE 4.1 中的 Java动态代理 递归 应用

java动态代理介绍：http://liugang594.iteye.com/blog/2039934/***LicensedtotheApacheSoftwareFoundation(ASF)underone*ormorecontributorlicenseagreements.SeetheNOTICEfile*distributedwiththisworkforadditionalinform
张章章Sam·2017-12-01 15:20

CDH中oozie 定时调度sqoop job

本文就oozie定时调用sqoopjob从oracle库中增量导入数据至hive表具体操作记录一下：首先，准备工作是在HDFS上创建ooziejob需要的workflow.xml,hive-site.xml
河南骏·2017-10-24 16:50

CDH中oozie 定时调度sqoop job

本文就oozie定时调用sqoopjob从oracle库中增量导入数据至hive表具体操作记录一下：首先，准备工作是在HDFS上创建ooziejob需要的workflow.xml,hive-site.xml
河南骏·2017-10-24 16:50

安装Oozie4.1.0-CDH版本

安装oozie经历了好长的时间，先是源码包，但是放弃了。。。然后就是安装的这个CDH版本的，弄了好久，经常报各种错误。最后整理出来这篇。这个安装过程同样适用于oozie4.1.0的其他的CDH版本。
白话·2017-10-13 12:48

【置顶】历史书单--程序员的文娱情怀

本文地址：【置顶】历史书单--程序员的文娱情怀快速索引文档连接：Hive文档Hdfs官方Spark官方Oozie官方CDH文档IDEA文档About云中文论坛JavaPlatformSDKJava8懒妹表达式公开课
程序员的文娱情怀·2017-09-29 08:00

azkaban2.5.0安装

azkaban是一个工作流调度器，常见的工作流调度器有Oozie,Azkaban,Cascading,Hamake等下载地址:http://azkaban.github.io/downloads.html
bingo_liu·2017-09-07 22:10

大数据协作框架简介

在此，主要是以下四个框架：1）数据转换工具Sqoop2）文件收集库框架Flume3）任务调度框架Oozie4）大数据Web工具Hue分析数据的来源？
象在舞·2017-09-01 21:28

Oozie和Azkaban的技术选型和对比

原文：http://blog.csdn.net/gaoqida/article/details/52165204Oozie和Azkaban的技术选型和对比一．Azkaban和Oozie的工作流程1.1Azkaban
u013063153·2017-08-23 17:28

Shell执行/调用Java/Jar程序例子的实例详解

Shell执行/调用Java/Jar程序例子的实例详解前言：最近要写一个独立的Java程序去监控Hadoop和Oozie,通过Shell去调用.写代码到现在也4年多了,貌似就从来没在生产环境中写过一个独立的
guoyunsky·2017-08-18 17:26

oozie_mail

不过没事oozie有。
Kumquatlemon·2017-08-01 10:57

oozie_bug

oozie_bug提交oozie任务（包含sqoop任务的shell脚本）报如下错误：Jobinitfailed:org.apache.hadoop.yarn.exceptions.YarnRuntimeException
Kumquatlemon·2017-07-31 19:13

Oozie 配合 sqoop hive 实现数据分析输出到 mysql

cenzhongman/p/7258358.html文件/RDBMS->flume/sqoop->HDFS->Hive->HDFS->Sqoop->RDBMS其中，本文实现了使用sqoop从RDBMS中读取数据(非Oozie
weixin_30652491·2017-07-30 09:00

HADOOP生态圈以及各组成部分的简介

的SQL数据仓库工具HBASE：基于HADOOP的分布式海量数据库ZOOKEEPER：分布式协调服务基础组件Mahout：基于mapreduce/spark/flink等分布式运算框架的机器学习算法库Oozie
乐搏学院Learnbo·2017-07-26 17:03
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他