KEttle

Kettle入门之六 Kettle应用场景（字段合并）

Kettle应用场景示例1：将数据源A库中的某张表的数据插入到数据库B中。示例2：将数据源A库中的某张表的数据插入更新到数据库B中。
开心跳蚤·2020-02-08 07:17

常用英语单词分类速记（12）

Kitchenware厨房用具（1）Container容器箱包Basket篮子Bag包Pack小包（美）Packet小包（英））Box盒子Case箱子Tin罐头盒瓶瓶罐罐Basin盆子Bottle瓶子Jar罐子Jug罐子Kettle
逍遥未遂·2020-02-07 06:52

HTTP走私攻击（HTTP数据接收不同步攻击）

web-security/request-smuggling作者通过这一个漏洞，在hackone平台上挖了很多应用的漏洞，获得了几万美元的奖励，然后还在blackhat上演讲过，可以搜下他的ppt（us-19-Kettle-HTTP-Desync-Attacks-Smashing-Into-The-Cell-Next-Door
Magicknight·2020-02-06 13:35

kettle-资料整理&代码示例

整理的相关资料集成和扩展Kettle的文档官方例子API官方wiki一些常用的实例连接资源库KettleEnvironment.init();//DatabaseMeta(Stringname,Stringtype
vengo_mo·2020-02-05 03:40

通过Kettle自定义jar包供javascript使用

这篇文章主要介绍了通过Kettle自定义jar包供javascript使用,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下我们都知道Kettle是用Java
CREATE_17·2020-01-29 13:27

Kettle自定义jar包供javascript使用

我们都知道Kettle是用Java语言开发，并且可以在JavaScript里面直接调用java类方法。所以有些时候，我们可以自定义一些方法，来供JavaScript使用。
CREATE_17·2020-01-24 23:00

【实战】使用 Kettle 工具将 mysql 数据增量导入到 MongoDB 中

最近有一个将mysql数据导入到MongoDB中的需求，打算使用Kettle工具实现。本文章记录了数据导入从0到1的过程，最终实现了每秒钟快速导入约1200条数据。
CREATE_17·2020-01-24 23:00

Kettle入门教程-01-快速开始

KettleDataIntegration(orKettle)deliverspowerfulExtraction,Transformation,andLoading(ETL)capabilities,
叶止水·2020-01-08 03:52

kettle高级教程-自动同步

KETTLE4个工作中有用的复杂实例--2、两表数据比较，比较后自动同步（部门、单位数据同步）二、两表数据比较核对，核对后自动同步至目标数据表目标：比较t_bm表的数据和t_bm_target表的数据，
大喇叭学java·2020-01-07 16:00

kettle入门教程-表同步插入

在平时工作当中，会遇到这种情况，而且很常见。比如：增量抽取(每隔2个小时抽取截至到上次抽取时间的记录)一、操作前提：存在3张表，源表（t_student），同步日志表（t_tbrz），插入表（t_target_student），表结构如下图所示![](https://img2018.cnblogs.com/blog/1891116/201912/1891116-20191212111045735-
大喇叭学java·2020-01-07 16:00

学习笔记系列----2、kettle实现时间维度

学习笔记之时间维度整体转换整体分解生成小时、分钟、秒的初始化数据行GenerateHours生成24行数据，用来表示一天中的24小时GenerateMinutes生成60行数据，用来表示一天中的24小时GenerateSeconds生成60行数据，用来表示一天中的24小时数据行生成序列通过自增序列，形成一些列连续整数：023小时、059分钟、0~59秒。以24小时为例：生成自增序列预览小时序列如下
夏无忧阳·2020-01-07 14:55

kettle连接DM7(达梦7)数据库

0.需求背景应项目国产化适配需要，后续需要将数据迁移至DM7数据库中，调研kettle连接DM71.kettle连接DM7的相关操作1.1DM7驱动安装kettle连接DM7，本质上是通过JDBC连接，
某人的喵星人·2020-01-07 14:00

学习笔记系列----1、kettle之js实现日期维度

最近在《PentahoKettle解决方案：使用PDI构建开源ETL解决方案》一书中看到了构建时间维度的kettle过程，进行一下学习记录。对kettle有兴趣的可以去看一下这本书，很不错的一本书。
夏无忧阳·2020-01-06 13:34

Kettle常见问题资料汇总

1、官方资料http://wiki.pentaho.com/display/EAI/Latest+Pentaho+Data+Integration+%28aka+Kettle%29+Documentation2
莹镜春鸣·2020-01-06 11:38

MATLAB 编程风格指南

MATLAB编程风格指南——RichardJohnsonVersion1.5，Oct.2002版权；Datatool所有翻译：Genial@USTC“Languageislikeacrackedkettleonwhichwebeattunedtodanceto
我是谁的小超人·2020-01-04 01:05

数据分析学习记录W23——ETL经验点

概念认知KETTLE由输入/转换/输出构成的流程，功能类似preap将转换和相关作业组建串联起来，形成的一个整体的任务展示一个job的基本属性作业必须从strat开始，按住shift拖放实现连线
演奏的船长·2020-01-02 19:37

项目架构分析及概要知识点总结

##项目整体架构抽数---加工宽表---加工remod表---加工接口表---提取数据##调度采用工具kettle##加工宽表、remod表采用工具以及使用语言Pgadmin##加工宽表、remod表涉及主要知识点存储过程和函数
桑桑sangsang·2020-01-02 12:16

KETTLE4个工作中有用的复杂实例--2、两表数据比较，循环取数据，比较后自动同步（部门、单位数据同步）

KETTLE4个工作中有用的复杂实例--2、两表数据比较，比较后自动同步（部门、单位数据同步）二、两表数据比较核对，核对后自动同步至目标数据表目标：比较t_bm表的数据和t_bm_target表的数据，
KETTLE教程·2020-01-02 08:00

学在快手，拆掉课堂的门

“今天咱们来学三个单词，frogjump，蛙跳；dumbbell，哑铃；Kettlebell，壶铃。”最后用英汉双语做总结。Sam在快手开设的
凤凰WEEKLY·2019-12-30 00:00

学在快手，拆掉课堂的门

“今天咱们来学三个单词，frogjump，蛙跳；dumbbell，哑铃；Kettlebell，壶铃。”最后用英汉双语做总结。Sam在快手开设的
凤凰WEEKLY·2019-12-30 00:00

Kettle手册（十）- 跨库查询

Kettle整体使用起来，还是很方便的，熟悉应用了之后，就是对控件的熟悉和使用了，只要思路有了，就是整合下Kettle中各个控件的使用就行。这里，简单介绍下一个“跨库查询”的控件。
橘猫吃不胖·2019-12-29 06:40

KETTLE4个工作中有用的复杂实例--1、数据定时自动（自动抽取）同步作业

今天呕心沥血花了8个小时给大家带来kettle工作中最常见的四种复杂实例，90%的项目用到这4种实例都可以解决。
KETTLE教程·2019-12-28 11:00

Kettle（二）数据抽取与插入模型

Kettle（二）数据抽取与插入模型-http://www.jianshu.com/p/eea13891bdb0如果说Transformation是数据流的话，那么Job就是工作流，它包含了多个Transformation
葡萄喃喃呓语·2019-12-28 08:31

ETL工具-KETTLE教程 实例实战4----转换（值映射、列转行，增加常量、增加序列等）

接着上一讲，讲完了常用的输入、输出控件后，这一节我们来讲下常用的转换控件，如下图：3、转换3.1值映射：将一个数据流的内容，转换成另外的数据流，并输出。作用如同sql语句中的decode函数。此处用到三个控件，表输入、表输出（可以参考前面的内容）和值映射。三个控件用hop线进行连接。双击值映射，如上图所示配置好相应的源值和目标值，通过连线从A表连接到B表。运行结果如下：3.2列转行：将二维数据流的
KETTLE教程·2019-12-26 19:00

Kettle生态群

Kettle开发和版本GA(一般发布)版本Kettle最稳定的版本，可以在生产环境中使用。事实上，在生产环境里，我们只建议使用GA版本。
小纠结在简书·2019-12-26 17:27

在Linux下设置Kettle的定时任务

一、【创建脚本文件】1、创建脚本文件目录kettleShell和日志文件kettleLogs[root@localhost~]#cd/usr/local/[root@localhostlocal]#mkdirkettleShellkettleLogs2
Yuezc·2019-12-26 11:00

ETL工具-KETTLE教程实例实战3----转换（输入、输出）

一个作业相当于一次执行的全过程，而每个作业是由许多的转换和作业组成，下面我们先跳过作业和数据库连接直接先讲抓换：转换同时也是有许多的各种控件组成，下面我们就先来介绍下常用控件的使用，再举例说明下常用控件的使用：一、转换1、输入1.1、表输入：连接数据库（oracle、mysql、DB2，infomix，sqlserver），根据sql语句查询相关数据，放入数据流具体步骤：按照上图顺序：1、配置数据
KETTLE教程·2019-12-26 09:00

ETL工具-KETTLE教程专栏2----环境介绍

一、整体结构图Kettle是”KettleE.T.T.L.Envirnonment”只取首字母的缩写，这意味着它被设计用来帮助你实现你的ETTL需要：抽取、转换、装入和加载数据；翻译成中文名称应该叫水壶
KETTLE教程·2019-12-24 12:00

ETL工具-KETTLE教程实例实战1----术语和定义

资源库有两种形式：一、Kettledatabaserepository，即保存在各种常见的数据库资源库类型，用户通过用户名/密码来访问资源库中的资源，默认的用户名/密码是admin/admin和guest
KETTLE教程·2019-12-24 11:00

Kettle企业版特性

Pentaho提供了两个Kettle版本，一个是开源的社区版(CE)，另一个是企业版(EE)，这是一个商业软件。企业版提供了更多的功能。
小纠结在简书·2019-12-24 06:45

KETTLE 更新表的两种方式-更新控件和sql更新 2种方式的实现比较

在实际工作中，我们有可能遇见只更新不插入的情况，可以由以下2种方式去实现：1、更新控件如下图所示，根据id字段，更新name和cjsj时间字段该控件不足的地方是，用来查询关键值得字段不够灵活，一些在sql里面where条件后的decode,nvl,to_date等字段均无法写在用来查询值的关键字上，但是速度较快2、sql输入如下图所示，根据id字段，更新name和cjsj时间字段该控件比较灵活，一
KETTLE教程·2019-12-23 10:00

2018-12-25

今天重点：1.做该做的事2.微信公众号的登录保持，和普通的web服务器实现方式不一样，可以看一下3.自定义注解的实现方式可以了解一下4.分布式事务还需要继续看看，主要要生成一个文档5.kettle好像没什么时间看啊
黄褐色猫头鹰·2019-12-22 20:21

2017-12-29

Kettle1.Kettle的介绍：Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。
有你就行·2019-12-22 08:46

大数据工作笔记||如何使用kettle发送邮件？

最近工作中遇到一个问题，如何将kettle统计好的数据每天早上发送给用户？以前都是每天早上过来手动写邮件然后再添加附件，觉得这样太弱了，就想着用kettle的自动发送邮件。
云成鹏·2019-12-22 03:30

Kettle内置的变量和属性参考

下面列出了Kettle的内置变量，我们可以在运行时使用这些变量，使Kettle更灵活地运行。内部变量Kettle转换或作业的运行时变量。
小纠结在简书·2019-12-20 15:00

0201【前线报道】最后一个冰上训练日温情四溢，登陆NBA赛场兴奋不已

按照行程安排，华盛顿当地时间1月31日，营员们将最后一次前往KettlerCapitalsIceplex（冰场）进行冰上训练，并与华盛顿传奇巨星PeterBondra互动交流，此外，在训练结束后，营员们还将参观华盛
orgsports·2019-12-20 03:24

Java调用自己开发的Kettle plugin插件

Kettle6.1相比Kettle3改动太大了。下面直接上代码，备忘！
lyjohn·2019-12-18 04:32

Pentaho Data Integration(Kettle) 简单上手

PDI(PentahoDataIntegration，或者Kettle)是一款开源的ETL工具，可以用它来对数据进行抽取、清洗和转换操作，从而获得我们想要的数据。
iHelin·2019-12-17 16:55

Linux下kettle的定时调度

crontab里的记录项就是一个字符串，这个字符串的前半部分是调度方式，后半部分是要调度的命令行，也就是kettle的kitchen（执行作业）和pan（执行转换）命
夏无忧阳·2019-12-17 03:23

Oracle数据库里发邮件

背景最近由于kettle在同步Oracle数据的时候，时不时会有数据丢失，为了避免数据丢失的时候我们不能及时发现，领导要求在数据库里每天同步完数据之后，进行一次核对，并将核对结果通过邮件发送出来。
快看，阳光！·2019-12-17 01:00

Kettle相关文章索引（1）

环境部署DataIntegration-Kettle6.0下载安装下载链接http://jaist.dl.sourceforge.net/project/pentaho/Data%20Integration
司小幽·2019-12-16 20:29

kettle教程---通过配置表格配置实现数据的批量增量更新（实用）

本文接上篇文章，上面文章讲的是，通过配置文件的全量更新，现在说下增量更新如上图所示，涉及到1个转换和1个作业。1-表增量同步（转换）可以通过读取同步表参数这个excel表格文件，获取表名称和同步的依赖对象（本文就是cjsj创建时间），同步成功后复制记录到结果2-增量数据同步（作业）我们右键点开如上图，包含了7个转换组成。1）表数据同步设置（转换）获取上个转换的记录，放到设置变量中。2）表数据同步设
KETTLE教程·2019-12-16 18:00

kettle 运行参数说明与示例

kettle的kitchen.bat/kitchen.sh后面参数说明*options:/rep:repositoryname/user:repositoryusername/pass:repositorypassword
剑御·2019-12-14 12:40

kettle教程---kettle作业调度，附件（excel）配置表名，一个调度完成所有的表操作

在平时工作当中，会遇到这种情况：复制一个库，几百甚至上千张表，并且无法设置dblink，此时通过kettle可以快速完成该任务。
KETTLE教程·2019-12-13 22:00

kettle教程---kettle作业调度，根据更新时间增量更新

本文接上一篇，只写到读取日志。在平时工作当中，会遇到这种情况，而且很常见。比如：增量抽取(每隔2个小时抽取截至到上次抽取时间的记录)本文中会用到作业，先来熟悉下作业的概念简单地说，一个转换就是一个ETL的过程，而作业则是多个转换、作业的集合，在作业中可以对转换或作业进行调度实际情况中，每次抽取完毕，会写入日志表，记录本次抽取时间，下次抽取会根据本次抽取的成功时间，开始获取数据进行抽取。我们可以使用
KETTLE教程·2019-12-13 20:00

kettle教程---增量更新

个小时抽取截至到上次抽取时间的记录)一、操作前提：存在3张表，源表（t_student），同步日志表（t_tbrz），插入表（t_target_student），表结构如下图所示学生表同步日志表待插入学生表二、kettle
KETTLE教程·2019-12-12 13:00

Kettle转换和作业解疑（干货）

kettle中转换和作业的执行顺序：1、一个作业内的转换，是顺序执行的。2、一个转换内的步骤是并行执行的。3、作业内不支持事务，转换内支持事务。
神谕03·2019-12-12 11:00

KETTLE入门教程-单表读取

kettle初探Kettle简介：Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。
KETTLE教程·2019-12-12 09:00

Kettle 执行SQL脚本

以下操作都在5.0.1版本下进行开发，其余版本可以进行自动比对本文将对Kettle5中常用步骤字段选择（又名选择/改名值，英文原名：SelectValues）进行详细解释。
KETTLE教程·2019-12-11 17:00

KETTLE多表关联的同步一张表的两种实现方式

以下操作都在5.0.1版本下进行开发，其余版本可以进行自动比对在平时工作当中，会遇到这种情况，而且很常见。比如：读取对方的多个视图或者表，写入目标库的一张表中，就涉及到多表的同步。多表同步可以有以下两种方式实现，接下来笔者就给大家分别介绍下实现方式：方式一：多表关联查询后，写入一张表1、根据这两张表的数据，表有学生表和班级表，写入目标表：学生班级表2、选择表输入，双击表输入，在sql一栏里写入关联
KETTLE教程·2019-12-10 19:00
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他