kettle

使用kettle进行数据标准化

整个kettle调度1-0获取数据库名称数据获取数据库名称数据select''ASDB_ID,''asdb_name,''ASDW_CODE,''ASDW_NAME,''ASZT_CODE,''ASZT_NAME
爱你的黑林·2019-06-03 14:28

使用kellte（ETL工具）对数据的抽取、迁移等操作（入门安装篇）

Kettle简介：Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。
甄齐才·2019-05-29 12:13

使用ETL 工具kettle spoon 实现数据库多个表的 （同步数据- 不同步表）

参考的资料地址：https://blog.csdn.net/sky08050025/article/details/796082311.先获取所有数据库所有表2.判断迁移数据库中是否有这个表3.进行相同表名数据迁移---------------------------------------------------------------------------------------------
风还在继续吹·2019-05-28 17:08

kettle 连接sqlserver报错解决

source=files下载完后将jar包放入kettle安装目录下，lib文件夹中即可，重启kettle转载于:https://www.cnblogs.com/zzchao/p/10931076.html
weixin_30375247·2019-05-27 15:00

ETL工具之Kettle的使用及源码研读

再说下Kettle是什么。它其实就是一个数据迁移的工具，使用java编写，提供图形界面来设计ETL转换过程。Kettle中有两种脚本
上道至简·2019-05-26 22:18

Kettle学习（4）：Kettle取差集数据类似oracle的minus

背景工作中遇到的一个问题，场景是这样的，我们需要从A数据库通过一定的逻辑转换到B数据库，原来同事做的方式是使用了Kettle里面的一个控件，插入/更新这个控件，但是，程序上线一段时间后发现一个问题，A库的删除是物理删除
lovePaul77·2019-05-25 22:39

Kettle学习（3）：JAVA调用Kettle脚本使用JNDI配置文件

背景工作上遇到了一个前同事写的bug，关于Kettle这个文件的调用的问题，之前的同事可能也是着急实现这个功能，大体就是迁移核心的数据到ncpi系统的这一过程写的ktr的转换脚本是手动配置数据库，而且好几个
lovePaul77·2019-05-25 21:55

Kettle学习（1）：Kettle使用说明文档

Kettle使用说明文档Kettle的介绍Kettle下载和安装Kettle连接数据库（一）Kettle连接数据库（二）数据迁移案例（一）数据迁移案例（二）Kettle的介绍Kettle是一款国外开源的
lovePaul77·2019-05-25 15:01

Kettle学习（1）：Kettle使用说明文档

Kettle使用说明文档Kettle的介绍Kettle下载和安装Kettle连接数据库（一）Kettle连接数据库（二）数据迁移案例（一）数据迁移案例（二）Kettle的介绍Kettle是一款国外开源的
lovePaul77·2019-05-25 15:01

Java面试题整理四（GC和内存）

场景：本公司准备搭建自己的数据仓库，于是需要使用ETL工具Kettle（现改名Spoon，基于JVM运行。
Sammion·2019-05-24 17:12

使用kettle自动增量导入数据

sqoop+oozie,可以实现大批量数据从mysql到hdfs的自动导入,我们借助网页可以实时监控流程的运转情况,但是如果业务逻辑发生变化,想要调整sqoop+oozie的流程细节并不是件轻松的事.kettle
IAmListening·2019-05-19 20:04

分布式异构数据库同步方案一

摘要：文章目录分布式异构数据库同步方案什么是Kettle一个demo（oracle-->mysql）kettle安装安装和连接中遇见的bugkettle使用分布式异构数据库同步方案1.用kettle工具将远程服务器上的
-YING击长空-·2019-05-18 13:02

JAVA集成kettle实现数据自动化抽取清洗功能

JAVA集成kettle实现数据自动化抽取清洗功能老样子，第一步，环境搭建，jar包准备：一、下载Jar包二、准备测试代码三、运行测试代码，查看运行情况老样子，第一步，环境搭建，jar包准备：由于Maven
一匹有梦想的蜗牛·2019-05-14 17:59

DataX和kettle初步认识

文章目录DataX和kettle初步了解DataXDataX特点DataX结构模式（框架+插件）Kettlekettle的优点：DataX和kettle对比参考DataX和kettle初步了解DataXDataX
西京刀客·2019-05-12 11:34

Kettle使用接口获取数据（九）

httpclient填写地址httpclient获取到的json数据jsoninput解析json数据可以用字段选择来获取自己想要的数据，然后存入表中使用定时任务来运行工程kettle有自带的定时任务，
Bush罗·2019-05-12 09:11

kettle脚本中java代码-字符串转换用法

有时候kettle中的组件不能满足需求情况下，可以使用java代码组件实现，以下是实现读取一个文本文件，但是文本文件中的分割符是个数不等的空字符，比如空格，像转为一个空格，再拆分字符串数组。
朝闻道-夕死可矣·2019-05-11 16:15

kettle实现整库迁移

kettle实现整库迁移文章目录kettle实现整库迁移1背景2思路2.1获取表名2.2循环建表和同步2.2.1如何设置循环2.2.2建表和同步2.2.1获取变量2.2.2建表2.2.3单个表同步3数据库连接共享
SOAFR·2019-05-10 10:47

kettle无法连接mysql

1、kettle版本为V7.0，mySql版本为V5.72、在kettle中创建DB连接时，一直报“org.gjt.mm.mysql.Driver”找不到的错误。初步判断是没有连接jar包的问题。
LFfootprint·2019-05-08 09:46

Kettle(PDI)入门笔记

近期在学习大数据处理的一些技能，主要是对数据的提取、转换和输出，用到的软件是Kettle，现在改名为DataIntegration，以下是我学习整理的笔记。
黄耀鸿·2019-05-07 22:34

使用Kettle导入数据到ADB for PostgreSQL

摘要：文章介绍了使用Kettle将数据导入到AnalyticDBforPostgreSQL，包括使用表输出方式(INSERT)和批量加载方式(COPY)导入到AnalyticDBforPostgreSQL
阿里云云栖社区·2019-05-07 00:00

Kettle的安装和使用

Kettle简介Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。
auspicious航·2019-05-05 17:31

Kettle学习（2）：服务器中java项目调用Kettle转换脚本ktr

SpringBoot定时任务调用Kettle文件项目背景实施过程一、maven本地安装ktr所需要的jar包二、编写好ktr文件，确保本地是可以跑通的在说End项目背景报表导出业务涉及了两个库，所以这就导致了要进行跨库进行查询
lovePaul77·2019-05-01 20:04

Windows中如何使用命令行执行Kettle作业Job

前言Kettle是一款开源的、易上手的ETL工具，拥有良好的图形化界面供开发者使用。服务器由于需要不间断地运行Kettle，有时会造成内存过高，甚至会报错退出。
CNSTT·2019-04-30 17:42

kettle入门的例

一、运行Spoon.bat启动kettle；二、表输入右键转换--》新建，点开“输入”项，选择“表输入”双击，点击新建，如下表：此处需要注意的是：mssql的驱动jar包测试通过之后，点击“确认”按钮，
wisdom_power·2019-04-28 18:44

kettle入门的例

一、运行Spoon.bat启动kettle；二、表输入右键转换--》新建，点开“输入”项，选择“表输入”双击，点击新建，如下表：此处需要注意的是：mssql的驱动jar包测试通过之后，点击“确认”按钮，
wisdom_power·2019-04-28 18:44

调用wsdl接口 使用xml格式为参数

由于之前代码都是java代码里面直接调用了java包进行传输xml所以目前要用kettle进行传输必须拼字符串，发现怎么拼都不对接口为：http://120.35.29.XXXX:XXXX/service
linzuo45·2019-04-25 09:47

ETL-kettle踩坑：从Cassandra到HDFS

kettle是一个开源的ETL工具，基于java，在windows和linux上都可以解压后直接使用。最近在用kettle从Cassandra向hdfd抽取数据的时候，遇到不少问题，特此记录一下。
看穿数据之美·2019-04-24 20:55

kettle 项目实战（二）

课程地址kettle8.2数据仓库零基础快速入门（一）kettle8.2sakila数据库ETL项目基础进阶实战（二）kettle8.2大数据整合构建企业大数据开发环境（三）https://www.boxuegu.com
基哥927·2019-04-23 10:26

KETTLE-作业-通用组件

KETTLE-作业-通用组件通用组件STARTDUMMYJobTransformationSetvariablesSuccess资料通用组件START作业执行的开头，只能存在一个，且只对主作业有效，子作业是无效的支持定时
buddx·2019-04-22 13:09

KETTLE-转换-流程组件

KETTLE-转换-流程组件流程组件Switch/CaseDummy(donothing)DetectemptystreamFilterrowsBlockingStepBlockthisstepuntilstepsfinish
buddx·2019-04-22 13:32

KETTLE工具-初体验

KETTLE工具-初体验工具使用数据库连接新建数据库连接普通局部配置变量局部配置全局配置延伸数据库密码-明文加密总结资料工具使用window系统环境打开data-integration目录下的Spoon.bat
buddx·2019-04-22 13:20

kettle 安装mysql 驱动

错误连接数据库[mysql]:org.pentaho.di.core.exception.KettleDatabaseException:ErroroccurredwhiletryingtoconnecttothedatabaseDriverclass
廖俊才·2019-04-16 18:46

Oracle修改序列值为ID最大值；动态SQL修改序列值；

场景描述：在使用kettle、plsql等工具导数据到数据库后，因为导入的数据有id，而我的表的id使用的是序列，所以需要将序列当前值设置为id的最大值，下一次项目调用的时候自动使用序列的下一个值，避免重复报错
Org丶bug·2019-04-16 00:42

kettle创建资源库

kettle资源库是用来保存转换任务的，用户通过图形界面创建的的转换任务可以保存在资源库中。资源库可以使多用户共享转换任务，转换任务在资源库中是以文件夹形式分组管理的，用户可以自定义文件夹名称。
zxf_noimp·2019-04-15 10:10

kettle的使用从零开始

使用kettle步骤一、软件的打开以及环境要求1、解压压缩文件并找到启动项解压后打开文件夹找到spoon.bat双击注意：启动该软件需要在电脑上配置好jdk2、打开后观点所有的弹窗二、新建转换以及建立数据库链接
ChampionDong·2019-04-10 14:55

如何在linux部署kettle并实现定时调度任务

最近工作中需要在linux部署kettle做数据抽取转换的工作，在此做个记录（略过安装jdk部分）一：部署kettle1：创建一个目，将下载好的kettle解压后放在该文件夹下。
半路和尚怎么出家·2019-04-02 18:58

Kettle7中使用Java脚本进行数据清洗

1.首先，Kettle7.1下载li链接：https://sourceforge.net/projects/pentaho/files/Data%20Integration/7.1/pdi-ce-7.1.0.0
BAStriver·2019-03-29 17:14

kettle6.1从http接口读取数据并解析json以及xml

业务需求1、从数据库中读取表内容作为入参；2、根据入参读取http接口并获取返回数据；3、解析返回的json并提取其中的xml字段；4、解析该xml字段；5、入库。使用组件表输入用于读取数据库内容、restclient用于发送http请求并接受返回数据、jsoninput用于接收返回数据并解析、GetdatafromXML用于解析XML数据结构入参为姓名、身份证号，直接数据库中读取并拼接获取到入参
烫烫烫口·2019-03-29 14:46

Kettle在Linux图形界面运行卡顿调优

Kettle是使用Java编写的，使用的时候尽可能的将JVM设置的足够大#****************************************************************
凯布斯·2019-03-24 15:51

Kettle之Carte最佳实践

前言kettle支持Carte服务级部署模式，即服务器后台会跑一个常驻Carte程序，job/trans都运行在这个服务里。这篇文章主要讲述carte从配置、任务提交到监控的实践。
data之道·2019-03-23 12:48

Kettle spoon

ETL工具：KettlespoonKettlespoon1.转换：将数据流经过一系列操作传输到目标数据源转换的创建：新建一个转换1新建空白转换文件—>新建—>转换：新建一个空白的转换，c
一名奋斗的程序猿·2019-03-18 13:09

Kettle：webservice接口数据转存到数据库

(1)定义webservice的接口，添加URL和操作的方法即可(2)声明webservice接口的参数，PAT_NO是上游传递过来的参数名对应WS中的参数req，输出可直接选择默认的。(3)解析xml。经过web服务器查询后，会获得多条xml字符串语句，这里使用组件“getdatafromxml”进行转换。单击获取XML文档的路径，把你获取的到xml格式复制进去(可以断点运行web那一步获取到的
PJ-Javis·2019-03-13 10:54

Kettle 定时任务（后台任务）

作者：开心跳蚤来源：简书转载地址：https://www.jianshu.com/p/7e9a02dec8d2摘要：Kettle的Kitchen和PanKitchen——作业(job)执行器(命令行方式
dzdffg·2019-03-12 18:38

Kettle：查询结果传递以&相关子查询

场景需求：源数据库表A和B，目标数据库表C，需要根据表A符合条件的ID去查询表B的记录，最后把结果放入到表C(表C和表B的字段完全一致）Kettle的需求：根据前一个表的筛选结果去查询另一个表（1）从A
PJ-Javis·2019-03-12 11:10

【Kettle】使用kettle连接MySQL数据库报错

kettle连接MySQL报错场景：kettle版本：7.1使用kettle连接到MySQL数据库报错错误连接数据库[mysql_mtest_31]:org.pentaho.di.core.exception.KettleDatabaseException
debimeng·2019-03-05 20:53

kettle 连接 hive

1.修改kettle安装目录下/data-integration/plugins/pentaho-big-data-plugin/plugin.properties文件中active.hadoop.configuration
紫色Dandelion·2019-03-05 17:47

错误：找不到或无法加载主类org.pentaho.di.ui.spoon.Spoon

最近在看ETL工具kettle。
dd_9921·2019-03-03 22:26

kettle(四):kettle连接Mysql数据库，将表的数据转换成excel文件

在kettle里连接Mysql中的数据库表，并转换成excel文件输出数据。
junliucq·2019-02-24 12:50

kettle中Pan kitchen用法及bat写法

bat文件cdC:\data-integration---kettle目录例：@echooffcdC:\data-integrationpan/repmssql/useradmin/passadmin/
dn_xiaoxiao·2019-02-22 21:36

Data Integration - Kettle8.2使用（一）Kettle下载安装

看到网上关于kettle的大多是老的版本，所以打算自己写一个最新版的怎么来使用kettle的。什么是kettle？
我俗人·2019-02-22 17:37
上一页 35 36 37 38 39 40 41 42 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他