kettle

过去的2017和已经到来的2018

二、关于工作目前任职于山西某大型超市信息中心，懂点业务，会点技术，算是尽心尽职且忙忙碌碌的一年，除了日常工作外，重点参与了两个项目：1、数据报表项目，通过项目学会了Kettle、SSIS工具传输数据；2
卡卡不卡·2018-01-04 09:00

kettle案例五使用js脚本进行json数据处理新增行

我们通过两个例子来学习Js处理数据新增行:例子一字符串拆分按照原始数据列”aaabbbcccddd”把数据分成4行。比如我们有原始数据行如下:idgroupperson1Aaaabbbcccddd我们需要获取A组中都有哪些人，则需要对数据进行拆分并生成新的行。使用代码如下:varstr=person.toString();vartokens=str.split("");vari;for(i=0;i
张小凡vip·2018-01-02 15:37

kettle部署

1.将jmbisql先上生产环境,参考附件jmbi.sql2.kettle安装部署选好目标机器，装好jdk1.8然后登录测试环境192.168.1.142，复制kettle安装文件，job，shell脚本
h_1_y_m·2017-12-26 16:37

kettle部署

阅读更多1.将jmbisql先上生产环境,参考附件jmbi.sql2.kettle安装部署选好目标机器，装好jdk1.8然后登录测试环境192.168.1.142，复制kettle安装文件，job，shell
h_1_y_m·2017-12-26 16:00

kettle的入门

kettle是一个用java写的开源ETL工具，工作中用到了，分享一下使用安装：下载解压即可：下载地址 https://nchc.dl.sourceforge.net/project/pentaho/Data
krauser1991·2017-12-22 22:09

阅读英文新闻get的词汇 19.12

massive大量的mass群众的masswedding集体婚礼jointly共同的togethercottonthreads棉线firstever史无前例的towoomoretourist为了吸引更多的游客kettle
小公举的碎碎念·2017-12-19 21:24

阅读英文新闻get的词汇 19.12

massive大量的mass群众的masswedding集体婚礼jointly共同的togethercottonthreads棉线firstever史无前例的towoomoretourist为了吸引更多的游客kettle
小公举的碎碎念·2017-12-19 21:24

Maven将Kettle的Jar安装到本地仓库和Jar上传到私服

Jar的maven配置pentaho-kettlekettle-core5.0.1-stable1.将Jar包安装到本地仓库命令：[html]viewplaincopymvninstall:install-file-Dfile
星空下的蜜蜂·2017-12-18 11:15

Kettle实例解析

参考自李蒙强的博客：《ETL利器Kettle实战应用解析系列二》重新操作、改造、配图首先建表并插入数据三张事实表droptableaa_cust;createtableaa_cust--客户表(custnoint
皓月如我·2017-12-14 15:55

Hbase初窥

Hbase能做什么海量数据的存储海量数据的查询企业数据海量查询项目需求功能海量数据实时查询场景复杂数据采集sqoop（flume）kettleHbase基本信息企业用的比较多的版本0.98，0.98是针对
Gallin_Qiu·2017-12-11 07:42

StepDialogInterface 接口

kettle是采用java的swt来进行界面开发的构造函数下面是构造函数的代码：publicObfusDialog(Shellparent,Objectin,TransMetatr,Stringsname
比特舞者·2017-12-11 06:58

Kettle_windows下定时任务

1.更改管理员账号administrator2.打开控制面板-计划任务3.到图中位置新增任务Alttext4.新建任务修改安全选项Alttext5.新建触发器Alttext6.新建操作Alttext
剑御·2017-12-11 04:13

基于Eclipse搭建Kettle插件调试环境的两种方法

一般两种情况下需要定制插件，一是Kettle中不具备满足需要的组件，二是现有组件存在缺陷。
eric_hxy·2017-12-08 09:08

kettle案例三抽取json数据保存到mongodb

我们使用kettle来尝试json输入进行解析保存到mongodb。构造转换流程如下:JsonInput到字段选择到mongodbOutput配置json输入左键点击Jso
张小凡vip·2017-12-07 20:06

kettle案例四使用java脚本进行数据处理

如需转载请标明出处：直到世界的尽头-张小凡-http://my.525.life本章我们学习使用java脚本进行数据处理。数据情况以嵌套Json结构为例进行解析，Json如下:{“id”:“0001”,“name”:“Joe”,“age”:88,“children”:[{“id”:“0002”,“name”:“Jay”,“age”:52,“children”:[{“id”:“0003”,“name
张小凡vip·2017-12-07 20:33

Hive远程访问操作

本文介绍如何通过DbVisualizer和kettle远程访问Hive2。
candon123·2017-12-07 10:23

kattle的连接SQLserver与vertica的一些方法

首先大体介绍一下kattle，Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。
MShaw_Yang·2017-12-06 22:10

kettle 流方式处理XML

fileInputStream=newjava.io.FileInputStream(filename);contentBytes=Packages.org.pentaho.di.core.Const.createByteArray(fileInputStream.available());fileInputStream.read(contentBytes);fileInputStream.clo
felix_feng·2017-12-04 20:02

Kettle 7.1 资源库配置&&无法配置资源库&&自定义配置文件路径

资源库配置1、kettle7.1资源库配置在左上角的Connect2、点击Connect，弹出默认资源库：PentahoRepository3、在弹出窗口选择otherRepositories选择对应的资源库类型即可新建
子知我非鱼·2017-12-04 16:22

Kettle:批量数据加载

本文主要介绍文本文件、csv、execl和PostgreSQL的批量数据加载。1、文件文件到PostgreSQL的批量数据加载COPY在PostgreSQL表和标准文件系统文件之间移动数据。COPYTO把一个表的内容复制到一个文件，而COPYFROM则从一个文件复制数据到一个表（把数据追加到表中原有数据）。COPYTO也能复制一个SELECT查询的结果。windows环境下需要从官方下载安装包进行
candon123·2017-12-02 17:32

Kettle:创建资源库

当新建转换或者作业的时候，都是直接保存在本地，而如果是多人开发的话，除了使用SVN等版本控制软件，还可以使用Kettle的资源库，他会将转换、作业直接保存在数据库中，而且，连接资源库的话，就不需要每一次都新建数据库连接了
candon123·2017-11-30 13:55

carte集群的搭建笔记

1.配置集群1.1配置主服务器打开kettle目录，找到pwd目录，里面
眼君·2017-11-30 09:25

Kettle:使用触发器和快照表进行增量数据同步

主库为Oracle11g数据库，针对需要同步的表建立增量数据临时表以及触发器并通过kettle定时同步到PostgreSQL数据库。1、主库创建快照表和触发器注意：快照表结构和源表结构必须一致！
candon123·2017-11-29 15:22

一种优化Kettle转换性能的通用方法

一、问题背景转换和作业是Kettle的两支利剑。其中，转换采用多线程并发运行架构，作业采用递归顺序执行架构。
eric_hxy·2017-11-29 14:27

Transfering MySQL Data To Oracle 12c Using Kettle

二、创建数据库连接2.1创建Oracle连接打开Kettle，文件->新建->作业，右击左侧栏里的“DB连接”，选择新建，如下图所示：PS：如果使用的是pluggabledatabas
candon123·2017-11-27 15:40

Kettle (4) - 跨数据库数据迁移

前面几篇都是做数据抽取，然后输出。本篇介绍如何利用PDI实现简单的数据迁移：将MySQL数据库sakila的film表的数据迁移到sqlite数据库中。先介绍批处理方法，然后介绍增量更新的方法。1.连接sqlite数据库PDI7.1内置了sqlite数据库的连接选项。数据库的驱动是lib文件夹下的sqlite-jdbc-3.xx.jar。连接可以用两种方法：方法一：点击“Next”按钮，设置JDB
Stone0823·2017-11-26 15:37

Pentaho Data Integration 7.1(kettle) 安装手册

Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。
candon123·2017-11-24 15:12

kettle 使用

软件设置配置Java环境,最好配置JAVA1.7以上处理之后的数据中文乱码开发库和测试库是同一个mysql数据库服务器下不同的shemas而已，最后导到测试库的数据库出现中文乱码。然后就开始百度了：添加characterEncoding为utf8的设置，可以看到数据源连接的高级选项中都已经显示的制定字符集为utf8，但是文本文件输出和插入数据都是乱码；数据库字符集都是utf8的，我试着指定为cha
Barron1·2017-11-23 14:52

ETL工具Kettle简介和安装配置基本使用

什么是KettleKettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。
张小凡vip·2017-11-15 18:58

kettle版本比较、PDI版本比较

Kettle(现在已经更名为PDI，PentahoDataIntegration)中各个版本比较大的变化版本新增功能kettle7.1SmarterDataProcessingusingtheAdaptiveExecutionLayer
戴桥冰·2017-11-12 22:55

Kettle 和数据建模的几个学习资料

视频课程:1.初建军的【慕课大巴分享】炼数成金——深入BI-Kettle篇基础书:1.Kettle3.0用户手册,文件名为:ETL工具Kettle用户手册(上).pdf,出品方:深圳市神盾信息技术有限公司
weixin_34224941·2017-11-10 21:00

windows下任务计划程序调用kettle job

windows下任务计划程序调用kettlejobC:cdC:\pdi-ce-7.0.0.0-25\data-integrationKitchen.bat/norep/fileD:\ETL\jb\testdb.kjb
qq_37325859·2017-11-09 09:46

Last_SQL_Errno: 1366

forcolumn'VALUE_STR'atrow1'onquery.Defaultdatabase:'bgkettle'.Query:'INSERTINTOR_NOTE(ID_
高运维之路·2017-11-02 09:40

kettle调度监控最佳实践

Kettle作为用户规模最多的开源ETL工具，强大简洁的功能深受广大ETL从业者的欢迎。但kettle本身的调度监控功能却非常弱。
humsuen·2017-10-30 11:51

kettle sqlserver mysql ETL性能调优

kettlemysqlETL性能调优用的是kettle6.01(所在网段10.0.0.x),从sqlserver2005(35.x.x.x)抽到mysql5.7(10.1.x.x)依托环境都是winserver2008r2
chrisplus·2017-10-26 11:51

kettle 从hive中读取数据并写入MongoDB

kettle从hive中读取数据并写入MongoDB有两种方法1.方法一，流程图：2.下面分析每个流程的具体做法：2.1查询数据库中的内容，由于后面想要单独的字段date作为索引,所以直接在查询表的时候增加一个字段就可以
小亚文·2017-10-25 14:07

在Eclipse中使用Maven方式编译Kettle 8.0

准备工作，检查编译依赖程序版本，具体版本信息如下Maven,version3+JavaJDK1.8下载settings.xml到你的.m2目录，请先备份原文件正式开始：一、从GitHub下载Kettle
dongyuan234·2017-10-20 11:47

kettle使用配置

kettle是一款国外开源的etl工具，纯java编写，绿色无需安装，数据抽取高效稳定。
扶墙走·2017-10-18 20:30

使用Kettle抽取数据时，出现中文乱码问题解决方案

使用Kettle抽取数据时，出现中文乱码问题解决方案使用Kettle在不同的数据库抽取数据时，有时会出现中文乱码问题：其解决方案如下：1.查看数据库的字符集是否是UTF-8(最常用的字符集)2.如果数据库设置正确仍然存在中文乱码
czp11210·2017-10-18 19:45

Kettle插入/更新

kettle插入/更新1.数据库环境--------------------实时表CREATETABLENowTable(IDINT,NAMEVARCHAR(100),InfoVARCHAR(100))
czp11210·2017-10-18 19:47

kettle设置数据库连接变量、js脚本设置变量、数据流合并、设置分支等

kettle设置数据库连接变量、js脚本设置变量、数据流合并、设置分支等关于kettle工具的介绍就不赘述了，某百科可以自行查阅。
苏顺·2017-10-12 09:21

使用Kettle从本地上传文件到远程HDFS

在前面的文章中，我们描述了使用Kettle工具可以在实现关系型数据库之间的数据ETL，如Oracle->Trafodion，MySQL->Trafodion等，本文通过范例介绍如何使用Kettle将本地的文件上传至
post_yuan·2017-10-09 14:43

ETL学习笔记之Kettle下载与部署

的缩写，即数据抽取、转换、装载的过程），对于企业或行业应用来说，我们经常会遇到各种数据的处理，转换，迁移，所以了解并掌握一种etl工具的使用，必不可少，这里我介绍一个我在工作中使用了3年左右的ETL工具Kettle
刘浩辰Junioo·2017-09-28 16:44

Linux下安装kettle7.1

安装环境：centos7kettle版本：pdi-ce-7.1.0.0-12.zip需要JDK环境为1.8需要卸载自带JDK一、安装JDK1.8，我的路径是/usr/local下配置Java环境变量[root
白话·2017-09-25 15:51

kettle——（3）全量抽取和增量抽取

上一节：kettle——（2）抽取数据同步数据库最近公司在做数据总线的工作，需要用kettle这个ETL工具，所以花了一些时间来研究研究，喜欢的话点个赞一数据抽取二全量抽取三增量抽取一增量数据抽取常用的捕获变化数据的方法触发器方式又称快照式会降低源数据库的性能所以用户一般不会同意滴时间戳方式一般比较常用好用全表删除插入方式全表比对方式性能较差日志表方式较为麻烦
Mr.yang♂·2017-09-22 16:37

kettle——（1）介绍和Execl输出举例

最近公司在做数据总线的工作，需要用kettle这个ETL工具，所以花了一些时间来研究研究，喜欢的话点个赞一、何为kettle1.ETL（数据仓库技术）英文Extract-Transform-Load的缩写
Mr.yang♂·2017-09-21 09:20

【Kettle】4、SQL SERVER到SQL SERVER数据转换抽取实例

1、系统版本信息System：Windows旗舰版ServicePack1Kettle版本：6.1.0.1-196JDK版本：1.8.0_722、连接数据库本次实例连接数据库时使用全局变量。
卡卡不卡·2017-09-20 16:00

【Kettle】3、数据源连接配置

1、各系统版本信息System：Windows旗舰版ServicePack1Kettle版本：6.1.0.1-196JDK版本：1.8.0_722、连接介绍关于Kettle数据源连接方式有三种：Native
卡卡不卡·2017-09-19 16:00

Pentaho Kettle Solutions (读书笔记)【2. Kettle基本概念】

Kettle设计模块转换转换包括一个或多个步骤（step），这些步骤由跳（hop）连接，跳定义了一个单向通道，允许数据从一个步骤向下一个流动。
NathanGan·2017-09-19 16:22

【Kettle】2、文件夹与界面介绍

1、文件夹介绍下载Kettle6.1解压后出现下图相关文件夹以及文件夹介绍说明：Lib：存放Kettle的核心(core)jar包、工作引擎(engine)jar包、数据库(DB)jar包、图形界面(UI
卡卡不卡·2017-09-19 14:00
上一页 40 41 42 43 44 45 46 47 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他