E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
pdi
java调用Kettle总结
3我的kettle版本是:
pdi
-ce-5.0.1.A-stable。由于引入不同的工具,可能要引入不
小林_sxxzlt
·
2020-06-26 06:17
Java和jsp
Kettle (
PDI
) 连接 MS SQL server数据库
先去微软下载JDBC驱动:https://www.microsoft.com/en-US/download/details.aspx?id=11774解压后得到的目录里有jre7jre8和auth其中auth里的sqljdbc_auth.dll是用于sqlserver的integratedauthentication(注意区分x64和x86)而jre7和jre8里的sqljdbc42.jar是JD
爱知菜
·
2020-06-26 05:19
SSIS
and
Kettle
Kettle部署到linux
(以CRM角色用户同步知识库为例)文件夹WORK\CRMKNOW\*.准备
pdi
-ce-6.1.0.1-196.tar.gz文件(Kettle文件)。
多余的调调
·
2020-06-25 00:44
服务端
Pentaho
PDI
Job通过Gmail发邮件的设定
网上查询了一轮,原来最关键的是在gmail账户上安全设定要调低。1.登陆Gmail账户,到账户->登陆与安全,将Allowlesssecureapps调为On,我之前没打开这个时,gami立即收到安全警告邮件,说阻止了一个不安全登陆。PDImail也无法发送邮件,提示错误。如果在新电脑上设置这个邮件通知,同样也会有问题,即使邮箱设定跟上面一样完全正确,测试时还是会报错,提示发送失败,认证有问题。这
monkey22
·
2020-06-24 15:55
Pentaho
Ubuntu Server 16.04 安装Pentaho
PDI
7.1
参考:http://fcorti.com/2016/12/05/installing-pentaho-data-integration-7/1.安装JAVA运行环境sudoadd-apt-repositoryppa:webupd8team/javasudoapt-getupdatesudoapt-getinstalloracle-java8-installersudoapt-getinstallo
monkey22
·
2020-06-24 15:23
Pentaho
设置
PDI
7.1连接到Cloudera集群
在你开始之前在开始之前,你需要做一些事情。验证支持检查组件引用,以验证您的PunaHo版本支持CDH集群的版本。建立CDH集群配置CDH集群。如果需要帮助,请参阅Cloudera的文档。安装任何必需的服务和服务客户端工具。测试群集。获取连接信息获取您将从Hadoop管理员、Cloudera管理器或其他群集管理工具使用的群集和服务的连接信息。一旦完成,您还需要向用户提供一些信息。AddaYARNUs
大数据谭志坚
·
2020-06-24 12:49
spring boot web项目 maven 调用kettle
需要添加的jar包包括:kettle-core.jar,kettle-engine.jar,metastore.jar,vfs2.jar,scannotation.jar这些包在kettle的解压路径
pdi
-ce
li_wei_ying0809
·
2020-06-24 04:36
Cronjob 定时执行 pentaho job(解决spoon.sh command line not found 问题)
1.使用kitchen.sh编写shell脚本用作
pdi
任务(脚本名为:/opt/webex/spark_metrics.job)#!
blueskypan
·
2020-06-22 18:17
Java
Web
架构系列
知识
关于es查询dsl的filter与must,term与match的区别
【1】创建es7索引putlocalhost:9200/
pdi
_cust,注意PUB_CUST_LABEL字段分词了。es7不支持type,所以无需指定type。
PacosonSWJTU
·
2020-06-22 03:58
精选 “The Economist”常用500 Business words 之301-480
301、Consumptionfunction消费函数总消费与个人可支配收人(
PDI
)的数值对应关系。总财富和其他变量也常被认为会对消费产生影响。
AmyTrilinguist
·
2020-06-19 13:21
关于工作效率的心得分享
每每到
PDI
的时候领导必提效率有木有?自认为快是不算的,必须领导和客户方说了算,对于当年校招进来的毛驴,是一件泪崩漫长的提升过程。整天琢磨如何快,多快的速度才算快,恨不得快到连参照物都变得动感模糊。
刻意学习与刻意练习
·
2020-04-04 05:20
成长
今天谈了
pdi
,也不知道自己做的对不对,老老实实的把所有想法都说了出来,反正自己觉得也没必要对直属领导隐瞒。。。
lisp
·
2020-03-12 22:14
##Kettle学习小结
:http://infocenter.pentaho.com开发帮助文档:http://wiki.pentaho.com/Bug报告地址:http://jira.pentaho.com/browse/
PDI
葡萄喃喃呓语
·
2020-02-27 14:37
Kettle学习小结
:http://infocenter.pentaho.com开发帮助文档:http://wiki.pentaho.com/Bug报告地址:http://jira.pentaho.com/browse/
PDI
kettle老者
·
2020-02-26 18:29
Kettle初步测试
需求从MSSqlServer迁移数据到MySQL中环境信息:Window1064位
pdi
-ce-8.2.0.0-342SqlServer2017Docker版本MySQL5.7.23Docker版本操作软件准备
郑石马
·
2020-02-20 06:08
关于工作效率的心得分享
每每到
PDI
的时候领导必提效率有木有?自认为快是不算的,必须领导和客户方说了算,对于当年校招进来的毛驴,是一件泪崩漫长的提升过程。整天琢磨如何快,多快的速度才算快,恨不得快到连参照物都变得动感模糊。
刻意学习与刻意练习
·
2020-02-13 04:02
学了这几招,买车动辄便宜几千块,相当受用!
“出库费”、“上牌费”、“
PDI
检测费”、“落地价”、“精品礼包”,不知道什么时候开始,都偷偷地变成了商家们巧立名目而设置的收费名称。当小白在买车遭遇套路的时候,该用怎样的姿势接招才能防止踩坑?一些身
车买买
·
2020-01-20 00:00
学了这几招,买车动辄便宜几千块,相当受用!
“出库费”、“上牌费”、“
PDI
检测费”、“落地价”、“精品礼包”,不知道什么时候开始,都偷偷地变成了商家们巧立名目而设置的收费名称。当小白在买车遭遇套路的时候,该用怎样的姿势接招才能防止踩坑?一些身
车买买
·
2020-01-19 00:00
学习笔记系列----1、kettle之js实现日期维度
最近在《PentahoKettle解决方案:使用
PDI
构建开源ETL解决方案》一书中看到了构建时间维度的kettle过程,进行一下学习记录。对kettle有兴趣的可以去看一下这本书,很不错的一本书。
夏无忧阳
·
2020-01-06 13:34
要想买新车不后悔,你提车时最好这样翻个底朝天!
汽车在生产制造过程中,由于本身的制造水平或装配工艺、零部件问题,会造成一定的产品缺陷,亦或是在运输途中的不慎,即便车子做了
PDI
(车辆售前检查),所交付到消费者手中的新车并不一定是完整无缺的。
玩车教授
·
2019-12-28 00:00
漏油的奔驰
如果是新车,因为有
PDI
检测,就更罕见了。”但是,西安奔驰却真漏油了。在一个罕见的年代能遇到一件罕见的事也不容易,于是这事大家奔走相告。
老田看猫
·
2019-12-25 00:34
PDI
7.1 入门实例
这是一个官方的入门实例,实现完整的ETL流程包括提取数据,转换数据和载入数据。并使用作业控制ETL流程的执行。一、转换转换用于描述ETL数据流。场景现在需要把一份包含销售数据的文件sales_data.csv导入数据库,但是文件中的一些客户的邮编缺失了,需要在导入数据库前把缺失的邮编补全,邮编补全通过查询一份记录了城市邮编的文件Zipssortedbycitystate.csv。从文件中提取数据1
hz_heng
·
2019-12-24 23:14
蓝海创意云渲染教程如何制作地裂、碎楼特效
使用软件:Maya、3dsmax第一步:入门篇之经典案例地裂、碎楼对象:掌握Maya、3dsmax基本制作流程课程内容:制作地裂、碎楼学习步骤:MayaMaya的刚体破碎,我一般选择
PDI
插件;破碎是需要解算的
劲爆大象部落啊
·
2019-12-24 04:16
Pentaho Data Integration(Kettle) 简单上手
PDI
(PentahoDataIntegration,或者Kettle)是一款开源的ETL工具,可以用它来对数据进行抽取、清洗和转换操作,从而获得我们想要的数据。
iHelin
·
2019-12-17 16:55
Kettle相关文章索引(1)
DataIntegration-Kettle6.0下载安装下载链接http://jaist.dl.sourceforge.net/project/pentaho/Data%20Integration/6.0/
pdi
-ce
司小幽
·
2019-12-16 20:29
PDI
7.1 资源库使用
PDI
客户端(Spoon)存储方式有两种,以XML形式存储和以资源库方式存储。
hz_heng
·
2019-12-07 17:17
spoon(kettle)基本配置(连接Mysql和Oracle)
1、下载spoon包和驱动可以去spoon官网下载需要的spoon版本官网:http://kettle.pentaho.org/下载的最新版本的kettle是:
pdi
-ce-7.1.0.0-12官方入门文档
小墨y
·
2019-10-23 15:00
spoon(kettle)基本配置(连接Mysql和Oracle)
1、下载spoon包和驱动可以去spoon官网下载需要的spoon版本官网:http://kettle.pentaho.org/下载的最新版本的kettle是:
pdi
-ce-7.1.0.0-12官方入门文档
小墨y
·
2019-10-23 15:00
利用kettle实现hive数据直接导入到mysql
软件环境:Hadoop-2.7.1(单机)、apache-hive-2.3.5-bin、MySQL-5.6.1、
pdi
-ce-7.1.0.0-12(kettle)一、首先需要配置hiveserver2并开启
一米多的李同学
·
2019-08-24 16:24
hive
一次关于Kettle学习以及实践
Kettle介绍PentahoDataIntegration(
PDI
,alsocalledKettle)isthecomponentofPentahoresponsiblefortheExtract
Astro1hl
·
2019-08-20 15:05
kettle抽取数据发送邮件Linux调度
kettle抽取数据发送邮件Linux调度#1.进入kettle安装目录然后执行sqoop.sh文件启动kettlecd/app/
pdi
-ce-7.1.0.0-12/data-integration.
阿叮339
·
2019-08-12 18:00
SpringBoot RestTemplate 下载图片时url被转义的问题解决
=d6ei2a4i9c84*33c-793=11i5m*ep5t9d5=*2
pdi
=*1s5i2=94b8i5d2e*14b863328-aa2e959-1b246b
微然月明
·
2019-08-05 14:02
SrpingBoot
RestTemplate
URL特殊字符转义
spring
SpringBoot RestTemplate 下载图片时url被转义的问题解决
=d6ei2a4i9c84*33c-793=11i5m*ep5t9d5=*2
pdi
=*1s5i2=94b8i5d2e*14b863328-aa2e959-1b246b
微然月明
·
2019-08-05 14:09
java
springboot
Spring
boot
RestTemplate
url特殊字符转义
kettle
PDI
文档学习 (一)创建资源库
一、创建连接仓库创建连接存储库VerifythePentahoServerisrunning,andstartthePDIclient.Kettle支持连接的资源库类型有三种:1.PentahoRepository:使用的是Kettle公司自己的服务器2.DatabaseRepository:保存在数据库的资源库,通过用户名密码访问3.FileRepository:保存的服务器硬盘的资源库,不用密
dylanwang_cn
·
2019-07-22 10:06
kettle
PDI
kettle插件开发
eclipse-OxygenJDK:1.8Kettle源码包版本:pentaho-kettle-7.1地址:https://github.com/pentaho/pentaho-kettle/tree/7.1Kettle版本:
pdi
-ce
旖析木
·
2019-06-12 17:32
kettle
kettle插件开发
eclipse-OxygenJDK:1.8Kettle源码包版本:pentaho-kettle-7.1地址:https://github.com/pentaho/pentaho-kettle/tree/7.1Kettle版本:
pdi
-ce
旖析木
·
2019-06-12 17:32
kettle
kettle无法连接mysql
3、于是把“mysql-connector-java-8.0.16.jar”jar包拷贝到“AppPath\
pdi
-ce-7.0.0.0-25\data-integration\lib”与“AppPath
LFfootprint
·
2019-05-08 09:46
Kettle
Kettle(
PDI
)入门笔记
近期在学习大数据处理的一些技能,主要是对数据的提取、转换和输出,用到的软件是Kettle,现在改名为DataIntegration,以下是我学习整理的笔记。下载最新版本:8.2下载,打开网页后,在Downloads标题下点击8.2Stable,即可开始下载。下载地址:Kettle历史版本点击对应版本下载。相关概念ETL:是Extract(抽取)、Transform(转换)、Load(加载)三个单词
黄耀鸿
·
2019-05-07 22:34
使用Kettle导入数据到ADB for PostgreSQL
Kettle简介Kettle(现也称为PentahoDataIntegration,简称
PDI
)是一款非常受欢迎的开源ETL工具软件,主要用于数据整合、转换和迁移。Kettl
阿里云云栖社区
·
2019-05-07 00:00
kettle
数据分析
配置
数据库
postgresql
如何在linux部署kettle并实现定时调度任务
#mkdir/usr/kettle将kettle对应的
pdi
-ce-7.1.0.0-12文件夹放到该目录下#cddata-integration#chmod+x*.sh//以.sh结尾的文件必须拥有执行权限
半路和尚怎么出家
·
2019-04-02 18:58
Kettle7中使用Java脚本进行数据清洗
1.首先,Kettle7.1下载li链接:https://sourceforge.net/projects/pentaho/files/Data%20Integration/7.1/
pdi
-ce-7.1.0.0
BAStriver
·
2019-03-29 17:14
软件/工具
Etl工具
Pan使用说明
通常转换都是以一定间隔时间去计划执行的(通过
PDI
企业版资源库计划功能,或者第三方工具像Cron和windows任务计划功能)。2.安装第一步安装Oracle公司的java1.7以上运行环境。
dn_xiaoxiao
·
2019-02-22 13:29
Kettle
Kettle(
PDI
-Pentaho Data Integration)7.1安装与性能测试
Windows环境安装安装版本:7.1基础环境:JDK1.8u144下载路径:https://sourceforge.net/projects/pentaho/files/DataIntegration/解压缩即可使用,绿色无污染SqlServer连接下载路径http://www.microsoft.com/zh-cn/download/details.aspx?id=11774,解压缩后的jre
不羁之心
·
2019-02-12 15:54
ETL
ketlle windows下的安装(最基本)
kettle其实是以前的叫法,现在官方称为:
PDI
(PentahoDataIntegeration)Pentaho产品是一个用于访问、集成、操作、可视化和分析数据的综合平台。
lillcol
·
2019-01-30 16:00
Kettle使用分享~安装和使用
下载安装第一步当然是下载安装了,我用的是
pdi
-ce-7.1.0.0-12版本,900M左右的压缩文件,解压后就可以直接使用了链接:https://pan.baidu.com/s/1R45y4BqWlr59dekgbSbYoQ
const_qiu
·
2019-01-21 11:20
kettle
开源ETL工具Kettle在win7下安装和配置笔记
下载Kettle安装包:https://sourceforge.net/projects/pentaho/版本:
pdi
-ce-6.1.0.1-196.zipjdk环境
liuyawei2018
·
2019-01-17 13:27
数据分析
设置kettle的日志输出到指定文件下,carte子服务器设置日志输出位置,log4j配置
kettle数据处理时获取kettle控制台日志信息,配置如下:kettle工具版存放位置:D:\
pdi
-ce-6.0.1.0-386new需要设置D:\
pdi
-ce-6.0.1.0-386new\data-integration
Dr_Mnka
·
2018-12-22 16:18
kettle
选用Kettle开源ETL工具应注意的问题
Kettle在2006年初加入了开源的BI公司Pentaho,正式命名为:PentahoDataIntegeration,简称“
PDI
”。
Johny_Beijing
·
2018-11-27 13:44
简单shell脚本,与日志重定向输出
linuxcrontab定时任务:*/5****flock-xn/tmp/kettle_job_sjgz_server.lock-c'/bin/bash/opt/
pdi
-ce-6.1.0.1-196/kettle_job_sjgz_server.sh
gongchengshiv
·
2018-09-28 15:16
其他
黑猴子的家:xsync
fi#2获取文件名称p1=$1fname=`basename$p1`echofname=$fname#3获取上级目录到绝对路径pdir=`cd-P$(dirname$p1);pwd`echopdir=$
pdi
黑猴子的家
·
2018-09-14 08:00
SH
上一页
1
2
3
4
5
6
7
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他