E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
PENTAHO
Kettle中ETL的效率优化
Kettle是一款开源的ETL工具,目前由
Pentaho
公司在管理。该工具包含一个可视化界面,可以用来设计、运行、调试ETL,被很多公司广泛采用。ETL是什么?
dqswuyundong
·
2019-01-17 14:18
kettle
开源ETL工具Kettle在win7下安装和配置笔记
下载Kettle安装包:https://sourceforge.net/projects/
pentaho
/版本:pdi-ce-6.1.0.1-196.zipjdk环境
liuyawei2018
·
2019-01-17 13:27
数据分析
IDEA使用教程2—Project Structure
IDEA_03.png在这里可以设置依赖IDEA_04.png在这里可以添加多个子项目IDEA_05.pngJava多项目的目录配置可以参见Kettle项目,可以学习https://github.com/
pentaho
yepeng05
·
2019-01-05 18:51
Kettle日常使用汇总整理
lsy-blogs/p/8268318.html】【命令地址:https://www.2cto.com/kf/201801/713626.html】Kettle源码下载地址:https://github.com/
pentaho
呆小妞
·
2018-12-26 13:26
kettle
开源
【速记】如何在老IE浏览器上将字符串解析成DOM对象
今天在查看
Pentaho
的CDE组件代码时发现了利用ActiveXObject对象将字符串成DOM对象的代码,其中涉及到如何在不支持DOMParserAPI的浏览器中将字符串解析成DOM对象的兼容技术。
而井
·
2018-11-28 00:00
javascript
选用Kettle开源ETL工具应注意的问题
Kettle在2006年初加入了开源的BI公司
Pentaho
,正式命名为:
Pentaho
DataIntegeration,简称“PDI”。
Johny_Beijing
·
2018-11-27 13:44
kettle8调度监控平台(kettle-scheduler)开源
Pentaho
官方都建议采用crontab(Unix平台)和计划任务(Windows平台)来完成调度功能。所以大家在实施kettle作业调度功能的时候,通常采用以下几
chenyou9037
·
2018-11-22 17:00
maven+kettle调用ktr文件,与web项目集成demo
Spoon.bat设计转换,然后使用java调用Spoon.bat设置的demo.ktr文件目录结构如下:首先需要下载kettle6,连接地址https://sourceforge.net/projects/
pentaho
不会撒谎的乌索普
·
2018-09-21 17:21
etl
kettle
kettle监控系统性能
这是官网对kettle监控系统性能介绍的链接:https://help.
pentaho
.com/Documentation/7.0/0P0/Monitoring_System_Performance/About_System_Performance_Monitoring
eiffel_forever
·
2018-09-12 11:28
kettle
No operations allowed after statement closed
昨晚kettle跑数据pao出了错本人链接的是mysql数据库发现这个org.
pentaho
.di.core.exception.KettleDatabaseException:UnabletoclearbatchforpreparedstatementNooperationsallowedafterstatementclosed.cuo
弧光_MAS
·
2018-09-06 15:47
Kettle
KETTLE源码部署
文章参考:https://www.cnblogs.com/i-blog/p/6848582.html1.源码下载下载地址:https://github.com/
pentaho
/
pentaho
-kettle
eiffel_forever
·
2018-09-06 15:09
kettle
同步数据工具
Pentaho
-(也就是Kettle)
下载地址:https://community.hitachivantara.com/docs/DOC-1009855参考地址:https://sourceforge.net/projects/
pentaho
如此简单^_^
·
2018-08-27 17:43
kettle链接hive的环境配置
kettle链接hive1)首先将hive/lib目录的包导入到kettle目录D:\software\data-integration\plugins\
pentaho
-big-data-plugin\
小丑鱼1127
·
2018-08-24 09:14
hive
kettle
hadoop
Could not find artifact org.
pentaho
:
pentaho
-aggdesigner-algorithm:jar:5.1.5-jhyde
笔者将自己编写的UDF函数集成到Hive编译过程中遇到了如下几个问题,如果你在编译过程中也遇到了类似的问题,可以参考下面的解决方法。Hive通过Maven来编译,命令如下$mvncleanpackage-Phadoop-2,dist-DskipTests1问题一异常信息:Failedtoexecutegoalorg.apache.maven.plugins:maven-compiler-plugi
有梦想的鲨鱼
·
2018-08-23 18:51
Could not find artifact org.
pentaho
:
pentaho
-aggdesigner-algorithm:jar:5.1.5-jhyde
笔者将自己编写的UDF函数集成到Hive编译过程中遇到了如下几个问题,如果你在编译过程中也遇到了类似的问题,可以参考下面的解决方法。Hive通过Maven来编译,命令如下$mvncleanpackage-Phadoop-2,dist-DskipTests1问题一异常信息:Failedtoexecutegoalorg.apache.maven.plugins:maven-compiler-plugi
有梦想的鲨鱼
·
2018-08-23 18:51
ETL工具kettle的使用,基础--1 (最基本的输入输出)
直接上干活,不扯淡我使用的kettle是6.1版本的,有需要的朋友可以到:https://sourceforge.net/projects/
pentaho
/files/Data%20Integration
夜七夜
·
2018-08-17 17:44
输入
输出
连接
Kettle简单应用:实现数据迁移
Kettle实现数据迁移下载地址:http://mirror.bit.edu.cn/
pentaho
/Data%20Integration/(JDK1.8才可支持Kettle7.0以后的版本)配置环境变量
Lee宇斌
·
2018-08-07 00:28
数据库
kettle环境搭建
1.github上面kettle的源码下载地址:https://github.com/
pentaho
/
pentaho
-kettle2.环境准备:1Maven,version3+2.JavaJDK1.8工具建议使用
pan_haufei
·
2018-07-19 21:03
kettle连接sqlserver连不上报异常解决
kettlesqlserver数据库报错错误连接数据库[My_vm_win_sql]:org.
pentaho
.di.core.exception.KettleDatabaseException:ErroroccurredwhiletryingtoconnecttothedatabaseDriverclass'net.sourceforge.jtds.jdbc.Driver'couldnotbefo
rubyoga
·
2018-06-27 13:49
kettle
异常解决
kettle 实时同步数据(插入/更新/删除数据)
下载地址:https://jaist.dl.sourceforge.net/project/
pentaho
/Data%20Integration/7.1/pdi-ce-7.1.0.0-12.zip来接mysql
fk478561641
·
2018-06-13 14:54
kettle5.3批量插入impala
1.
pentaho
-big-data-plugin大数据插件kettle5.3对应的
pentaho
-big-data-plugin-5.3(大数据插件)里面扩展支持了很多数据库连接,其中就包含了hive
1032851561
·
2018-06-11 16:22
kettle
kudu
impala
开源ETL工具:Kettle
Kettle也叫PDI,在2006年Kettle加入了开源的BI组织
Pentaho
,正式命名为PDI,英文全称为
Pentaho
DataIntegeration。
bluexue0724
·
2018-05-31 17:43
Kettle中各个版本比较大的变化
Kettle(现在已经更名为PDI,
Pentaho
DataIntegration)中各个版本比较大的变化版本新增功能kettle8.1待补充kettle7.1SmarterDataProcessingusingtheAdaptiveExecutionLayer
bluexue0724
·
2018-05-31 15:20
Pentaho
Report Designer
PRD(
Pentaho
ReportDesigner)是一个报表设计工具,可以直接面向数据库设计各种形式的报表,包括网页、Excel、PDF等。
iHelin
·
2018-04-26 20:54
kettle7.0连接sqlserver连不上报异常解决
提示:错误连接数据库[sql]:org.
pentaho
.di.core.exception.KettleDatabaseException:ErroroccurredwhiletryingtoconnecttothedatabaseDriverclass'net.sourceforge.jtds.jdbc.Driver'couldnotbefound
ITBwy
·
2018-04-17 22:29
SQL
server
kettle
数据湖是一种方法 数据湖的四个最佳实践
Pentaho
公司的创始人兼首席技术官詹姆斯·狄克逊(JamesDixon)发明了这个术语,他表示,其中一方面是由于对数据湖应该是什么存在着误解。他从来就没有打算用数据湖来描述从所有企业应用程序
赵一一
·
2018-04-17 17:23
数据湖
大数据行业报告及资料下载链接
技术资料下载全球架构师峰会全球架构师峰会ChinaHadoopChinaHadoop国外论文下载国外书籍下载今日报告IT工具导航中心
pentaho
CSDN会议ppt论文下载===============
dawsongzhao
·
2018-03-23 11:03
Kettle的使用分享(重点是看:“常用组件介绍”的官方链接)
(重点是看:“常用组件介绍”的官方链接,具体讲解了每个页面每个功能项的作用)一、下载与安装下载地址:https://sourceforge.net/projects/
pentaho
/files/Data
HD243608836
·
2018-02-06 02:45
kettle
mondrian schema编写指南
https://mondrian.
pentaho
.com/documentation/schema.phpv3版本编写指南1什么是schema模式schema定义了一个多维数据库。
赣江
·
2018-02-05 15:22
数据库相关
后端开发
如何设计Mondrian模式(Mondrian4.)
官网地址:https://mondrian.
pentaho
.com/head/documentation/schema.php下载地址:(更新2019年5月6日10:51:22)链接:https://pan.baidu.com
赣江
·
2018-02-03 15:56
mondrian
kylin
saiku
schema
mdx
后端开发
自己总结的etl数挖掘据工具-Kettle
etl工作中Kettle软件介绍
Pentaho
DataIntegration(Kettle)是
Pentaho
生态系统中默认的ETL工具。
荜拨
·
2018-01-24 09:34
数据挖掘
大数据
kettle
oracle
海量数据挖掘
kettle案例八连接hive--抽取hive的数据保存excel
官网参考连接https://wiki.
pentaho
.com/display/BAD/Extracting+Data+from+Hive+to+Load+an+RDBMS在hive中启动hiveserver2
张小凡vip
·
2018-01-17 19:24
kettle
hive
导出
excel
数据仓库
kettle的入门
kettle是一个用java写的开源ETL工具,工作中用到了,分享一下使用安装:下载解压即可:下载地址 https://nchc.dl.sourceforge.net/project/
pentaho
/Data
krauser1991
·
2017-12-22 22:09
第三方工具
Maven将Kettle的Jar安装到本地仓库和Jar上传到私服
Jar的maven配置
pentaho
-kettlekettle-core5.0.1-stable1.将Jar包安装到本地仓库命令:[html]viewplaincopymvninstall:install-file-Dfile
星空下的蜜蜂
·
2017-12-18 11:15
kettle 流方式处理XML
fileInputStream=newjava.io.FileInputStream(filename);contentBytes=Packages.org.
pentaho
.di.core.Const.createByteArray
felix_feng
·
2017-12-04 20:02
Kettle 7.1 资源库配置&&无法配置资源库&&自定义配置文件路径
资源库配置1、kettle7.1资源库配置在左上角的Connect2、点击Connect,弹出默认资源库:
Pentaho
Repository3、在弹出窗口选择otherRepositories选择对应的资源库类型即可新建
子知我非鱼
·
2017-12-04 16:22
ETL工具
Kettle:创建资源库
资源库的类型有三种:
Pentaho
RepositoryDatabaseRepository(使用数据库存储)FileRepository(使用文件存储)这里主
candon123
·
2017-11-30 13:55
Kettle
ETL
Pentaho
Data Integration 7.1(kettle) 安装手册
Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,绿色无需安装,数据抽取高效稳定。它允许你管理来自不同数据库的数据,通过提供一个图形化的用户环境来描述你想做什么,而不是你想怎么做。1、JDK环境设置由于PDI是采用java编写,因此需要在本地有JVM的运行环境。JDK下载链接:JDK_1.8JDK安装很简单,一直点击“下一步”即可完成。安装完成
candon123
·
2017-11-24 15:12
Kettle
ETL
kettle版本比较、PDI版本比较
Kettle(现在已经更名为PDI,
Pentaho
DataIntegration)中各个版本比较大的变化版本新增功能kettle7.1SmarterDataProcessingusingtheAdaptiveExecutionLayer
戴桥冰
·
2017-11-12 22:55
kettle
Kettle 和数据建模的几个学习资料
上).pdf,出品方:深圳市神盾信息技术有限公司,20082.Kettle3.2使用说明书,文件名为:Kettle3.2使用手册.pdf,出品方貌似为:深圳市神盾信息技术有限公司高级:1.初建军译著,
Pentaho
Kettle
weixin_34224941
·
2017-11-10 21:00
kettle调度监控最佳实践
连
Pentaho
官方都建议采用crontab(Unix平台)和计划任务(Windows平台)来完成调度功能。
humsuen
·
2017-10-30 11:51
etl
pentaho
& SPARK
一个人难以开发出一个强大且完整的系统,
pentaho
集成了BI和DI等功能,应用于报表制作和商业智能相对比较全面,最近看了国外文章,这里做一些介绍。
JLOGAN
·
2017-10-24 10:49
大数据工具
在Eclipse中使用Maven方式编译Kettle 8.0
,version3+JavaJDK1.8下载settings.xml到你的.m2目录,请先备份原文件正式开始:一、从GitHub下载Kettle最新源码下载地址:https://github.com/
pentaho
dongyuan234
·
2017-10-20 11:47
Java
Kettle
使用Kettle从本地上传文件到远程HDFS
关于如何在Kettle中配置连接HDFS(以连接CDH为例),详情可参考Kettle官网之https://help.
pentaho
.com/Documentation/7.
post_yuan
·
2017-10-09 14:43
大数据
Pentaho
Report Designer 入门教程(一)
Pentaho
ReportDesigner入门教程采用
Pentaho
ReportDesigner5.1版本,也是最新的版本。
成都-牛牛
·
2017-09-27 10:00
Pentaho
PDI 数据导入关于时间格式及重复数据处理这2个问题的解决方法
最近处理数据,遇到这2个问题,思考了很久,最近突然开窍把问题解决了,记录如下:第一个问题,如下图所示,数据生成的csv文件只有时分秒,而数据库设定的格式为年月日时分秒,因此导入数据库是提示出错,那年月日那里去了?原来写软件的工程师把年月日作为文件名了这样用PDI处理的话,可以用如下方式解决,整体过程如下:1.读取文件时,将文件名一起读入,这样的话年月日就有了,但是还是要做二次处理,用TextFil
monkey22
·
2017-09-25 14:53
Pentaho
Pentaho
Kettle Solutions (读书笔记)【2. Kettle基本概念】
Kettle设计模块转换转换包括一个或多个步骤(step),这些步骤由跳(hop)连接,跳定义了一个单向通道,允许数据从一个步骤向下一个流动。在Kettle里,数据的单位是行,数据流就是数据行从一个步骤到另一个步骤的流动。步骤步骤名在转换范围内唯一;每个步骤(除生成记录)都会读写数据行;输入跳(incominghops)和输出跳(outgoinghops);轮流发送和复制发送;转换的跳跳(hop)
NathanGan
·
2017-09-19 16:22
读书笔记
数据
etl
Kettle 连接Mysql数据库报错
如下:错误信息:错误连接数据库[tcc]:org.
pentaho
.di.core.exception.KettleDatabaseException:ErroroccurredwhiletryingtoconnecttothedatabaseDriverc
logic_tibu
·
2017-09-14 17:29
kettle整合到web项目并运用quartz实现定时任务
1、以下是pom.xml中的依赖包
pentaho
.kettleke
live_xian
·
2017-08-02 10:28
kettle
etl
开源BI
jaspersoft,
pentaho
,spagoBIandActuate来自1.Jaspersoft是一个基于商业智能的顶级开源软件供应商。
小旭旭儿
·
2017-07-30 16:06
数据可视化
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他