E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【Kettle】
Pentaho(原
Kettle
)国内镜像下载
北京理工大学镜像服务被停用了。发现其实官网地址的7.1版本下载速度也得到提升了,不到5分钟就能下载完。可以在官网下载哟!https://sourceforge.net/projects/pentaho/files/Data%20Integration/7.1/======================================================================
Coder-D
·
2023-06-24 05:54
Pentaho
etl
使用
Kettle
做数据迁移
1.
Kettle
简介
Kettle
是一个颇受认可的开源ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程)工具,2006年被Pentaho收购,2015年又被HitachiVantara
WalsonTung
·
2023-06-21 22:40
运维
Kettle
ETL
数据交换工具
Kettle
网上搜集了一些关于开源数据交换工具Kattle的文章,特收藏如下:文章一:ETL和
Kettle
简介ETL即数据抽取(Extract)、转换(Transform)、装载(Load)的过程。
To-Big_Fish
·
2023-06-21 20:25
kettle(开源etl)
kettle
开源工具
etl
kettle
见解文章
文章一:ETL和
Kettle
简介ETL即数据抽取(Extract)、转换(Transform)、装载(Load)的过程。它是构建数据仓库的重要环节。
mlj365
·
2023-06-21 20:54
ETL
数据仓库
数据科学
Kettle
总结
网上搜集了一些关于开源数据交换工具Kattle的文章,特收藏如下:文章一:ETL和
Kettle
简介ETL即数据抽取(Extract)、转换(Transform)、装载(Load)的过程。
Tech_Hog
·
2023-06-21 20:54
工具
Kettle
ETL
kettle
介绍
网上搜集了一些关于开源数据交换工具Kattle的文章,特收藏如下:文章一:ETL和
Kettle
简介ETL即数据抽取(Extract)、转换(Transform)、装载(Load)的过程。
RdmMing
·
2023-06-21 20:24
ETL
ETL
Kettle
系列1
文章一:ETL和
Kettle
简介ETL即数据抽取(Extract)、转换(Transform)、装载(Load)的过程。它是构建数据仓库的重要环节。
mws1108
·
2023-06-21 19:54
Oracle
BI
kettle
http://blog.csdn.net/cissyring/archive/2008/05/29/2493865.aspx文章一:ETL和
Kettle
简介ETL即数据抽取(Extract)、转换(Transform
iteye_14323
·
2023-06-21 19:54
系统集成
数据结构
单元测试
数据挖掘
SQL
编程
kettle
中大于小于号的写法
一、问题最近写
kettle
,在写sql语句时,发现无法使用小于符号替换符号>原符号>=替换符号>=原符号&替换符号&原符号'替换符号'原符号"替换符号"
追逐梦想永不停
·
2023-06-21 19:06
sql
任务调度器-DolphinScheduler3集群安装
【背景】我本身是从事大数据开发工作的,在一些外部项目或者一些不太成熟的公司,是没有任务调度器可用的,之前mysql存储过程用自带的event事件调度,一般抽数用
Kettle
+crontab调度,虽然也可以用
白杨Shayne
·
2023-06-21 19:57
任务调度器
大数据
任务调度器
Kettle
异常-Unable to get timestamp from resultset at index 23
记录一个
Kettle
的错误这个错误还真没有遇到过,看上去是timestamp数据有异常,,打开看了下,也没啥啊网上找了下,说是Mysql的问题,可以修改配置解决zeroDateTimeBehavior=
橘猫吃不胖
·
2023-06-21 14:50
Kettle
的“增加序列”(自增字段)的使用
"增加序列"就是在流字段中加一个字段,简单的说就是可以把这个字段当成标记行号的一个字段或者字段值自增的字段,会根据具体设定的值来决定起始值和增长值,这里介绍如何使用“增加序列”。1.核心对象->转换->增加序列,将此模块拖拽到转换中,如下图所示2.配置参数,设置字段的起始值和增长值,这里设置的起始值为1,增长值为2,如下图所示3.结果数据如下图所示使用起来还是比较简单的,通过结果数据可以很好的
飞天小老头
·
2023-06-19 10:28
KETTLE笔记
etl
kettle
自增字段
Kettle
文件操作
上一篇:etlbigdata更多信息查看:https://blue-shadow.top数据无处不在,文件作为一个总要的数据载体,是最常用的数据存储格式。但广泛使用以多种方式存在,如fixed宽度、逗号分隔值、电子表格,甚至自由格式。PDI具有从各种实体读取数据的能力。读取文件实例在Design窗口中:右键Transformation-->New,这样的方式创建新的Transformation在I
NEO_X
·
2023-06-19 02:32
快速上手
kettle
(四)壶中可以倒出些啥?
快速上手
kettle
(四)壶中可以倒出些啥前言一、
kettle
这壶里能倒出啥?
xie_zhr
·
2023-06-18 17:29
excel
etl
大数据
数据分析
Kettle
数据同步日常使用汇总及整理
一、如何将
kettle
部署到linux中去:(以root用户操作为例)1、将window中正常使用的
kettle
的data-integration文件夹压缩成tar包;2、将tar包上传到linux的指定文件夹中去
zxj19880502
·
2023-06-18 09:59
数据库
etl
大数据
KETTLE
-从ftp上下载csv文件插入到数据库
使用
kettle
从另一台服务器上的ftp上下载txt文件到本地然后将数据插入到数据库中ftp的目录是动态的每天都会生成一个时间目录如20180510文件就放在这下面我们文件名是不变的所以整个kjb的思路就是先获取动态时间作为变量在
zxj19880502
·
2023-06-18 09:28
数据库
servlet
大数据
数据仓库
2018-02-28 listen 56
Kettle
sStopWhistlingintheDarkBritishphysicistLordRayleighisbestknownforhisdiscoveryofargonandforexplaining
Berry521
·
2023-06-18 04:18
Oracle通过
kettle
工具用hash算法实现分表插入数据
项目上的一张大表tab_user_info,有将近千万级别的数据,现在需要数据迁移,然后进行分表操作,分10张表,分别存储部分数据。现在通过演练实现以上的操作1、创建表createtabletab_user_info(useridint,usernamevarchar2(100),moblievarchar2(100),regist_timedate,insert_datedate);2、循环插入
奋进的码哥
·
2023-06-18 01:14
Oracle
数据库
etl
java
使用ETL工具
Kettle
实现,把一个数据库中的多张表的数据同步到另外一个数据库中
需求:使用ETL工具
Kettle
实现,把一个数据库中的多张表的数据(不少于3张表)同步到另外一个数据库中1》使用
Kettle
工具连接MySQL数据库:连接第一个数据库db03。出现圈3说明连接成功。
墨染盛夏呀
·
2023-06-17 17:28
etl
数据库
数学建模
配置
Kettle
连接大数据HDFS
需求:配置
Kettle
连接大数据HDFS
Kettle
对接大数据平台的配置一.软件环境1.Hadoop集群,版本:Hadoop3.3.02.ETL工具
Kettle
,版本:pdi-ce-7.0.0.0-25
墨染盛夏呀
·
2023-06-17 17:27
hadoop
hbase
hdfs
数据迁移中的常见问题
目标:之前用
kettle
对数据进行处理,因为要对数据进行迁移,所以希望将
kettle
的逻辑全部改成存储过程,对数据进行处理运行过程中最常见的一个问题出在排序这里1、ROW_NUMBER()当满足条件的记录有多条
shirsl
·
2023-06-17 03:44
数据库
ETL中遇到的小问题:把''/ 空值当作null处理
kettle
是一个数据处理的中间件,它从数据源读到的数据和数据源在某些特定的情况下,会有差异。空值和null是两个不同的概念。
小糊涂神52vol
·
2023-06-16 12:00
猿创征文|大数据开发必备的数据采集工具汇总
文章目录前言1、Flume适用场景工作方式2、FlinkCDC适用场景工作方式3、Sqoop适用场景工作方式4、Canal适用场景工作方式5、
Kettle
适用场景工作方式前言随着大数据近几年的发展,已经在国内外的开发市场积累出一大批大数据开发的技术型人才
chad__chang
·
2023-06-16 03:23
大数据
解决
kettle
数据处理中报 Field [XXXXX] is required and couldn‘t be found错误
Kettle
帮助文档下载刚接触
kettle
,在做数据处理时候一直提示Field[FIELD_ID]isrequiredandcouldn'tbefound!
小灰灰__
·
2023-06-16 00:27
大数据
kettle
快速上手
kettle
(四)壶中可以倒出些啥?
[TOC](快速上手
kettle
(四)壶中可以倒出些啥)###前言通过前面的文章中我们对`
kettle
`这把“**壶**”做了简单介绍,并对“**壶**”里能装些啥也具体说了下。
xiezhr
·
2023-06-15 22:00
kettle
配置及性能调优
本章主要是介绍
Kettle
的性能优化及效率提升。
程序猿羊
·
2023-06-15 02:00
Kettle数据采集
性能调优
java
etl
性能优化
kettle
数据采集三大流程-增量采集
Windows查看端口占用并关闭1、增量流程入口注意:相比原来的增加了采集错误,日志回传到原来表中,降低任务暂停或取消,日志被误删除。具体的请参考案例:导入案例脚本即可。2、XX_LOG日志采集到临时表XX_LOG_T中,并删除3、增量采集主流程备注:如果表比较多,建议设置并发执行。4、第一种(不含删除不太推荐):人员信息单表采集备注:主键是通过这种函数拼接或者调用函数生成的,前面就不要配置删除了
程序猿羊
·
2023-06-15 02:00
Kettle数据采集
etl
java
kettle
数据采集三大流程-全量采集
kettle
数据采集之对账流程配置一、全量采集流程表对表数据的快速抽取,实现历史数据简单、高效、快速抽取,并实现字典及数据的抽取、清洗、转换、入库等功能。
程序猿羊
·
2023-06-15 02:00
Kettle数据采集
大数据
java
etl
【
kettle
】【报错】检测到无限循环 作业里的一个作业项调用了自己
kettle
执行时报错:无限循环调用自身;报错消息异常:查询performance生成csv文件-ERROR(version7.1.0.0-12,build1from2017-05-1617.18.02bybuildguy
violent_sunset
·
2023-06-14 21:00
KETTLE
知识储备
ETL
KETTLE报错
【
kettle
】【报错】 Unexpected problem reading shared objects from XML file 当读共享文件时发生错误
ETL报错:UnexpectedproblemreadingsharedobjectsfromXMLfile:null当读共享文件时发生错误(继续加载报
kettle
新建转换时,“读取共享对象时发生一个严重错误
violent_sunset
·
2023-06-14 21:30
KETTLE
知识储备
其他笔记
KETTLE
KETTLE
Driver class ‘org.gjt.mm.mysql.Driver‘ could not be found
kettle
链接mysql:抛出异常Driverclass'org.gjt.mm.mysql.Driver'couldnotbefound这是因为你没有下载对应的mysql驱动程序包(DRIVER.jar
violent_sunset
·
2023-06-14 21:24
KETTLE
数据库学习笔记
知识储备
mysql
数据库
kettle
SQLServer 开启1433端口
SQLServer安装完成后需要手动开启1433端口,否则
kettle
连接过程中会出现网络错误过程:1.开始菜单=>MicrosoftSQLServerXXXX=>配置工具=>SQLServer配置管理器
qching
·
2023-06-13 19:43
kettle
基础总结
kettle
基础总结企业数据仓库模型企业数据仓库的数据来源可以是历史数据;也可以是正在运行的业务系统的数据,如OA,CRA,MES;或者其他数据如第三方数据,还有日志数据。这些数据如何进入数据仓库呢?
大强哥666
·
2023-06-13 16:04
BI
kettle
ETL工程师
sql
etl
etl工程师
SpringBoot——动态数据源(多数据源自动切换)
前言日常的业务开发项目中只会配置一套数据源,如果需要获取其他系统的数据往往是通过调用接口,或者是通过第三方工具比如
kettle
将数据同步到自己的数据库中进行访问。
阳光倾洒
·
2023-06-13 16:01
SpringBoot
spring
boot
spring
java
动态数据源
多数据源
kettle
安装之后闪退
下载完
kettle
,双击打开Spoon.bat,后发现闪退,出现个黑框就退了,上网查了一下是因为默认内存配置太大,所以需要更改一下;具体办法:1,用Notepad++,或者用记事本打开Spoon.bat
在朝阳寺树下
·
2023-06-13 13:19
Kettle
could‘t convert String to number
Kettle
运行中报错:could'tconvertStringtonumber:non-numericcharacterfoundatposition1forvalue[+00000005.]2020
suolongge
·
2023-06-13 09:55
大数据ETL工具
Kettle
二、使用步骤1.
Kettle
软件环境2.ETL工具
Kettle
组件三、实例-增量同步数据1.配置表的设计2.创建Transformati
panda_225400
·
2023-06-13 06:47
Java
.NET
Python
大数据
etl
数据仓库
deepin安装
kettle
7.1.0.0-12
软件版本:
kettle
7.1.0.0-12,百度云下载链接:https://pan.baidu.com/s/1Imjz7BYuqew7zfPXExrVNA密码:iidqmysql的java包驱动:百度云下载链接
骑木马的男孩
·
2023-06-12 20:56
linux专题
deepin
ubuntu
FCRP-D---帆软官网模拟题,
kettle
模块
1全量更新:准备数据:在MySQL中创建两个数据库——
kettle
,
kettle
_test,
kettle
中tableA源表,
kettle
_test中tableB目标表表输入:按num升序排序:插入更新:
陈美丽工作室
·
2023-06-12 08:51
报表学习
大数据
KETTLE
学习篇1
一、
Kettle
简介首先,学习
Kettle
前先了解一下ETL的概念;ETL是取Extract-Transform-Load的第一个首字母拼成,即指数据抽取、转换和装载的过程,日常工作上,我们经常会遇到各种数据的处理
瓶邪529
·
2023-06-11 09:25
kettle学习
etl
big
data
数据仓库
国产化
Kettle
、JDK、MySQL下载安装操作步骤
一、
Kettle
下载安装(一)、
kettle
的下载1、登录https://sourceforge.net/projects/pentaho/2、点击“Files”,进入Home/DataIntegration
使不得呀
·
2023-06-11 04:12
数据仓库
大数据BI
实时数据仓库
mysql
kettle
jdk
国产化
英语学习:K开头
kangaroo大袋鼠keep名词保持动词饲养keeper饲养员
kettle
水壶keyboard键盘kick踢kid小孩kind种,类kindergarten幼儿园kindness仁慈king国王kingdom
only-lucky
·
2023-06-11 02:51
学习
数仓总结题
kettle
常用的组件。表输入,表输出。EXCEL输入输出之类的。调用存储过程。合并记录,数据同步。字段选择,获取系统信息
添柴少年yyds
·
2023-06-10 22:37
excel
数据分析
数据挖掘
kettle
入门教程
目录1.
kettle
叙述1.1什么是
kettle
1.2
kettle
工程存储方式1.3
kettle
两种设计1.4
kettle
的组成1.5
kettle
的下载安装2.
kettle
教程2.1转换2.1.1普通转换
Benjamin℡
·
2023-06-10 16:41
kettle
etl
kettle
入门之文本文件导入数据库
启动
kettle
e数据库连接,首先需要将相应的数据库驱动添加到lib目录下数据库连接测试设置数据库连接配置下面视图是我使用JDBC连接本机MySQL访问的是test数据库,端口号3306,点击测试,就会显示
脸ル粉嘟嘟
·
2023-06-10 14:17
▼
BigData
——Kettle
kittle
mysql
txt
Little
kettle
Alittle
kettle
onthestove,singingasong:Iamalittle
kettle
,little
kettle
isme.Isatonastovewithboilingheat,andwaterbubblingonmyfeet.Timeisup
Shirley牛
·
2023-06-10 11:02
解决使用Spoon(
Kettle
)连接Hive数据库的卡顿问题
1.提出问题在使用软件Spoon进行本地MySQL数据传输到Hive的时候,连接本地MySQL和Hive后,创建MySQL表输入进行操作的时候不卡顿,但是创建Hive表输出进行操作的时候,出现点一下卡一下的严重卡顿情况2.分析问题点开Hive表输出进行操作时,每一次卡顿的时候都可以发现Hiev集群都做出以下反应:这是因为,我们每次在Spoon进行Hive表输出操作时,Hive集群都会对该操作打印I
Pseudo-love453
·
2023-06-10 09:56
hive
数据库
mysql
hadoop
大数据
kettle
连接数据库报错:Error connecting to database: (using class org.gjt.mm.mysql.Driver) Could not create
kettle
连接MySQL报错但已经把相应的包放到
kettle
的lib目录下时,仍然报连接不上的错误,那可能是MySQL时区的问题。
是娇春呀
·
2023-06-09 21:17
mysql
数据库
etl
kettle
和MongoDB之间的数据同步
以下是利用
kettle
对数据的转换的介绍:1:MongoDb的查询:主要是基于json格式:具体的查询可以见连接MonGoDb的查询语句。
lwqhp
·
2023-06-09 21:57
Kettle
Kettle
8.2输入组件之JSON Input
Kettle
8.2输入组件之JSONInput一、需求说明二、设计转换三、转换配置四、运行转换五、结果分析一、需求说明需求说明:当从其他接口获取到的JSON格式的数据时,需要将JSON格式数据存入数据库表中
若兰幽竹
·
2023-06-09 16:02
Kettle
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他