E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kettle
5.4.2 数据规范化处理
下面用
kettle
工具对数据进行检验操作:一,创建转换二,配置自定义常量数据1,元数据选项卡添加字段常量ProductionDate,ProductionName,ProductionNumber以及Comm
万俟傲霜
·
2022-11-22 10:26
数据清洗
etl
6.1多数据源的合并
下面通过
Kettle
工具将A公司和B公司的手机日销数据合并到一个数据源(数据表company)中,也就是对文件company_a.csv(如上图)和数据表comp
万俟傲霜
·
2022-11-22 10:26
数据清洗
etl
5.2.3填充缺失值
1.打开
Kettle
工具,创建转换2.配置文本文件输入控件数据预览:3.配置过滤记录控件4.配置替换NULL值控件5.配置合并记录控件6.配置替换NULL值2控件7.配置字段选择控件8.运行转换9.查看文件
阿卿冈日
·
2022-11-22 10:52
mysql
数据清洗 黑马程序员 第五章数据的清洗与检验——阅读笔记
1.打开
Kettle
工具,创建转换通过使用
Kettle
工具,创建一个转换repeat_tran
あㅉ
·
2022-11-22 10:51
mysql
第八章 综合案例——构建DVD租赁商店数据仓库③
8.3.7加载演员数据至演员维度表1.打开
Kettle
工具打开
Kettle
工具,创建一个转换load_dim_actor,并添加表输入,插入/更新等控件。
LUTyangmy
·
2022-11-22 03:03
big
data
数据库
etl
第八章 综合案例——构建DVD租赁商店数据仓库①
8.3.2加载日期数据至日期维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及
LUTyangmy
·
2022-11-22 03:33
数据库
etl
big
data
第八章 综合案例——构建DVD租赁商店数据仓库②
8.3.5加载用户数据至用户维度表1.打开
Kettle
工具打开
Kettle
工具,创建一个转换load_dim_customer,并添加表输入,映射(子转换),字段映射,值映射,维度查询/更新等控件。
LUTyangmy
·
2022-11-22 03:33
etl
big
data
数据库
Kettle
-数据的迁移和装载
目录一.表输出1.描述2.建立转换添加控件3.配置控件4.保存运行二.插入更新1.描述2.建立转换并添加控件3.配置控件4.保存运行三.Excel输出1.描述2.建立转换并添加控件3.配置控件4.保存运行四.文本文件输出1.描述2.建立转换并添加控件3.配置控件4.保存运行五.SQL文件输出1.描述2.新建转换并添加控件3.配置控件4.保存运行一.表输出1.描述表输出是将数据装载至数据库的表中。案
CC-Betsy
·
2022-11-22 02:28
etl
etl
大数据
mysql
kettle
-数据加载&全量加载&增量加载&批量加载(第七章)
目录一.简单介绍二.全量加载1.数据预准备:2.建立转换并添加控件3.配置控件4.保存运行:三.增量加载1.数据准备2.建立转换并添加控件3.配置控件4.保存运行四.数据的批量加载1.数据准备2.建立转换并添加控件3.配置控件4.保存运行一.简单介绍数据的预处理过程,除了包括数据抽取、数据本身的清洗与检验以及数据转换操作,还包括数据加载操作,数据加载是数据预处理过程的最后一个步骤,主要是负责将清洗
CC-Betsy
·
2022-11-22 02:58
etl
数据库
sql
etl
mysql
大数据
Kettle
第五章-高级转换
目录一.记录集连接1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行二.多路数据合并连接1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行三.单变量统计1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行四.公式1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行五.利用Janino计算Java表达式1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行六
CC-Betsy
·
2022-11-22 02:58
etl
sql
mysql
大数据
etl
第四章 CSV文件抽取和JSON文件抽取
目录一.csv文件抽取1.在数据库中新建表csv2.打开
kettle
工具,新建转换,并添加以下控件3.点击进入csv文件输入控件,进行配置4.点击表输出控件,进行配置5.保存运行二.JSON文件抽取1.
CC-Betsy
·
2022-11-22 02:57
etl
大数据
数据库
第八章综合案例——构建DVD租赁商店数据仓库
8.3案例实现8.3.2加载日期数据至日期维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件
肥嘟嘟か
·
2022-11-22 02:27
ETL作业
数据仓库
javascript
开发语言
kettle
web数据抽取
1.新建转换并建立如图所示的三个步骤2.点击自定义常量数据步骤进行编辑2.1元数据中添加以下内容2.2数据中填写filename和User-Agent2.3filenameUser-Agent获取2.3.1进入豆角网:https://www.doujiaow4.com/2.3.2.打开应用程序菜单选择更多工具中的web开发工具(快捷键为F12)打开后会呈现如下界面:2.3.3点击网络2.3.4选择
CC-Betsy
·
2022-11-22 02:27
数据库
etl
sql
Kettle
工具的基本使用(第三章)
目录一.
kettle
的简介二.字段拼接操作一.
kettle
的简介1.
Kettle
是一款国外免费开源的轻量级ETL工具2.
Kettle
可以在Windows、linux、UNIX系统上运行,并且是绿色无需安装的
CC-Betsy
·
2022-11-22 02:27
sql
mysql
etl
第八章 综合案例——构建DVD租赁商店数据仓库(3)
一、加载演员数据至演员维度表操作介绍:通过
Kettle
工具加载演员数据至演员维度表dim_actor。
Flipped.伟
·
2022-11-22 02:57
big
data
r语言
人工智能
数据清洗黑马程序员 第八章综合案例——构建DVD租赁商店数据仓库——作业(3)
8.3.7加载演员数据至演员维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_actor,并添加表输入控件、插入/更新控件以及Hop跳连接线,具体如图所示:2.
黄橙子^O^
·
2022-11-22 02:57
数据清洗
开发语言
etl
数据库
数据清洗黑马程序员 第八章综合案例——构建DVD租赁商店数据仓库——作业(4)
8.3.9加载租赁数据至租赁事实表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_fact_rental,并添加表输入控件、字段选择控件、过滤记录控件、计算器控件、增加常量控件
黄橙子^O^
·
2022-11-22 02:57
数据清洗
etl
数据库
mysql
第八章 综合案例——构建DVD租赁商店数据仓库(1)
一、加载日期数据至日期维度表操作介绍:下面通过
Kettle
工具加载日期数据至dim_date日期维度表。
Flipped.伟
·
2022-11-22 02:26
数据库
mysql
big
data
大数据
数据仓库
第八章 综合案例——构建DVD租赁商店数据仓库(2)
一、加载用户数据至用户维度表操作介绍:通过
Kettle
工具加载用户数据至用户维度表dim_customer。
Flipped.伟
·
2022-11-22 02:26
big
data
大数据
数据库
人工智能
mysql
数据清洗黑马程序员 第八章综合案例——构建DVD租赁商店数据仓库——阅读笔记
8.3案例实现8.3.2加载日期数据至日期维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件
あㅉ
·
2022-11-22 02:21
数据仓库
数据清洗黑马程序员 第八章综合案例——构建DVD租赁商店数据仓库——阅读笔记(3)
8.3.7加载演员数据至演员维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_actor,并添加表输入控件、插入/更新控件以及Hop跳连接线,具体如图1所示:图
あㅉ
·
2022-11-22 02:21
数据仓库
数据清洗黑马程序员 第八章综合案例——构建DVD租赁商店数据仓库——阅读笔记(4)
8.3.9加载租赁数据至租赁事实表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_fact_rental,并添加表输入控件、字段选择控件、过滤记录控件、计算器控件、增加常量控件
あㅉ
·
2022-11-22 02:21
数据仓库
数据清洗黑马程序员 第八章综合案例——构建DVD租赁商店数据仓库——阅读笔记(2)
8.3.5加载用户数据至用户维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_customer,并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/
あㅉ
·
2022-11-22 02:51
数据仓库
Kettle
:综合案例--构建DVD租赁商店数据仓库2
目录1.加载用户数据至用户维度表2.加载商店数据至商店维度表1.加载用户数据至用户维度表(1)创建转换使用
Kettle
工具,创建一个转换,并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/
遇到困难睡大觉.
·
2022-11-22 02:18
数据仓库
kettle
打开时,spoon.bat打不开或打开后一闪而退解决办法
kettle
打开时,spoon.bat打不开或打开后一闪而退解决办法1:检查jdk是否安装完成,这里jdk必须为1.8及以上(在多次实践中发现,jdk9和jdk10使用起来并不稳定,这里我们强烈推荐使用
Hejincheng9
·
2022-11-22 00:03
kettle
spoon
启动
Kettle
时报错找不到文件javaw.exe
kettle
安装过程中异常处理:
kettle
运行spoon.bat时找不到javaw文件bug报错_zgrjddd的博客-CSDN博客_找不到javaw文章目录问题描述问题分析解决方法测试以下问题描述
kettle
zzb103749
·
2022-11-21 12:02
big
data
Pentaho
Kettle
连接 CDH Hive (No suitable driver found for jdbc:hive2 错误解决方法)
关键点:清理
Kettle
缓存:rm-rf /home/user/data-integration/.
yimenglin
·
2022-11-21 12:31
ETL
kettle
kettle
7.1 找不到 connect的原因以及解决办法
kettle
是一个比较好用的ETL开源工具,之前一直使用的是6.1版本,最近项目组有小伙伴第一次使用,直接下载了7.1版本。
心语轩元
·
2022-11-21 12:01
etl
kettle
源码运行启动
kettle
源码运行启动
kettle
源码运行环境这边建议是JavaJDK8IntellijIDEA2018.3Maven3.3.9(经测试最新版3.6.2无法正常导入源码)Git1.使用git在Pentaho
Kettle
weixin_45888636
·
2022-11-21 12:28
kettle
kettle
邮件服务器,
kettle
实用功能之三 ---- 使用
kettle
群发动态内容的邮件。
他一直找不到一个合适的免费的群发工具,于是我推荐他使用了
kettle
,并帮他画了一个流程来群发邮件。(这位朋友不是IT人员,不会开发,只会使用MicrosoftOffice)。
洋88
·
2022-11-21 12:25
kettle
邮件服务器
kettle
配置集群_
kettle
集群搭建
一、
Kettle
集群概述1)
Kettle
集群简介集群技术可以用来水平扩展转换,使得他们能够同时运行在多台服务器上。它将转换的工作量均分到不同的服务器上。
weixin_39942335
·
2022-11-21 12:54
kettle配置集群
数据库数据格式化之
Kettle
Spoon
前言现在的数据库种类越来越多,数据库备份的格式也越来越复杂,所以数据格式化一直是一个老生常谈的问题。据库备份文件格式那么多,既有SQL的,也有BAK的,还有TXT的等。数据库种类也有很多,MySQL,Oracle,SQLserver等,怎么对这些数据库进行管理?昨天泄露access格式的数据库,今天泄露了excel格式的数据库,明天又泄露了SQL格式的数据库。要格式化那么多种类的数据库,压力山大啊
weixin_30580341
·
2022-11-21 12:53
数据库
java
大数据
Pentaho-
kettle
Kettle
1.
Kettle
开源的ETL工具1-1.
Kettle
的介绍ETL(Extract-Transform-Load的缩写,即数据抽取、转换、装载的过程,我们经常会遇到各种数据的处理,转换,迁移,
weixin_33991727
·
2022-11-21 12:23
数据库
操作系统
shell
kettle
的基本介绍
Kettle
主要内容:一.ETL介绍二.
Kettle
介绍三.Java调用
Kettle
API一、ETL介绍1.ETL是什么?
hzm326
·
2022-11-21 12:52
数据库
数据仓库
大数据
编程语言
python
kettle
的学习使用及常见bug
目录1、下载安装2、Windows下使用
kettle
2.1、解压安装2.2、启动
kettle
2.3、创建mysql连接2.4、启动mysql连接3、创建一个转换3.1、创建转换3.2、设置表输入3.3、
绿萝蔓蔓绕枝生
·
2022-11-21 12:18
kettle
mysql
Kettle
集群介绍及(windows、linux)环境搭建
https://blog.csdn.net/u013434750/article/details/60958990一、
Kettle
集群概述1)
Kettle
集群简介集群技术可以用来水平扩展转换,使得他们能够同时运行在多台服务器上
beststone1
·
2022-11-21 12:47
kettle
kettle
Kettle
命令行使用说明
1.
KETTLE
简介说到ETL开源项目,
Kettle
当属翘首,项目名称很有意思,水壶。按项目负责人Matt的说法:把各种数据放到一个壶里,然后呢,以一种你希望的格式流出。呵呵,外国人都很有联想力。
十点摆码
·
2022-11-21 12:12
Kettle
Kettle
数据分析工具
数据同步
Kettle
的安装及使用
转载自:https://blog.csdn.net/cs2559371050/article/details/71126655
kettle
是什么?
阿T_smile
·
2022-11-21 12:11
Kettle
Kettle
Kettle
连接失败 Oracle 数据库报 ora-12505 的解决方法
因Informatica的bug,转而使用
Kettle
。今天第一次使用,找了一下才知道
Kettle
的主程序启动方式:运行data-integration\Spoon.bat。
a1015088819
·
2022-11-21 12:39
ETL
etl
kettle
Kettle
运行Spoon.bat出现命令框然后闪退【BUG已解决】
文章目录项目场景:问题描述原因分析:解决方案:项目场景:在内科大数据处理课程中,要求安装
Kettle
。
上进小菜猪
·
2022-11-21 12:04
BUG解决合集
bug
java
jvm
SQLserver查询锁表和解锁
SQLserver查询锁表和解锁由于写错了一个过滤条件
kettle
从用友U8数据库中拉取发票明细数据时数据量过大强制停止后仍然在无法查询,怀疑是被锁表了。
挨踢诗人
·
2022-11-19 06:52
数据库学习笔记
数据库
dba
7.1
Kettle
数据加载——增量加载
准备数据:添加源数据表incremental_sourceMySQL代码如下:createtable`incremental_source`(`id`int(20),`name`varchar(60),`age`int(20),`create_time`datetime);insertinto`incremental_source`(`id`,`name`,`age`,`create_time`)
kiritobryant
·
2022-11-19 05:26
ETL-kettle
数据库
etl工程师
etl
Kettle
实现:MongoDB与MySQL数据互传
一,mongodb传数据到mysql在
kettle
中,mongodbinput组件。编辑组件输入连接信息选择数据库写查询语句选择字段。上面的复选框选择是否输入json格式,这时不选。
Cym02
·
2022-11-18 14:27
Kettle
建模
mongodb
mysql
数据库
kettle
数据库链接共享(或本地配置文件)
之后重启
Kettle
可以完成共享,或者重复共享,取消共享操作。共享操作主要是修改了,
kettle
本地的配置文件shared.xml有需要的小伙伴,可以直接在配置文件里永久修改。
Cym02
·
2022-11-18 14:57
Kettle
hive
database
数据仓库
数据库
kettle
中job的定时执行
在完成job后经常会有定时执行的需求,一种是在start中设置,但是需要窗口一直存在,操作起来不太方便;另外就是在
kettle
中添加.bat文件,然后把.bat文件添加到计算机的任务计划中定时执行,具体操作如下
zhx0114
·
2022-11-11 00:06
个人成长
kettle
kettle定时执行job
定时执行.bat文件
任务计划定时执行.bat文件
java web集成
kettle
_java中调用
kettle
作业以及生成web service 接口
第一步:(前提将kett中lib下的所有jar包拷贝到java项目lib目录)创建并连接资源库,如果只用这一个工作空间,可以将此段代码放入静态代码块,代码如下:
Kettle
Environment.init
撒哈巴拉卡达西亚
·
2022-11-11 00:50
java
web集成kettle
kettle
入门使用教程(最新版)
目录前言一、下载、安装二、启动软件三、转换的使用教程四、作业的使用教程总结前言
Kettle
下载与安装保姆级教程(最新)
Kettle
下载安装pdi-ce-7.1.0.0-12教程win10环境安装
kettle
·
2022-11-09 15:50
Kettle
下载安装pdi-ce-7.1.0.0-12教程
Kettle
简介
Kettle
最早是一个开源的ETL(Extract-Transform-Load的缩写)工具,全称为KDEExtraction,Transportation,TransformationandLoadingEnvironment
·
2022-11-09 15:19
Kettle
下载与安装保姆级教程(最新)
目录
Kettle
简介主要功能运行环境
Kettle
下载下载地址:运行
Kettle
导入数据库驱动jar包
Kettle
使用配置资源库与数据库修改、添加用户信息总结
Kettle
简介
Kettle
最早是一个开源的ETL
·
2022-11-09 15:19
win10环境安装
kettle
与linux环境安装
kettle
的详细过程
目录前言一、
Kettle
下载:1、
kettle
源代码下载地址:2、官网下载3、JDK安装二、win10环境安装
kettle
1、解压
kettle
2、双击spoon启动3、启动界面如下:三、linux环境安装
·
2022-11-09 15:18
上一页
10
11
12
13
14
15
16
17
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他