kettle:字段的拆分、合并、值映射

【实验目的】
1.利用Kettle的“拆分字段”,“字段选择”,“值映射”“JavaScript代码”组件,实现字段的拆分、合并、值映射。
2.熟练掌握“拆分字段”,“字段选择”,“值映射”“JavaScript代码”等组件的使用,实现字段的拆分、合并、值映射。

【实验原理】
利用“拆分字段”将表格的<课程大类>字段拆分为<课程大类>和<课程大类>两个字段;
利用“值映射”将表格的<讲师>为xx的替换为另外一个XXX;
利用“JavaScript代码”通过编程实现<学分><课时数>的合并,再通过“字段选择”选择合并的字段输出到表格。

【实验环境】
操作系统:Windows10 
Kettle版本:7.1.0.0
jdk版本:1.8.0及以上版本

【实验步骤】

一、建立转换

双击spoon.bat打开kettle。(1)点击新建按钮,在下拉菜单中点击选择“转换”即可创建;(2)然后点击“保存”重命名该转换文件,保存在某个指定的路径;(3)选择输入步骤、输出步骤和跳。
kettle:字段的拆分、合并、值映射_第1张图片

二、各组件的配置

1.“Excel输入”的配置
Step1:双击‘Excel输入’组件,配置‘文件’工作表
kettle:字段的拆分、合并、值映射_第2张图片

Step2:配置‘工作表’选项卡,设置起始行和起始列
kettle:字段的拆分、合并、值映射_第3张图片

Step3:配置‘工字段’选项卡,注意获取字段数据的类型
kettle:字段的拆分、合并、值映射_第4张图片

2.“拆分字段”的配置:
双击“拆分字段”组件,填写要拆分的数据大类,设置字段
kettle:字段的拆分、合并、值映射_第5张图片

3.“字段选择”的配置:
获取选择的字段
kettle:字段的拆分、合并、值映射_第6张图片

4.“值映射”的配置:
使用该组件替换字段名为讲师的数据值
kettle:字段的拆分、合并、值映射_第7张图片

5.“JavaScript代码”的配置:编写学分课时数的计算并获取字段
kettle:字段的拆分、合并、值映射_第8张图片

6.“字段选择2”的配置:
Step1:配置‘选择和元数据’选项卡,获取字段
kettle:字段的拆分、合并、值映射_第9张图片

Step2:配置‘元数据’选项卡,替换输出的字段名称
kettle:字段的拆分、合并、值映射_第10张图片

7.“Excel的输出”配置
Step1:配置‘文件’选项卡,选取输出文件的名称和类型
kettle:字段的拆分、合并、值映射_第11张图片

Step2:配置‘字段’选项卡,获取字段并设置其类型(多余的字段可以删除)
kettle:字段的拆分、合并、值映射_第12张图片

三、执行转换

点击按钮,执行转换,结果如下:
kettle:字段的拆分、合并、值映射_第13张图片

四、实验结果:

输入文件‘课程信息表.xlsx’:
kettle:字段的拆分、合并、值映射_第14张图片

输出文件‘test6.xls’:
kettle:字段的拆分、合并、值映射_第15张图片

五、实验总结

本次实验的目的主要是对不规范的字段进行数据清理,替换删除部分字段以及使用JavaScript代码组件编写代码生成一个新的字段并输出显示,使得最终的数据结果较为理想。在操作过程中并未遇到实质性的困难。

附 件:

kettle:字段的拆分、合并、值映射_第16张图片

你可能感兴趣的:(kettle,大数据)