kettle 合并记录中出现异常,数据相同,合并出现delete,new,change

出现上述问题基本都是格式问题,如何排除格式问题是重点

在kettle转换中合并出现new,delete,并且旧数据中有相同数据时,主要是合并记录中的关键字段,数据类型或者格式不对

解决方法是增加一个字段选择,修改字段的数据类型

如果是出现change ,主要是合并记录中的数据字段的格式出现问题

由于数据字段量比较大,我们也只能通过先删除合并记录中的数据字段

然后查看后续数据流的流向变化,有变化说明该字段出现了问题,否则没有

排查出那个字段出现问题后

在前面增加一个字段选择,修改格式即可

你可能感兴趣的:(mysql,etl工程师,数据仓库,etl,云原生)