ETL-Talend官方入门实战案例

鉴于国内关于Talend文档使用案例相对较少,对初学者相当不友好,所以本文基于官方文档做出的实际的使用例子,全部流程完美复现。对于初学者请耐心作完,将受益匪浅。

文档是省略版,底部有打包上传的代码,并有详细的说明文档,请实际操作并复现比对

  • 使用界面介绍
    ETL-Talend官方入门实战案例_第1张图片
案例1 :读取本地源文件并结构化输出
构建movie.csv文件元数据结构信息
在Job design添加一个movie的作业
添加fFileInputDelimited、tLogRow组件到作业里面
添加要读入的文件信息、并输出到控制台
  • 执行流程
    ETL-Talend官方入门实战案例_第2张图片
    ETL-Talend官方入门实战案例_第3张图片
    ETL-Talend官方入门实战案例_第4张图片
案例2 :读取本地源文件并按要求过滤
 在Job design添加一个filter_movie的作业
 添加fFileInputDelimited、tMap、tLogRow组件到作业里面
 添加要读入的文件信息、过滤、并输出到控制台
  • 执行流程
    ETL-Talend官方入门实战案例_第5张图片

ETL-Talend官方入门实战案例_第6张图片
ETL-Talend官方入门实战案例_第7张图片

案例3 :将过滤的有效和无效的数据分别写入Mysql
 在Job design添加一个mysql_filter_movie的作业
 添加fFileInputDelimited、tMap、tDBOoutput、tLogRow组件到作业里面
 添加要读入的文件信息、过滤、写入数据库
  • 执行流程
    ETL-Talend官方入门实战案例_第8张图片
    ETL-Talend官方入门实战案例_第9张图片
    ETL-Talend官方入门实战案例_第10张图片
    ETL-Talend官方入门实战案例_第11张图片
案例3 :将Mysql的数据读取写入HDFS
在Job design添加一个mysql_hdfs的作业
添加mysql、tHDFSOoutput、tLogRow组件到作业里面
读取数据,写入HDFS
  • 执行流程
    ETL-Talend官方入门实战案例_第12张图片
    ETL-Talend官方入门实战案例_第13张图片
    ETL-Talend官方入门实战案例_第14张图片
    ETL-Talend官方入门实战案例_第15张图片

完整代码文档:talend_project

你可能感兴趣的:(ETL)