ETL工具与调度工具的区别(一)

ETL工具与调度工具的区别(一)
1、ETL工具:ETL为 Extract-Transform-Load 的缩写,三个单词描述了将数据从源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。简而概之就是,将数据从数据源进行抽取、进行清洗转换、最后加载到数仓模型中,在数据仓库中起到了承前启后的作用。
常见的ETL工具有:kettle、RestCloud、informatica
2、调度工具:调度工具的作用是可以批量化对作业进行启停操作,专业化的调度工具可以满足更复杂的场景,对作业的配置分类可以更加合理,调度引擎原本是作为ETL的模块,随着业务场景的复杂,ETL的调度模块逐渐不满足业务需求,甚至一个作业开发需要更多冗余作业的支持,调度工具在此需求下应运而生。
常见的调度工具:MOIA(企业级国产化软件、满足信创需求)、control-m

你可能感兴趣的:(数据仓库,hive,etl工程师)