干货丨常用的数据集成ETL工具有哪些?

ETL工具是什么呢?ETL是英文Extract-Transform-Load的缩写,用来描述将数据从来源端经过抽取、转换、加载至目的端的过程。ETL一词较常用在数据仓库,但其对象并不限于数据仓库。

ETL工具用于将异构数据转换为同类数据,然后由数据科学家用于从数据中获得有价值的数据,常用的ETL工具有Microsoft-SQL Server集成服务、AWS Glue、Apache NiFi、Informatica PowerCenter、IBM的Infosphere Information Server等。

常用的数据集成ETL工具

1、Microsoft-SQL Server集成服务(SSIS)

为了构建高性能的数据集成解决方案,例如提取,转换等,SSIS被认为是一个出色的平台。由用于构建和调试程序包的图形工具和向导,用于执行工作流程功能(包括执行SQL语句,FTP操作等)的任务组成。

SSIS的功能:

数据集成和工作流应用程,用于ETL的数据仓库工具。

2、AWS Glue

AWS Glue是一种简单且具有成本效益的,完全托管的无服务器ETL,用于对数据进行分类并将其跨多个数据源移动。由AWS Glue数据目录(即中央元数据存储库,ETL引擎和灵活的计划)组成。

AWS Glue的功能:

它生成ETL脚本以将数据从源转换为目标,检测架构更改并适应您的首选项。

3、Apache NiFi

Apache NiFi支持转换,数据路由和系统中介逻辑的可扩展且功能强大的有向图。开发它是为了使系统之间的数据流自动化。流控制器,Web服务器,内容存储库,扩展是Java虚拟机上NiFi的某些组件。

Apache NiFi的功能:

高度可配置,基于Web的用户界面。

4、Informatica PowerCenter

Informatica PowerCenter是一个数据集成平台,可帮助加快数据集成项目并迅速将数据交付业务。

Informatica PowerCenter的功能:

用于分析和应用程序的实时数据,可扩展性和零停机时间。

5、IBM的Infosphere Information Server

IBM Infosphere Information Server是一个提供大量并行功能的平台。此外,它提供了一个高度灵活且可扩展的平台,可以处理所有数据量,是一个平台,允许用户清理,监视,理解和转换数据。

Infosphere Information Server的功能:

跨各种系统连接数据,评估、分析和监视数据质量。

6、 Qlik Replicate

Qlik Replicate是一个数据集成平台,支持多种用例,其中包括实时数据仓库,大型机现代化该平台可自动执行复制过程,其中包括跨所有主要数据库,数据仓库等生成目标架构。

Qlik Replicate的功能:

数据保护,高性能,实时更新,直观的GUI,可复制数据摄取和复制

7、OracleData Integrator

Oracle Data Integrator是一个平台,可满足从高性能批处理装载到启用SOA的数据服务等几乎所有类型的数据集成需求。包括与Oracle Warehouse Builder到Oracle Data Integrator的互操作性。

Oracle Data Integrator的功能:

快速的开发和维护,数据质量防火墙。

8、SAP BusinessObjects数据集成器

借助SAP BusinessObjects Data Integrator,组织可以在分析环境中提取,转换,集成和加载数据。组织可以从几乎任何来源提取数据,进行转换并将其集成到任何目标数据库中。

SAP的功能:

先进的调试功能,数据质量功能。

9、SAS-数据集成工作室

SAS用于构建,实施和管理数据集成过程,而与平台,应用程序和数据源无关,是一个功能强大的设计工具。该工作室易于管理,具有多用户环境,可以在大型项目上进行协作。

SAS功能:

提供标准转换库,使您可以查询和使用跨多个系统的数据。

点赞 · 分享 · 转发

帮助更多需要的人看到

干货丨常用的数据集成ETL工具有哪些?_第1张图片

END

干货丨常用的数据集成ETL工具有哪些?_第2张图片

你可能感兴趣的:(数据仓库,java,编程语言,大数据,项目管理)