DataStage On Cloud,构建云端的企业数据集成平台

众所周知,IBM InfoSphere DataStage已广泛应用于金融、政府、医疗、制造、零售等各大领域,在企业IT架构中扮演着数据集成总线的重要角色。

SoftLayer:云计算基础架构的基石

在介绍DataStage on Cloud之前,让我们先来了解一下SoftLayer。

成立于2005年的 SoftLayer (现已被IBM收购)为全球范围的各类型企业提供多种 IT 基础架构服务。它在全球拥有46个数据中心,可以为使用者提供包括裸机、云计算、私有云等随需应变的服务。通过一个统一的管理平台(IMS),使用者可以十分灵活地控制和管理所申请的资源,从而实现最经济的 IT 基础架构资源利用率。

DataStage On Cloud,构建云端的企业数据集成平台_第1张图片

作为全球最大的IDC公司,SoftLayer拥有构建企业云计算基础架构的天然优势:

  • 全球建立了46个数据中心:Tier 3+ 级别,遵从 SOC2
  • 主要提供计算服务和存储服务
  • 全球拥有超过24个入网点(points of presence),提供高可用的高速互联网接入
  • 各个数据中心间的服务器拥有 1Gb/s的内部网络通道
  • 拥有超过10万台服务器,服务超过23000个客户

DataStage on Cloud 是什么?

顾名思义,DataStage on Cloud 即部署在SoftLayer上的IBM InfoSphere DataStage,完全具备企业级DataStage的所有强大功能:

  • 提供可视化数据流设计,内置上百个数据转换和数据处理控件
  • 代替手工编码,提高产出效率
  • 降低大型、复杂数据集成项目的实施风险
  • 基于元数据的血缘分析
  • 促进团队开发及协作
  • 提供对异构数据源的广泛连接
  • 支持批量任务和实时集成
  • 提供基于web的统一监控运维平台
DataStage On Cloud,构建云端的企业数据集成平台_第2张图片

DataStage on Cloud 部署架构

1. DataStage的多层架构如下,在本地搭建的DataStage环境中,每一层都可安装在不同的物理机器上:

  • Client:DataStage客户端层
  • Engine:DataStage并行引擎层
  • Services:DataStage公共服务层
  • Repoistory:DataStage元数据管理层

2. DataStage on Cloud 则将上图中的所有层都部署在SoftLayer上,由SoftLayer统一分配资源和管理:

  • 安装可选择SoftLayer的虚拟机或物理机器
  • 支持DataStage集群配置
  • 客户端层、服务层、引擎层和元数据管理层都安装在MS Windows平台上
DataStage On Cloud,构建云端的企业数据集成平台_第3张图片

3. DataStage on Cloud与DataStage本地部署方式相比,最突出的优势在于:

  • 企业无需购买昂贵的硬件资源,采用租赁的方式即可获得企业级数据集成平台,省钱省事省力!
  • DataStage服务器安装、配置和维护皆由SoftLayer统一管理,提供超强的高可用、稳定性和可扩展性!

DataStage on Cloud 应用场景

1. 构建云端的信息集成平台

  • 本地数据源与云数据源的信息集成
  • 云数据源之间的信息集成

2. 构建云端开发及测试环境

  • 开发新的数据集成项目
  • 测试DataStage新版本的功能及性能,用于升级演练
DataStage On Cloud,构建云端的企业数据集成平台_第4张图片

DataStage on Cloud 服务流程图示例

DataStage On Cloud,构建云端的企业数据集成平台_第5张图片

对大数据与分析有兴趣的朋友也可以参考一下这个网址,讲解的还是比较齐全>>>

via:华南IBM大数据支持团队

你可能感兴趣的:(数据分析,数据挖掘,大数据,数据处理,数据集成)