Teradata领军大数据与SQL的结合

本文讲的是Teradata领军大数据与SQL的结合,大家还认为在单一集成架构中管理获取非结构化数据、半结构化数据以及传统的行与列的数据仓库是不可能的事吗?Teradata定会让你眼前一亮。

　　Teradata统一数据平台架构(Unified Data Architecture)的发布引领了一股新潮，就连IBM、EMC和Oracle都有可能紧随其后。

▲Teradata统一数据平台架构

　　该架构包含一系列为企业量身打造的技术，使它们在传统关系数据库和大数据Hadoop环境中都能够以更低的成本更加快捷地捕捉、存储和分析数据。

　　由谷歌开发的并行编程框架MapReduce与其开源版本Hadoop简化了分布在商业硬件中大型数据集的处理流程。

　　只有高端程序员才能够获取并分析数据，而他们的薪酬可不是小数目。Teradata称，统一数据架构可让开发者和数据科学家运用SQL在Hadoop分布式文档系统(HDFS)中查询非结构化数据;众所周知，SQL是一种使用更为广泛的语言。

　　Teradata的CTO Stephen Brobst说：“你可以同时拥有MapReduce的性能和SQL的简便。在这之前，只有把数据放进Hadoop的人才有权限把它们拿出来用。”

　　Teradata部署了由Hortonworks开发的开源元数据框架HCatalog，而SQL-H允许使用行业标准的SQL语言对HDFS进行分析。

　　在Aster没被Teradata收购之前，它开发了SQL-MapReduce，并申请了专利，为SQL注入新的MapReduce功能，并提供超过50种预建分析应用。

　　“这等于把两个技术的优势结合起来。”

　　Teradata-Aster的大数据分析设备(Big Analytics Appliance)整合了不同的技术，在Hadoop和Teradata关系数据库的一台机器中运行、管理并分析数据，存储量可达到15PB，而且可在多服务器环境中运行。

　　除了硬件设备，Teradata还发布了新的软件——对基于网页的系统管理工具Viewpoint进行扩展，在相同的控制平台中管理Aster，同时还可以对Hadoop数据库进行管理监控。Hadoop连接器支持数据在Cloudera和Hortonworks Hadoop文档中的载入和提取。据了解该功能将在2013年年初提供。

　　Cerulium咨询公司的COO Eric Rivard提到，在架构中使用SQL-H会节省一定的成本。

　　他说：“Hadoop非常适合处理海量的数据，但数据的提取就比较困难。”

　　Bloor Group的创始人兼首席分析师Robin Bloor认为，Oracle、微软和IBM很有可能跟随Teradata的这一做法，在他们自己的系统中将Hadoop和关系数据库整合到一个更易于管理和获取数据的框架。无论如何，Teradata打响了第一枪。

　　撇开在一个架构中整合大数据和传统数据的可观价值不谈，企业仍然无法解决如何将现有数据和历史数据整合到同一个管理分析架构中的问题。

　　Bloor说，一个厂商发布了新技术还不太可能改变整个行业的现状。

作者： 茶一峰

来源： IT168

原文标题：Teradata领军大数据与SQL的结合