企业数据存储方式发展趋势:数据仓库-大数据平台-数据湖-湖仓一体

  • 早期系统采用关系型数据库来存放管理数据,随着大数据技术兴起,人们对数据分析的需求愈加强烈,于是可以面向分析、集成大量数据的数据仓库(DW)诞生,虽然可以提供保存大量数据,但存储、计算成本相对较高,不好做分布式计算;
  • 之后出现的大数据平台可以提供完善的大数据分析基础运行环境、也支持结构化数据非结构数据化的数据的存储 ,但是数据平台在数据治理中的算力不算那么强劲;
  • 再之后出现计算能力足够强的数据湖,数据湖可以处理所有类型的数据,并且适合深度分析,成本也较低,但由于是直接查询贴源层数据,导致查询性能较慢;
  • 于是有了现在的湖仓一体架构,将数仓和数据湖的优势结合,构建在数据湖低成本的存储架构上,又继承了数仓的数据处理能力。

你可能感兴趣的:(大数据,数据仓库)