DataLake

数据湖与数据仓库

一、数据湖的定义维基百科上定义，数据湖（DataLake）是一个以原始格式存储数据的存储库或系统。它按原样存储数据，而无需事先对数据进行结构化处理。
四月天03·2024-02-07 05:36

一文了解数据库，数据仓库，数据湖，数据集市，数据湖仓

目录一、定义1.数据库（Database）2.数据仓库（DataWarehouse）3.数据湖（DataLake）4.数据集市（DataMart）5.数据湖仓（DataLakehouse）二、相同、异同
giszz·2024-01-17 02:27

【数据湖架构】数据湖101：概述

DataLake允许多点采集和多个数据访问点。Pentaho公司的创始人詹姆斯·迪克森（JamesDixon）在2010年创造了“数据湖”（DataLake）这
架构师研究会·2024-01-04 10:08

数据湖(Data Lake)系列2-数据湖的前世今生

数据湖（DataLake）是一个中央信息存储库，以存储原生或原始格式大量原始数据，且其格式可以是结构化的、非结构化的或半结构化的。
allwit·2023-12-25 21:49

re:Invent 2023 | 简化复杂数据湖环境中的数据安全

AmazonWebServicesre:Invent2023,AmazonS3AccessGrants,DataAccessControl,DataGovernance,S3Access,DataSecurity,DataLake
taibaili2023·2023-12-15 11:40

COS 数据湖最佳实践：基于 Serverless 架构的入湖方案

数据湖（DataLake）概念自2011年被推出后，其概念定位、架构设计和相关技术都得到了飞速发展和众多实践，数据湖也从单一数据存储池概念演进为包括ETL分析、数据转换及数据处理的下一代基础数据平台。
Serverless·2023-11-24 17:19

数据湖架构

数据湖架构介绍数据湖（DataLake）是一个存储大量结构化和非结构化数据的集中式数据存储库。与传统的数据仓库不同，数据湖采用扁平化结构，将数据存储在原始形式下，不需要进行预处理或转化。
溟有常青木·2023-11-15 07:47

数据湖和数据仓库的区别？

2010年，JamesDixon提出数据湖（DataLake）的概念。2011年DanWoods在福布斯发表“大数据需要更大的新架构”（BigDataRequiresaBigNewArchit
RonnieZhang1989·2023-10-15 03:25

大数据的崭露头角：数据湖与数据仓库的融合之道

文章目录数据湖与数据仓库的基本概念数据湖（DataLake）数据仓库（DataWarehouse）数据湖和数据仓库的优势和劣势数据湖的优势数据湖的劣势数据仓库的优势数据仓库的劣势数据湖与数据仓库的融合之道
IT·陈寒·2023-09-24 04:31

什么是数据湖？全面解读数据湖与数据仓库的区别

从数据仓库（DataWarehouse），到如今如火如荼的数据湖（DataLake），都被机构广泛应用于大数据存储，但从结构和处理方式上都有很大的区别。
麦聪聊数据·2023-08-28 22:05

数据湖：解锁数据价值的新时代

文章首发地址数据湖（DataLake）是一种数据存储和管理架构，它将不同类型的数据（如结构化数据、半结构化数据和非结构化数据）以原始形式保存在一个公共存储库中，而不强制执行预定义模式或数据结构。
Walter Sun·2023-08-27 17:11

数据湖是什么

数据湖(DataLake)是大数据系统中的一个重要概念,其主要特征是:1.集中存储所有原始数据数据湖试图存放所有可获得的原始数据,包括结构化数据、半结构化数据及非结构化数据。
diannao720·2023-08-24 09:09

全链路数据湖开发治理解决方案2.0重磅升级，全面增强数据入湖、调度和治理能力

支持EMR新版数据湖DataLake集群（onECS）、自定义集群（onECS）、Spark集群（onACK）三种形态，对接阿里云一站式大数据开发治理平台DataWorks，沉淀
·2023-08-22 10:13

Trino · datalake · 架构设计1

一、背景本文介绍学习Presto/Trino权威指南中的架构相关的信息。这里深挖相关概念，如查询执行模型、查询计划、基于成本的优化，本章首先讨论高层架构组件。理解Presto工作方式非常重要，尤其当你想自己安装和维护集群。二、协调节点和计算节点集群中协调节点和计算节点可以部署在一台机器上，当然考虑到可扩展性和性能，这种部署方式是不合适的。Presto是类似于MPP数据库的分布式查询引擎。不仅仅支持
sinwaj·2023-08-22 02:58

数据湖与数据仓库差异

数据湖（DataLake）是一个以原始格式存储数据的存储库或系统。它按原样存储数据，而无需事
数据智能谷·2023-08-18 10:15

01_Hudi 框架概述、数据湖Data Lake、什么是数据湖、数据湖框架、背景概述、Hudi 介绍、Hudi 发展及特性等

本文来自"黑马程序员"hudi课程1.第一章Hudi框架概述1.1数据湖DataLake1.1.1仓库和湖泊1.1.2什么是数据湖1.1.3数据湖的优点1.1.4DataLakevsDatawarehouse1.1.5
涂作权的博客·2023-08-11 23:45

关于Data Lake的概念、架构与应用场景介绍

数据湖（DataLake）概念介绍什么是数据湖（DataLake）？
大数据技术架构·2023-08-05 18:38

ELT太慢怎么行，试试PolyBase？

这个时候我们通常会倾向于采用ELT（ExtractLoadandTransform)，顾名思义，先把未处理的数据放在一个集中的数据湖(DataLake或者对象
Kele_73b1·2023-07-20 02:58

数据湖：存储全量数据，快速实现洞察

数据湖（DataLake）已经成为继数据库、数据仓库之后敏捷处理数据、提升数据洞察力的又一标志性的技术。摸
Z1Y492Vn3ZYD9et3B06·2023-07-17 23:05

【Azure Data Platform】Azure Data Lake(1)——简介

接上文：【AzureDataPlatform】SQLDW备份策略前言在当前工作中，频繁且广泛使用Azure的DataLake服务，毕竟云环境下也要存储，所以几乎所有的数据相关服务，都或多或少涉及了DataLake
發糞塗牆·2023-06-17 11:04

什么是Azure Data Lake

备注：Blog具有时效性，内容随着更新会发现变化，目前时间是2017年5月12日在Azure.com已经推出了DataLake，就是数据湖，数据湖是什么呢？
阿特·2023-06-17 11:04

数据湖和数据仓库区别介绍

数据湖（DataLake）和数据库、数据仓库一样，都是数据存储的设计模式。数据库和数据仓库会以关系型的方式来设计存储、处理数据
dkjhl·2023-06-15 11:20

数据湖全面解析

数据湖的缘起10年前，Pentaho公司（一家开源BI公司）的CTO詹姆斯·迪克森在他的博客中第一次提出“数据湖”（DataLake）的概念；10年后的今天，在业界“数据中台”大火的时代背景下，再来讨论
SunnyRivers·2023-06-10 21:19

基于Apache Hudi新一代数据湖实践

根据维基百科对数据湖的定义：数据湖（DataLake）是一个以原始格式存储数据的存储库或系统，它按原样存储数据，无需事先对数据进行结构化处理。
科杰科技·2023-04-13 16:52

“数据湖”架构的基础话语体系

现综合多个文献的内容对领域主要术语总结如下：第一，数据湖（datalake）。数据湖是一种可以接纳多种原始格式数据资源并面向用户需求提供整体性数
总写bug的程序员·2023-04-10 09:18

数据湖的最佳实践_数据湖

AsDatadrivesbusinessweneedDatalaketocollectdataandgetadvantagefromit.Inthisstory,wewillcoveralltheinsightsaboutthedatalakeandknowitinabetterway.随着数据推动业务发展，我们需要DataLake
weixin_26711425·2023-04-05 17:48

华为云学院DataLake了解一下！

By:FYS_CMSS的CSDN博客“Adatalakeisamethodofstoringdatawithinasystemorrepository,initsnaturalformat,thatfacilitatesthecollocationofdatainvariousschemataandstructuralforms,usuallyobjectblobsorfiles”数据湖是在系统或
舒意从生·2023-03-16 15:15

数据湖技术之 Hudi 框架概述

第一章Hudi框架概述先了解什么是数据湖DataLake，及Hudi数据湖框架功能及各个版本特性。
潘小磊·2023-03-14 11:58

基于 DataLakeAnalytics 的数据湖实践

随着软硬件各方面条件的成熟，数据湖(DataLake)已经越来越受到各大企业的青睐,与传统的数仓实践不一样的是，数据湖不需要专门的“入仓”的过程，数据在哪里，我们就从哪里读取数据进行分析。
xumingmingv·2023-02-06 02:12

如何快速构建企业级数据湖仓？

简言之，LakeHouse是在DataLake基础上融合了DataWareho
字节数据平台·2023-02-03 10:43

数据湖是谁？那数据仓库又算什么？

数据湖初识近两年，为什么都开始谈论起DataLake这个”新名词”了？
大数据技术派·2023-02-03 07:55

Spark 调优攻略上册

本次整理不单单是Apachespark还涵盖了DataLake和阿⾥云EMR智能团队研发的Jindo-Spark是如何基于Apachespark进⾏多维优化及实现原理，让
YaPengLi.·2022-12-15 11:44

一文搞懂什么是数据湖(data lake)？

一、概论datalake数据湖，最早由Pentaho的CTO,JamesDixon发明。
海若[MATRIX]·2022-12-09 15:18

开源大数据：数据湖

数据湖（DataLake）是一个以原始格式存储数据的存储库或系统。它按原样存储数据，而无需事先对数据进行结构化处理。
ejinxian·2022-11-29 06:31

重磅发布 ， 阿里云全链路数据湖开发治理解决方案

近日，阿里云EMR重磅推出新版数据湖Datalake，100%兼容社区大数据开源组件，具备极强的弹性能力，支持D数据湖构建DLF，数据湖存储OSS和OSS-HDFS，支持DeltaLake、Hudi、Iceberg
阿里云大数据AI技术·2022-08-18 13:05

重磅发布！阿里云全链路数据湖开发治理解决方案

近日，阿里云EMR重磅推出新版数据湖Datalake，100%兼容社区大数据开源组件，具备极强的弹性能力，支持数据湖构建DLF，数据湖存储OSS和OSS-HDFS，支持DeltaLake、Hudi、Iceberg
·2022-08-17 14:27

浅谈数据湖的探究与调研！

1、什么是数据湖（Datalake）？数据湖是目前比较热的一个概念，许多的企业都在构建或者计划构建自己的数据湖。
BigData菜鸟·2022-08-11 10:12

数据湖详解

维基上对它的解释：数据湖（DataLake）是一个以原始格式存储数据的存储库或系统。它按原样存储数据，而无需事先对数据进行结构化处理。
阿呆的博客·2022-07-13 08:49

什么是数据湖？

数据湖（DataLake）是一个存储企业的各种各样原始数据的大型仓库，其中的数据可供存取、处理、分析及传输。目前，Hadoop是最常用的部署数据湖的技术，所以很多人会觉得数据湖就是Hadoop集群。
mischen520·2022-07-13 08:43

执行计划分析 · datalake · 可视化

一、背景本文介绍通过工具以可视化的方式分析postgres或greenplum的执行计划。二、Postgres示例执行计划：NestedLoopLeftJoin(cost=11.95..28.52rows=5width=157)(actualtime=0.010..0.010rows=0loops=1)Output:rel_users_exams.user_username,rel_users_e
sinwaj·2022-07-02 19:15

执行计划分析 · datalake · 正则表达式（20220625）

一、背景本文介绍正则表达式解析数据分析引擎所产生的执行计划，最后能够以易懂的方式分析执行计划，进而为SQL优化提供帮助。二、正则表达式基础语法："^([]{})([]{})([]{})$"正则字符串="开始（[包含内容]{长度}）（[包含内容]{长度}）（[包含内容]{长度}）结束"二、解析案例1.GatherMotion输入：GatherMotion2:1(slice1;segments:2)(
sinwaj·2022-06-25 17:20

关于 Data Lake 的概念、架构与应用场景介绍

什么是数据湖（DataLake）？
·2022-06-22 18:28

数据湖的概念以及解决方案

今天这篇文章主要介绍数据湖（datalake）的定义，其次介绍各大云厂商的解决方案以及目前的开源解决方案。定义看下维基百科的定义：数据湖是一个以原始格式(通常是对象块或文件)存储数据的系统或存储库。
weixin_30371469·2022-06-17 10:04

数据湖架构开发-Hudi入门教程

为了更好管理数据，出现数据湖DataLake：用来存储大量的原始数据。
是一只萨摩耶·2022-05-31 07:10

深入浅出亚马逊AWS数据湖

正文开始一、认识数据湖1、初识数据湖Datalake，我第一次接触这个概念，是在2014年IBM组织的数据治理交流论坛上。当时只是认为“数据湖”就是一个概念，没什么新意，“不就是把不同结构的
傅一平·2022-05-27 07:06

从火星的古海洋，读懂蓝星的数据湖之变

相比传统的数据仓库架构，数据湖（DataLake）已经成为数字化进程中，对现代企业和组织极具吸引力的大数据“着陆地”。简单来说，数
脑极体unity007·2021-06-05 03:02

数据湖，已成为海量数据存储与分析的重要承载方式

数据湖（DataLake）概念自20
·2021-03-29 12:41

数据湖初识

近两年，为什么都开始谈论起DataLake这个”新名词”了？
不二人生·2020-12-18 19:08

Data Lakehouse (湖仓一体) 到底是什么

本文转载自https://mp.weixin.qq.com/s/Il...背景数据湖（DataLake)，湖仓一体（DataLakehouse）俨然已经成为了大数据领域最为火热的流行词，在接受这些流行词洗礼的时候
鸿乃江边鸟·2020-12-07 09:36

Data Lakehouse (湖仓一体) 到底是什么

本文转载自https://mp.weixin.qq.com/s/Il...背景数据湖（DataLake)，湖仓一体（DataLakehouse）俨然已经成为了大数据领域最为火热的流行词，在接受这些流行词洗礼的时候
鸿乃江边鸟·2020-11-28 16:02
上一页 1 2 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他