--------【数据仓库】第51页

数据仓库系列文章二：浅谈企业数据仓库总线矩阵

Kinball在《数据仓库工具箱》一书中，详细阐述维度建模思想，并给出维度建模的众多实践。维度建模的核心内容和建设过程在实践中已经被大家所熟知，网上教程也很多，本文不做赘述。

feijinz·2023-03-29 08:16

一篇文章搞懂数据仓库：总线架构、一致性维度、一致性事实

目录1、概述总线架构一致性维度一致性事实2、总线架构demo小结1、概述在Kimball的维度建模的数据仓库中，关于多维体系结构（MD）有三个关键性概念：总线架构（BusArchitecture），一致性维度

雾岛与鲸·2023-03-29 08:30

企业数据仓库总线架构、总线矩阵笔记（第三篇）

一、总线架构维度建模的数据仓库中，有一个概念叫BusArchitecture，中文一般翻译为“总线架构”。

Dream__people·2023-03-29 08:30

数据仓库(7)数仓规范设计

优质资源分享学习路线指引（点击解锁）知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统规范设计在这里取《大数据之路：阿里巴巴大数据实践》中的定义，这里记录一下本人对这一块自己的理解。规范定义指以维度建模作为理

pythonxxoo·2023-03-29 07:58

数据仓库-5.总线架构

总线架构是数据仓库建设的总体规划，从整体视角描述了解决方案的维度模型，描述了各个子系统的功能以及关系，描述数据从源系统到决策系统的数据流程，提供建立企业数据仓库系统的增量式方法。

一秋江水·2023-03-29 07:19

（笔记）数据仓库工具箱：维度建模的完全指南--总线结构

在数据仓库领域，有一种构建数据仓库的架构，叫MultidimensionalArchite（MD），即多维体系结构，也叫“总线结构”（BusArchitecture）。

li2008xue2008ling·2023-03-29 07:48

数据仓库的设计

数据仓库设计分层规划ODS(原始数据层):存放未经过处理的原始数据，结构上与源系统保持一致，是数据仓库的数据准备区DWD(明细数据层)：基于维度建模理论进行构建，存放维度模型中的事实表，保存各业务过程最小粒度的操作记录

一二三的小仓库·2023-03-29 07:14

数据仓库建设

1.数仓概述数仓顾名思义，就是数据存储仓库。为什么建设数仓呢？一个事物出现多是为了解决存在的问题。公司面临什么问题？公司业务越来越复杂，数据量越来越大，不同系统业务域数据不通，而公司又需要对不同系统的数据进行整合分析挖掘。从而产生了数仓。数仓中的数据公司一般用来解决什么问题。1.历史数据备份。2.报表展示。3.数据分析挖掘等复杂业务逻辑。常见表类型datadatetimeA,B,C20210601

day_ue·2023-03-29 07:09

6.数据仓库搭建之数据仓库设计

数据仓库搭建之数据仓库设计1.数据仓库的分层规划本项目的分层规划如下图所示:对于原始数据层（ODS）：该层我们存放的是未经处理的原始数据，结构上与源系统保持一致，这是数据仓库的数据准备区。

Mmj666·2023-03-29 07:30

数据仓库建设之总线矩阵/总线架构

--《数据仓库工具箱》二、什么是一致性维度？一致性维度（ConformedDimension）：在同一个集市内，一致性维度的意思是两个维度如果有关系

chimchim66·2023-03-29 07:16

HiveSQL解析原理：包括SQL转化为MapReduce过程及MapReduce如何实现基本SQL操作

的实现原理MapJoin的实现原理CommonJoinResolver优化器ReduceJoin的实现原理3、GroupBy的实现原理二、SQL转化为MapReduce的过程Hive是基于Hadoop的一个数据仓库系统

嗷嗷的特Man·2023-03-29 06:46

大数据中台-什么是中台一文详解就够了

我一开始的理解是：数据中台整合了数据仓库、数据平台等，直到网上查阅了一些资料才知道，原来中台和平台、数仓是平行的，并没有什么直接的关系，看图：三者的关键区别有以下几方面：数据中台是企业级的逻辑概念，体现企业

chenzhihao·2023-03-29 05:57

BI 是什么？BI 的服务对象是谁？一篇万字长文全方位解析BI !

BI（BusinessInteligence）是一种主要由数据仓库、数据分析、查询报表、数据可视化等组成的数据类技术解决方案。

派可数据BI可视化·2023-03-29 05:17

分布式数据库高可用方案对比与分析

作为一款云原生分布式数据仓库，HashData在传统架构的MPP数据库基础上，对存储层、计算层、元数据等多方面进行了改进和优化，进一步提升系统的可用性。相比传统MPP架构的数据库，HashD

HashData酷克数据·2023-03-29 04:58

数据分析3.0时代: HashData 助力企业释放数据资源价值

在会上，HashData解决方案架构师吴昊发表了题为《面向AI应用场景的云原生数据仓库技术与开源规划》的主题演讲。吴昊提出，随着产业数字化和数字产业化的持续推进，数据逐步成为企业核心资产，数据的

HashData酷克数据·2023-03-29 04:58

云原生数仓九大误区，你知道多少？

纵观数据库的发展历史，传统关系型数据库最早期主要针对交易处理为主要应用设计的，对于数据仓库分析统计类的应用，也都运行在这类数据库上，比如传统的Oracle、DB2等。

HashData酷克数据·2023-03-29 04:28

数据同步方案

出自阿里云同步MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADSPorter是一款数据同步中间件，主要用于解决同构/异构数据库之间的表级别数据同步问题.做数据仓库

爱吃蚂蚁的松鼠·2023-03-29 03:35

腾讯云大数据“数智话”技术沙龙第一期—云数据仓库 for Apache Doris 内容回顾...

10月11日晚19：00，腾讯云大数据“数智话”技术沙龙第一期《云数据仓库forApacheDoris-新一代云托管实时统一数据仓库》直播圆满落幕。

腾讯云大数据·2023-03-29 02:41

ETL讲解（很详细！！！）

ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据。ETL是BI项目重要的一个环节。

叫我老村长·2023-03-28 22:09

数仓分层（ODS、DWD、DWS、DWT、ADS）和数仓建模

）做了哪些事DWS（服务数据层）做了哪些事DWT（主题数据层）做了哪些事ADS（应用数据层）做了哪些事二、数仓建模常用的建模工具ODS层DWD层DWS层DWT层ADS层一、数仓分层数仓概念什么是数仓：数据仓库是为企业所有决策制定过程

billows9297·2023-03-28 22:35

AWS数据库服务

AWS数据库服务1关系数据库RDS基础2RDS应用3RDS特色功能4RDSAurora数据库5NoSQLDynamoDB数据库6Redshift数据仓库7ElastiCache云缓存8OLTP/OLAP1

乔_lhy·2023-03-28 22:29

数据仓库架构详解

学习目录一、基本概念二、核心框架三、数仓大数据架构详解（流程）一、基本概念数据仓库（DataWarehouse）是一个为数据分析而设计的企业级数据管理系统。

王博1999·2023-03-28 22:50

数仓分层架构

目录数仓为什么要分层数仓分层架构图名词介绍分层介绍数仓为什么要分层数据仓库一般存储的是企业级的海量数据，数据来源多样，抽象程度多样。

Lowrance_TT·2023-03-28 21:14

数据仓库概念及特点

数据仓库DW（DataWarehouse）1.1概念及特点1.数据仓库通常是一个面向主题的集成的，随时间变化的，但信息本身相对稳定的数据集市，它用于对管理决策过程的支持1）数据库是数据仓库的基础，但没有明确的上下级关系

谷雨雪白·2023-03-28 21:14

数据仓库架构及基础知识

「来源:｜架构师技术联盟ID：ICT_Architect」1、什么是数据仓库？权威定义：数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。

不夜De星空·2023-03-28 21:04

企业数据仓库技术架构

数据仓库基本知识什么是数据仓库数据仓库简称数仓，其英文名为DataWarehouse（简写为DW或DWH）。

hellozhxy·2023-03-28 21:33

数据仓库基础（通俗易懂，好文）数仓概念

1、数据仓库的概念数据仓库（英语：DataWarehouse，简称数仓、DW）,是一个用于存储、分析、报告的数据系统。

Remix_xy·2023-03-28 21:55

数仓的概念及架构

目录一、数仓的概念（数据仓库）1、对比记忆：①数据库的概念：②数仓的概念（全方面的数据完整保存）：③银行主题④集成：⑤时间变化：⑥效率足够高：⑦数据质量⑧扩展性：2、数仓的用途3、数仓的相关技术二、数据库和数仓区别二

贫僧会写代码·2023-03-28 21:11

数据服务:离线,实时数据服务

数据仓库业务系统和数仓的区别拉链表概念数据仓库保留了大量的历史数据，对时间维度上的数据分析工作提供了重要的手段。

尘世的鱼·2023-03-28 20:17

三层架构到DDD分层架构的演变

数据访问层业务接口层：主要是API的定义，包括资源路径定义、请求报文接受、响应报文返回、请求编码等定义的内容；业务逻辑层：主要做业务逻辑处理，这一层包括数据映射DTO转VO，业务核心逻辑编写，组合不同数据仓库

风神修罗使·2023-03-28 19:49

一个数据仓库时代开始--Hive

ApacheHive是一个基于HadoopHaused构建的开源数据仓库系统，我们使用它来查询和分析存储在Hadoop文件中的大型数据集。

隐峯·2023-03-28 17:37

AI 经典书单

深度学习、机器学习、自然语言处理、数据结构、Tensorflow、Python、数据挖掘、搜索开发、神经网络、视觉度量、图像识别、语音识别、推荐系统、系统算法、图像算法、数据分析、概率编程、计算机数学、数据仓库

KevinOlivi·2023-03-28 12:08

etl-bigdata

从本文开始，将开始介绍针对大数据平台的ETL方法，并搭建相关的环境，构建两种数据仓库模型。

NEO_X·2023-03-28 06:27

数据清洗是清洗什么？

在搭建数据中台、数据仓库或者做数据分析之前，首要的工作重点就是做数据清洗，否则会影响到后续对数据的分析利用。那么数据清洗到底是做什么事情呢？今天我就来跟大家分享一下。

产品要主动·2023-03-27 16:15

Hadoop体系-3数据应用体系

数仓数据分层大体有两种分法：1、三层：DWD,DWB,DWSDWD：datawarehousedetail细节数据层，有的也称为ODS层，是业务层与数据仓库的隔离层DWB：datawarehousebase

teddrummer·2023-03-27 15:15

解决思路（生产、制造行业）

解决思路（生产、制造行业）1、建立数据仓库，收集一线数据，建立管理报表库；2、建立全面预算管理，费用分摊规则在预算环节制定，并落实到考核制度；3、加强信息化建设，建立管理驾驶舱，加强数字化管理思维，为部门提供支持数据

陈泽旭·2023-03-27 06:24

数据仓库

一、数据仓库概念数据仓库（DataWarehouse）简称DW或DWH，是数据库的一种概念上的升级，可以说是为满足新需求设计的一种新数据库，而这个数据库是需容纳更多的数据，更加庞大的数据集，从逻辑上讲数据仓库和数据库是没有什么区别的

longLiveData·2023-03-27 06:10

数据仓库中的ER实体模型和维度模型

一、数据仓库建模的意义一个公司中会有多个业务业务系统，比如：OA系统、订单系统、财务系统、人事系统、仓储系统等，因此需要按照一定的组织结构将所有数据都整合起来，形成一个仓储平台。

小帅明3号·2023-03-26 23:38

大数据项目实战之在线教育（01数仓需求）

第1章数据仓库概念数据仓库是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。

okbin1991·2023-03-26 22:29

大数据篇--数仓概念总结

文章目录一、数据仓库1.什么是数据仓库：2.技术发展历程：3.数据仓库特点：4.OLAP和OLTP的区别：OLAP分类：二、数据分层1.为什么要分层：2.怎样分层：a.ODS层：b.DW/CDM层：c.DM

小强签名设计·2023-03-26 22:28

DB架构·2023-03-26 22:57

大数据基础知识——数仓的搭建（维度建模）

数据仓库文章目录数据仓库数据仓库的介绍：数据仓库的概念：OLTP和OLAP区别：数据仓库的特点：面向主题：数据集成：非易失：时变：数据仓库系统架构系统结构图源数据ETL数据仓库与数据集市应用系统用户层纬度分析

我菜的要死·2023-03-26 22:57

《用户画像：方法论与工程化解决方案》读书笔记第3章

3.1Hive存储3.1.1Hive数据仓库建立用户画像首先需要建立数据仓库，用于存储用户标签数据。Hive是基于Ha

笔名辉哥·2023-03-26 20:22

流量录制，基于常态化压测

简介常态化压测、业务压测、集群压测、全链路压测、等基于特定需求的对后台接口进行的并发式请求，接口自动化压测数据的来源:数据仓库，线上流量(可能不包含新的逻辑字段)，获取数据的手段多种多样压测数据的有效性

上山走18398·2023-03-26 13:18

HIVE操作基础实战

hive是基于Hadoop的一个数据仓库工具，提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据。

巴拉巴拉_9515·2023-03-26 11:42

DDD领域驱动设计——CQRS，MediatR

例如：在处理读请求的时候用Redis，Es数据仓库等；在处理写请求的时候使用Rabbitmq等消峰。

SkylerSkr·2023-03-26 00:11

三、数据库系统原理

数据库系统三、数据库系统原理3.1数据库模式3.2数据库设计3.3数据库的并发控制3.4数据库完整性约束和安全3.5数据库备份与恢复3.6数据仓库与数据挖掘3.7大数据三、数据库系统原理这部分内容较重要

不知何许人也·2023-03-25 21:59

大数据基础架构（自学取自尚硅谷）

难度级别（灾难到平民）：平台—》数据挖掘/报表开发—〉实时指标分析性能调优—》数据仓库三。大数据思想和的来源。1.GFS(GoogleFileSys

whaleseeker·2023-03-25 17:47

什么是ETL？算了，你可能不懂

图片源自网络ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程，目的是将企业中的分散、零乱、标准不统一的数据整合到一起，为企业的决策提供分析依据。ETL是BI项目重要的一个环节。

TASKCTL·2023-03-25 04:40

浅谈数据仓库维度建模

浅谈数据仓库维度建模流程谈到BigData就离不开数据仓库、数据集市等概念，而谈到数据仓库、数据集市，就又离不开数据仓库设计的方法，维度建模则是其中的典型。

携程JLF·2023-03-24 02:39

推荐频道

--------【数据仓库】