数仓分层架构

.NET开发框架 ABP

ABP基于DDD的经典分层架构思想，实现了众多DDD的概念。服务端ASP.NETMVC和WebAPI实现领域驱动设计DDD，包括实体、存储库、领域服务、应用程序服务、D
ejinxian·2023-04-07 19:06

大数据开发零基础需要学习什么内容？（1）Java、大数据基础

所以也就出现了大数据开发工程师、数仓工程师、ETL工程师
程序员老金·2023-04-07 16:45

使用maxscale及mha搭建mysql主从同步、读写分离、高可用集群

尝试使用mysql存储部分数仓结果，需要满足高可用、读写分离等需求，尝试过mycat、atlas、maxscale这3个代理服务，前两个不适合：mycat:新建数据库需要修改配置参数，这一点对于动态建库的场景很痛苦
吉甫作诵·2023-04-07 16:57

数仓--DW--Hadoop数仓实践Case-15-无事实的事实表

无事实的事实表概述在多维数据仓库建模中，有一种事实表叫做“无事实的事实表”。普通事实表中，通常会保存若干维度外键和多个数字型度量，度量是事实表的关键所在。然而在无事实的事实表中没有这些度量值，只有多个维度外键。表面上看，无事实的事实表是没有意义的，因为作为事实表，毕竟最重要的就是度量。但在数据仓库中，这类事实表有其特殊用途。无事实的事实表通常用来跟踪某种事件或者说明某些活动的范围。无事实的事实表可
李小李的路·2023-04-07 15:11

《数据仓库工具箱》读书笔记（一）：维度建模初步

第一章数据仓库、商业智能及维度建模初步一、数据仓库与商业智能的目标1、方便地保存数据2、数据一致性3、适应变化4、及时展现数据5、信息安全6、数据权威7、支撑业务二、数仓管理者的职责1、理解业务理解用户
kaiker·2023-04-07 12:32

【电商数仓】数仓搭建之明细数据（data warehouse detail -- DWD）层（用户行为数据之曝光、错误日志表、数据加载脚本，业务数据之评价、订单事实表）

文章目录一曝光日志表1思路解析2建表语句3数据导入4查看数据二错误日志表1思路解析2建表语句3数据导入4查看数据三DWD层用户行为数据加载脚本四DWD层业务数据概述五评价事实表（事务型事实表）1分区设计2建表语句3数据导入（1）首日导入（2）每日导入六订单明细事实表（事务型事实表）1分区设计2建模语句3数据导入（1）首日装载（2）每日装载一曝光日志表**曝光日志解析思路：**曝光日志表中每行数据对
OneTenTwo76·2023-04-07 10:41

离线电商数仓-用户行为采集平台-第3章 用户行为日志

前言本博客是学习记录，可能存在错误，仅供参考。如发现错误，欢迎在评论区指正，我会及时修改。同时也希望大家能在评论区多和我讨论，或者私信我，讨论可以让我们学习效率更高。现在的版本不是最终版本，我会在学习过程中不断地更新。第3章用户行为日志3.1用户行为日志概述埋点：是收集用户的各项行为信息以及行为所处的环境信息的手段分类如下：****代码埋点****是通过调用埋点SDK函数，在需要埋点的业务逻辑功能
书墨客·2023-04-07 10:38

一篇文章让你明白你多级缓存的分层架构

前言在互联网高速发展的今天，缓存技术被广泛地应用。无论业内还是业外，只要是提到性能问题，大家都会脱口而出“用缓存解决”。这种说法带有片面性，甚至是一知半解，但是作为专业人士的我们，需要对缓存有更深、更广的了解。缓存技术存在于应用场景的方方面面。从浏览器请求，到反向代理服务器，从进程内缓存到分布式缓存。其中缓存策略，算法也是层出不穷，今天就带大家走进缓存。正文缓存对于每个开发者来说是相当熟悉了，为了
Java技术小吴·2023-04-07 01:01

数仓实战|一文看懂数据中台接口数据采集

作者简介：王春波，《高效使用Greenplum：入门、进阶和数据中台》作者，“数据中台研习社”号主，十年数据开发从业者，资深零售数仓项目实施专家。
weixin_44166276·2023-04-07 01:35

第3.7章：StarRocks数据导入--Broker Load

一、BrokerLoad背景基于Hadoop生态的传统数仓目前仍拥有非常大的用户群体，为此StarRocks加入了BrokerLoad导入方式，让我们可以方便的从HDFS类的外部存储系统（ApacheHDFS
流木随风·2023-04-07 01:02

数仓第二章作业

数仓第二章作业文章目录数仓第二章作业习题习题1、设数据集A=1，1，3，3，4，5，5，5，6
-北天-·2023-04-07 01:00

数仓第五章作业

数仓第五章作业文章目录数仓第五章作业一、在OLAP的5个特征FASMI中，那两个是OLAP的关键特性？二、多维数据分析有哪几个基本分析操作？
-北天-·2023-04-07 01:00

海睿思分享 | 浅谈数仓指标体系管理

//1数仓指标的构成❖数据域数据域是统一数仓层的顶层划分，是一个较高层次的数据归类标准，是对企业业务过程进行抽象、提炼、组合的集合，面向业务分析，一个数据域对应一个宏观分析领域，比如采购域、供应链域、HR
海睿思·2023-04-07 01:53

数仓第七章作业

数仓第七章作业文章目录数仓第七章作业一、第七章课后作业第三题第四题第五题第六题第七题二、问题一、第七章课后作业第三题设有10个二元属性，3个数据对象的数据集。
-北天-·2023-04-07 01:48

数仓--Theory--数仓数据质量监控

暂时定义为数仓的质量管理，完全可以定义为数据中台的质量管理数据质量的理解数据质量的高低代表了该数据满足数据消费者期望的程度，这种程度基于他们对数据的使用预期。
李小李的路·2023-04-07 00:25

COLA 4.0 - DDD项目实践

COLA分层架构COLA4.0架构分成COLA架构和COLA组件两个部分：COLA架构：关注应用架构的定义和构建，提升应用质量。COLA组件：提供应用开发所需要的可复用组件，提升研发效率。
十一技术斩·2023-04-07 00:35

基于COLA架构创建运输微服务应用和DDD领域建模

基于COLA架构（CleanObject-orientedandLayeredArchitecture，整洁面向对象分层架构）和DDD（DomainDrivenDesign，领域驱动设计）思想，我们初步完成了包裹预订服务的开发
软件架构·2023-04-07 00:35

如何基于COLA架构快速实现一个CRUD操作

COLA是CleanObject-orientedandLayeredArchitecture的缩写，代表“整洁面向对象分层架构”，是来自阿里技术专家的DDD开源项目。
软件架构·2023-04-07 00:35

阿里DDD项目最佳实践-COLA 架构总览

DDD分层架构、六边形架构、洋葱圈架构、以及COLA架构的核心职责就是要做核心业务逻辑和技术细节的分离和解耦。
软件架构·2023-04-07 00:35

Flink+Clickhouse在广投集团实时数仓的最佳实践

Flink+Clickhouse实时数仓在广投集团的最佳实践一、业务背景由于历史原因，大型集团企业往往多个帐套系统共存，包括国内知名ERP厂商浪潮、用友、金蝶、速达所提供的财务系统，集团财务共享中心的财务人员在核对财务凭证数据时经常需要跨多个系统查询且每个系统使用方式不一
Wping_1c08·2023-04-06 23:55

Springboot +Mybatis + DynamicDataSource 根据数据库实现数据源配置和切换

DynamicDataSource动态数据源需求：数仓项目需要大致检验数据同步的正确性，应用数据库MySQL有多台，数仓数据库Postgres数据库一台。
JasonalLy6·2023-04-06 23:58

大数据系统架构-MPP数据库架构

当前的大数据系统架构主要有两种：一种是MPP数据库架构，另一种就是Hadoop体系的分层架构。这两种架构各有优势和适合的场景。
小成小成小成·2023-04-06 23:29

设计模式

中央存储库分层架构层次模块名接口后缀对象后缀接入层integrationClient对外接口层servicefacadeFacadeRequest表现层web-homeControllerVO(ViewObject
金泽祺·2023-04-06 20:57

浅析MVC分层架构的层次划分

早期分层——[M-V-C]：MVC框架强制性的把各层的实现功能划分开，各自处理各自的任务，利于解耦和，极大的增强了代码的可读性、维护性。M（Model）模型层——与数据库交互的数据模型，进行数据相关操作V（View）视图层——与用户交互的数据区，负责收集展示数据C（Controller）控制层——收到请求后，调用模型层与数据库交互获取数据，最后将数据返回给视图层（用户）——负责接收数据和逻辑处理当
今天也努力学习的Paul·2023-04-06 17:32

网络分层架构（七/四层协议）

网络分层架构业内普遍的分层方式有两种。OSI七层模型和TCP/IP四层模型。
编程小哪吒·2023-04-06 17:51

数仓设计流程规范 2020-05-29

1.系统分析，确定主题确定一下几个因素：·操作出现的频率，即业务部门每隔多长时间做一次查询分析。·在系统中需要保存多久的数据，是一年、两年还是五年、十年。·用户查询数据的主要方式，如在时间维度上是按照自然年，还是财政年。·用户所能接受的响应时间是多长、是几秒钟，还是几小时。2.选择满足数据仓库系统要求的软件平台选择合适的软件平台，包括数据库、建模工具、分析工具等。有许多因素要考虑，如系统对数据量、
迷藏_·2023-04-06 17:13

Android架构开发手册，带你直观了解Android系统架构

先来看一张Google官方提供的Android经典分层架构图：Android系统架构从下往上依次分为Linux内核、HAL、系统Native
嘴巴吃糖了·2023-04-06 17:36

DDD（领域驱动设计）分享（2/2）

文章目录一、概述二、分层架构一、概述DDD的系统架构有很多，常见的有分层架构、洋葱架构、六边形架构等，看起来像是多个不同的设计，但是他们的核心思想其实都差不多：职责分明、高内聚低耦合。
蒋楠鑫·2023-04-06 16:16

新一代数仓架构-Snowflake弹性数仓

作业：张剑本文是基于国外论文snowflake数仓(TheSnowflakeElasticDataWarehouse)翻译而成，翻译中有错误地方，还望海涵。曾经在过往记忆微信公众号发布过。
一弦思华年·2023-04-06 16:00

瞰见 | 初创1个月就融到3亿美金，ClickHouse 你凭什么？

-北岛或许是受巴菲特参投的纳斯达克热门公司-云上数仓Snowflake的催化，开源数据库ClickHouse社区也终于在2021年8月注册成立了商业化公司，紧接着不到2个月的时间内，以惊人的速度完成了A
OpenTEKr·2023-04-06 15:35

正确设计Hologres实时数仓，性能提升10倍+

本文将会讲述阿里巴巴零售通数据平台如何优化Hologres实时数仓，达到性能提升10倍+的效果，完美支撑双11营销活动、实时数据大屏等核心场景。
阿里云Hologres·2023-04-06 14:47

ETL中遇到的小问题：Invalid column type

时间：2019-08-23背景：业务需求，需将Mysql源库中一表A同步到数仓oracle中，工具依然选用pentahokettle8.2。问题：没想到被遇到的一个小问题耽误了许久。步入正题。
小糊涂神52vol·2023-04-06 12:38

# 在线教育项目——数仓实战（三）之访问咨询主题看板（全量流程）

文章目录1.需求分析2.业务数据准备3.建模分析4.建模操作4.1数据存储格式和压缩方案4.2全量和增量4.3Hive分区4.4建模操作5.Hive的基础优化（目前无需更改）5.1HDFS的副本数量5.2yarn的基础配置5.3MapReduce基础配置5.4Hive的基础配置5.5Hive压缩的配置5.6Hive的执行引擎切换6.数据采集7.数据清洗转换8.数据分析9.数据导出1.需求分析将调研
爱吃薄荷糖的喵喵·2023-04-06 12:10

Java分层架构的全面解析

什么是分层架构？据我了解，分层体系结构是将项目结构组织为四个主要类别：表示，应用程序，领域和基础结构。每个层都包含与其表示的特定关注点有关的对象。
阿志RUAN·2023-04-06 11:39

java 分层_Java分层架构的全面解析

什么是分层架构？据我了解，分层体系结构是将项目结构组织为四个主要类别：表示，应用程序，领域和基础结构。每个层都包含与其表示的特定关注点有关的对象。
人无界hy·2023-04-06 11:00

java 分层_java分层架构概念

转自：http://www.cnblogs.com/bdqnbenet/p/4924778.htmlservice是业务层DAO(DataAccessObject)数据访问1.JAVA中Action层,Service层，modle层和Dao层的功能区分？(下面所描述的service层就是biz)首先这是现在最基本的分层方式，结合了SSH架构。modle层就是对应的数据库表的实体类。Dao层是使用了
刘宅宅·2023-04-06 11:28

java DDD领域分层架构设计思想

1为什么要分层高内聚：分层的设计可以简化系统设计，让不同的层专注做某一模块的事低耦合：层与层之间通过接口或API来交互，依赖方不用知道被依赖方的细节复用：分层之后可以做到很高的复用扩展性：分层架构可以让我们更容易做横向扩展微服务架构模型有很多种
工作QQ感冒的石头·2023-04-06 11:14

Java分层架构

总领：是企业开发中的一种模式、公式、套路。现实生活中的分层：大学为例程序世界中同样也采用了分层：比如：王者荣耀，注册用户时，要求昵称必须唯一。1.出现填写昵称的界面------都在用户界面上操作2.填写昵称，点击确定3.确定完成后如果昵称是唯一的，给你注册----业务逻辑的判断如果昵称不唯一，提示错误信息“昵称已经存在！”对于使用者而言，认为王者荣耀有一个注册的功能，程序中又称为一个注册业务。业务
FairyKunKun·2023-04-06 11:21

Software Architecture Patterns翻译

介绍开发人员在没有合适架构的情况下开始编写程序是非常普遍的情况.在这种情况下,大多数开发人员和架构师会采用传统分层架构模式（也称为n层架构),通过将源码模块分成各种包来表示抽象层。
赵民勇·2023-04-06 11:50

Software Architecture Pattern(Mark Richards)笔记

分层架构(Layered/N-tierArch
weixin_30446613·2023-04-06 10:09

ETL工具与调度工具的区别（一）

简而概之就是，将数据从数据源进行抽取、进行清洗转换、最后加载到数仓模型中，在数据仓库中起到了承前启后的作用。常见的ETL工具有：kettle、RestCloud、informat
Moia Control·2023-04-06 10:52

浅谈关于业务架构

一、序章  一般的工程师接触到的是应用架构，传统的MVC分层架构、事件驱动架构等等。第一次接触业务架构这个概念是在来到商品发布团队之后。
weixin_34342578·2023-04-06 09:14

数据仓库模型说明

1.数仓概述数据仓库的建设是一个过程，而不是一个项目。在这个过程中我们需要形成自己的规范，以方便管理和维护。
高广超·2023-04-06 09:02

06 | DDD分层架构：有效降低层与层之间的依赖

今天我们来聊聊“DDD分层架构”。微服务架构模型有好多种，例如整洁架构、CQRS和六边形架构等等。
阿福聊编程·2023-04-06 08:31

DDD - 分层架构：有效降低层与层之间的依赖

分层架构：有效降低层与层之间的依赖1.写在前面2.什么是DDD分层架构？2.1用户接口层2.2应用层2.3领域层2.4基础层3.DDD分层架构最重要的原则是什么？4.DDD分层架构如何推动架构演进？
没对象的指针·2023-04-06 08:58

DDD分层架构

ASP.NETMVC空项目DDD.Application应用层类库项目DDD.Domain领域层类库项目DDD.Infrastructure基础设施层类库项目DDD.Repository仓储类库项目DDD分层架构项目间
JunChow520·2023-04-06 07:53

DDD实战（二）：分层架构的依赖原则

上次分享了一篇文章（DDD实战（一）：如何设计分层架构？），接下来继续分享分层架构的依赖原则。一、选择架构目的不管选择哪个架构模式主要目的如下：1、业务边界能够清晰，特别是微服务架构拆分的的时候。
IT实战联盟Lin·2023-04-06 07:49

《实现领域驱动设计》拆书稿 - 第4章 架构

一个典型的传统分层架构用户接口层应用层领域层基础设施层依赖倒置原则定义：高层模块不应该依赖于低层模块，两者都应该依赖于抽象。抽象不应该依赖于细节，细节应该依赖于抽象。六边形架
wiwisir·2023-04-06 06:36

SpringBoot—分层结构

知识要点SpringBoot编程的分层架构SpringBoot服务端负载均衡集群部署架构SpringBoot客户端负载均衡集群部署架构SpringBoot编程的分层架构，三层分别为Controller控制层
免费的东西·2023-04-06 05:35

【袋鼠云】标签系统

文章目录客户画像标签建设的演进1.业务单元独立作战2.离线数仓统一建设3.实时数据多维补充4.标签产品化管理5.数据智能化管理标签体系设计与加工一、标签体系设计1.数据梳理2.基于OLP模型体系化梳理标签
七号大米·2023-04-06 03:49
上一页 36 37 38 39 40 41 42 43 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他