数仓分层架构

大数据架构师须知—基础知识点

大数据架构师须知—基础知识点结合BI,Reporting,Ad-hoc,ETL数仓分析等场景，从体系化的角度来分析OLAP系统的核心技术点，分为谈存储，谈计算，谈优化器，谈趋势4个章节。
kalvin_y_liu·2023-04-06 03:38

软考高级系统架构设计师：MVC和应用系统分层架构风格

软考高级系统架构设计师：MVC一、MVC1.控制器2.模型3.视图4.使用MVC设计表现层优点二、EJB构件中的Bean(构件)类型三、应用系统分层架构风格1.表现层：2.中间层3.持久层一、MVCModel
最笨的羊羊·2023-04-06 02:20

爱奇艺的数仓架构

首先介绍一下爱奇艺公司整体的业务情况以及数据仓库1.0的设计和出现的问题，针对数仓1.0的缺陷，是如何演进到数仓2.0架构以及数仓2.0需要解决的问题和需要达成的目标。
javastart·2023-04-06 01:31

如何设置python2，python3，并添加环境变量

公众号后续将会持续更新clickhouse，sparkstreaming，flink，数仓建模，用户画像，实时计算，推荐系统，实时数仓等内容，感兴趣的朋友可以关注不定期会有朋友的面经分享1、添加python2
大数据私房菜·2023-04-05 23:14

数仓Hive和分布式计算引擎Spark多整合方式实战和调优方向

优质资源分享学习路线指引（点击解锁）知识定位人群定位Python实战微信订餐小程序进阶级本课程是pythonflask+微信小程序的完美结合，从项目搭建到腾讯云部署上线，打造一个全栈订餐系统。Python量化交易实战入门级手把手带你打造一个易扩展、更安全、效率更高的量化交易系统@目录*概述SparkonHiveHiveonSpark概述编译Spark源码配置调优思路编程方向分组聚合优化join优化
qq_43479892·2023-04-05 22:23

SpringCloud大型企业分布式微服务云架构源码之分层架构&SOA架构

一、分层架构的类型分层架构是很长见的架构模式，它也可以称之为N层架构；通常情况下，N至少是两层，例如我们常见的C/S架构和B/S架构。
微服务商城技术分享·2023-04-05 22:44

一份JAVA工程师的求职简历来告诉你求职简历怎么写（下）

项目开发计划书需求分析>>>需求规格说明书OOAD（用例图、时序图、活动图）界面原型：帮助理解需求、业务层设计时推导事务脚本设计>>>概要设计说明书/详细设计说明书抽取业务实体（领域对象）：类图、E-R图（概念设计阶段）分层架构
学掌门·2023-04-05 21:54

无人驾驶分层结构系统架构

如下图所示，是一个无人驾驶系统的分层架构，整个系统分为感知层、规划层、控制层。二、感知层在无人驾驶系统中，算法就相当于是一个人类驾驶员，感知就相当于是人类的眼睛和耳朵，用来感受外部的环境。
fxfreefly·2023-04-05 20:50

k8s基础

主要介绍【K8s】——安装和设置kubectlKubernetes架构分层架构Kubernetes最初源于谷歌内部的Borg，提供了面向应用的容器集群部署和管理系统。
丰恒谷·2023-04-05 19:04

万字详解大数据架构新概念

有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么，是技术路线之争？是数据管理方式之争？
开源Linux·2023-04-05 17:20

数据湖：网易严选的数据湖实践

1.数据湖vs数据仓库2.数据湖的优势五、落地实践六、数据集成七、数仓建设八、特征工程九、未来规划一、业务背景网易严选在2017年中开始搭建自己的大数据体系，如今该体系已经支撑了严选的商业分析、搜索、推荐
Freedom3568·2023-04-05 17:09

hive hsql 漏斗模型_191_数仓项目_dwd层_Hive读取索引文件问题

该项目以国内电商巨头实际业务应用场景为依托，紧跟大数据主流需求，对电商数仓的常见实战指标以及难点实战指标进行了详尽讲解，让你迅速成长，获取最前沿的技术经验。
weixin_39746794·2023-04-05 14:31

Flink-Flink新闻数仓实时项目(新闻指标计算、Flink知识的练手小项目)

新闻实时项目1项目需求分析和架构设计背景某新闻网站每天会曝光很多新闻话题，当用户浏览网站的新闻时会产生大量的访问日志。为了更好的分析用户行为，并对舆情进行监控，现在需要实现一个新闻热搜实时分析系统。需求（1）采集搜狗新闻网站用户浏览日志信息。（2）统计分析搜狗排名最高的前10名新闻话题。分组聚合后求前10（3）统计分析每天哪些时段用户浏览新闻量最高。分组聚合后求max（4）统计分析每天曝光搜狗新闻
:Concerto·2023-04-05 13:07

大数据项目实战之数据仓库：数仓数据同步策略——第3章 数仓环境准备

文章目录第3章数仓环境准备3.1Hive安装部署3.2Hive元数据配置到MySQL3.2.1拷贝驱动3.2.2配置Metastore到MySQL3.3启动Hive3.3.1初始化元数据库3.3.2启动
yiluohan0307·2023-04-05 10:10

mysql 三层架构开发_从三层架构迈向领域驱动设计(转载)

三层架构严格分层架构模式的特点是上层只能访问相邻的下层，其他层次间的调用都不允许。
商业纪事·2023-04-05 09:30

Spring5IOC容器解析——Bean与BeanDefinition

spring的整体架构Spring框架是一个分层架构，它包含一系列的功能要素
小波同学·2023-04-05 05:27

2.Hadoop环境配置之虚拟机安装配置

1.VMware1.1VMware安装一台电脑本身是可以装多个操作系统的，但是做不到多个操作系统切换自如，所以我们需要一款软件帮助我们达到这个目的，不然数仓项目搭建不起来。
Mr李小四·2023-04-04 22:43

Databend 开源周报 第 79 期

Databend是一款强大的云数仓。专为弹性和高效设计。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:10

Databend 开源周报第 80 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:10

Databend 开源周报 第 82 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:10

Databend 开源周报 第 83 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:10

Databend 开源周报第 84 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:10

Databend 开源周报 第 85 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:10

Databend 开源周报第 81 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:40

Databend 开源周报 第 75 期

Databend是一款强大的云数仓。专为弹性和高效设计。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:39

Databend 开源周报第 76 期

英文版移步：https://databend.rs/blog/2023-01-11-databend-weeklyDatabend是一款强大的云数仓。专为弹性和高效设计。自由且开源。
Databend·2023-04-04 21:39

Databend 开源周报 第 77 期

Databend是一款强大的云数仓。专为弹性和高效设计。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:39

Databend 开源周报 第 78 期

Databend是一款强大的云数仓。专为弹性和高效设计。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:39

Databend 开源周报 #68

Databend是一款强大的云数仓。专为弹性和高效设计，自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:09

Databend 开源周报 #70

Databend是一款强大的云数仓。专为弹性和高效设计，自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:09

Databend 开源周报 #72

Databend是一款强大的云数仓。专为弹性和高效设计，自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:09

基于 Databend 和腾讯云 COS 打造新型云数仓

本篇文章向大家演示如何使用Databend基于腾讯云COS构建新式数仓及其计算能力。如果你也在找一个低成本、高性能、支持弹性的数仓，Databend可以为大家提供一个基于对象存储的云原生数仓解决方案。
Databend·2023-04-04 21:38

Databend 开源周报 #66

Databend是一款强大的云数仓。专为弹性和高效设计，自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:38

Databend 开源周报 #67

Databend是一款强大的云数仓。专为弹性和高效设计，自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:38

Databend 社区积极拥抱 Rust 生态(202111回顾）

Databend旨在成为一个开源、弹性、可靠的无服务器数仓，查询快如闪电，与弹性、简单、低成本的云服务有机结合。数据云的构建，从未如此简单！
Databend·2023-04-04 21:08

Databend 设计概述 | 白皮书

Databend是一个开源的、完全面向云架构的新式数仓，它提供快速的弹性扩展能力，并结合云的弹性、简单性和低成本，使DataCloud构建变得更加容易。
Databend·2023-04-04 21:08

Databend 开源周报第 87 期

Databend是一款现代云数仓。专为弹性和高效设计，为您的大规模分析需求保驾护航。自由且开源。即刻体验云服务：https://app.databend.com。
Databend·2023-04-04 21:31

架构分层—高并发场景微服务实战（四）

什么是分层架构软件架构分层在软件工程中是一种常见的设计方式，它是将整体系统拆分成N个层级，每个层级有独立的职责，多个层级协同提供完整的功能。下面给大家分享一些我收藏的分层架构图。
程序员Alan·2023-04-04 20:27

一号机已起飞：你怎么看待 Nervos 的分层架构？

Nervos采用了两层架构，Layer1和Layer2，Layer1也称共识层（CKB），Layer2又叫生成层（Generator）。“Layer1只关心Layer2产生的新状态，不关心状态产生的具体方式。”整个Nervos网络中，公链底层的CKB只记录状态信息（State），而将生成状态信息的事件（Event）的计算和处理放在Layer2或者说CKB这条主链以外完成。上面这段是我在网上COPY
shuishen·2023-04-04 19:44

dataworks

1数据集成数据同步，抽数，导数离线数仓，离线同步1.数据源从哪里来，到哪里去可以是数据库，也可以是别的，比如FTP，ES等2.表来源表目标表3.字段映射关系4.同步方式/同步逻辑比如从mysql到hive
懒得幽默·2023-04-04 18:43

做了那么多架构，你真的懂 SOA 了吗？

简介：如何统一看待和区别分层架构、微服务架构、分布式架构等主流架构？什么是SOA？我们采用SOA的目的是什么？什么是服务化的本质？如何设计服务以及服务化架构呢？
阿里开发者·2023-04-04 17:52

【Flink】（二）详解 Flink 运行架构

如果你也对数据中台、数据建模、数据分析以及Flink/Spark/Hadoop/数仓开发感兴趣，可以关注我的动态https://blog.csdn.net/BeiisBei，让我们一起挖掘
云 祁·2023-04-04 17:46

分层架构中的DAO工程实践

目录1、问题的背景2、工程实践3、总结1、问题的背景在写Java面向对象程序的过程中，我们往往不知不觉中写成了面向过程式的代码，特别是我们的Service服务对象是非常复杂，并且经常因为业务变更，我们代码一直在修改，很少关注程序中的扩展性。2、工程实践SpringBoot、Mybatis、Mysql技术架构背景来演示代码。本次实践，主要演示内容，将Service的职责进行分离，拆分为4个职责服务对
李桥s2008100262·2023-04-04 16:40

ML：阿里云计算平台之搜索推荐演讲分享《多场景智能推荐助力业务增长》、《阿里云智能推荐应用实践：PAI-EasyRec Framework》、《新一代数仓架构漫谈》

ML：阿里云计算平台之搜索推荐演讲分享《多场景智能推荐助力业务增长》、《阿里云智能推荐应用实践：PAI-EasyRecFramework》、《新一代数仓架构漫谈》目录《多场景智能推荐助力业务增长》开箱即用
一个处女座的程序猿·2023-04-04 16:39

软硬件结合，分布式数据库存储架构优化实践

KaiwuDB整体存储架构KaiwuDB采用分层架构，分为计算层与存储层，其总体架构如下图所示：在OLTP场景下，当开发人员向集群发送SQL语句时，数据最终会以键值对KV的形式对存储层进行读写。
KaiwuDB·2023-04-04 15:36

实时数仓建设思考与方案记录

前言随着我司业务飞速增长，实时数仓的建设已经提上了日程。虽然还没有正式开始实施，但是汲取前人的经验，做好万全的准备总是必要的。
浪尖聊大数据-浪尖·2023-04-04 12:40

实时数仓|架构设计与技术选型

下面我就来讲解下我做的项目(实时数仓）是如何进行选型的。一、技术选型当我们在选择技术时需要根据客户的需求来进行选择。
大数据老哥·2023-04-04 12:06

阿里云实时数仓搭建与组件选型

一、实时数仓分层规范1.1分层需求分析建设实时数仓的目的，主要是增加数据计算的复用性。每次新增加统计需求时，不至于从原始数据进行计算，而是从半成品继续加工而成。
任错错·2023-04-04 12:01

实时数仓到底是什么呢？与传统数仓有什么区别？

数仓，即存放数据的仓库，包括全量数据、历史数据。
log_lnA·2023-04-04 12:50

企业级-实时数仓架构图

往期类似文章：实时数仓之Kappa架构与Lambda架构_奔跑者-辉的博客-CSDN博客实时数仓之实际落地如何选型和构建_奔跑者-辉的博客-CSDN博客目录1基于Flink的滴滴实时数仓实践2实时OLAP
奔跑者-辉·2023-04-04 12:16
上一页 37 38 39 40 41 42 43 44 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他