--------【数据仓库】

从0到1搭建电商营销数据分析平台(五)——流批一体架构

传统的LAMDA架构取得了辉煌的成就，大大小小的公司几乎都以LAMDA为模版构建了自己的数据仓库，但是LAMDA架构的缺陷也一直被数据人诟病——由于实时链路和离线链路采用不同的计算引擎，在数据研发的过程中
su_bao·2023-04-01 07:58

IBM 混合数据仓库架构介绍

当前，越来越多的企业正在考虑将其数据仓库迁移至云端，对于大多数企业而言，现有的数据仓库部署在本地的数据中心中，基于投资保护和数据安全的考量，无法将数据仓库整体迁移到云上。
数控小J·2023-04-01 06:32

企业级数据中台应用架构和技术架构

数据中台与大数据、数据仓库、数据湖、商业智能BI有什么区别，请参
大龄码农有梦想·2023-04-01 06:43

hive的常规操作

1、首先说说数仓与Hive数据仓库，简单来说就是，企业利用其自身和行业本身的历史数据进行智能化统计分析，从中分析、挖掘出有价值的数据，为领导层提供科学的决策支持，作用是改善企业业务流程、运行成本、企业效益和提高用户体验
zeroLinked·2023-04-01 05:00

软考系统架构设计师常见的考试内容有哪些？

数据库知识：包括关系型数据库管理系统（RDBMS）、非关系型数据库、数据建模、数据仓库等。操作系统知识
weixin_46619295·2023-04-01 05:02

hive架构的个人想法

Hive基于Hadoop上的HDFS和MapReduce，提供了一个类SQL语言的数据仓库方案。
尘世美_w·2023-04-01 05:32

浅析实时ETL的架构选择

答：在建立数据仓库时，ETL通常都采用批处理的方式，一般来说是每天的夜间进行跑批。
weixin_30339457·2023-04-01 04:59

关于ETL的两种架构（ETL架构和ELT架构）

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。
m0_66404702·2023-04-01 03:45

hive入门及简介

Hive是建立在Hadoop(HDFS/MR)上的用于管理和查询结构化/非结构化的数据仓库;2、hive组成？
火树银花之处·2023-04-01 03:12

数据仓库工具箱第三章——零售业务

第三章——零售业务3.1维度建模设计的4步过程3.1.1选择业务过程3.1.2声明粒度3.1.3确定维度3.1.4确定事实3.2销售业务案例研究3.2.1选择业务过程3.2.2声明粒度3.2.3确定维度3.2.4确定事实3.3维度表设计细节3.3.1日期维度3.3.2产品维度3.3.3商店维度3.3.4促销维度3.3.5事务号码的退化维度3.4实际的销售模式3.5零售模式的扩展能力3.6无事实的事
jialun0116·2023-04-01 02:36

Hive基本架构和原理

概述Hive是建立在Hadoop上的数据仓库基础构架。它提供了一系列的工具，可以用来进行数据提取转化加载（ETL），这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
盛装吾步·2023-04-01 02:58

【软考 系统架构设计师】企业信息化战略与实施④ 企业信息化与电子商务

文章目录企业信息化与电子商务企业资源计划客户关系管理供应链管理信息化的“三流”商业智能数据仓库数据挖掘商业智能的具体过程商业智能和普通应用系统的对比练习题数据湖业务流程优化企业应用集成按集成点位进行分类按集成方式进行分类练习题按集成支持的方式进行分类练习题企业门户练习题企业集成平台电子商务数字化
万猫学社·2023-04-01 02:25

读书笔记丨《数据产品经理修炼手册:从零基础到大数据产品实践》丨DAY4

日期:2022年7月24日内容:第四章数据仓库理论与应用(p77-p104)4.1了解大数据基础Hadoop一、Hadoop及三驾马车01.什么是hadoop？
Ray_Shawn·2023-04-01 02:17

Flink Yarn Java Api Application 模式发布应用

背景最近公司在做实时数仓,技术上选择flink作为数据处理引擎,同时需要将实时数仓cdc（ODS层），建模（DWD）等逻辑进行功能化集成到数据仓库中方便数仓开发人员进行使用。
systemup_v1·2023-04-01 02:31

【大数据Hive3.x数仓开发】数仓基础理论

目录概念OLTP数仓的构建数仓体系图特征OLTPVSOLAP数据库VS数据仓库数据仓库VS数据集市数仓分层架构ODS层DW层DA层分层好处ETLVSELT注：学习课程：黑马程序员Hive全套教程，大数据
锵锵锵锵~蒋·2023-03-31 22:29

ClickHouse的入门、使用和优化

ClickHouse是俄罗斯的重要网络服务门户之一Yandex所开源的一套针对数据仓库场景的多维数据存储与检索工具，一个用于联机分析(OLAP)的列式数据库管理系统(DBMS),它通过针对性的设计力图解决海量多维度数据的查询性能问题
录信数软·2023-03-31 22:59

聊聊数据仓库中的缓慢变化维度（SCD）

SCD简介顾名思义，缓慢变化维度（slowlychangingdimension,SCD）就是数据仓库维度表中，那些随时间变化比较不明显，但仍然会发生变化的维度。
LittleMagic·2023-03-31 22:53

Hive基本概述以及执行原理

（MetaStore）驱动（Driver）查询编译器（QueryCompiler）执行引擎（ExecutionEngine）Hive服务器（HiveService）前言Hive是基于Hadoop的一个数据仓库工具
swg321321·2023-03-31 22:13

基于亚马逊云科技 Serverless架构的实时数仓架构

要实现数据价值，建设数据仓库是在数字化转型过程中不得不面对的一项任务。数据仓库汇聚各个业务部门数据，避免数据孤岛，使
登峰大数据·2023-03-31 21:45

Flink实时数仓第一篇数据接入

今天讲讲实时数据接入吧，怎么将数据实时接入到数据湖或者数据仓库。来看看流程图：1.为什么选择Hbase中转，而不是直
chenzuoli·2023-03-31 21:43

工赋开发者社区 | SaaS时代，凭什么说数据分析的未来是指标中台

过去，不少企业为充分发挥数据价值，已经做了很多相关努力，从以Hadoop为核心的数据湖，到Snowflake、Databricks等云上数据仓库，再到湖仓一体化......这些举措真的解决了与日俱增的数据问题吗
工赋开发者社区·2023-03-31 21:04

关于Greenplum的架构

Greenplum数据库是一种大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计。
贾斯汀玛尔斯·2023-03-31 20:33

Greenplum数据库（GPDB）总体架构

Greenplum数据库（GPDB）初识1、特性Greenplum数据库（GPDB），分布式数据库，数据仓库快速查询工具，特性：1）GPDB完全支持ANSISQL2008标准和SQLOLAP2003扩展
edelweiss2·2023-03-31 20:10

CDC (Change Data Capture) - 变化数据捕捉

通过这种方式，CDC能够向数据仓库提供高效、低延迟的数据传输，以便信息被及时转换并交付给专供分析的应用程序。
angeling2009·2023-03-31 20:06

OLTP vs OLAP

联机事务处理面向应用，事件驱动，应用简单，重吞吐，高并发1.数据在系统中产生2.基于交易的处理系统3.交易的数据量小4.响应时间要求高5.数据操作基于索引进行操作人员，用户量大OLAP联机分析处理面向数据仓库
angeling2009·2023-03-31 20:35

云原生数据中台 前言

与传统的数据仓库区别与传统的数据仓库受到事前建模的限制不一样，数据中台
章鱼哥TuNan&Z·2023-03-31 19:56

大数据学习路线图（2023完整高清版超详细）

大数据学习路线图分为7个阶段，包含：数据仓库基础-->Linux&Hadoop生态-->Hadoop-->数据仓库与ETL技术-->BI数据分析与可视化-->自研数据仓库项目-->就业冲刺-->专题拓展
千锋IT教育·2023-03-31 18:08

云原生数据中台技术与趋势解读

数据中台发展至今，大体经历了4个重要阶段：数据库-数据仓库-大数据平台-数据中台。每次新的变革，都是为了解决上一阶段存在的问题。当前，走向云原生成为数据中台的必然和必须。01、云原生从何而来？
奇点云·2023-03-31 18:20

HiveSQL 与 SQL 的区别

Hive是为了数据仓库设计的。
堂堂正正的大号·2023-03-31 18:59

美团DB数据同步到数据仓库的架构与实践

背景在数据仓库建模中，未经任何加工处理的原始业务层数据，我们称之为ODS(OperationalDataStore)数据。
sillyboyfei·2023-03-31 18:31

数仓基础+ONEDATA建模+各类事实表比较

二、为什么要对数据仓库进行建模？
ListenerDMT·2023-03-31 16:37

Mysql的列式数据库infobright存储引擎

Infobright是一个与MySQL集成的开源数据仓库软件，可作为MySQL的一个存储引擎来使用，SELECT查询与普通MySQL无区别。
kaifa456·2023-03-31 16:47

基于MySQL和Infobright的数据仓库技术

除非你最近在一个荒岛上，否则你不可能不知道，数据仓库/分析/商务智能(BI)领域正在飞速发展。许多年前，当行业分析师群体调查CIO最优先考虑的事时，BI排第十位。
onlyzhaozhen·2023-03-31 15:59

ClickHouse介绍与核心架构

ClickHouse是什么ClickHouse全称是ClickStream,DataWarehouse，简称ClickHouse就是基于页面的点击事件流，面向数据仓库进行OLAP分析。
喜讯XiCent·2023-03-31 14:22

大数据技术之Presto

Presto的设计和编写完全是为了解决像Facebook这样规模的商业数据仓库的交互式分析和处理速度的问题。注意：虽然Presto可以解析SQL，但它不是一个标准的数据库。
wespten·2023-03-31 13:01

Presto架构及原理

Presto是Facebook推出的一个基于Java开发的大数据分布式SQL查询引擎，可对从数G到数P的大数据进行交互式的查询，查询的速度达到商业数据仓库的级别，据称该引擎的性能是Hive的10倍以上。
静水流风·2023-03-31 13:11

数据仓库系列6-维度建模过程与任务

一.建模过程概述  开始讨论维度建模设计工作前，必须考虑正确的人选。最值得注意的是，我们强烈主张业务代表参加建模会议。他们的加入与合作必然会增加最终模型解决用户需求的可能性。同样，组织的业务数据管理人员也应该参加，特别是当讨论涉及那些由他们来管理的数据时。  维度模型的构建是一个具有高度动态性且需要迭代产生的过程。最初的准备过程完成后，设计工作将开始处理从总线架构获取的图形化模型，确定设计范围并澄
只是甲·2023-03-31 11:05

Azkaban概述详解

azkaban是一个开源的任务调度系统，用于负责任务的调度运行（如数据仓库调度），用以替代linux中的crontab。一、Azkaban是什么？1.1Azkaban是什么?
wtzhm·2023-03-31 11:37

集群共享存储文件系统_HashData多集群共享统一存储架构

在第一篇《对象存储与HashData多云战略》的文章中提到：HashData数据仓库使用对象存储作为数据持久层，通过巧妙地在对象存储Bucket与数据库表空间建立映射关系，同一个HashData集群可访问
weixin_39533174·2023-03-31 09:53

一文读懂数据平台架构演进历史

要理解数据网格，先得回顾下数据平台的发展历史，它们的典型代表分别是数据仓库、数据湖及湖仓一体。图片第一代：数据仓库图片1980年代中后期，为解决数据库面对数据分析的不足，孕育出新一类产品数据仓库。
麦聪聊数据·2023-03-31 08:37

大数据架构演变之路

一、JavaWeb为什么需要大数据二、数据库-OLTP&数据仓库-OLAP三、大数据架构演变1.传统离线大数据架构2.Lambda架构（离线处理+实时链路）离线数仓+实时数仓3.Kappa架构四、架构选择五
紫罗兰盛开·2023-03-31 08:35

大数据架构演进

1、数仓架构演变（场景驱动）1.1经典数仓架构数据仓库概念是Inmon于1990年提出并给出了完整的建设方法1.2离线大数据架构随着互联网时代来临，数据量暴增，开始使用大数据工具来代替经典数仓中的传统工具此时仅仅是工具的取代
「miraitowa」·2023-03-31 08:30

数据仓库概念

目录数仓概念数仓专注分析数仓主要特征面向主题性（Subject-Oriented）集成性（Integrated）非易失性、非异变性（Non-Volatile）时变性（Time-Variant）数仓概念1.数据仓库
Darcy cui·2023-03-31 07:42

数据中台技术架构选型和厂商分析

01从数据仓库到数据中台的演进1、第一阶段21世纪的第一个10年，企业级数据仓库（EDW）从萌芽到蓬勃发展，“IOT”(IBM、Oracle、Teradata)占领了大部分市场，提供数据仓库建设从硬件、
公众号:肉眼品世界·2023-03-31 07:36

让vue新手都能弄懂vuex的教程，纯天然超级干货

所有我通过我自己的理解给大家简单的理解一下：所谓的Vuex其实就是一个为Vue.js设计的数据仓库，就
爱上彗星的尾巴·2023-03-31 05:31

ETL的两种架构（ETL架构和ELT架构）

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。
weixin_34306676·2023-03-31 04:04

数据仓库与数据湖相关总结

一、数据仓库分层：DS:数据源层(mysql,pg(增删改查日志),kafka(机器日志、点击日志)、接口)，同一类日志可以是多张表结构相似的表(日志表：网页日志表，抓拍日志表，手机信号日志表，h5日志表
yostkevin·2023-03-31 04:31

关于ETL的两种架构（ETL架构和ELT架构）

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。
微服务 spring cloud·2023-03-31 03:20

Hive与传统数据库的差异

hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。1.查询语言。
墨明棋妙Mi·2023-03-31 02:37

Hive与传统数据库的比较

基于Hadoop的开源的数据仓库工具，用于处理海量结构化数据。Hive把HDFS中结构化的数据映射成表。
糖潮丽子·2023-03-31 01:58
上一页 45 46 47 48 49 50 51 52 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他