E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
事实表
数据仓库——事务、快照和累积快照
事实表
事务、快照和累积快照事务
事实表
跟踪定义业务过程的个体行为,并且支持几种描述这种行为事实。
墨染丶eye
·
2024-03-28 23:58
背诵
数据仓库
数据库
数据仓库的设计开发应用(三)
(一)数据仓库的创建 根据逻辑设计阶段的结果,创建一个数据库文件,并在其中创建
事实表
、维度表以及详细类别表
Francek Chen
·
2024-03-16 14:22
数据仓库与数据挖掘
数据仓库
大数据
数据仓库设计
数据库开发
性能优化技巧:外键序号化
一、问题背景与适用场景在《性能优化技巧:部分预关联》一文中,我们介绍了将维表内存化并预关联的技术,但
事实表
与维表关联时,仍需进行hash计算和比对,怎么提高这一步的性能呢?
小黄鸭呀
·
2024-02-08 11:17
2022年5月13日读书笔记
历史
事实表
明,罗马共和国之所以出现兵源缺乏的现象,主要是经济结构中自由农民急剧破产造成的。也就是说,经济结构和政治结构功能耦合的破坏是小农经济瓦解的后果。
龙套哥萨克海龙
·
2024-02-07 11:46
数仓:
事实表
设计方法,原则和三种类型选择
关注公众号,回复关键字【资料】,获取【10万字大数据框架面试知识点】与【大数据开发的命令手册】
事实表
设计方法
事实表
作为数据仓库维度建模的核心,紧紧围绕着业务过程来设计。
大数据左右手
·
2024-02-07 09:35
大数据
数据仓库
数据挖掘
数据分析
数据仓库系列:星型模型和雪花型模型
在实际工作中多维分析的商业智能解决方案,根据
事实表
和维度表的关系,又可将常见的模型分为星型模型和雪花型模型。在设计逻辑型数据的模型的时候,就应考虑数据是按照星型模型还是雪花型模型进行组织。
小黎子数据分析
·
2024-02-05 16:02
大数据之路—数据架构体系及模型设计
大数据之路—数据架构体系及模型设计一、阿里巴巴数据整合及管理体系二、维度设计1、基本概念2、规范化和反规范化3、维度整合4、维度拆分5、维度变化6、特殊维度三、
事实表
设计1、
事实表
特性2、
事实表
类型3、
长不大的大灰狼
·
2024-02-05 04:03
大数据
大数据
架构
Power BI-关系函数RELATED,RELATEDTABLE,LOOKUPVALUE
中最强大的函数vlookup吗,可谓是在EXCEL函数中称王称霸了,在PowerBI中也有与vlookup功能相似的函数,而且不止一个,今天介绍下这三个函数:1.RELATED功能:把维度表中的数据匹配到
事实表
中
Sugargl
·
2024-02-04 22:52
中国式创业者,往往败在了“只有热情”
很多
事实表
明,创业者们将满腔热情投入到自己的事业中,但是,光有热情缺乏思路,注定会让梦想之田变为伤心之地。因为创业就像买彩票,中大奖概率太小。
佘宇
·
2024-01-27 08:46
数据仓库建模
维度模型是一种基于
事实表
和维度表的
不加班程序员
·
2024-01-24 07:44
Hadoop相关
原理
ETL
数据仓库
数学建模
hadoop
Kylin即席查询教程
KylinKylin即席查询教程学习目标简介核心概念数据仓库,OLAP与OLTP,维度和度量,
事实表
和维度表。星型模型和雪花模型。
岁月的眸
·
2024-01-20 03:08
大数据
#
Kylin总结
markdown
redis
数据库
滚蛋吧!拖延症
生活的经验与
事实表
明,成功者除了知识以外,通常还具备一些别人所不及的本领,他们知道自己是谁,要做什么事,要朝哪个方向努力。他们完成了一场战胜自我的革命,同时也征服了人生。
无羽901
·
2024-01-19 08:22
数据库的设计模式
描述:一个中心
事实表
和多个维度表。
事实表
存储度量值或事务数据,维度表存
凌寒ᨐ舞
·
2024-01-18 23:37
数据库设计
数据库
最愚蠢的教育方式,莫过于:棍棒底下出孝子
但是现实生活中存在的大量
事实表
明,棍棒底下更多的不是孝子,而是痛苦、麻木、迷茫、甚至暴力倾向的人。打孩子是最错误的决定家庭教育是孩子人生的第一教育根基,这代表着家庭教育的好
君留香
·
2024-01-18 20:51
项目实战-知行教育大数据分析平台-01
目录一、业务流程二、项目架构流程三、clouderamanager(CM)基本介绍四、项目环境搭建五、维度分析六、数仓建模1、维度建模2、什么是
事实表
与维度表3、
事实表
与维度表的分类4、维度建模的三种模型
吆喝的翅膀
·
2024-01-15 04:22
python+大数据学习
数据仓库
教育电商
hive
hadoop
cloudera
数仓学习笔记(5)——数仓搭建(DWD层)
日志解析思路1.2get_json_object函数使用1.3启动日志表1.4页面日志表1.5动作日志表1.6曝光日志表1.7错误日志表1.8DWD层用户行为数据加载脚本2、DWD层(业务数据)2.1评价
事实表
默萧756
·
2024-01-14 06:35
学习
大数据
数仓
离线数仓 (十三) --------- DWD 层搭建
用户行为日志)1.日志解析思路2.get_json_object函数使用3.启动日志表4.页面日志表5.动作日志表6.曝光日志表7.错误日志表8.DWD层用户行为数据加载脚本二、DWD层(业务数据)1.评价
事实表
在森林中麋了鹿
·
2024-01-14 06:02
大数据项目
java
json
数据库
物流实时数仓DWD层——1.准备工作
目录1.创建主程序——DwdOrderRelevantApp类2.创建DWD层的
事实表
——来源于订单表和订单明细表(1)创建订单表实体类(2)创建订单明细表实体类(3)创建交易域:下单事务
事实表
实体类,
雷神乐乐
·
2024-01-14 06:57
#
实时数仓项目
大数据
flink
java
数据仓库
交通物流
Power BI——关系函数(RELATED和RELATEDTABLE)
一、RELATED(多端找一端):1.定义:
事实表
找维度表,从关系的一端返回标量值。2.语法:*说明:列名-包含所需值的列1.RELATED函数生效的前提是当前表和目标表之间存在关系。
PiiPiiKity
·
2024-01-13 08:47
Power
BI
数据分析
【大数据面试】常见数仓建模面试题附答案
事实表
的类型?维度建模步骤?维度建模的三种模式?数仓架构进化?数据仓库如何保证数据质量?开发流程/你们是怎么测试的?维度建模过程?维度建模的三种模式?
事实表
都有哪几种?如何做数据治理?元数据的理解?
话数Science
·
2024-01-12 07:28
面试
大数据
大数据
教育就是提高免疫力
——《学会生存——教育世界的今天和明天》
事实表
明,教育的更新已经成为社会发展不可缺少的推动力。那么教育本身的更新就显得极其重要。但教育内部,广大教育工作者逐渐认识到了,教育更新已经成为教育本身是
陈贵旺
·
2024-01-11 01:01
记一次spark-sql数据倾斜解决方案
spark-sql数据倾斜解决方案背景今天在做一张埋点
事实表
,需要关联几张维表,补充一些维度属性。
王糍粑的小夕
·
2024-01-10 08:20
spark
spark
sql
大数据
不要太充满期待—瑶瑶の374天日更
在和大BOSS面试时,觉得他讲的东西很好,我们要做的东西很棒;到了工作时,我以为主管也是一个特别好的领导,但后面
事实表
示并不是如此,可能是来的时机不对吧,他升职了,管的事情越来越多,没有功夫再去直接带我们
十九_瑶
·
2024-01-09 17:09
维度建模入门
维度建模的好处-可理解性是维度模型得以广泛应用的一个主要原因-查询性能是维度建模的第二主要驱动因素-每个维都是一个等效的
事实表
入口-拓展容易,容纳未预料的新数据
事实表
-“事实”是性能度量-
事实表
一般都和业务过程度量事件相对应
木戎
·
2024-01-08 22:26
数仓建设学习路线(二)模型建设(2)
模型设计基本原则维度模型设计大图模型建设过程图从总线矩阵开始总线矩阵指以一致性维度为列,以业务过程为行,构建业务的数据矩阵,通过标记表示该维度与业务过程的相关性模型建设考量5要素(重点)主题域对当前业务场景或业务sop进行拆分完成对应主题建设
事实表
设计围
语兴数据
·
2024-01-08 18:52
数仓建设-学习路线
大数据
数据仓库
数据密集型应用系统设计--3.3 列式存储
在本节中,将主要关注
事实表
的存储。虽然
事实表
通常超过100列,但典型的数据仓库查询往往一次只访问其中的4或5个。在大多数OLTP数据库中,存储以面向行的方式布局:来自表的一行的所有值彼此相邻存储。
下海的alpha
·
2024-01-07 17:45
spark
大数据
分布式
flink sql - group by 字段 [不等于] 主键字段导致upset-kafka 多并发 sink to pg表死锁原因分析
flinksql-groupby字段[不等于]主键字段导致写入pg表死锁原因分析1、环境描述1、flink1.13.22、3个并发度[3个taskmanager],即任务会在三个节点[A、B、C节点]上跑3、
事实表
cg6
·
2024-01-06 12:43
flink
flink
kylin操作实战
一、数据准备
事实表
:dwd_payment_info维度表:dwd_order_info和dwd_user_info1.1建表dwd_payment_infohive(gmall)>droptableifexistsdwd_payment_info
比格肖
·
2024-01-05 20:26
物流实时数仓:数仓搭建(DWD)二
采集通道搭建物流实时数仓:数仓搭建物流实时数仓:数仓搭建(DIM)物流实时数仓:数仓搭建(DWD)一物流实时数仓:数仓搭建(DWD)二文章目录系列文章目录前言一、代码编写1.文件创建2.物流域运输完成
事实表
超哥--
·
2024-01-04 22:27
物流实时数仓
java
数据库
服务器
大数据面试总结 二
1、
事实表
主要分成几种:1、事务
事实表
:又称作原子
事实表
,主要是用来描述业务过程,跟踪控件或者时间上某点的度量事件,保存的是最原子的数据2、周期
事实表
:以一个周期作为一个时间间隔,用来记录事实,一个周期可以是每天
新手小农
·
2024-01-03 03:18
大数据面试总结
面试
职场和发展
数据仓库建模有哪些常用的方法
它基于
事实表
和维度表的概念,通过将数据按照业务过程进行分解,将事实数据与维度属性进行关联,构建一个具有层次结构的数据模型。维度建模简单直观,易于理解和使用,适用于大多数数据仓库场景。
命令执行
·
2024-01-02 07:47
深度学习
机器人
详解大数据数据仓库分层架构
2、
事实表
是数据仓库结构中的中央表,它包含联系事实与维度表的数字度量值和键。事实数据表包含描述业务(
Alukar
·
2024-01-01 14:47
【华为数据之道学习笔记】3-7 报告数据治理
用于报表项数据生成的
事实表
、指标数据、维度。用于报表项统计和计算的统计函数、趋势函数及报告规则。用于报表和报告展示的序列关系数据。用于报表项描述的主数据、基础数据、事务数据、观测数据。
码农丁丁
·
2023-12-31 09:36
#
数据中台
华为数据之道
数据中台
读书笔记
第一章:婚姻的奥秘(上)
3、对那些经历了父母离婚的年轻人来说,同居是一个合情合理的选择,但
事实表
明,吃这服药,比得病更痛苦。4、最值得注意的是,纵向研究表明,那些不幸福的婚姻
Ywen山
·
2023-12-30 23:57
开学了♡
首先我们上的是数学课,课上老师说今天,我们来检测一下大家预习的怎么样,并不开始正式授课,
事实表
明我预习的很好,因为我是天才。
宁宁兜里有糖
·
2023-12-30 22:58
王延平 || 科学意识的重要性
李老师在文中引用了如下内容:科学通识教育的目标应该是科学意识,因为
事实表
明,人们没有掌握科学知识,也能很好的进行生活。事实也确实如此,在生活层面,科学知识并非必有可少,而科学意识
当下宁静
·
2023-12-28 00:02
Flink电商实时数仓(六)
交易域支付成功事务
事实表
从topic_db业务数据中筛选支付成功的数据从dwd_trade_order_detail主题中读取订单事实数据、LookUp字典表关联三张表形成支付成功宽表写入Kafka支付成功主题执行步骤设置
十七✧ᐦ̤
·
2023-12-26 07:25
flink
数据库
java
数据仓库【4】:最佳实践
数据仓库【4】:最佳实践1、表的分类1.1、
事实表
1.2、维度表1.3、事务
事实表
1.4、周期快照
事实表
1.5、累积快照
事实表
1.6、拉链表2、ETL策略2.1、全量同步2.2、增量同步3、任务调度3.1
QQ719872578
·
2023-12-26 01:59
#
数据仓库
数据仓库
美好清晨20220313——育儿育己:困难是欺软怕硬的
大量的
事实表
明,人的目标行为的中止期多发生在“半途”附近,在人的
凝飞呀
·
2023-12-23 08:26
阿里笔记之数据模型
文章目录数据模型名词说明业务板块公共定义项目管理维度业务过程指标统计粒度事实事实的设计准则
事实表
事实表
设计原则
事实表
设计方法声明粒度确定事实冗余维度事务
事实表
设计过程事务
事实表
分类多事务
事实表
两种事务
事实表
如何选择周期快照
事实表
特性用快照采样状态快照粒度密度与稀疏性半可加性快照
事实表
分类设计步骤单维度的每天快照
事实表
混合维度的每天快照
事实表
全量快照
事实表
累计快照
事实表
设计过程业务过程确定粒度确定维
迹说
·
2023-12-22 06:25
大数据
数据中台
大数据
数据仓库
Flink 流表与维表join(流批join)——使用异步IO(async io)实现
如果
事实表
和维度表进行join,Flink会认为这是一个批处理程序。也就是说程序会自己暂停。
iFence
·
2023-12-21 06:37
Flink
flink
Flink SQL填坑记2:Flink和MySQL的Bigdata类型不同导致ClassCastException报错
最近在开发FlinkSQL的时候,需要关联Kafka
事实表
和MySQL维表,得到的数据写入Phoenix表中,但是其中有个字段,Kafka表、MySQL表和Phoenix表都是BigData类型,但是在实现的时候却报
IT源哥
·
2023-12-20 17:17
源哥讲互联网技术
大数据
微服务
SaaS
CRM
在线客服
呼叫中心技术
大数据
flink
flink
sql
【华为数据之道学习笔记】5-8多维模型设计
多维模型是依据明确的业务关系,建立基于维度、
事实表
以及相互间连接关系的模型,实现多角度、多层次的数据查询和分析。如何设计出稳定、易扩展、高可用的数据模型来支持用户消费对数据主题联接至关重要。
码农丁丁
·
2023-12-19 14:27
#
数据中台
华为数据之道
数据中台
读书笔记
Power BI案例-连锁糕点店数据集的仪表盘制作
PowerBI案例-连锁糕点店数据集的仪表盘制作数据集描述有一个数据集,包含四张工作簿,每个工作簿是一张表,其中可以销售表可以划分为
事实表
,产品表,日期表和门店表为维度表。
IT从业者张某某
·
2023-12-14 18:23
大数据
星型模型与雪花模型的区别、分别有哪些优缺点
概念根据
事实表
和维度表的关系,可将常见的模型分为星型模型和雪花模型。在数据仓库的建设中,一般都会围绕着这两种模型来设计表关系或者结构。那么什么是
事实表
和维度表呢?
走过冬季
·
2023-12-06 21:07
学习笔记
数据仓库
大数据
hive
维度建模 -- 星型模型和雪花模型的区别
根据
事实表
和维度表之间的关系,我们将常见的模型分为星型模型和雪花模型。雪花模型去除了冗余,设计复杂,可读性差,关联的维度表多,查询效率低,但是可扩展性好。
TriumPhSK
·
2023-12-06 21:32
大数据
个人总结
数据库
big
data
(星型、雪花、星座、交叉连接)多维数据模型各种类型优劣分析
维度模型中的
事实表
存放的就是这些业务度量,也就是业务过程中事件的性能度量结果。《数据仓库工具箱》中有这样一段描述:物理世界的每一个度量
真不爱学习
·
2023-12-02 10:21
【乌卡时代】实用算法/数据结构
数据仓库
数据库
数据挖掘
冷静对待双十一
一来无法为了秒杀和折扣而烧脑烧心,熬夜伤身;二来在可有可无的商品上反复比较,查看评论,斟酌权衡,实在有些浪费时间;三来经验表明囤货并不科学理智,食品面临失鲜过期,服饰面临过季淘汰;四来
事实表
明很多商家所谓的
汨江情
·
2023-12-01 09:48
LightDB - no_star_transformation
Oracle星型转换星型转换是一种优化器转换,它避免了对星型模式中
事实表
的全表扫描(星型模式将数据分为
事实表
和维度
紫无之紫
·
2023-11-30 19:30
lightdb
lightdb
星型转换
hint
oracle
走出忙乱累,过精要人生
无数
事实表
明,什么都想要的人,结果往往什么都得不到。因为目标太多,他们只会囫囵吞枣地做完这件事、然后又马不停蹄地去渴望下一件更刺激的事。在本书中,这种不愿
乐脉
·
2023-11-29 04:20
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他