E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
数据仓库
工具superset安装(完全可用)
数据仓库
工具superset安装我安装尝试了3.7版本,出错。看经验贴安3.8,3.9版本的,全都没有成功初始化。
大数据小理
·
2022-08-31 21:39
大数据
数据仓库
数据仓库
数据分析
离线数仓(总结)
一:
数据仓库
(概述)所有的表设计都要参照业务总线矩阵三:维度建模理论之事实表事实表通常比较“细长”,即列较少,但行较多,且行的增速快。事实表作为
数据仓库
维度建模的核心,紧紧围绕着业务过程来设计。
爱上攻城狮2021
·
2022-08-31 12:20
数据仓库
big
data
hadoop
三、离线数仓—
数据仓库
离线数仓—
数据仓库
前言一、
数据仓库
概述1.
数据仓库
概念2.
数据仓库
核心架构二、
数据仓库
建模概述1.
数据仓库
建模的意义2.
数据仓库
建模的理论(思想)2.1ER模型(了解)2.2维度模型(重要)二、维度建模理论之事实表
自学大数据的菜鸡
·
2022-08-31 12:49
离线数仓
数据仓库
big
data
1.离线数仓—
数据仓库
设计
离线数仓—
数据仓库
设计前言一、
数据仓库
设计1.
数据仓库
分层规划2.
数据仓库
构建流程2.1数据调研2.2明确数据域2.3构建业务总线矩阵2.4明确统计指标2.5维度模型设计2.6汇总模型设计三、各表同步策略的回顾前言前面对
数据仓库
做了简要介绍
自学大数据的菜鸡
·
2022-08-31 12:49
离线数仓
数据仓库
big
data
实时数仓和离线数仓的概念
目录1、
数据仓库
的发展趋势1.1
数据仓库
的趋势1.2
数据仓库
的发展2、
数据仓库
架构的演变2.1传统数仓架构2.2离线大数据架构2.3Lambda架构2.4Kappa架构2.5混合架构3、三种大数据
数据仓库
架构
灵境旅行家
·
2022-08-31 12:18
知识小记
数据仓库
big
data
大数据项目离线数仓(全 )一(数据采集平台)
搭建用户行为数据采集平台、搭建业务数据采集平台、搭建
数据仓库
系统、制作可视化报表本篇博客包括搭建用户行为数据采集平台、搭建业务数据采集平台搭建
数据仓库
系统在大数据项目离线数仓(全)二制作可视化报表在大数据项目离线数仓
一个人的牛牛
·
2022-08-31 12:16
项目
数据仓库
etl
数据挖掘
离线数仓应用架构
小节一:数仓介绍小节二:离线数仓应用应用架构本小结介绍下离线数仓的一个应用架构一个简单的离线数仓架构图如下这里粗粒度的划分了异构数据源、数据传输、
数据仓库
、应用分析、及整体管理几层。
七月√
·
2022-08-31 12:16
数据仓库
大数据
数据仓库
架构
尚硅谷_尚硅谷离线
数据仓库
项目(阿里云离线数仓)_笔记
网址:https://www.bilibili.com/video/BV1AJ411Q7ox?p=29&spm_id_from=pageDriver一、项目架构设计1.1阿里云技术框架1.2技术选型1.3系统数据流程设计二、数据生成模块
风满楼i
·
2022-08-31 12:15
大数据
大数据
数据仓库
离线数仓(一)认识
数据仓库
1.2.
数据仓库
数据
Yuan_CSDF
·
2022-08-31 12:15
#
离线数仓
数据库
数据结构
离线数仓(1):什么是
数据仓库
目录0.相关文章链接1.
数据仓库
概念2.数仓仓库为何而来2.1.操作型记录的保存2.2.分析型决策的制定2.3.OLTP环境开展分析可行吗?
电光闪烁
·
2022-08-31 12:44
#
离线数仓
数据仓库
大数据
bigdata
离线数仓
独家下载|《阿里云MaxCompute百问百答》 解锁SaaS模式云
数据仓库
尽在本电子手册!
简介:为了帮助MaxCompute用户更顺畅的使用产品,阿里云MaxCompute团队基于开发者社区和其他渠道总结归纳出相关功能点的常见问题,联合阿里云开发者社区共同打造了《阿里云MaxCompute百问百答》电子手册,希望可以给正在学习和使用MaxCompute产品的用户提供一些帮助>>快来免费下载《阿里云MaxCompute百问百答》!<<为了帮助MaxCompute用户更顺畅的使用产品,阿里
阿里云开发者
·
2022-08-30 22:52
SQL
分布式计算
Cloud
Native
安全
Java
BI
MaxCompute
开发者
知识图谱
Python
阿里云开发者
数据治理之数据质量管控流程(参考)
(一)数据质量校验流程
数据仓库
每天都有很多ETL任务定时执行加载数据,确保ETL加载数据的完整性、准确性是数据质量管理的基本要求。
大数据学习僧
·
2022-08-30 16:11
大数据数据治理
数据仓库
数据治理
数据仓库
基本概念介绍
目录1、
数据仓库
所处环节操作层
数据仓库
数据集市个体层2、
数据仓库
概念面向主题的集成的随时间变化的非易失的3、一般架构STAGE层ODS层MDS层ADS层DIM层ETL调度系统元数据管理系统4、设计的两个重要问题
adu_ustc
·
2022-08-30 16:10
大数据
数据仓库
ods
数据集市
关于ETL的两种架构(ETL架构和ELT架构)
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。ETL是构建
数据仓库
的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的
数据仓库
模型,将数据加载到
数据仓库
中去。
微服务 spring cloud
·
2022-08-30 16:39
etl
数据仓库
数据库
数据仓库
中基本概念
一、
数据仓库
数据仓库
(DataWarehouse)是一个面向主题的、集成的、稳定的且随时间变化的数据集合,用于支持管理人员的决策面向主题主题就是类型的意思。
李大寶
·
2022-08-30 16:08
大数据
数据仓库
数据挖掘
数据库
Apache Druid 数据摄取---本地数据和kafka流式数据
Durid概述ApacheDruid是一个集时间序列数据库、
数据仓库
和全文检索系统特点于一体的分析性数据平台。本文将带你简单了解Druid的特性,使用场景,技术特点和架构。
·
2022-08-29 16:25
javadruid数据库
实时数仓Workshop · 广州站 9.15 邀您参加!
点击参与线下交流随着数字化业务的增长,企业的数据量呈现爆发式增长,
数据仓库
已经成为企业数据发展到一定规模后必然提供的基础服务之一。
·
2022-08-26 18:53
【超详细】Apache Durid从入门到安装详细教程
1.Durid概述ApacheDruid是一个集时间序列数据库、
数据仓库
和全文检索系统特点于一体的分析性数据平台。本文将带你简单了解Druid的特性,使用场景,技术特点和架构。
·
2022-08-26 14:57
java后端
如何在5分钟内发现 SQL 语言中的数据血缘
数据仓库
和数据湖中处理数据用的最多的工具就是SQL语言,无论是数据加载、数据转换、还是数据清洗,都会用到SQL查询语言,更不用说数据查询和分析了。
.Zeoy
·
2022-08-26 10:58
SQLFlow
sql
数据库
数据仓库
关于 group by 和 distinct 的优化之争
首先声明一下,hive是什么:hive不是数据库,hive只是一个
数据仓库
工具,可以用来查询、
·
2022-08-25 21:25
湖仓一体技术解读|流式计算实现秒级数据入湖
SequoiaDB的“湖仓一体”结合了数据湖与
数据仓库
,是一个融合的基础设施环境,支持从原始数据
巨杉数据库SequoiaDB
·
2022-08-25 14:17
大数据
分布式
湖仓一体
springboot基于java的员工信息管理系统毕业设计源码201524
Springboot员工信息管理系统摘要由于数据库和
数据仓库
技术的快速发展,企业员工信管理建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
FYKJ_2010
·
2022-08-25 13:05
java
spring
boot
mysql
vue
mybatis
转: Facebook
数据仓库
揭秘:RCFile高效存储结构
转:http://cloud.csdn.net/a/20110429/296900.htmlFacebook
数据仓库
揭秘:RCFile高效存储结构本文介绍了Facebook公司数据分析系统中的RCFile
fbjwying2
·
2022-08-25 10:17
存储
数据仓库
facebook
mapreduce
数据分析
hadoop
hive的文件格式-RCfile
Facebook
数据仓库
揭秘说到,RCFile(RecordColumnarFile)存储结构遵循的是“先水平划分,再垂直划分”的设计理念,它结合了行存储和列存储的优点:首先,RCFile保证同一行的数据位于同一节点
龙明倩
·
2022-08-25 10:17
Hive
Apache Druid 底层的数据存储
其次将知道为什么ApacheDruid兼具
数据仓库
,全文检索和时间序列的特点。最后将学习到一种优雅的底层数据文件结构。今日格言:优秀的软件,从模仿开始的原创。
码哥字节
·
2022-08-25 07:08
大数据
大数据
01_大数据导论与Linux基础
贯穿分布式存储技术(HadoopHDFS)分布式计算技术(HadoopMapReduce)、分布式资源调度技术(HadoopYARN)以及
数据仓库
技术(Hive)。
饮马翰海
·
2022-08-24 18:36
Hadoop(黑马)
大数据
linux
hadoop
数据集成-5-批数据集成
批数据集成1.批数据集成简介1.1.批数据集成批数据集成静态数据集数据被组织成"批"地(时间窗口)周期性的迁移到另一个系统(专门的数据端)抽取、转换、集成为通用数据格式持久化集成数据应用
数据仓库
数据分析等数据服务应用
SpriCoder
·
2022-08-24 07:09
数据集成课程笔记
big
data
spark
hadoop
直播预告 | 基于Flink的实时数仓建设,明晚19:30就在个推TechDay治数训练营
当下,企业的实时计算需求越来越高频,很多企业和组织选择建设实时
数据仓库
,以敏捷支撑实时报表分析、智能算法推荐、系统风险预警等多元业务场景需求。相比离线数仓,实时数仓有哪些特性?
·
2022-08-23 17:14
flink数据仓库大数据
一文读懂
数据仓库
数据仓库
数据仓库
(DataWarehouseDW)是为了便于多维分析和多角度展现而将数据按特定的模式进行存储所建立起来的大型数据库,它的数据基于事务型的关系数据库。
打个大西瓜77
·
2022-08-23 14:31
大数据
big
data
知识图谱
数据库
数据仓库
大数据篇:一文读懂@
数据仓库
(PPT文字版)
为企业所有决策制定过程,提供所有系统数据支持的战略集合面向主题操作型数据库的数据组织面向事务处理任务,各个业务系统之间各自分离,而
数据仓库
中的数据是按照一定的主题域进行组织。
普通网友
·
2022-08-23 14:27
一文读懂
数据仓库
~~~
文章目录1、简介1.1、背景1.2、概念1.3、传统数据库与大
数据仓库
2、
数据仓库
、数据库、数据集市2.1、OLTP、OLAP2.2、
数据仓库
、数据库2.3、
数据仓库
、数据集市3数仓分层架构3.1、ODS
Provence°_博
·
2022-08-23 14:56
大数据
数据仓库
数据库
大数据
hive
基于 Flink x TiDB,智慧芽打造实时分析新方案
摘要:本文整理自智慧芽
数据仓库
架构师曲明星在FlinkForwardAsia2021实时数仓专场的分享。
·
2022-08-23 12:52
数仓ETL
什么是
数据仓库
面向主题的集成的非易失的随时间变化的支持管理人员决策的数据集合
数据仓库
的几个概念OLAP&OLTPODS&数据集市维度粒度立方体及其操作星形模型雪花模型事实星座
数据仓库
与数据库对比内容数据库
数据仓库
数据内容当前值历史的
撸码的xiao摩羯
·
2022-08-23 07:00
编程语言
sql
偶数科技:深入理解“湖仓一体”,避免错过最佳转型战略时机
本月,阿里云在北京举办了“2022年阿里云数据存储生态发布会”,偶数科技作为目前国内云原生
数据仓库
技术领域的开拓者受邀参加了本次大会。
·
2022-08-22 14:27
hawq
大数据平台最常用的30款开源工具
大数据平台处理的数据量通常是TB级,甚至是PB或EB级的数据,这是传统
数据仓库
工具无法处理完成的,其涉及的技术有分布式计算、高并发处理、高可用处理、集群、实时性计算等,汇集了当前IT领域热门流行的各类技术
饮水思源09
·
2022-08-21 12:09
Hadoop
kettle分批处理大表数据_数据层交换和高性能并发处理(开源ETL大数据治理工具--KETTLE使用及二次开发 )...
ETL是数据的抽取清洗转换加载的过程,是数据进入
数据仓库
进行大数据分析的载入过程,目前流行的数据进入仓库的过程有两种形式,一种是进入数据库后再进行清洗和转换,另外一条路线是首先进行清洗转换再进入数据库,
weixin_42316909
·
2022-08-21 12:39
kettle分批处理大表数据
大数据面试题2
大数据项目之企业级
数据仓库
实战第一章
数据仓库
概述1.1
数据仓库
简介1.1.1什么是数据库?数据库(Database)是按照数据结构来组织、存储和管理数据的建立在计算机存储设备上的仓库。
DHRJFH
·
2022-08-21 08:13
大数据
数据库
big
data
知识图谱
Doris SQL执行计划
Doris简介Doris是基于MPP架构的交互式SQL
数据仓库
,主要用于解决近实时的报表和多维分析。
贾斯汀玛尔斯
·
2022-08-19 22:14
Doris
Doris
6W+字记录实验全过程 | 探索Alluxio经济化数据存储策略
探索背景随着大数据应用的不断发展,
数据仓库
、数据湖的大数据实践层出不穷;无论是电信、金融、政府,各个行业的大数据热潮蓬勃发展。
·
2022-08-19 12:48
大数据实验记录策略模式存储金融
简述:数据中台、
数据仓库
、数据湖
概述:简述
数据仓库
、数据湖、数据中台的相关概念。
傻子般白痴
·
2022-08-19 10:33
MySQL主从复制详细介绍
一、主从复制的目的MySQL内建的复制功能是构建基于MySQL的大规模、高性能应用的基础,复制功能的目的是构建高性能的应用,同时也是高可用性、可扩展性、灾难恢复、备份以及
数据仓库
等工作的基础。
TimeFriends
·
2022-08-18 18:11
数据结构
mysql
数据库
服务器
Smartbi 数据模型以自助为理念,带来 “敏捷建模” 的新思路
B客户是一家大型金融企业,
数据仓库
建设已经成熟,且是通过大宽表来实现数据集市,这样进行数据分析更加的便捷高校。
·
2022-08-18 15:48
数据分析大数据数据建模
基于DAP数仓建设过程说明
通过DAP数据分析平台可以有效支撑企业构建
数据仓库
,实现企业
数通畅联
·
2022-08-18 15:57
产品文档
数据分析
数据治理
构建数仓
DAP+ESB
数据仓库
构建过程说明
科技飞速发展的时代,企业信息化建设越来越完善,越来越体系化,当今数据时代背景下更加强调、重视数据的价值,以数据说话,通过数据为企业提升渠道转化率、改善企业产品、实现精准运营,为企业打造自主模式的数据分析成果,以数据驱动决策。随着企业发展以及信息化的建设,在初步搭建企业整体IT框架后,业务系统所产生的数据也在逐渐增多,通过系统数据挖掘数据价值,促进业务升级已成为企业信息化发展的必经之路。对于大多数企
数通畅联
·
2022-08-18 15:53
产品文档
数据治理
数据清洗
数据分析平台重点演示内容梳理
DAP数据分析平台作为公司核心产品,其价值在于能将企业业务数据进行抽取汇聚,建立企业
数据仓库
,能够真实、准确、清晰、有效地将企业内部及外部行业数据进行可视化展现,帮助企业提升行业洞察力。
数通畅联
·
2022-08-18 15:50
产品文档
数据分析
数据挖掘
数据治理
数据仓库
建设方案详细:系统架构设计
第3章硬件部署按照专家系统安装接口规要求,结合专家管理系统数据量估算值和数据存储特点,本着数据安全、系统稳定可靠的核心设计思路,设计专家系统大数据平台数据节点服务器22台,其中管理节点服务器2台,数据节点服务器19台,监控节点一台,系统RDBMS数据库服务器台,应用服务器6台,绘制专家系统部署逻辑结构图如下:第4章硬件清单根据系统规划及安装接口规要求,初步规划服务器如下:系统应用服务器需求6台;大
000X000
·
2022-08-18 01:10
数据仓库
实战
大数据
数据仓库建设
系统架构设计
大数据技术面试-项目架构与涉及技术
第3章项目架构3.1数仓概念
数据仓库
的输入数据源和输出系统分别是什么?
000X000
·
2022-08-18 01:09
大数据
数据仓库
大数据技术面试
项目架构与涉及技术
数据仓库
完整版
分家"2.1OLAP和OLTP简介2.2定义差别2.3定位差别2.4组成差别2.5技术差别2.6功能差别2.7OLTP数据库三范式介绍2.8OLAP典型架构2.9OLAP数据立方体(DataCube)3
数据仓库
的演进
000X000
·
2022-08-18 01:39
数据仓库
数据建模
大数据
数据仓库
实时数仓建设项目概述
数据仓库
也是公司数据发展到一定规模后必然会提供的一种基础服务,
数据仓库
的建设也是“数据智能”中必不可少的一环。
000X000
·
2022-08-18 01:08
实时计算
大数据
数据仓库
实时
数据仓库
实时ETL解决方案总结
答:在建立
数据仓库
时,ETL通常都采用批处理的方式,一般来说是每天的夜间进行跑批。
000X000
·
2022-08-18 01:07
数据分析
BIGDATA
大数据
ETL
上一页
67
68
69
70
71
72
73
74
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他