E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
数据仓库
总结
1.为什么要做数仓建模
数据仓库
建模的目标是通过建模的方法更好的组织、存储数据,以便在性能、成本、效率和数据质量之间找到最佳平衡点。
袁奎
·
2023-08-30 08:27
数据仓库
数据仓库
_维度表的两大分类
最近看一篇文章对维度表进行了分类,记录一下。维度表主要分为两类高基数维度表和低基数维度表。高基数维度数据一般是用户资料表、商品资料表类似的资料表。数据量可能是千万级或者上亿级别。低基数维度数据一般是配置表,比如枚举值对应的中文含义,或者日期维度,地理维度表等。数据量可能是个位数或者几千条几万条。基数指的是一个字段中不同值的个数,比如主键列具有唯一值,所以具有最高的基数,而性别枚举值(日期,地区等)
高达一号
·
2023-08-30 08:26
数仓设计
数据仓库
大数据学习教程SD版第七篇【Hive】
1.Hive简介
数据仓库
工具,将结构化数据映射成二维表,并提供类SQL查询,底层把HQL转换成MR程序Hive自带的客户端hiveclientbeelineclient特点HQL用于数据分析,但处理处理粒度粗处理大数据
道-闇影
·
2023-08-30 08:32
hive
hadoop
big
data
Hive面试题3:底层知识
Hive使用场景Hive的执行流程2.sql如何转为mapreduce程序的1.hive架构什么是HiveHive是由Facebook开源用于解决海量结构化日志的数据统计;Hive是基于Hadoop的一个
数据仓库
工具
mr_cuber
·
2023-08-30 08:31
hive面试题
hadoop
hive
《数据挖掘——概念与技术》笔记
目录第2章认识数据2.1数据对象与属性类型2.2数据的基本统计描述2.4度量数据的相似性与相异性第3章数据预处理3.2数据清理3.3数据集成3.4数据归约3.5数据变换与数据离散化第4章
数据仓库
与联机分析处理
樟小叶
·
2023-08-29 23:28
数据仓库
Android自动化测试中操作技巧合集(建议收藏)
内容提供器为不同应用间的数据共享提供了接口,它们像是一个中央
数据仓库
,各个应用可以通过内容URI来存取数据。每条短信都会被存储在内容提供器的SMSContentProvider中。
美团程序员
·
2023-08-29 23:22
技术分享
自动化测试
android
职场和发展
测试工具
软件测试
自动化测试
视频结构化
视频被结构化后,存入相应的结构化
数据仓库
,存储的容量极大降低。
oldms
·
2023-08-29 19:12
Apache Arrow - Parquet存储与使用
简介Parquet是一种高效的列式存储格式,广泛用于大数据系统中的
数据仓库
和数据管理工具中,旨在提高数据分析的性能和效率,能够更好地支持数据压缩和列式查询,同时兼顾读写速度和数据大小初衷为了让Hadoop
·
2023-08-29 18:48
hive搭建
一:简介Hive是基于Hadoop构建的一套
数据仓库
分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据。
Gavin_hello
·
2023-08-29 18:46
SAS
数据仓库
的体系结构
SAS
数据仓库
就是一个适应于对企业级的数据、信息进行重新整合,适应多维、快速查询;进行OLAP操作和决策支持的数据、信息的采集、管理、处理和展现的架构体系。
weixin_30551947
·
2023-08-29 17:49
数据库
数据结构与算法
人工智能
NineData X SelectDB 联合发布会,即将上线!
本次发布会将聚焦于实时
数据仓库
技术和数据开发能力,展示SelectDB新一代实时
数据仓库
产品如何解决实时数据分析的行业痛点,以及「NineData如何提供高效、智能、安全的数据管理能力」。
·
2023-08-29 12:16
什么是
数据仓库
?
数据仓库
:DATAWAREHOUSE,简称数仓、DW。是一个用于存储、分析、报告的数据系统。目的是构建面向分析的集成化数据环境,为企业提供决策支持。
BigData_001_Lz
·
2023-08-29 09:17
数据仓库
数据仓库
大数据
技术实践|Hive数据迁移干货分享
导语Hive是基于Hadoop构建的一套
数据仓库
分析系统,可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能。
中电金信
·
2023-08-29 07:56
hive
hadoop
数据仓库
大厂数仓模型规范与度量指标有哪些?
随着数据驱动的决策在企业中的重要性日益增加,
数据仓库
作为数据沟通和业务系统之间的中介,扮演着关键的角色。因此,确保数仓模型的规范性和质量是至关重要的。
南极找南
·
2023-08-29 07:25
数据工厂
大数据
数据治理
大数据
我从
数据仓库
的角度聊一聊
BI的作用与价值BI,BusinessIntelligence的简称,顾名思义,也叫做商业智能。其主要价值,在于通过一系列的数据技术,从数据中挖掘隐藏的客观规律,总结这些规律背后的原因,并用于指导公司业务的发展。大多数情况下,BI分析师的工作,就是通过SQL、Python等语言,将已经统计好的数据,结合数据模型或者是分析框架,来对业务进行各种分析,并做成有价值的报表或者报告的形式,供业务方进行分析
大数据的那些事
·
2023-08-28 23:17
信息系统项目管理师自学笔记(十七)——
数据仓库
与数据挖掘
为了满足中高层管理人员预测、决策分析的需要,在传统数据库的基础上产生了能够满足预测、决策分析需要的数据环境——
数据仓库
。
烧麦Sn0wSt@r
·
2023-08-28 22:05
信息系统项目管理师
数据挖掘
数据分析
全面解读数据湖与
数据仓库
的区别
从
数据仓库
(DataWarehouse),到如今如火如荼的数据湖(DataLake),都被机构广泛应用于大数据存储,但从结构和处理方式上都有很大的区别。
麦聪聊数据
·
2023-08-28 22:05
数据中台
数据仓库
DaaS
数据仓库
数据挖掘
数据库
数据仓库
是什么?和数据库有何区别?
在具体学习
数据仓库
之前先看一下数据中心的整体构架以及数据流向。DB是现有的数据来源,可以为mysql、SQLserver、文件日志等,为
数据仓库
提供数据来源的一般存在于现有的业务系统之中。
heyedelweiss
·
2023-08-28 22:03
数据仓库
数据仓库
数据库
什么是
数据仓库
?
数据仓库
测试应该考虑什么?以及如何进行
数据仓库
的测试?
一、
数据仓库
(DataWarehouse)是一个面向主题、集成、非易失的数据存储,用于支持企业决策和分析。
打了鸡血的点狗
·
2023-08-28 22:03
测试工程师面试常见面试题
数据仓库
数据挖掘
人工智能
BI产品未来的发展趋势由我们共同决定
项目周期长BI项目往往在ETL处理和
数据仓库
建模、性能优化等方面耗
思迈特Smartbi
·
2023-08-28 18:52
数据分析
浅谈数据治理
当然,本文也会涉及一部分技术相关的描述,所以能够对数据基础平台,
数据仓库
,数据应用等有所了解,会更加好
愤怒的谜团
·
2023-08-28 16:49
利于搭建国内网站的免费CDN加速github和npm方式
记录下常用的免费cdn,以下链接可直接访问我部署的数据,那么根据这个格式可替换为你对应的
数据仓库
格式。建议有回源选回源。
木子欢儿
·
2023-08-28 13:42
github
npm
前端
node.js
【进阶篇】找个饭店,聊聊数据分析架构
燕飞出稿,必属精品~作者简介:燕飞,Kyligence大数据老司机,拥有超过15年的大数据/
数据仓库
领域从业经验,对大数据/
数据仓库
的建设规划、架构设计、技术体系、方法论及主流厂商的产品和解决方案,均有深入的研究和实践
Kyligence
·
2023-08-28 11:08
数仓--------简单了解
是一位爱分享的博主,有兴趣的小可爱可以来互讨个人主页::小小页面gitee页面:秦大大一个爱分享的小博主欢迎小可爱们前来借鉴数仓**作者前言**什么是数仓数仓分层数仓类型数仓规范数据走向什么是数仓数仓,又称为
数据仓库
老秦包你会
·
2023-08-28 08:38
数据仓库
数据仓库
环境下的超市进销存系统结构
传统的进销存系统建立的以单一数据库为中心的数据组织模式,已经无法满足决策分析对数据库系统的要求,而
数据仓库
技术的出现和发展,为上述问题的解决提供了强有力的工具和手段。
a66889999
·
2023-08-28 05:31
数据仓库
基于
数据仓库
和多维分析技术的决策支持系统
1)降低库存成本通过
数据仓库
系统,将成千上万种货物的销售数据和库存数据集中起来,通过数据分析,对知识进行分类,可以知道库存中一段时间内,没有收到订单的货物,很少收到订单的货物和库存中周转很快的货物。
a66889999
·
2023-08-28 05:31
数据仓库
大数据
进销存系统的数据建模
1.1需求分析对于
数据仓库
系统而言,决策者最为迫切的需求在于更加准确的掌握超市的经营状况及进、销、存情况,主要包括:①进货趋势;②销售市场波动趋势;③企业存货情况。
a66889999
·
2023-08-28 05:28
大数据
SQL Server软件安装包分享(附安装教程)
它被设计用于存储、管理和查询数据,被广泛应用于企业级应用、
数据仓库
和电子商务等场景。
Roc-xb
·
2023-08-28 00:56
软件资源
SQL
Server
Hive原理剖析
一、简介Hive是建立在Hadoop上的
数据仓库
框架,提供大数据平台批处理计算能力,能够对结构化/半结构化数据进行批量分析汇总完成数据计算。
Hello.Reader
·
2023-08-27 18:33
hive
hadoop
数据仓库
下一代存储解决方案:湖仓一体
文章首发地址湖仓一体是将数据湖和
数据仓库
相结合的一种数据架构,它可以同时满足大数据存储和传统
数据仓库
的需求。
Walter Sun
·
2023-08-27 17:12
大数据
大数据
数据湖
湖仓一体
hive数据调优
hive作为
数据仓库
工具,可以查看HDFS结构化文件内容,使用sql进行数据加工处理。
稻草人_d41b
·
2023-08-27 16:59
数据库系统
数据库系统数据库系统三级模式两级映像数据库设计真题数据模型概念数据模型逻辑数据模型在案例分析中也有考察数据库系统选择题考点:三级模式两级映像数据库设计(6个阶段)E-R模型关系模型关系代数函数依赖键与约束范式模式分解并发控制封锁协议分布式数据库
数据仓库
反规范化技术大数据
计算机CV民工
·
2023-08-27 15:26
架构师选择题课件
数据库
数据中台产品经理初探五
2019年还剩两个半月,接触数据中台的概念将近一年,做数据中台PD有十个半月,感谢组织对我的信任,感谢领导同事对我的放心,让一个不懂数据库、一个不会
数据仓库
知识、一个不懂行业知识的人放手一搏。
Frank舟
·
2023-08-27 12:31
使用Flink将大数据写入AnalyticDB MySQL
AnalyticDBMySQL是一个高性能、高可用性的关系型数据库,适用于大数据分析和
数据仓库
场景。本文将介绍如何使用Flink将大数据写入AnalyticDBMySQL,并提供相应的源代码示例。
2301_78484069
·
2023-08-27 11:59
大数据
大数据
flink
mysql
达梦数据库物化视图介绍
物化视图可以用于数据复制(DataReplication),也可用于
数据仓库
缓存结果集以此来提升复杂查询的性能。1
weixin_42942173
·
2023-08-27 02:57
数据库
Oracle sqlldr命令
SQL*LOADER是大型
数据仓库
选择使用的加载方法,因为它提供了最快速的途径(DIRECT,PARALLEL)。
ooooooooooooooxiaosu
·
2023-08-27 02:47
数仓建模综述
目前业界使用最多的模型是RalphKimball在《
数据仓库
工具》中提出的维度
精品资料学习库
·
2023-08-26 23:31
网络
Doris Summit 2023 正式启航,议题征集 & 合作伙伴招募火热进行中
作为专注于实时分析的开源实时
数据仓库
ApacheDoris,从开源至今已走过6个年头,这些年里ApacheDoris一直稳步向前,并在这两年取得了令人瞩目的进展。
SelectDB技术团队
·
2023-08-26 19:08
apache
大数据
数据库
数据分析
一键实现 Oracle 数据整库同步至 Apache Doris
在实时
数据仓库
建设或迁移的过程中,用户必须考虑如何高效便捷将关系数据库数据同步到实时数仓中来,ApacheDoris用户也面临这样的挑战。
SelectDB技术团队
·
2023-08-26 19:37
oracle
apache
数据库
大数据
doris
三张图讲清楚大数据基础设施Hadoop、Lambda、kappa架构
关于数据的处理技术,包含数据库、数据集市、
数据仓库
、数据湖、数据中台,每次数据处理的演进都代表着业务需求变化的趋势、技术的演进。除了数据处理方式在演进之外,数据处理的基础措施也在不断的演进
AI课工场
·
2023-08-26 19:58
数据库与
数据仓库
的本质区别是什么
整理自知乎:https://www.zhihu.com/question/20623931逻辑层面/概念层面数据库和
数据仓库
其实是一样的或者及其相似的,都是通过某个数据库软件,基于某种数据模型来组织、管理数据
这个该叫什么呢
·
2023-08-26 16:10
采集项目和数仓项目的关系
1.介绍采集项目和数仓项目采集和数仓是企业数据管理平台的2个核心功能模块,相对独立,所以可以独立开发区别功能采集:数据的采集和传输数仓:数据的存储流程数据库->数据采集->
数据仓库
->可视化界面2.
数据仓库
什么是数仓
叫我莫言鸭
·
2023-08-26 04:00
oracle
数据库
Hive面试自学版
Hive是由Facebook开源,基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
叫我莫言鸭
·
2023-08-26 04:30
大数据
hive
hive
面试
hadoop
工作中遇到的坑(六)
MVVMModel:数据模型以及Repository
数据仓库
(用于获取和组合来自网络,本地数据)View:界面ViewModel:内部会有一个LiveData,将Model的数据放到LiveData中,
云呆呆
·
2023-08-26 04:15
Informatica 9.1 开发实战应用-孙专-专题视频课程
数据仓库
的建设目标,是利用组织里的数据,更加有效地辅助决策过程,而这一过程的核心是数据处理,数据处理阶段离不开ETL过程的实现。
大厂数据专家
·
2023-08-25 22:46
视频教程
视频
学习
informatica
实例
数据
直播|深入解析 StarRocks 存算分离—云原生湖仓 Meetup#2
StarRocks3.0正式开启极速统一的湖仓新范式,借助云原生存算分离构架、极速数据湖分析、物化视图等重量级特性实现湖仓架构升级,兼具
数据仓库
查询高性能与数据湖低成本可扩展的优势,让用户更简单地实现极速统一的湖仓分析
StarRocks_labs
·
2023-08-25 19:15
活动
云原生
数据库
数据仓库
BigQuery
什么是BigQueryBigQuery是一种无服务器的
数据仓库
,它让开发者可以使用Google的架构来运行SQL语句对超级大的数据库进行操作。
追梦人在路上不断追寻
·
2023-08-25 17:24
40分钟500GB!轻松将MySQL数据同步到Doris
而Doris作为一款专为大数据分析设计的分布式
数据仓库
,具有高性能、可扩展的特点,其优异的数据处理能力也在行业内广受关注。01为什么需要把MySQL同步到Doris?
·
2023-08-25 15:22
大数据-Hive
第1章Hive入门1.1什么是Hive1)Hive简介Hive是由Facebook开源,基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
ONLYYD
·
2023-08-25 13:27
hive
大数据
【
数据仓库
】Linux、CentOS源码安装Superset
Linux、CentOS源码安装Superset步骤,遇到的各种问题。报错问题:Linux下pip版本问题Youareusingpipversion8.1.2,howeverversion22.2.2isavailable.解决办法:安装python3的pipyuminstallpython3-pip再升级pip3install--upgradepip
wenchun001
·
2023-08-25 12:09
软件研发
数据仓库
Docker
linux
运维
服务器
上一页
25
26
27
28
29
30
31
32
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他