E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
一文概览
数据仓库
知识和面试
1、什么是
数据仓库
?权威定义:
数据仓库
是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。
mm_ren
·
2023-02-20 07:21
数据仓库
大数据
人工智能
java
数据库
数据仓库
建设之数据规范(一)--sql编码规范
1.编码原则(1)功能完善:结果输出正确。(2)执行效率最优:代码优化的方法。(3)可读性强:复杂的处理加上注解,代码结构整齐。(4)统一缩紧单位:4个空格为一个缩紧单位。(5)尽量不使用select*,需要明确指定列名。(6)对应的括号使用在同一列上对齐。2.编码规范(1)增加头部注释,模版如下:--************************************************
福尔摩斯之无以伦比
·
2023-02-19 20:31
大数据
数据仓库
数据规范
编码规范
sql
数据仓库
ETL技术探究
ETL是指把数据从数据源装人
数据仓库
的过程,即数据的抽取(Extract)、转换(Transform)和装载(Load)过程。
孙志攀
·
2023-02-19 20:01
Mysql数据库
搭建数据仓库
数据仓库
etl
数据挖掘
etl构建
数据仓库
五步法_关于ETL和数据建模
推荐阅读书目:《
数据仓库
工具箱维度建模权威指南》(第3版)提取码:cvhb一、什么是ETLETL是数据抽取(Extract)、转换(Transform)、加载(Load)的简写,它是将OLTP系统中的数据经过抽取
weixin_39999781
·
2023-02-19 20:01
etl构建数据仓库五步法
听闻Teradata退出中国,我想起了我经历过的一个数仓项目
昨天,Teradata撤出中国,我想起了我在20年前做的
数据仓库
项目。想当年Teradata是
数据仓库
的代名词啊,就如同现在搜索东西好多人说百度一下一样。可惜我没有用过Teradata。
david_lv
·
2023-02-19 20:28
数据仓库
数据库
数据仓库
实战
目录1、最佳实战1.1表的分类1.2ETL策略1.3任务调度2、项目实战2.1项目概述2.2数据描述2.3架构设计2.4环境搭建2.5项目开发1、最佳实战1.1表的分类维度建模中表的类型:事实表和维度表事实表又可以分为:事务事实表、周期快照事实表、累积快照事实表事实表:一般指现实存在的业务对象,比如用户、商品、商家、销售员等维度表:对应一些业务状态,代码的解释表,也称为码表通常使用维度对事实表中的
海星?海欣!
·
2023-02-19 20:58
#
大数据-数据仓库
数据仓库
数据挖掘
数据库
数据仓库
含义,架构,ETL以及
数据仓库
的建模
数据仓库
一.为什么学习
数据仓库
(DB)二.什么是
数据仓库
1.面向主题2.集成3.非易失4.随时间变化三.
数据仓库
和数据库的区别1.数据库和
数据仓库
2.OLTP和OLAP的区别四.
数据仓库
的架构1.Inmon
May--J--Oldhu
·
2023-02-19 20:57
数据仓库
数据库
数据分析
大数据
MySQL入门篇-MySQL高级窗口函数简介
备注:测试数据库版本为MySQL8.0这个blog我们来聊聊MySQL高级窗口函数窗口函数在复杂查询以及
数据仓库
中应用得比较频繁与sql打交道比较多的技术人员都需要掌握如需要scott用户下建表及录入数据语句
顶尖高手养成计划
·
2023-02-19 20:57
MySQL小白到小工
mysql
数据库
sql
ETL和数据建模
什么是ETLETL是数据抽取(Extract)、转换(Transform)、加载(Load)的简写,它是将OLTP系统中的数据经过抽取,并将不同数据源的数据进行转换、整合,得出一致性的数据,然后加载到
数据仓库
中
jane9872
·
2023-02-19 20:57
数据仓库
数据库
数据挖掘
【基础概念】什么是数据库、
数据仓库
、数据市集
前言:本文重点理清三个概念:数据库、
数据仓库
、数据市集。数据库:1.数据库是什么?数据库是存储数据的一个库,库通常有多种数据表,表则是由字段(列名)和记录(基本信息)组成。
Gaafung峰
·
2023-02-19 00:25
hive sql 基本语法@2019-02-12
Hive是基于Hadoop构建的一套
数据仓库
分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据,可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能,可以将
dataHunter
·
2023-02-18 17:31
025 中国工业互联网安全态势报告2018【文件】
此外,未来将有更多企业建成安全
数据仓库
,利用机器学习、深度学习等人工智能
得奕
·
2023-02-18 17:53
维度建模技术概述
每个业务过程对应企业
数据仓库
总线矩阵的一行。声明粒度声明粒度是维度设计的重要步骤。粒度用于确定某
冰菓_
·
2023-02-18 15:15
数据仓库
系列8-ETL系统设计与开发过程和任务
一.ETL过程概览 本章将按照ETL系统规划与实现的流程组织讨论。其中隐含地讨论上一章所讨论的34个ETL子系统,大致按照获取数据、清洗与一致性、用于展现的发布、ETL环境的管理等分类。 在开始谈论针对维度模型的ETL系统设计前,您应当已完成了逻辑设计、勾画完成了高层结构规划井勾画出有关源到目标的所有数据的映射。 ETL系统设计过程至关重要。收集所有的相关信息,包括处理从操作型数据源中获取的
只是甲
·
2023-02-18 15:22
好玩的大数据之17:Hive安装(Hive-3.1.2)
一、简介hive是基于Hadoop的一个
数据仓库
工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
张文斌_2020
·
2023-02-18 08:54
Hive
数据仓库
和传统数据库的区别
数据仓库
是相对稳定的,当中的数据不会发生频繁的变化,甚至不发生变化。很多情况下就只读了。当中存储了大量的历史数据。不断增加。数据库只存储某一时刻的状态。
扣篮的左手
·
2023-02-18 02:05
你能分清BI和大数据吗?
为了将数据转化为知识,需要利用
数据仓库
、联机分析处理(OLAP)工具和数据挖掘等技术。商业智能的关键是从许多来自不同的企业运
丨程序之道丨
·
2023-02-18 00:03
数据库、
数据仓库
和数据湖
数据库Database(Oracle,Mysql,PostgreSQL)主要用于事务处理,
数据仓库
Datawarehouse(AmazonRedshift,Hive)主要用于数据分析。为什么使用数仓?
三半俊秀
·
2023-02-17 23:01
怎样成功实现大数据项目架构?
本文作者ArmelNene是大数据公司ETAPIXGlobal创始人,在软件开发和数据架构领域有多年经验,熟悉Java、SOA、BI、企业搜索和
数据仓库
,同时也是开源贡献者,曾在诺基亚、Tata等多家公司工作
丨程序之道丨
·
2023-02-17 17:26
惟客数据解读:数据湖、
数据仓库
、数据中台究竟区别在哪儿?
数字化转型浪潮卷起各种新老概念满天飞,数据湖、
数据仓库
、数据中台轮番在朋友圈刷屏,有人说“数据中台算个啥,数据湖才是趋势”,有人说“再见了数据湖、
数据仓库
,数据中台已成气候”……企业还没推开数字化大门,
惟客数据
·
2023-02-17 16:13
数仓巨头在中国落幕,Teradata 退出国内市场!
一石激起千层浪,Teradata之于
数据仓库
、大数据,好比Ora
CSDN资讯
·
2023-02-17 10:49
数据库
数据仓库
数据仓库
系列之维度建模二
它一般是行多列少,占据
数据仓库
大约90%的空间。在维度模型中也有表示多对多关系的事实表,其他都是维度表。1、事实表粒度事实
小黎子数据分析
·
2023-02-17 06:48
2019-08-26
商业智能又称商业智慧或商务智能,在过去指用
数据仓库
技术、联机分析处理技术、数据挖掘和数据可视化技术
专业摸鱼
·
2023-02-17 06:46
Hive详细教案
一.什么是hivehive是基于Hadoop的一个[
数据仓库
]工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。
zianL
·
2023-02-16 23:41
用计算路由的方法优化BI后台性能
问题的提出BI系统的常见结构是:前端是BI应用,负责多维分析的用户操作和结果呈现;后台是数据库/
数据仓库
,负责数据计算和存储。前端和后台之间用SQL作为接口。
weixin_34245169
·
2023-02-16 23:30
数据库
java
前端
ViewUI
可路由计算引擎实现前置数据库
很多大机构都会有个中央
数据仓库
负责向应用提供数据服务。随着业务的发展,中央
数据仓库
的负载在持续增加。一方面,数仓是前端应用的数据后台,而前端应用不断增多,用户访问的并发数也不断增长。
石臻臻的杂货铺
·
2023-02-16 23:56
SPL
数据库
数据仓库
玖章算术CEO叶正盛:程序员必须掌握的数据库原理
数据库一直是计算机核心基础软件,经历了40年的发展,从关系型数据库,到
数据仓库
·
2023-02-16 20:38
文盘Rust -- rust 连接云上数仓 starwift
Starwfit是京东云自主研发的新一代云原生
数据仓库
,通过存算分离降低了存储成本,同时兼具性能和扩展弹性。其写入和查询速度可达到传统
数据仓库
的数倍,为用户提供实时数据分析能力。
·
2023-02-07 11:38
浅谈
数据仓库
(DW & BI)(六)
前一段时间简要描述了
数据仓库
的发展和一些数仓建模的方法论?
小杨_1858
·
2023-02-06 17:14
数据中台测试实践分享
FT数据中台的交付内容有很多,此文主要讨论:
数据仓库
构建、标签与指标开发。某知名车企数据中台的数据分层(如下图)共分为:数据应用指标的可视化展示、进行目标人员人群圈选、客户画像展示等。数据服务层(A
李春辉
·
2023-02-06 13:28
数据集市与
数据仓库
概念
数据集市是一种微型的
数据仓库
,它通常有更少的数据,更少的主题区域,以及更少的历史数据,因此是部门级的,一般只能为某个局部范围内的管理人员服务。
IsComing乜邪
·
2023-02-06 12:13
数据仓库
是什么?
对于大数据的学习者来讲,深入理解
数据仓库
是很重要的。本文将对
数据仓库
的基本概念进行讲解,大家可以在看完
数据仓库
的概念、主要特征以及分层架构之后,真正理解
数据仓库
是什么。
我想去吃ya
·
2023-02-06 12:14
大数据
hadoop
数据库
数据仓库
云计算
数据仓库
与数据挖掘 1
基础知识篇什么是
数据仓库
数据仓库
诞生原因?
林晚慕
·
2023-02-06 12:13
数据仓库与数据挖掘
数据挖掘
数据库
big
data
数据仓库
数据挖掘和
数据仓库
之间的区别
什么是
数据仓库
?
数据仓库
是一种用于收集和管理来自不同来源的数据以提供有意义的业务见解的技术。它是技术和组件的混合体,允许战略性地使用数据。
南北极之间
·
2023-02-06 11:12
大数据
云计算
数据仓库
数据库
数据挖掘和数据仓库
数据挖掘之
数据仓库
详述
数据仓库
和数据挖掘的OLAP技术构造
数据仓库
涉及数据清理和数据集成,可以看作数据挖掘的一个重要预处理步骤。
miner_zhu
·
2023-02-06 11:42
数据挖掘
数据挖掘
数据仓库
及数据挖掘
建立
数据仓库
的意义在于使用这些数据,而最典型的应用是数据挖掘。一、
数据仓库
概述
数据仓库
是一个面向主题、集成、相对稳定、反映历史变化的数据集合。
左直拳
·
2023-02-06 11:11
数据库
学习笔记
数据仓库
数据挖掘
数据集市
联邦数据库
企业的数据存储、处理与分析之道
SelectDBCloud飞轮科技核心云产品介绍来自SelectDB的云产品负责人姜国强总结了目前
数据仓库
发展的需求与演进方向,他认为:“目前,我们已经来到了以云数仓为中心的现代数据
阿里云云栖号
·
2023-02-06 10:33
云栖号技术分享
云计算
阿里云
隐私计算FATE-核心概念与单机部署
一、说明Fate是一个工业级联邦学习框架,所谓联邦学习指的就是可以联合多方的数据,共同构建一个模型;与传统数据使用方式相比,它不需要聚合各方数据搭建
数据仓库
,联邦学习在联合计算建模的过程中,多方机构之间的数据是不会进行共享的
zlt2000
·
2023-02-06 02:28
ETL大数据测试介绍
数据仓库
测试VS数据库测试这里为什么会提到
数据仓库
呢?原因是ta与ETL有着千丝万缕的关系。比如,我们要盖一栋楼,那这个建筑图就是数据仓
测试帮日记
·
2023-02-06 01:49
Hive编程指南:基础知识
一、Hive基础Hive最适合于
数据仓库
应用程序,使用该应用程序进行相关的静态数据分析,不需要快速响应给出结果,而且数据本身不会频繁变化Hive不是一个完整的数据库,hive不支持记录级别的更新、插入或者删除操作
luogps9
·
2023-02-05 19:02
数仓架构的演变
一、概要
数据仓库
概念是Inmon于1990年提出并给出了完整的建设方法。随着互联网时代来临,数据量暴增,开始使用大数据工具来替代经典数仓中的传统工具。
斯文遮阳
·
2023-02-05 14:44
Greenplum 数据库 之 表空间、数据库、模式及用户 的 创建与授权
由于刚接触Greenplum数据库,并且在网上相关的资料也不太多,都是这里找找那里找找,甚至跑官网去了英文文档了,然后慢慢拼接而成的,公司要用Greenplum做
数据仓库
,因此需要去搭建数仓的模型和用户的关联关系
小飞牛_666
·
2023-02-05 13:54
数据挖掘考试习题汇总
第一章1、
数据仓库
就是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合。
幸福花落泪
·
2023-02-05 11:03
课程学习
数据挖掘
大数据
数据仓库
【Hive】hql语法转MR任务
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能.说白了,hive就是MapReduce客户端,将用户编写的HQL语法转换成MR程序进行执行。
CLOcean
·
2023-02-05 08:17
最全企业级数仓建设迭代版
一什么是
数据仓库
1.1
数据仓库
概念
数据仓库
,英文名称为DataWarehouse,可简写为DW或DWH。
数据仓库
,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
dovert
·
2023-02-04 22:07
数据仓库
数据仓库
数据库
数据挖掘
数据仓库
结构
也即数据清洗(3)Load:数据加载就是把经过第二步处理后的数据,存放到
数据仓库
三层架构ODS层:(Opera
文字抒意
·
2023-02-04 18:05
大数据学习系列:Hadoop3.0苦命学习(五)
大数据学习系列:Hadoop3.0苦命学习(四)大数据学习系列:Hadoop3.0苦命学习(五)大数据学习系列:Hadoop3.0苦命学习(六)大数据学习系列:Hadoop3.0苦命学习(七)本节主要学习
数据仓库
咖喱东东
·
2023-02-04 18:15
大数据栏目
hadoop
hive
大数据
数据仓库
《从0开始学大数据》的启示
从Hive-MR看
数据仓库
的局限与
N-Paradigm
·
2023-02-04 17:50
方法论
数据科学家之路
大数据
big
data
大数据
《大数据技术从零开始》自学知识库(2022年整理)
文章目录计算机组成原理操作系统数据结构与算法计算机网络Linux系统JavaScalaPythonMySQL分布式系统NettyHadoopHDFSMapReduceYarnZookeeperHiveSparkKafkaFlink
数据仓库
数据治理数据中台大数据相关的岗位近年来增长不少
DataChat.Club
·
2023-02-04 17:50
大数据
java
linux
《从0开始学大数据》之性能优化介绍
背景我们知道,现在最主流的大数据技术几乎都是开源的产品,不管是Hadoop这样的大数据存储与计算产品,还是Hive、SparkSQL这样的大
数据仓库
,又或者Storm、Flink这样的大数据流计算产品,
我叫CJJ
·
2023-02-04 17:50
大数据
极客时间学习
大数据
性能优化
上一页
51
52
53
54
55
56
57
58
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他