E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
第八章 综合案例—构建DVD租赁商店
数据仓库
加载用户维度表与商店维度表1使用Kettle工具,创建一个转换load_dim_customer,并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线,具体如图所示。2双击“表输入”控件,进入“表输入”配置界面,单击【新建】按钮,配置数据库连接,配置完成后单击【确认】按钮。MySQL数据库连接的配置,如图所示。在SQL框中编写用于获取字段customer_la
qq_52035534
·
2022-11-27 21:09
数据仓库
第八章 综合案例——构建DVD租赁商店
数据仓库
一、加载日期数据至日期维度表通过Kettle工具加载日期数据至dim_date日期维度表。1.打开Kettle工具,创建转换使用Kettle工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线,具体如图所示。2.配置生成记录控件在“限制”处添加生成的日期,默认为10,这里改为3650,即生成10年的日期(10*3
七安☆
·
2022-11-27 21:37
数据仓库
第八章 综合案例--构建DVD租赁商店
数据仓库
一、加载日期数据至日期维度表通过Kettle工具加载日期数据至dim_date日期维度表。1.打开Kettle工具,创建转换使用Kettle工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线,具体如图所示。2.配置生成记录控件双击“生成记录”控件,进入“生成记录”配置界面。在“限制”处添加生成的日期,默认为10
txhy_
·
2022-11-27 21:04
数据仓库
2020年安徽省大数据网络赛与现场赛hive习题
年安徽省大数据比赛hive习题(现场赛)前言主要记录hive习题一、2020年安徽省大数据比赛hive习题(网络赛)第三部分:大数据分析(20分)疫情期间各类政府媒体及社交网站,均发布了相关疫情每日统计数据,下面基于
数据仓库
工具
★づ炪
·
2022-11-27 18:19
hive
sql
智能推荐系统
AlternatingLeastSquare)词频-逆文本频率TF-IDF(termfrequency–inversedocumentfrequency)ETL是将业务系统的数据经过抽取、清洗转换之后加载到
数据仓库
的过程
hxxjxw
·
2022-11-27 18:11
智能推荐
大数据
机器学习
智能推荐
大数据
机器学习
纵横20年,我所经历的数据开放演化史 by 傅一平
现在数据开放成了数据治理的热点,但数据开放是没法一步到位的,每个企业都要基于实际需要走出自己的路,下面就讲讲我所经历的数据开放演化史,整个过程长达近20年,大致经历了五个阶段:(1)
数据仓库
时期-应用开放模式
傅一平
·
2022-11-27 15:44
数据仓库
大数据
数据挖掘
数据库
人工智能
关于数仓建设及数据治理的超全概括
1、用空间换时间,通过大量的预处理来提升应用系统的用户体验(效率),因此
数据仓库
会存在大量冗余的数据;不分层的话,如果源业务系统的业务规则发生变化将会影响整个数据清洗过程,工作量巨大。
浊酒南街
·
2022-11-27 14:12
数仓建设
数据仓库
数据挖掘
大数据
数据仓库
系列文章一:浅谈数仓设计
数仓设计指对
数据仓库
的各项组成进行规划,在正式建设数仓之前形成指导性建设方案。数仓设计主要分为两部分:
数据仓库
同操作型业务系统的数据接口设计和数仓自身建设设计。
feijinz
·
2022-11-27 14:41
Data
Warehouse
数据仓库
数仓建模 项目_
数据仓库
知识与实战——电信运营商数仓建模
原标题:
数据仓库
知识与实战——电信运营商数仓建模作者:网舟科技——王超什么是
数据仓库
数据仓库
是为企业提供聚合,存储,投递,以及提供决策支持能提,
数据仓库
包含广泛数据并按照主题进行存储并且是在
数据仓库
流程过程中的一个部分
weixin_39865204
·
2022-11-27 14:41
数仓建模
项目
数据仓库
工具箱:维度建模权威指南3
数据仓库
工具箱:维度建模权威指南3零售业务维度模型设计的4步选择业务过程声明粒度确定维度(列名带有key后缀)确定事实零售业务案例研究可加事实不可加事实维度表设计细节日期维度(还有当天时间维度:time-of-day
if_watermelon
·
2022-11-27 14:41
读书笔记
读书笔记
大数据
维度建模
数仓:维度建模
1.背景
数据仓库
的核心是展现层和提供优质的服务。ETL及其规范、分层等所做的一切都是为了一个更清晰易用的展现层。
//承续缘_纪录片
·
2022-11-27 14:40
数据仓库
数据仓库
数仓建模—元数据管理
元数据管理元数据在
数据仓库
中远比操作型环境中更加重要,因为
数据仓库
是一个不断迭代升级并且数据量也是远远大于操作型数据库的,所以我们需要元数据进行更好的监控和管理。
不二人生
·
2022-11-27 14:10
#
数仓建模
数据仓库
数据治理
数仓建模
元数据
数据治理系列:数仓建模之数仓主题与主题域
背景:
数据仓库
之父BillInmon将
数据仓库
描述为一个面向主题的、集成的、稳定的、反应历史变化的数据集合,用于支持管理者的决策过程。
Alex_81D
·
2022-11-27 14:39
数据治理
数据仓库
数据仓库
笔记
理论
数据仓库
1988年,IB提出信息仓库。1991年比尔.恩门出版《Buildingthedatawarehouse》,标志
数据仓库
概念确立。凭借着这本书,BillInmon被称为
数据仓库
之父。
rainbowcheng
·
2022-11-27 11:28
数据库
读后感
设计模式
hadoop
hive
数据仓库
2022亚马逊云科技re:Invent全球大会即将来袭
发布AmazonDynamoDB,掀开了云原生数据库十年创新的序幕;发布业界首个云原生
数据仓库
AmazonRedshift,实现并发扩展与稳定的查询性能,从此
果粒不加橙
·
2022-11-27 07:57
科技
【
数据仓库
】
什么是
数据仓库
?
数据仓库
,英文名称DataWarehose。简称DW或DWH。
数据仓库
,是为企业所有级别的决策制定的过程,提供所有类型数据支持的战略集合。
超重的胖子
·
2022-11-27 06:08
大数据
数据仓库
数据库
数据挖掘
《数据清洗》第八章 综合案例--构建DVD租赁商店
数据仓库
sakila数据库--->数据清洗--->构建
数据仓库
1.案例概述1.1案例背景介绍对于在线DVD租赁商店的决策者来说,他们需要从不同的商业角度观察数据,如从时间、电影、演员、用户等角度观察数据,并进行相关的分析得出决策
夜空霓虹
·
2022-11-27 06:27
数据仓库和ETL
数据仓库
数据库
database
etl构建
数据仓库
五步法_ETL构建
数据仓库
五步法
ETL构建企业级
数据仓库
五步法在
数据仓库
构建中,ETL贯穿于项目始终,它是整个
数据仓库
的生命线,包括了从数据清洗,整合,到转换,加载等的各个过程,如果说
数据仓库
是一座大厦,那么ETL就是大厦的根基,ETL
李棠辉
·
2022-11-27 06:25
etl构建数据仓库五步法
第8章综合案例——构建DVD租聘商店
数据仓库
一.学习目标了解数据库sakila中的数据表理解
数据仓库
sakila_dw的架构设计熟悉DVD租赁商店的业务流程掌握构建DVD租赁商店
数据仓库
的具体实现二.案例介绍概要:sakila样本数据库是MySQL
m0_63747104
·
2022-11-27 05:20
数据仓库
数据库
etl
ETL第八章实践项目——构建DVD租赁商店
数据仓库
(sakila样本数据库)
本章,我们将综合运用前面几章的知识,对数据库sakila中的数据进行清洗操作,从而构建一个DVD租赁商店
数据仓库
系统,即实现定期从源数据库sakila中抽取增量数据,转换成符合DVD租赁业务的数据,最后加载到目标
数据仓库
中
小李吃不饱—
·
2022-11-27 05:12
ETL
etl
数据仓库
数据库
项目需求及架构设计
:flume,flume采用的source、channel、sink以及flume代码的设计业务数据采集平台搭建将mysql中的业务数据导入到hive数仓中使用什么工具如:sqoop的安装、配置、使用
数据仓库
的维度建模数仓建
一马什么梅一
·
2022-11-26 13:10
学习记录
数据仓库
hive
大数据
数据仓库
基础知识
一、
数据仓库
是什么引用百度百科:
数据仓库
,英文名称为DataWarehouse,可简写为DW或DWH。
数据仓库
,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
huobumingbai1234
·
2022-11-26 13:35
数据仓库
数据仓库
维度建模
星形模型
数据仓库
基础
文章目录1
数据仓库
1.1
数据仓库
为何而来1.2
数据仓库
主要特征1.2.1面向主题1.2.2集成性1.2.3非易失性1.2.4时变性1.3
数据仓库
、数据库、数据集市1.3.1OLTP1.3.2OLAP1.3.3OLTP
火玄大数据
·
2022-11-26 13:01
Hive
大数据
hive
数据仓库
大数据项目实战——基于某招聘网站进行数据采集及数据分析(五)
大数据项目实战第五章数据分析文章目录大数据项目实战学习目标一、设计Hive
数据仓库
1、事实表ods_jobdata_origin2、维度表t_salary_detail3、维度表t_company_detail4
一只笨猫猫
·
2022-11-26 09:33
大数据项目实战
big
data
数据分析
数据仓库
(超详细)大数据技术之Hive的实战
数据仓库
Hive的安装与使用JunLeon——gobigorgohome目录
数据仓库
Hive的安装与使用一、Hive的概述1、什么是Hive?
IT路上的军哥
·
2022-11-26 09:59
大数据学习之路
hadoop
big
data
hive
数据仓库
大数据学习——Day03(数仓实战案例分析)
数仓建模范式建模维度建模-星型建模-雪花模型数仓分层ODS(OperationDataStore)-->操作性数据DW(Datawarehouse)–>
数据仓库
DM(DataMart)–>数据集市数据转换过程
CoffreLv
·
2022-11-26 09:29
Python
一篇文章学会
数据仓库
!
一、什么是
数据仓库
?1.1
数据仓库
概述:
数据仓库
是决策支持系统(dss)和联机分析应用数据源的结构化数据环境。
数据仓库
致力于研究和解决从数据库中获取信息的问题。
Fofosy
·
2022-11-26 02:07
数据仓库
数据仓库
数据库
hive
大数据开发之
数据仓库
概念
数据仓库
:Datawarehouse数仓DW,用于存储,分析,报告的数据系统;目的是构建面向分析的集成化数据环境,分析结果为企业提供决策支持面向分析
数据仓库
本身不产生任务的数据,其数据来源于各个不同的外部系统
数据仓库
也不需要任务外部数据
C0oOder
·
2022-11-26 02:25
大数据之路
数据仓库
大数据
hadoop
大数据之
数据仓库
一,
数据仓库
简介1.1什么是
数据仓库
数据库(Database)是按照数据结构来组织、存储和管理数据的建立在计算机存储设备上的仓库。数据库是长期储存在计算机内、有组织的、可共享的数据集合。
Javatomcat12138
·
2022-11-26 02:12
数据仓库
大数据
数据库
数据仓库
系列9- 大数据分析
文章目录一.大数据概览1.1扩展的RDBMS结构1.2MapReduce/Hadoop结构1.3大数据结构比较二.推荐的应用于大数据的最佳实践2.1面向大数据管理的最佳实践2.2面向大数据结构的最佳实践2.3应用于大数据的数据建模最佳实践2.4大数据的数据治理最佳实践参考:一.大数据概览 什么是大数据?所谓的“大”实际上并不是大数据的最有趣的特征。大数据是结构化、半结构化、非结构化以及众多不同格
只是甲
·
2022-11-25 22:18
大数据和数据仓库
#
数据仓库
数据分析
数据仓库
数据挖掘
大数据分析
数据挖掘期末知识复习2022/11/22
目录考试重点复习重点复习建议考试重点概念题:五个题,一个4分,主要就是考的名词概念,给大家划个重点:机器学习、网络爬虫、信息熵、数据挖掘、
数据仓库
的概念。
m0_56697607
·
2022-11-25 21:58
数据挖掘课程
数据挖掘
人工智能
数据库选型
长期存档和
数据仓库
解决方案,例如AWSGlacier。那么如何为您的项目选择合适的数据库呢?二、专有的还是开源的让我们从一个平凡的
wespten
·
2022-11-25 19:24
关系型数据库
非关系型数据库
文件存储
分布式网络存储
数据库
数据仓库
框架指导
目录1,
数据仓库
DW2,数据库vs
数据仓库
3,
数据仓库
历史3.1,历史4,维度建模4.1,概念4.2,建模模型4.3,结构4.4,事实表4.5,维度表4.6,高级事实表技术4.7,高级维度表技术4.8,
yyuu002
·
2022-11-25 16:02
数据仓库
数据库
big
data
数据仓库
构建流程
常用的构建
数据仓库
的流程【数据调研】数据调研重点要做两项工作,分别是业务调研和需求分析。这两项工作做的是否充分,直接影响着
数据仓库
的质量。1、业务调研业务调研的主要目标是熟悉业务流程、熟悉业务数据。
万里长江横渡
·
2022-11-25 16:31
数据仓库
浅析
数据仓库
与OLAP
文章向导
数据仓库
1.什么是
数据仓库
?
尼克不可
·
2022-11-25 16:58
数据仓库
大数据
数据库
1024程序员节
数据仓库
的特性
目录1、面向主题2、集成性3、不可更新4、时变性1、面向主题
数据仓库
中的数据是按照一定的主题域进行组织的。
古杜且偲
·
2022-11-25 16:28
数据仓库
数据仓库
数据仓库
基本知识
目录1.
数据仓库
1.1
数据仓库
起源1.1.1联机事务处理系统(On-LineTransactionProcessing,OLTP)1.1.2联机分析处理系统(On-LineAnalyticalProcessing
huazhongjinguancheng
·
2022-11-25 16:55
DB
数据仓库
数据分析
数据仓库
重点
1.什么是
数据仓库
?
数据仓库
是决策支持系统(dss)和联机分析应用数据源的结构化数据环境。
数据仓库
研究和解决从数据库中获取信息的问题。
柠栀✬
·
2022-11-25 15:16
数据仓库
数据挖掘
数据库
大数据面试题_
数据仓库
篇
文章目录大数据面试题_
数据仓库
篇离线
数据仓库
1、为什么要对
数据仓库
分层?2、数据建模用的哪些模型?3、你感觉数仓建设中最重要的是什么大数据面试题_
数据仓库
篇离线
数据仓库
1、为什么要对
数据仓库
分层?
Jerry Hong
·
2022-11-24 23:19
大数据面试
数据仓库
数据仓库
大数据
数据库
大数据开发:
数据仓库
分层设计
而大数据存储,涉及到
数据仓库
技术。今天的大数据开发学习分享,我们主要来分享一下大
数据仓库
分层技术的相关知识点。
加米谷大数据张老师
·
2022-11-24 23:17
大数据
数据仓库
大数据
大数据_数据中台_数据分层
操作数据层DIM:维度数据层DWD:明细数据层DWS:汇总数据层ADS:数据应用层CDM:公共数据层数据层级调用原则分层总览ODS:操作数据层ODS(OperateDataStore),ODS层数据是
数据仓库
的第一层数据
Happy编程
·
2022-11-24 23:40
大数据
大数据
数据仓库
数据库
机器学习——
数据仓库
与数据挖掘——期末复习(简答题)
1、试述真正例率(TPR)、假正例率(FPR)与查准率(P)、查全率(R)之间的联系。查全率:真实正例被预测为正例的比例真正例率:真实正例被预测为正例的比例查全率与真正例率是相等的。查准率:预测为正例的实例中真实正例的比例假正例率:真实反例被预测为正例的比例两者并没有直接的数值关系。2、简述K-最近邻方法的主要思想。同声相应,同气相求从最近的K个邻居(样本)中,选择出现次数最多的类别作为判定类别。
小步调LLY
·
2022-11-24 18:30
复习
数据挖掘
机器学习
数据仓库
回顾10年发展,2022亚马逊云科技re:Invent全球大会即将来袭
发布AmazonDynamoDB,掀开了云原生数据库十年创新的序幕;发布业界首个云原生
数据仓库
AmazonRedshift,实现并发扩展与稳定的查询性能,从此
静观事态
·
2022-11-24 12:41
经验分享
大数据分析-考试复习
Exam-整理1.选择题设计分布式
数据仓库
Hive的数据表时,为取样更高效,一般可以对表中的连续字段进行分桶操作。客户端首次查询HBase数据库时,首先需要从-ROOT-表开始查找。
SpriCoder
·
2022-11-24 11:22
大数据分析笔记
hadoop
数据分析
mapreduce
大数据学习必须掌握的五大核心技术有哪些?
大数据技术的体系庞大且复杂,基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、
数据仓库
、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。
阿q宣你
·
2022-11-23 22:25
大数据
大数据技术
大数据学习
元数据管理-解决方案调研二:元数据管理解决方案——Saas/内部解决方案(3)
在Netflix,
数据仓库
由存储在AmazonS3(通过Hive)、Druid、Elasticsearch、Redshift、Snowflake和MySql中的大量数据集组成。
mylife512
·
2022-11-23 21:15
大数据
大数据
什么是BI工具?怎么选择好用的BI工具
当时将商业智能定义为一类由
数据仓库
(或数据集市)、查询报表、数据分析、数据挖掘、数据备份和恢复等部分组成的、以帮助企业决策为目的技术及其应
明月说数据
·
2022-11-23 18:24
大数据
解读商业智能BI,
数据仓库
中的元数据
之前的文章讨论过数据分析、数据治理、
数据仓库
等等,即使是非业内人员从字面意思,也是可以了解一二的,但是,很多人对于元数据可能就比较陌生了。那么,今天我们就来聊一聊元数据管理。
派可数据BI可视化
·
2022-11-23 18:53
商业智能
数字化转型
数据可视化
数据仓库
数据挖掘
数据库
什么是BI?
自我总结:商业智能(BusinessIntelligence,简称:BI),又称商业智慧或商务智能,指用现代
数据仓库
技术、线上分析处理技术、数据挖掘和数据展现技术进行数据分析以实现商业价值。
帅成一匹马
·
2022-11-23 17:17
数据仓库
什么是BI
当时将商业智能定义为一类由
数据仓库
(或数据集市)、查询报表、数据分析、数据挖掘、数据备份和恢复等部分组成的、以帮助企业决策为目的技术及其应用。而这些数据可能来自企业的CRM、SCM等业务系统。
sl18106931837
·
2022-11-23 17:37
数据仓库
数据挖掘
人工智能
上一页
62
63
64
65
66
67
68
69
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他