E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
新手必知的数据分析名词(建议收藏)
什么是商业智能BI:BusinessIntelegence,商业智能,基于
数据仓库
,经过数据挖掘后,得到了商业价值的过程。
无精疯
·
2022-04-27 07:49
搞数据的你,可以弄清系统报表模块和专业BI的区别吗?
(图1-2)二是基于
数据仓库
的专业BI用数。经过B
Leo.yuan
·
2022-04-27 07:10
职场
报表开发
数据分析
IT产品论
职场发展
数据分析
可视化
711-MySQL基础篇
OLTP(联机事务处理)是传统的关系型数据库的主要应用,用于基本的、日常的事务处理,例如银行的交易记录;而OLAP(联机分析处理)是
数据仓库
系统的主要应用,支持复杂的分析操作,侧重决策支持,并且提供了直观易懂的查询结果
-林泽宇
·
2022-04-26 20:17
MySQL数据库
mysql
数据仓库
数据库
MySQL高可用配置
MySQL中存储着Hive所有表格的元数据信息,一旦MySQL中的数据丢失或损坏,会对整个
数据仓库
系统造成不可挽回的损失,为避免这种情况的发生,我们可以选择每天对元数据进行备份,进而实现MySQLHA(
·
2022-04-26 10:34
mysql
3000字干货带你入门
数据仓库
,跑通复杂业务场景数据建模全流程
个推资深大数据研发工程师为大家深入浅出地介绍了
数据仓库
的前世今生以及数据建模的常用方法。
·
2022-04-25 19:23
数据挖掘python
从3个层次分析商业智能的价值在哪里?
商业智能,即BI也称为商务智能,指利用数据挖掘、现代
数据仓库
等技术进行数据分析。一般认为,商业智能是指将企业已有的数据转换成
·
2022-04-25 17:09
数据分析数据挖掘数据可视化
数据中台【数据中台是“经营数据”,数据中台是为了提供服务而生(也有说是为了前台而生)】【
数据仓库
是“管理数据”】
数据中台的本质就是“
数据仓库
+数据服务中间件”。
u013250861
·
2022-04-25 07:39
大数据
数据中台
浅谈Hive
让我们开门见山来一句介绍,Hive是建立在HadoopHDFS上的
数据仓库
基础架构。
yinglish_
·
2022-04-24 15:53
浅涉大数据技术
Hive
Hadoop
大数据
【大数据开发】Hive——Hive的概念、架构、安装Hive三种模式、Hive的基本操作day43
Hive是什么Hive是一个基于hadoop的
数据仓库
。可以通过类SQL的方式来对数据进行读、写等管理的功能。Hive是基于hadoop的一个
数据仓库
工具,可以将结构化的
这个妹妹我见过
·
2022-04-24 15:13
#
Hive
大数据
hadoop
hive
数据仓库
--数据分层(ETL、ODS、DW、APP、DIM)
参考:https://www.cnblogs.com/itboys/p/10592871.html
数据仓库
--通用的
数据仓库
分层方法
数据仓库
各层说明:一、数据加载层:ETL(Extract-Transform-Load
lcl_bigdata
·
2022-04-24 14:28
数据仓库
数据仓库
Hive(总)看完这篇,别说你不会Hive!
2.2HiveJDBC访问2.2.1启动hiveserver2服务2.2.2连接hiveserver2服务2.2.3注意2.3Hive常用交互命令2.4Hive其他命令操作2.5Hive常见属性配置2.5.1
数据仓库
位置配置
子清.
·
2022-04-24 14:22
#
Hive
Hadoop
hive
大数据
Hive系列(一)—— Hive初识及基础介绍
为什么使用HiveHive特点Hive体系结构Hive和RDBMS的对比Hive基础Hive数据存储Hive基本操作Hive简介什么是HiveHive是由Facebook实现并开源的、基于Hadoop的一个
数据仓库
工具
BigData_Hubert
·
2022-04-24 14:52
大数据
hive
hive原理
hive操作
10 个使用 SQL 的 AWS 服务
服务描述SQL支持用例RDSPostgres、MySQL等满的中小型网络应用极光无服务器数据库满的无服务器应用红移
数据仓库
满的OLAP、PB级数据、分析动态数据库NoSQL数据库一些-PartiSQL电
·
2022-04-24 09:54
sql安全
BigData大数据开发路线详细完整结构知识体系学习大全(2022)
开发平台(一)Hadoop大数据处理框架1、MapReduce磁盘离线分布式计算框架2、HDFS分布式文件系统3、HBase实时数据存储管理系统4、Zookeeper集群分布式协调系统5、Hive离线
数据仓库
REMLILI
·
2022-04-22 20:46
虚拟化
分布式
大数据
bigdata
hadoop
spark
linux
学习笔记60 数据分析常见面试题 4-20
活动结束之后,
数据仓库
同学会帮忙将埋点数据接入数据库中,利用sql或者python对数据进行处理,建立活动漏斗数据,进而分
败者食尘_40a0
·
2022-04-22 19:28
为什么BI对企业这么重要?
通常,该过程涉及将您的公司数据收集到
数据仓库
或其他存储库中,并使用专门设计的工具来分析数据。
·
2022-04-22 18:38
数据分析数据挖掘数据可视化
阿里云日志服务sls的典型应用场景
日志服务的典型应用场景包括:数据采集与消费、数据清洗与流计算(ETL/StreamProcessing)、
数据仓库
对接(DataWarehouse)、日志实时查询与分析。
·
2022-04-22 17:30
阿里云
推荐 :完备的 AI 学习路线,最详细的资源整理!
【与数据同行】已开通综合、
数据仓库
、数据分析、产品经理、数据治理及机器学习六大专业群,加微信号frank61822701为好友后入群。
傅一平
·
2022-04-21 07:50
数据挖掘
编程语言
人工智能
xhtml
知识图谱
数据仓库
(8)数仓事实表和维度表技术
所谓的事实表和维度表技术,指的就是如何和构造一张事实表和维度表,是的事实表和维度表,可以涵盖现在目前的需要和方便后续下游数据应用的开发。事实表,就是一个事实的集合。事实来自业务过程的度量,基本上以数量值表示。事实表行对应一个事实,一个事实对应一个物理可以观察的事件,例如,再零售事件中,销售数量与总
张飞的猪
·
2022-04-20 21:00
数据仓库
(7)数仓规范设计
规范设计在这里取《大数据之路:阿里巴巴大数据实践》中的定义,这里记录一下本人对这一块自己的理解。规范定义指以维度建模作为理论基础构建总线矩阵,划分和定义数据域、业务过程、维度、度量原子指标、修饰类型、修饰词、时间周期、派生指标。所谓的规范的定义,简单理解,如果把数据当作货物,那就是货物的分
张飞的猪
·
2022-04-20 12:00
数仓建模—建模工具PdMan
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
·
2022-04-19 10:46
数据仓库hadoop大数据
数据仓库
指北
一、Q&AQ1:什么是维度?维就可以相当于角度,当说按什么维度看数据就是你想从什么角度分析数据。Q2:什么是次留用户,7日留存?次留用户指的是统计当天的用户仍是昨天的那个用户,7日留存用户指的就是统计当天活跃的用户是在7天前同样活跃的用户。Q3:为什么做数据分层设计?大数据处理时,作为数据开发者,我们总会进行各种表关联或者表依赖,如果没有很好地规划表依赖,则会造成我们的数据表关系混乱复杂,不方便我
大数据阶梯之路
·
2022-04-18 21:22
大数据内容摘要
1、
数据仓库
始于20世纪80年代中期。由
数据仓库
之父W.HInmon在1991年出版的“BuildingtheDataWarehouse”(《
数据仓库
》)一书中提出了准确而又广泛被大家接受的定义。
·
2022-04-18 10:38
大数据
大数据Hadoop之——
数据仓库
Hive
一、概述Hive是基于Hadoop的一个
数据仓库
(DataAarehouse,简称,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。是用于存储、分析、报告的数据系统。
大数据老司机
·
2022-04-17 09:24
数学建模清风第一次直播:传染病模型和微分方程拟合
数学建模清风第一次直播:传染病模型和微分方程拟合数学建模清风第二次直播:模拟退火算法数学建模清风第三次直播:excel在数学建模中的应用目录课程记录截图传染病微分方程模型2019新型冠状病毒疫情时间序列
数据仓库
课程记录截图艾滋传染模型
山167
·
2022-04-17 07:31
数学建模与实验
数学建模
SI
SIS
SIR
SEIR
数仓建模—建模工具PdMan(CHINER)介绍
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派
·
2022-04-16 12:00
数仓建模—建模工具PdMan(CHINER)介绍
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派
·
2022-04-16 12:00
华为云大数据:企业的“寻宝鼠”
华为云FusionInisght智能数据湖为企业客户提供完整的大数据云服务产品组合,有单集群最大支持5W节点的云原生数据湖MRS服务和全球最大的商用部署的云
数据仓库
DWS服务,MRS和DWS既可以灵活按需部署
·
2022-04-16 09:17
程序员
数仓建模—指标体系
数据仓库
系列文章数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系一文搞懂ETL和ELT的区别数据湖知识点技术选型|OLAP大数据技术哪家强?
大数据技术派
·
2022-04-14 15:45
数据仓库
(6)数仓分层设计
目前主流的
数据仓库
分层大多为四层,也有五层的架构,这里介绍基本的四层架构。分别为数据贴源层(ods)、
数据仓库
明细层(dw)、多维明细层(dws)和数据集市层(dm)。
张飞的猪
·
2022-04-14 12:00
当 dbt 遇见 TiDB丨高效的数据转换工具让数据分析更简单
dbt主要功能在于转换数据库或
数据仓库
中的数据,在E(Extract)、L(Load)、T(Transf
·
2022-04-13 10:46
tidb
杂记 什么是数据湖?
与
数据仓库
中的分层存储不同,数据湖是在平面架构中保存大量数据的集中位置。数据湖可以存储来自关系数据库、半结构化数据、非结构化数据和二进制数据的结构化数据,并且
bashendixie5
·
2022-04-13 07:02
fun
数据湖
大数据
MapReduce
Hadoop
数据仓库
《Hadoop构建
数据仓库
实践》摘录
数据仓库
模型1模型设计思考流程2Hive使用时注意的情况Hive创建表时文件格式的选择Hive事务的局限性数据抽取4种CDC变化数据拉取方式时间戳:添加更新时间等字段触发器:当执行insert,update
我爱肉肉
·
2022-04-12 09:10
大数据简单摘要篇
大数据
数据仓库
维度建模
5、
数据仓库
抽象ODS/DW/DWS
我们可以知道所谓的大数据实际上就是系统在运行过程中产生的各种日志的汇总集合,那么为了更进一步使数据能高复用,产生了
数据仓库
的概念,本章就是笔者结合自己的工作经历梳理
数据仓库
中的抽象层级,以便于加深对大数据架构的理解
朗如行玉山_5b30
·
2022-04-11 15:26
第9章
数据仓库
Hive
数据仓库
数据仓库
的定义专业定义英文名称为DataWarehouse,可简写为DW。是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。它是单个数据存储,出于分析性报告和决策支持目的而创建。
wyz191
·
2022-04-11 04:26
大数据技术原理与应用
-
概念
存储
处理
分析与应用
大数据
Hive
云原生数仓九大误区,你知道多少?
纵观数据库的发展历史,传统关系型数据库最早期主要针对交易处理为主要应用设计的,对于
数据仓库
分析统计类的应用,也都运行在这类数据库上,比如传统的Oracle、DB2等。
·
2022-04-08 15:02
数据库mysql
一站式元数据治理平台——Datahub入门宝典
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派
·
2022-04-08 14:04
大数据
编程语言
数据库
python
人工智能
SpringCloud Function SpEL注入漏洞分析及环境搭建
SpringCloudFunction介绍SpringCloud是一套分布式系统的解决方案,常见的还有阿里巴巴的Dubbo,Fass(FunctionAsAService)的底层实现就是函数式编程,在视频转码、音视频转换、
数据仓库
·
2022-04-08 09:54
数据挖掘——第一章:概述
文章目录1.数据分析与数据挖掘1.1数据分析1.2数据挖掘1.3知识发现(KDD)的过程1.4数据分析与数据挖掘的区别1.5数据分析与数据挖掘的联系2.分析与挖掘的数据类型2.1数据库数据2.2
数据仓库
数据
平什么阿
·
2022-04-06 07:45
数据挖掘
数据挖掘
数据分析
big
data
数据挖掘算法
数据挖掘是从存放在数据集中的大量数据挖掘出有趣知识的过程.(2)数据挖掘,又称为数据库中知识发现(KnowledgeDiscoveryinDatabases)或知识发现,它是一个从大量数据中抽取挖掘出未知的,有价值的模式或规律等知识的非平凡过程,它与
数据仓库
有着密切的联系
jisuanbbs
·
2022-04-06 07:54
算法
数据挖掘
数据仓库
测试
数据库
网络
数据挖掘与
数据仓库
——分类
分类算法什么是分类一些常见的概念:训练集(Trainingdata):用于训练模型(的参数,如神经网络的各层权重和偏置,线性回归分析的系数);验证集(Validationdata):用于调整超参数(Hyper-Parameters,如神经网络的宽度和深度、学习率等);测试集(Testdata):用于评价模型本身的有效性(准确率等)训练误差(Trainingerror):分类器在训练集上的误差。泛化
布丁的自我修养
·
2022-04-06 07:21
数据挖掘与数据仓库
数据挖掘
分类
基于Apache Hudi和Debezium构建CDC入湖管道
有关详细信息请参阅原始RFC1.背景当想要对来自事务数据库(如Postgres或MySQL)的数据执行分析时,通常需要通过称为更改数据捕获CDC的过程将此数据引入
数据仓库
或数据湖等OLAP系统。
leesf
·
2022-04-05 20:00
数据安全技术落地经验浅谈和分类分级实施
www.itxiaoshen.com数字化经济下企业做数据化转型进行数据开发利用往往是先将原来分散各部门各业务系统的数据(业务数据如互联网用户数据、企业内部数据如人力资源系统、研发生产数据如核心技术或专利等)集中到大
数据仓库
中
IT小神
·
2022-04-03 07:20
数据安全
数据治理
人工智能
1024程序员节
数据仓库
python
七夕特辑 | 前沿技术合集
中台专题中台到底在共享什么关于
数据仓库
、数据湖、数据平台和数据中台的概念和区别数据中台:民生银行的实践滴滴业务中台构建实践,首次曝光金融「中台」十宗罪什么是中台——来自阿
互联互通社区
·
2022-04-02 07:41
数据库
人工智能
大数据
数据分析
物联网
数仓建模—ID Mapping
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据
·
2022-04-01 17:23
数据仓库
数据仓库
—数据集成
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
·
2022-04-01 17:21
数据仓库
最新大厂数据湖面试题,知识点总结
本文是一篇数据湖的面试题,同时也是数据湖知识点的讲解目录:一、什么是数据湖二、数据湖的发展三、数据湖有哪些优势四、数据湖应该具备哪些能力五、数据湖的实现遇到了哪些问题六、数据湖与
数据仓库
的区别七、为什么要做数据湖
·
2022-03-31 21:21
数据湖数据仓库
最新大厂数据湖面试题,知识点总结
本文是一篇数据湖的面试题,同时也是数据湖知识点的讲解目录:一、什么是数据湖二、数据湖的发展三、数据湖有哪些优势四、数据湖应该具备哪些能力五、数据湖的实现遇到了哪些问题六、数据湖与
数据仓库
的区别七、为什么要做数据湖
五分钟学大数据
·
2022-03-31 21:00
数据仓库
(5)数仓Kimball与Inmon架构的对比
数据仓库
主要有四种架构,Kimball的DW/BI架构、独立数据集市架构、辐射状企业信息工厂Inmon架构、混合Inmon与Kimball架构。不过不管是那种架构,基本上都会使用到维度建模。
张飞的猪
·
2022-03-31 14:00
为什么成功的数据网格实施需要数据虚拟化?
组织多年来的一贯做法是将所有数据整合到单一位置,例如
数据仓库
或近年来兴起的数据湖。
·
2022-03-30 15:52
服务器
上一页
73
74
75
76
77
78
79
80
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他