E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
关于
数据仓库
那点事,一文捋清
数据仓库
事实上,很多人在看到
数据仓库
的第一眼,就把
数据仓库
当成了数据库。当然这也很正常,毕竟从名字来看这两者确实区别不大,真正区分两者的是定位、作用等更深一层的东西。
派可数据BI可视化
·
2023-06-19 21:06
数字化转型
数据仓库
商业智能
数据仓库
数据挖掘
数据库
数据分析
商业智能BI
全网最详细的商业智能BI知识讲解
一、商业智能BI商业智能BI的定义其实很简单,简单概括一下就是,商业智能是一套完整的由
数据仓库
、查询报表、数据分析等组成的数据类技术解决方案,能够实现业务流程和业务数据的规范化、流程化、标准化,
派可数据BI可视化
·
2023-06-19 21:04
商业智能
数据可视化
数据仓库
信息可视化
数据分析
数据挖掘
数字化时代,如何规范化搭建
数据仓库
?
数据仓库
作为商业智能BI系统中的一部分,已经成长为了企业信息化建设中必不可少的重要支撑,在可见的未来,
数据仓库
还会随着信息化、数字化技术、理念、应用的落地,继续成长。
派可数据BI可视化
·
2023-06-19 21:01
数据仓库
商业智能
数据可视化
数据仓库
数据挖掘
数据库
商业智能BI
信息可视化
如何管控数据?
那么在
数据仓库
建设的时候如何进行数据管控呢?我经历过的项目主要采用以下管控手段:数据质量、数据生命周期、数据标准、元数据四方面的管控。
jane9872
·
2023-06-19 20:44
大数据
数据分析
数据挖掘
数据智仓功能介绍(一)
数据仓库
的目的是构建面向分析的集成化数据环境,为企业提供基于数据的决策支持(DecisionSupport)。
·
2023-06-19 19:30
前端git编辑器github
《大数据分析-Hive》
hadoop)生态系统非常重要的一个工具,它提供了一种类SQL的语言,可以查询存储在Hadoop分布式文件系统(HDFS)中的数据,也可以查询Hadoop数据库(Hbase)中的数据,可以说通过Hive这个
数据仓库
工具大大降低了开发难度
数据分析杂杂念
·
2023-06-19 18:53
数据仓库
的分层架构与演进
简介:分层架构很容易在各种书籍和文档中去理解,但是把建模方法和分层架构放在一起就会出现很多困惑了。接下来,我会从数据研发与建模的角度,演进一下分层架构的设计原因与层次的意义。分层架构很容易在各种书籍和文档中去理解,但是把建模方法和分层架构放在一起就会出现很多困惑了。一、分层的演进之所以会有分层架构,最主要的原因还是要把复杂冗长的数据吹流程分拆成一些有明确目的意义的层次,这样复杂就被拆解为一些相对简
·
2023-06-19 17:23
数据仓库架构
数据仓库
介绍与实时数仓案例
1.
数据仓库
简介
数据仓库
是一个面向主题的(SubjectOriented)、集成的(Integrate)、相对稳定的(Non-Volatile)、反映历史变化(TimeVariant)的数据集合,用于支持管理决策
·
2023-06-19 17:16
大数据架构数据仓库消息队列
如果你也想做实时数仓…
数据仓库
也是公司数据发展到一定规模后必然会提供的一种基础服务,
数据仓库
的建设也是“数据智能”中必不可少的一环。
·
2023-06-19 17:16
MySQL调优
对于架构调优,在系统设计时首先需要充分考虑业务的实际情况,是否可以把不适合数据库做的事情放到
数据仓库
、搜索引擎或者缓存中去做;然后考虑写的并发量有多大,是否需要采用分布式;最后考虑读的压力是否很大,是否需要读写分离
zy_crazy_code
·
2023-06-19 10:27
数据库
mysql
大数据治理.数据储存技术
hive是基于Hadoop的一个
数据仓库
工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
908486905
·
2023-06-19 09:06
大数据治理
大数据
数据库
数据仓库
大数据周会-本周学习内容总结018
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。数据分析是指通过收集、清洗、整理和解释数据,以提取有价值的信息和洞察力的过程
upward337
·
2023-06-19 03:48
大数据
大数据
大数据入门-大数据技术概述(一)
包含存储系统,数据库,
数据仓库
,资源调度,查询引擎,实时框架等。下面以我目前所了解到的一些技术做简要介绍。目前之介绍简单概念。
猫腻余腥
·
2023-06-18 21:41
BigData_Study
大数据
hadoop
mapreduce
漫谈
数据仓库
之拉链表(原理、设计以及在Hive中的实现)
如何设计一张拉链表2.在Hive中实现拉链表(1)拉链表实现方式一(2)拉链表实现方式二四、补充1.拉链表和流水表2.查询性能五、拉链表回滚1.具体操作方案2.备用方案:六、总结一、前言 本文将会谈一谈在
数据仓库
中拉链表相关的内容
小强签名设计
·
2023-06-18 21:27
大数据面试
hive
数据仓库
hadoop
数仓的分层理论
一、简介2021-4-2511:04:16
数据仓库
分层是
数据仓库
设计中非常重要的一个环节,一个好的分层设计可以极大地简化
数据仓库
的操作,提升使用体验。
经年藏殊
·
2023-06-18 11:31
#
数仓理论
数据仓库
数据库
数据挖掘
大数据分析基础——维度模型
大数据分析基础——维度模型1基本概念维度模型的概念出自于
数据仓库
领域,是
数据仓库
建设中的一种数据建模方法。维度模型主要由事实表和维度表这两个基本要素构成。
大海之狂
·
2023-06-18 11:29
大数据开发
数据仓库
技术与Hive入门
文章目录
数据仓库
基本概念场景案例主要特征主流开发语言-SQL数仓开发语言概述SQL语言介绍结构化数据SQL语法分类ApacheHive入门ApacheHive安装部署元数据HiveSQL语言
数据仓库
基本概念
数据仓库
北山啦
·
2023-06-18 08:28
数据仓库
hive
大数据
数据仓库
ER建模
一、概述:
数据仓库
之父BillInmon提出的
数据仓库
建模方法是自上而下的,从全企业的高度设计一个符合3NF的数据模型,用实体联系(EntityRelationship,ER)模型描述企业的业务。
RainTicking
·
2023-06-18 06:01
数据仓库
数据仓库
数据库
Hadoop 4:Hive
数据仓库
概念
数据仓库
(英语:DataWarehouse,简称数仓、DW),是一个用于存储、分析、报告的数据系统。
ZhaoXiangmoStu
·
2023-06-18 01:57
Linux
hive
hadoop
数据仓库
携手共赢 HashData亮相华为合作伙伴大会
HashData作为国内云原生
数据仓库
的代表企业,也是华为重要的生态合作伙伴。在本次大会上,HashData展示了云数仓领域最新前沿技术以及联合华为打造的多云环境下云原生数仓存储解决方案。
·
2023-06-17 21:48
数据库postgresql
大数据/数仓面试灵魂30问(转)
1.什么是
数据仓库
?如何构建
数据仓库
?(如果这个问题回答的好,后面很多问题都不需要再问)2.如何建设数据中台?
Eva菠萝
·
2023-06-17 19:21
大数据开发:数仓建模常见数据模型
在
数据仓库
搭建的过程当中,根据需求合理地选择数据模型,是非常关键的一个环节。对于数仓建模,很多人说不就是建表吗,哪有那么复杂,事实上,这是非常错误的思想。
成都加米谷大数据
·
2023-06-17 19:45
大数据总监应具备的能力
作为大数据总监,应具备以下能力:技术能力:熟练掌握大数据技术,包括数据管理、
数据仓库
、数据挖掘、数据可视化、机器学习等方面的知识。
有语忆语
·
2023-06-17 15:25
大数据
数据仓库
数据挖掘
Hive学习
一、概述由Facebook开源用于解决海量结构化日志的数据统计工具Hive是建立在Hadoop上的
数据仓库
基础构架。
明月清风,良宵美酒
·
2023-06-17 11:36
大数据技术栈
hive
什么是Azure Data Lake
azure已经有有数据库,
数据仓库
,数据工厂,现
阿特
·
2023-06-17 11:04
Azure
SQL
Server
【数据湖架构】Azure 数据湖分析(Azure Data Lake Analytics )概述
通常,传统
数据仓库
存储来自各种数据源的数据,将数据转换为单一格式并进行分析以做出决策。开发人员使用可能需要更长时间进行数据检索的复杂查询。组织正在增加他们在云基础架构中的足迹。
超级架构师
·
2023-06-17 11:33
架构
azure
大数据
数据仓库
microsoft
CLickHouse 入门理论学习
自己理解:轻量级大
数据仓库
场景读多于写:适用于大量数据的分析、查询。优势不在于写和更新。大宽表,读大量行但是少量列,结果集较小:相对于行存储字段很多,但是查询返回几个字段的情况数据批量写入,且数据
java资深菜鸟
·
2023-06-17 11:14
DATAS
数据库
【数据管理架构】什么是 OLAP?
作为
数据仓库
实施的核心组件,OLAP为商业智能(BI)和决策支持应用程序提供快速、灵活的多维数据分析。什么是OLAP?
超级架构师
·
2023-06-17 10:50
数据仓库
数据挖掘
数据分析
大数据
数据库
走好数据中台最后一公里,为什么说数据服务API是数据中台的标配?
一、课程介绍数据服务API作为数据统一服务平台建设的最上层,能够将
数据仓库
数据以服务化、接口化的方式提供给数据使用方,屏蔽底层数据存储、计算的诸多细节,简化和加强数据的使用。
袋鼠云数栈
·
2023-06-17 07:57
知乎用户画像与实时数仓的架构与实践
关键词:
数据仓库
,ApacheDori
jane9872
·
2023-06-17 04:16
数据库
数据仓库
大数据离线阶段
目录数分分布式ApacheZooKeeperApacheHadoopShell命令选项
数据仓库
Hive数分数据分析的目的是把隐藏在数据背后的信息集中和提炼出来,总结出所研究对象的内在规律,帮助管理者进行有效的判断和决策
海星?海欣!
·
2023-06-17 01:33
#
大数据-数据仓库
大数据
数据中台的开源解决方案
文章目录一、数据中台建设方法论1.1OneData1.2OneService二、数据中台,常见的4种选型方案三、数据中台的开源解决方案3.1数据存储3.2数据开发3.3查询引擎3.4数据采集工具3.5
数据仓库
大数据指北
·
2023-06-16 18:18
#
---
大数据
开源
数据库
hbase
偶数科技与思迈特软件达成产品兼容性互认证
近日,北京偶数科技有限公司和思迈特有限公司针对双方产品的功能、性能和兼容性共同进行了严格测试,偶数「新一代云原生
数据仓库
OushuDB」与「思迈特商业智能与数据分析软件Smartbi系列产品」共同稳定运行
·
2023-06-16 17:48
oushudb-hawq数据库
基于开放共享的自主研发—MaxCompute 持续增强生态与开放性建设
简介:MaxCompute是阿里巴巴自研的云原生
数据仓库
,同时也兼容大部分大数据生态系统。一个平台无法实现所有功能和解决所有问题,MaxCompute需持续增强生态与开放性建设,方能走得更远。
·
2023-06-16 15:50
后端
dsdgen命令 的用法,定义,命令参数详解,以及使用案例
当下随着数据量不断增长,
数据仓库
的性能和扩展性成为了关键的课题。为了解决这一问题,需要对
数据仓库
进行性能测试。
鲸落ж
·
2023-06-16 13:51
doris
数据库
大数据
数据挖掘
hadoop、hive、hbase的关系
后者可以独立运行,前者可以选择性使用,也可以不使用hive通俗的说是一个
数据仓库
,仓库中的数据是被hdfs管理的数据文件,它支持类似sql语句的功能,你可以通过该语句完成分布式环境下的计算功能,hive
mengml_smile
·
2023-06-16 12:49
bigdata
hadoop
大数据
hive
大数据学习记录(hadoop hive flume azkaban sqoop)
hadoop对海量数据进行分布式处理2.核心组件:HDFS(分布式文件系统)、YARN(运算资源调度系统)、MAPREDUCE(分布式运算编程框架)3.HIVE:基于大数据技术(文件系统+运算框架)的SQL
数据仓库
工具
左上晨
·
2023-06-16 10:58
大数据
hadoop
hive
flume
azkaban
【Hadoop技术篇】hadoop的使用
博主介绍博主介绍:大家好,我是淼淼_喵,很高兴认识大家~✨主攻领域:【大数据开发】【
数据仓库
】【ETL】【数据分析】【面试分析】点赞➕评论➕收藏==养成习惯(一键三连)欢迎关注一起学习一起讨论⭐️一起进步欢迎评论作者水平有限
chad__chang
·
2023-06-16 03:53
Hadoop
hadoop
大数据
数据仓库
Hive_MBY_GJF
hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。
炳烛之明科技
·
2023-06-15 20:51
Java大数据
数据仓库
(07)数仓规范设计
规范设计在这里取《大数据之路:阿里巴巴大数据实践》中的定义,这里记录一下本人对这一块自己的理解。规范定义指以维度建模作为理论基础构建总线矩阵,划分和定义数据域、业务过程、维度、度量原子指标、修饰类型、修饰词、时间周期、派生指标。所谓的规范的定义,简单理解,如果把数据当作货物,那就是货物的分类,以及对应相关的属性,比如生产日期,某个原料的含量等,我们可以把相近或者相同货物,按照一定的规律,放在一起,
·
2023-06-15 15:36
数据仓库
(06)数仓分层设计
目前主流的
数据仓库
分层大多为四层,也有五层的架构,这里介绍基本的四层架构。分别为数据贴源层(ods)、
数据仓库
明细层(dw)、多维明细层(dws)和数据集市层(dm)。
·
2023-06-15 15:35
数据仓库
(05)数仓Kimball与Inmon架构的对比
数据仓库
主要有四种架构,Kimball的DW/BI架构、独立数据集市架构、辐射状企业信息工厂Inmon架构、混合Inmon与Kimball架构。不过不管是那种架构,基本上都会使用到维度建模。
·
2023-06-15 15:04
Hive面试题十道
答案:Hive是一个基于Hadoop的
数据仓库
工具,它提供了类似SQL的查询语言(HiveQL)来进行大规模数据的分析和处理。
MIDSUMMER_yy
·
2023-06-15 13:31
hive
大数据
数据湖仓一体化架构:探究新一代数据处理的可能性
在这种背景下,数据湖和
数据仓库
这两种不同的架构模式各自展现出其独特的优势。而数据湖仓一体化架构,是对这两种模式优势的综合,为企业提供了一个全新的数据管理方案。
gongxsh00
·
2023-06-15 12:39
架构设计
架构
数据仓库
数据湖
Hive概念、架构、原理详细介绍
问题导读1.什么是
数据仓库
?2.传统
数据仓库
面临怎样的挑战?3.hive是什么?4.hive系统构架是怎样的?5.hive的工作原理是怎样的?6.hiveHA基本原理是什么?7.Impala是什么?
000X000
·
2023-06-15 11:20
HIVE
大数据
hive
整理一下HIVE概念
首先要明白,HIVE是HADOOP生态系统中充当
数据仓库
的角色。它本质上是是一个SQL解释器,就是使得我们能用SQL查询语言去查询HDFS上的数据。而这个功能,容易让我们误认为它就是传统的数据库。
天涯__
·
2023-06-15 11:49
SPARK
hive
Hive概念
1、Hive1.1理解:基于Hadoop的一个
数据仓库
工具,将结构化的数据文件映射成一张表,提供类SQL查询功能。
小迷糊>_<
·
2023-06-15 11:18
大数据
hive
hadoop
mapreduce
Hive 概念与安装
Hive概念与安装1.概述与特点Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
wtzhm
·
2023-06-15 11:18
hive
HIVE
HIVE概述
hive安装
Hive核心概念
Hive核心概念转自:https://blog.csdn.net/weixin_41756009/article/details/824615251.什么是hive基于Hadoop的一个
数据仓库
工具:hive
一个打码的小年轻
·
2023-06-15 11:48
原理
hive
原理
概念
大数据技术之Hive:Hive基本概念
一、什么是HiveHive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
浊酒南街
·
2023-06-15 11:48
大数据系列二
上一页
34
35
36
37
38
39
40
41
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他