E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
数据挖掘(7.1)--
数据仓库
目录引言一、数据库1.简介2.数据库管理系统(DBMS)二、
数据仓库
数据仓库
特征
数据仓库
作用
数据仓库
和DBMS对比分离
数据仓库
和数据库引言
数据仓库
的历史可以追溯到20世纪60年代,当时计算机领域的主要工作是创建运行在主文件上的单个应用
码银
·
2023-06-12 09:36
数据挖掘
人工智能
数据挖掘
数据库
数据仓库
数据仓库
为什么要分层 ? 怎么分层?
1序说到
数据仓库
,大家应该都有一定的了解,越来越多的企业在做数字化转型,业务数据化,数据业务化,
数据仓库
是其中必不可少的一环.在数仓中有一个很基础、重要,但又很容易被忽略的内容,那就是
数据仓库
中的数据分层
塔城就是个弟弟
·
2023-06-12 01:24
数据仓库
数据建模
数据仓库
大数据
详解
数据仓库
和数据库的区别
一、
数据仓库
什么是
数据仓库
?
数据仓库
(DataWarehouse),可简写为DW或DWH,
数据仓库
,是为了企业所有级别的决策制定计划过程,提供所有类型数据类型的战略集合。
老歪不歪
·
2023-06-11 23:47
数据库
数据仓库
第三章 数据同步之大数据下
数据仓库
的同步方式
数据仓库
的特性是集成,把不同数据源、不同形式的数据整合在一起。
被爱的天青色
·
2023-06-11 13:06
数据仓库
-hive&hbase
应用场景Hive主要用户构建基于Hadoop平台的
数据仓库
,处理大数据量的离线处理工作;HBase适合用来大数据的实时查询、海量数据的存储、离散型数据的存储;
MFLW
·
2023-06-11 08:30
数据中台及
数据仓库
设计
数据中台建设深度好文文章目录1:数据中台介绍1.1:概述1.2:架构2:数据中台建设2.1:业务和数据资产调研2.2:数据架构设计2.2.1:技术选型2.2.2:
数据仓库
建设1:主题设计2:数仓建模3:
猿来如此dj
·
2023-06-11 07:23
hive专栏
数据仓库
数据库
数据挖掘
《CDA-LEVEL-II考试大纲》解读--PART2 数据模型管理
PART2数据模型管理【领会】数据和信息的概念;数据分类中的主数据、交易数据和元数据概念;数据库建模中概念、逻辑、物理模型之间的关系;数据库范式的概念、
数据仓库
和数据集市、ETL过程。
搞点學術的研究生
·
2023-06-11 07:27
数据分析
数据仓库
数据库
数据挖掘
database
etl
关于
数据仓库
APP的统计口径
有了一定的数据积累后大多数公司会选择把数据汇集起来建设一个企业级的
数据仓库
,本文对与数据仓
Iron慢
·
2023-06-11 06:39
大数据任务调度和数据同步组件初探
本文个人博客地址本文公众号地址背景数据从最原始的状态,可能是一个excel,一个文本,或者是来自业务数据库的数据,格式各种各样,落地到
数据仓库
、数据湖中,数据的同步过程是必不可少的图片来源传统的数据同步方式主要是基于定时任务的模式
xiaoliizi
·
2023-06-11 02:48
大数据
大数据
emr
商务智能-第二章
数据仓库
Lecture2-DataWarehouse1.从数据库到
数据仓库
1.1.事务处理应用中的数据库技术数据库技术的进步:关系数据模型的出现极大地促进了数据库技术的发展和联机事务处理(OLTP)技术的发展,
SpriCoder
·
2023-06-11 01:47
商务智能课程笔记
数据仓库
数据库
数据挖掘
简单说说
数据仓库
数据仓库
介绍
数据仓库
是集成的、面向主题的、反应历史的数据的集合。它需要具有高效查询、高质量的、可扩展的的特性。
数据仓库
是协助运营及管理人员及时做出策略调整的最有效的依据。
飞不高的老鸟
·
2023-06-10 10:10
Hive架构原理以及部署教程
◆了解Hive架构原理◆了解Hive和RDBMS的对比Hive架构原理Hive架构原理-知乎Hive是基于Hadoop的
数据仓库
工具,它提供了类SQL查询语言HQL(HiveQueryLanguage)
哈都婆
·
2023-06-10 09:30
hadoop搭建管理教程
hadoop
hive
大数据
Hadoop
数据仓库
的主要特征有哪些?
数据仓库
(英语:DataWarehouse,简称数仓、DW),是一个用于存储、分析、报告的数据系统。
传智教育
·
2023-06-10 08:51
数据仓库
hadoop
数据库
Greenplum开发基础
Greenplum开发基础1.Greenplum介绍Greenplum数据库是一种基于PostgreSQL开源技术的大规模并行处理(MPP)数据库服务器,其架构特别针对管理大规模分析型
数据仓库
以及商业智能工作负载而设计
qq_38414854
·
2023-06-10 06:10
postgresql
数据库
sql
Kylin
一、数仓回顾1.1核心概念
数据仓库
,OLAP和OLTP,维度和度量,事实表和维度表。星形模型和雪花模型。
爱过java
·
2023-06-10 05:22
kylin
数据仓库
数据挖掘
Sqoop
Sqoop概述Sqoop是基于Hadoop之上的数据传输工具,主要用于Hadoop在关系型数据库,
数据仓库
,NoSQL系统之间传递数据。
爱过java
·
2023-06-10 05:51
sqoop
hive基本概念
1.hive是一个基于hadoop之上的一个
数据仓库
。
栾还是恋
·
2023-06-10 04:36
hadoop
hive
大数据
大数据必备的技术栈有哪些?
Spark,Hadoop,
数据仓库
,Python,SQL,Mapreduce,Hbase等等大数据的方向的切入是全方位的,基础语言的学习只是很小的一个方面,编程落实到最后到编程思想,有了指导思想学习起来就能方便很多
我想去吃ya
·
2023-06-09 23:45
大数据
java
开发语言
数据分析
python
一篇文章搞懂
数据仓库
:
数据仓库
架构-Lambda和Kappa对比
在介绍Lambda和Kappa架构之前,我们先回顾一下
数据仓库
的发展历程:传送门-
数据仓库
发展历程写在前面咳,随着数据量的暴增和数据实时性要求越来越高,以及大数据技术的发展驱动企业不断升级迭代,
数据仓库
架构方面也在不断演进
张家的鱼摆摆
·
2023-06-09 21:32
lambda
数据仓库
揭秘新一代云数仓技术架构与最佳实践
背后的核心的原因在于,企业正在加速走向数字化、智能化,对数据的应用也提出了全新要求,特别是对数据的实时分析、实时部署需求更加的强烈,而云
数据仓库
为用户实现云原生、智能运维、弹性资源等业务需求也带来了很好的支撑
字节数据平台
·
2023-06-09 21:28
大数据
数据库
人工智能
云原生
ETL 的Talend 介绍和使用
ETL工具(抽取、转换和加载工具)是一种能够将不同的数据源集合在一起,清洗和转换数据,并将这些数据导入目标系统或
数据仓库
的软件工具。
老人笔记
·
2023-06-09 20:46
工具
etl
数据库
Talead
什么是Hive?为什么要用Hive?
Hive是建立在Hadoop上的
数据仓库
基础构架。对于有一定基础的大数据学习者来讲,Hive是必须掌握的核心技术。本文主要带大家来认识一下Hive,了解什么是Hive?为什么要用Hive?
我想去吃ya
·
2023-06-09 19:04
hive
hadoop
大数据
数据库
数据仓库
mysql到hive调度工具_Hive详解及实战_Zeus任务资源调度工具
该楼层疑似违规已被系统折叠隐藏此楼查看此楼Hive详解及实战课程出自学途无忧课程简介:课程由浅入深,介绍了Hive基本架构及环境部署,带领大家认识
数据仓库
Hive的优势及Hive具体使用。
长野君
·
2023-06-09 19:03
mysql到hive调度工具
大数据技术之Hive
第1章Hive入门1.1什么是Hive1)Hive简介Hive是由Facebook开源,基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
骚戴
·
2023-06-09 19:59
大数据
大数据
hive
Clickhouse系列之整合Hive数仓
ApacheHive
数据仓库
软件便于使用SQL读取、写入和管理驻留在分布式存储中的大型数据集。结构可以投射到已存储的数据上。提供了一个命令行工具和JDBC驱动程序,用于将用户连接到Hive。
小二上酒8
·
2023-06-09 19:22
hive
clickhouse
数据库
中间件
开发语言
女性要完成成长 独立和做最好自己是最佳姿态
幸福34岁了,从2004年入行BI数据分析、
数据仓库
领域计算机软件以来,已经工作了十多年了,是国内最早的一批从业者。由于BI处于计算机软件的金字塔顶端,对从业要求比较高,因此也让幸福比较心累。
幸福_我就是我
·
2023-06-09 18:52
SQLLDR简介 和 Oracle插入大量数据
SQL*LOADER是大型
数据仓库
选择使用的加载方法,因为它提供了最快速的途径(DIRECT,PARALLEL)。##二、参数###2.1语法
土豆煮石头
·
2023-06-09 15:00
clickhouse优化最佳实践
clickhouse在易企秀
数据仓库
项目中已投入使用两年,主要为内部用户提供快速查询和多维分析的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称OLAP领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
weixin_42993799
·
2023-06-09 15:12
clickhouse
大数据
clickhouse 查询优化_clickhouse优化最佳实践(持续更新...)
clickhouse在易企秀
数据仓库
项目中已投入使用两年,主要为内部用户提供快速查询和多维分析的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称OLAP领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
Gigiain
·
2023-06-09 15:11
clickhouse
查询优化
【
数据仓库
】即席查询
文章目录定义特点OLTP、OLAP、即席查询(adhocquery)区别与联系相关框架Kylin来源定义即席查询(AdHoc)是用户根据自己的需求,灵活的选择查询条件,系统能够根据用户的选择生成相应的统计报表。即席查询与普通应用查询最大的不同是普通的应用查询是定制开发的,而即席查询是由用户自定义查询条件的。特点即席查询的特点:即席查询与固化查询最大的不同是,普通的固化查询是定制开发的(即查询语句是
软泡芙
·
2023-06-09 14:29
#
数据库
数据仓库
大数据
即席查询
【数据治理】数据治理领域最容易混淆的16组术语概念辨析
2022-11-1313:01发表于湖北前言一、3T差异((信息化(IT)、工业运营技术(OT)、数字化转型(DT)二、2个I差异(商业智能(BI)、生产运营智能(OI))与工业互联网三、多个数据平台差异(
数据仓库
强heaven
·
2023-06-09 13:37
数据治理
学习方法
【大数据之路5-3】离线
数据仓库
(Hive 搭建)
离线
数据仓库
(Hive搭建)1.
数据仓库
概述1.
数据仓库
概念2.两种数仓构建理念1.BillInmon数仓2.RalphKimball数仓3.CIF架构、Inmon与Kimball建模总结1.CIF架构
程序员胖五
·
2023-06-09 11:32
数据仓库
大数据
hive
离线数仓
分层建设
【大数据之路5-1】
数据仓库
工具 Hive
5.
数据仓库
工具Hive1.Hive概述1.Hive核心概念2.Hive优势3.Hive特点4.Hive和RDBMS(关系型数据库)的对比【面试点】5.Hive架构1.用户接口2.内部架构组件3.底层支撑
程序员胖五
·
2023-06-09 11:02
大数据
hive
hadoop
万字长文|一文了解基于Flink构建流批一体数仓的技术点
基于Flink构建流批一体的实时数仓是目前
数据仓库
领域比较火的实践方案。随着Flink的不断迭代,其提供的一系列技术特性使得用户构建流批一体的应用变得越来越方便。
zhisheng_blog
·
2023-06-09 10:46
大数据
数据库
mysql
java
entity
应用实践 | 物易云通基于 Apache Doris 的实时
数据仓库
建设
经数据团队的调研对比,于2021年引入了ApacheDoris作为实时
数据仓库
。实战过程中获得一些经验,在此分享给大家。
大数据技术架构
·
2023-06-09 10:46
数据库
大数据
hadoop
python
java
Doris
数据仓库
介绍
目录一、Doris简介二、Doris的定位三、产品定位四、Doris的整体架构五、Doris的数据分布六、Doris的关键性技术6.1数据可靠性6.2易于维护6.3ROLLUP表七、Doris的数据模型7.1aggregate聚合模型7.2uniqukey模型7.3duplicatekey模型7.4数据模型的选择建议八、数据组织(存储原则)--按列存储九、索引:9.1前缀索引:9.2智能索引十、m
海阔天空_81
·
2023-06-09 10:45
数据库
同程数科基于 Apache Doris 的
数据仓库
建设
导读:同程数科成立于2015年,是同程集团旗下的旅游产业金融服务平台。2020年,同程数科基于ApacheDoris丰富的数据接入方式、优异的并行运算能力、极简运维等特性,引入ApacheDoris进行数仓架构2.0的搭建。本文详细讲述了架构1.0到2.0的演进过程及Doris的应用实践,希望对大家有所帮助。作者|同程数科大数据高级工程师王星业务背景业务介绍同程数科是同程集团旗下的旅游产业金融服务
hf200012
·
2023-06-09 10:38
Doris
大数据
数智学习 | 流批一体实时数仓建设路径探索
导语在
数据仓库
建设过程的开始阶段,企业的业务场景基本都是基于批处理的模式,利用成熟的离线技术来构建离线数仓,中间可能也会夹杂些实时处理的场景,但大多会转化为准实时的处理模式,如分钟级调度。
数澜科技Dtwave
·
2023-06-09 10:06
实时数仓
流批一体
数据中台
异常处理 org.springframework.dao.DataIntegrityViolationException
问题描述:
数据仓库
:Oracle11g后台报错:DataIntegrityViolationException详细日志:Causedby:java.lang.ClassNotFoundException
=PNZ=BeijingL
·
2023-06-09 10:17
数据存储
Java
java
开发语言
后端
MySQL报表和
数据仓库
[11题]
原始表如下:empdept第1题,12.2变换结果集成多行例:你想把行变换成列,需要的结果不止一行,你希望返回每个员工和他们的职位(此类题型与日历生成类似,日历可以format自动生成用来groupby的列,此处只能自己生成,该题还与下方第6题类似)需要最终结果:答:#步骤1:生成rnk列,最最关键createtablexasselecte.job,e.ename,(selectcount(*)f
阳光的微笑_f3cc
·
2023-06-09 05:55
@开源爱好者,字节跳动这项技术,正式宣布开源了
告诉大家一个好消息,字节跳动的云原生
数据仓库
ByConity正式宣布开源了。
字节跳动技术范儿
·
2023-06-09 02:19
开源
数据仓库
盘点
数据仓库
建设需要知道的那些事
数据仓库
是数据工程师的无形产品。数据规范是数仓体系建设的"语言",是数据使用
IT小神
·
2023-06-09 00:48
数据仓库
数据仓库
数据库
数据仓库
分析工具Hive
数据仓库
分析工具Hive概述Hive简介Hive与Hadoop生态系统中其他组件的关系Hive与传统数据库的对比Hive系统架构概述Hive组成模块Hive工作原理SQL语句转换成MapReduce的基本原理
so.far_away
·
2023-06-08 23:29
大数据技术原理与应用
hive
数据仓库
hadoop
数仓和数据湖的区别
1、
数据仓库
是存储结构化的数据,而数据湖是什么数据都能存(非结构化的数据也能存)。结构化数据可以理解为我们的二维表、JSON数据,非结构化的数据可以理解为图像文件之类的。
Six_Hundred_Miles
·
2023-06-08 22:32
数据仓库
大数据
hadoop
hbase
数据湖与
数据仓库
区别
那对于数据湖应该是什么样子,先来看数据湖的作者AWS来说明数据湖是什么东西,比如下图:不懂数据的人也许会觉得数据湖很厉害,而懂数据的人也许会觉得仅是一堆
数据仓库
技术的堆砌包装而已,你看上面那张框架图,哪个专业词汇数据
000X000
·
2023-06-08 22:49
数据仓库
实战
数据湖
数据仓库
数据库
数据湖与数据仓库区别
MPP技术的优势与严重缺陷
MPP架构通常用于处理海量数据的应用程序,如
数据仓库
、商业智能和大数据分析。MPP常见的发力场景是
数据仓库
。在
数据仓库
中,MPP架构意味着数据库服务被部署在多个节点中,共同完成存储、分析计算任务。常见
桥路丶
·
2023-06-08 21:52
数据库
数据仓库
MPP
揭秘新一代云数仓技术架构与最佳实践
背后的核心的原因在于,企业正在加速走向数字化、智能化,对数据的应用也提出了全新要求,特别是对数据的实时分析、实时部署需求更加的强烈,而云
数据仓库
为用户实现云原生、智能运维、弹性资源等业务需求也带来了很好的支撑
·
2023-06-08 19:19
云原生大数据数据仓库
大数据架构系列:如何理解湖仓一体?
转载:如有侵权,告知即删除引言这十多年大数据技术蓬勃发展,从市场的表现来看基于大数据的数据存储和计算是非常有价值的,其中以云
数据仓库
为主打业务的公司Snowflake市值最高(截止当前449亿美元),另一家以湖仓一体为方向公司
dkjhl
·
2023-06-08 18:58
大数据
大数据
架构
数据仓库
关于ETL的两种架构(ETL架构和ELT架构)
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。ETL是构建
数据仓库
的重要一环,用户从数据源抽取出所需的数据,经过数据清洗,最终按照预先定义好的
数据仓库
模型,将数据加载到
数据仓库
中去。
m0_66404702
·
2023-06-08 18:58
etl
架构
数据库
2024系统分析师论文模版-《论企业应用集成》
企业应用集成所连接的应用包括各种电子商务系统,企业资源规划系统,客户关系管理系统,供应链管理系统,办公自动化系统,数据库系.统,
数据仓库
等。请围绕“企业应用集成”论题,分别从以下几个方面进行论述:1、
琅琊之榜PJ
·
2023-06-08 18:28
软考
系统分析师
数据库
数据仓库
软考
系统分析师
上一页
36
37
38
39
40
41
42
43
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他