E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
--------【数据仓库】
Hive
数据仓库
基本知识
数据仓库
的定义主要用于支持决策,面向分析型数据处理;其次对多个异构成的数据源有效集成,集成后按照主题进行重组,并包含历史数据,而且存放在
数据仓库
的数据一般不再修改。
顾猫宁ing
·
2022-02-28 10:06
大数据学习
hive
big
data
数据库
hive基础与高级查询
hive基础与高级查询1.数据库和
数据仓库
1.1
数据仓库
1.2数据库和
数据仓库
的区别1.3
数据仓库
的分层架构2.Hive2.1Hive的基本概念2.2Hive元数据管理2.3hive的命令窗口模式2.4hive
korry24
·
2022-02-28 10:34
hive
数据仓库
数据库
大数据
微信 ClickHouse 实时数仓的实践之路
作者:微信WeOLAP团队&腾讯云
数据仓库
Clickhouse团队微信作为一款国民级应用,已经覆盖了社交、支付、出行等人们生活的方方面面。海量多样化的业务形态,对数据分析提出了新的挑战。
腾讯开发者
·
2022-02-28 10:02
腾讯
技术
云开发
腾讯云
腾讯
Hive
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。本质是:将HQL转化成MapReduce程序
allen398
·
2022-02-28 10:28
大数据集群
hive
数据仓库
之电商数仓-- 5、即席查询Kylin
目录一、Kylin1.1Kylin简介1.1.1Kylin定义1.1.2Kylin相关术语1.1.3Kylin架构1.1.4Kylin特点1.2Kylin安装1.2.1Kylin依赖环境1.2.2Kylin搭建1.2.3Kylin兼容性问题1.2.4Kylin启动1.3Kylin启动1.3.1创建工程1.3.2获取数据源1.4KylinCube构建原理1.4.1维度和度量1.4.2Cube和Cub
FunnyPrince_
·
2022-02-28 10:53
大数据
#
数据仓库
#
Hadoop
数据仓库
big
data
kylin
Hive基本概念
Hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。
ll_xiaobai
·
2022-02-28 10:22
大数据面试题--数仓
目录
数据仓库
理论数据分层ETL星形模型与雪花模型的区别?维度建模(dimensionalmodeling):
数据仓库
项目最重要或需要注意的是什么,以及如何处理?
龙鸣丿
·
2022-02-28 10:50
大数据
big
data
数据仓库
数据挖掘
Hive第一讲基础基本概念
基本概念1.Hive基本概念1.1
数据仓库
1.1什么是hive?1.2hive架构?
大数据学习爱好者
·
2022-02-28 10:49
kafka
hive
hbase
hive
hadoop
big
data
用户行为采集平台概述
用户行为采集平台概述
数据仓库
概念项目需求及架构设计项目需求分析项目框架技术选型系统数据流程设计框架版本选型服务器选型集群资源规划设计用户行为日志用户行为日志概述用户行为日志内容页面浏览记录动作记录曝光记录启动记录错误记录用户行为日志格式页面日志启动日志模拟生成用户行为日志环境准备模拟数据
数据仓库
概念
数据仓库
cpuCode
·
2022-02-28 10:48
电商数仓
big
data
数据仓库
hadoop
分布式
大数据
大数据项目实战数仓4——总纲
文章目录一、
数据仓库
的概述二、项目需求及架构设计1.项目需求分析2.项目框架2.1技术选型2.2系统数据流程设计2.3框架发行版本选型2.4服务器选型2.5集群资源规划设计三、相关命令可视化报表Superset
未来影子
·
2022-02-28 10:17
大数据项目
big
data
数据仓库
大数据
浅谈数仓建设中的分层
作者介绍
数据仓库
@唐刚“数据人创作者联盟”成员。01数仓为什么要分层数仓分层的原因也即是分层的好处体现在下面几个方面:1、分层是一种空间换时间的操作。
数据掘金者
·
2022-02-28 09:42
数据仓库
数据库
sql
离线数仓与实时数仓案例
1.
数据仓库
简介
数据仓库
是一个面向主题的(SubjectOriented)、集成的(Integrate)、相对稳定的(Non-Volatile)、反映历史变化(TimeVariant)的数据集合,用于支持管理决策
weixin_30642029
·
2022-02-28 09:10
大数据
数据库
运维
大数据开发,聊聊离线数仓和实时数仓
进入大数据时代,大数据存储的解决方案,往往涉及到
数据仓库
的选型策略。从传统时期的
数据仓库
,到大数据环境下的
数据仓库
,其核心的技术架构是在随着最新技术趋势而变化的。
加米谷大数据张老师
·
2022-02-28 09:39
大数据
数据仓库
大数据
离线数仓
云上
数据仓库
解决方案:https://www.aliyun.com/solution/datavexpo/datawarehouse云上数据集成解决方案:https://www.aliyun.com/solution
哎呦不错呦
·
2022-02-28 09:09
数仓
实时数仓与离线数仓总结(一)
主要内容:数仓基本概念数仓架构演变实时数仓和离线数仓的区别数仓基本概念首先说一下
数据仓库
的概念,以下简称数仓。
程序员小陶
·
2022-02-28 09:08
数据仓库
数据库
大数据
python
数据分析
从百万年薪大佬那里获得的
数据仓库
面试标准
ღ(´・ᴗ・`)一起学习进步ღゝ◡╹)ノ♡摘要:我们需要了解
数据仓库
开发这里的面试标准。知晓目标,才有前进的方向。要点:基础能力数仓建模数据治理原理理解工程能力业务能力Q:1.基础能力如何划分级别?
心有猛虎_xy
·
2022-02-27 07:43
数据仓库
大数据
编程语言
人工智能
python
【理论+实战知识】
数据仓库
建设保姆级5W字教程2
大数据封面.png上一篇:https://www.jianshu.com/p/beeb4c87db26二、离线数仓建设核心
数据仓库
的核心是展现层和提供优质的服务。
笔名辉哥
·
2022-02-24 14:06
【理论+实战知识】
数据仓库
建设保姆级5W字教程1
大数据封面.png文档大纲一、数仓基本概念1、
数据仓库
架构我们在谈数仓之前,为了让大家有直观的认识,先来谈数仓架构,“架构”是什么?这个问题从来就没有一个准确的答案。
笔名辉哥
·
2022-02-24 14:42
数据仓库
| 从买菜这件小事来聊聊
数据仓库
最近几个新入职的同学说被数据库,数据集市,
数据仓库
整的有点懵,不太清楚它们之间的关系和区别。周末小编在买菜的过程中灵光一闪,决定从买菜这件小事来聊聊
数据仓库
。
·
2022-02-24 10:09
数据仓库
数仓建模—数据集市
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派
·
2022-02-23 21:00
数据仓库
——
数据仓库
基础
数据仓库
基础1.*数仓中是如何划分主题的?主题(Subject)是在较高层次上将企业信息系统中的数据进行综合,归类和分析利用的一个抽象概念,每一个主题基本对应一个宏观的分析领域。
锦超风采
·
2022-02-23 12:01
面试题
大数据
大数据分析利器之Hive(一):数仓与数据库的区别以及hive的各种DDL语法
系列文章目录大数据分析利器之Hive(一)文章目录系列文章目录前言1.
数据仓库
(15分钟)1.1
数据仓库
的基本概念1.2
数据仓库
的主要特征1.3
数据仓库
与数据库区别1.4
数据仓库
分层架构2.Hive2.1Hive
BB侠的大数据之旅
·
2022-02-23 12:56
大数据
数据仓库
hive
hdfs
hive
深入理解Hive【Hive架构介绍、安装配置、Hive语法介绍】
一、Hive的产生背景1、MapReduce编程十分繁琐2、传统RDBMS人员的需要Hive由Facebook开源项目:1、用于解决海量结构化日志的数据统计问题2、构建在Hadoop之上的
数据仓库
3、Hive
itcats_cn
·
2022-02-23 12:50
大数据
Hive
02、Hive
数据仓库
——SQL员工练习题
文章目录Hive
数据仓库
——SQL员工练习题一:将下列数据加载hive表。二:使用HQL完成下面需求1.列出至少有一个员工的所有部门。2.列出薪金比“SMITH”多的所有员工。
liangzai2048
·
2022-02-23 12:17
hadoop
Hive
数据仓库
hive
sql
万字详解
数据仓库
、数据湖、数据中台和湖仓一体
本文目录:一、前言二、概念解析
数据仓库
数据湖数据中台三、具体区别
数据仓库
VS数据湖
数据仓库
VS数据中台总结四、湖仓一体目前数据存储方案DataLakehouse(湖仓一体)一、前言数字化转型浪潮卷起各种新老概念满天飞
五分钟学大数据
·
2022-02-23 11:37
大数据
数据仓库
数据中台
数据湖
湖仓一体
数仓建模—数据集成
数据仓库
系列文章(持续更新)数仓架构发展史数仓建模方法论数仓建模分层理论数仓建模—宽表的设计数仓建模—指标体系
数据仓库
之拉链表数仓—数据集成数仓—数据集市数仓—商业智能系统数仓—埋点设计与管理数仓—IDMapping
大数据技术派
·
2022-02-22 22:00
舍友居然在看·知网都搜不到的知识:湖仓一体
目录写在前面0.沃尔玛纸尿裤和啤酒1.什么是
数据仓库
、数据
kikokingzz
·
2022-02-22 11:14
数据科学的纷纷扰扰
数据仓库
数据挖掘
数据库
湖仓一体
数据湖
分布式分析型数据库星环ArgoDB 3.2
通过一个ArgoDB数据库,就可以打造离线
数据仓库
、实时
数据仓库
、数据集市和联邦计算平台等数据分析系统,提供全面、便捷、智能和安全的数据服务能力。2021年6
·
2022-02-22 11:34
数据库
万字详解
数据仓库
、数据湖、数据中台和湖仓一体
本文目录:一、前言二、概念解析
数据仓库
数据湖数据中台三、具体区别
数据仓库
VS数据湖
数据仓库
VS数据中台总结四、湖仓一体目前数据存储方案DataLakehouse(湖仓一体)一、前言数字化转型浪潮卷起各种新老概念满天飞
·
2022-02-22 10:24
数据仓库数据中台数据湖
万字详解
数据仓库
、数据湖、数据中台和湖仓一体
本文目录:一、前言二、概念解析
数据仓库
数据湖数据中台三、具体区别
数据仓库
VS数据湖
数据仓库
VS数据中台总结四、湖仓一体目前数据存储方案DataLakehouse(湖仓一体)一、前言数字化转型浪潮卷起各种新老概念满天飞
五分钟学大数据
·
2022-02-22 09:00
数据仓库
的学习
1.
数据仓库
是什么?
数据仓库
是一个从多个数据源收集的信息存储,存放在一个一致的模式下,并通常驻留在单个站点。
数据仓库
通过数据清理、数据变换、数据集成、数据装入和定期数据刷新构造。
徐薇薇
·
2022-02-21 16:56
看SparkSQL如何支撑企业级数仓
本文作者:惊帆来自于数据平台EMR团队前言ApacheHive经过多年的发展,目前基本已经成了业界构建超大规模
数据仓库
的事实标准和数据处理工具,Hive已经不单单是一个技术组件,而是一种设计理念。
·
2022-02-21 12:54
数据库字节跳动
看SparkSql如何支撑企业数仓
本文作者:惊帆来自于数据平台EMR团队前言ApacheHive经过多年的发展,目前基本已经成了业界构建超大规模
数据仓库
的事实标准和数据处理工具,Hive已经不单单是一个技术组件,而是一种设计理念。
字节跳动数据平台
·
2022-02-21 12:00
数据仓库
系列之数据质量管理
数据质量一直是
数据仓库
领域一个比较令人头疼的问题,因为
数据仓库
上层对接很多业务系统,业务系统的脏数据,业务系统变更,都会直接影响
数据仓库
的数据质量。因此
数据仓库
的数据质量建设是一些公司的重点工作。
小黎子数据分析
·
2022-02-21 12:49
数据仓库
与数仓建模
u=3186997546,1762170182&fm=26&gp=0.jpg1.
数据仓库
1.1什么是
数据仓库
数据仓库
,英文名为DataWarehouse,简写为DW或DWH。
鄙人王道长
·
2022-02-21 02:10
数据仓库
:注释规范
数据仓库
:注释规范所有字段必须有注释,注释要简洁明确字段注释的格式枚举类字段:字段描述:值1-说明1,值2-说明2(详细说明),...如订单状态:0-有效,1-无效(24h未支付订单置为无效)金额类字段
晨磊的微博
·
2022-02-20 19:36
hive实战
1.前言作为
数据仓库
的工具,hive提供了两种ETL运行方式,分别是通过Hive命令行和beeline客户端;命令行方式即通过hive进入命令模式后通过执行不同的HQL命令得到对应的结果;相当于胖客户端模式
nightwish夜愿
·
2022-02-19 23:54
阿里云maxcompute(原odps)历险记
2、odps是一个
数据仓库
,有分层的概念,它的dwd层类型数据库,又有全量更新的dd类型(即,每天更
Michael_zmh
·
2022-02-19 16:07
[翻译] 渐变维度Slowly Changing Dimension
数据管理和
数据仓库
中的维度包含有诸如地理位置、客户或产品等实体的相对静态数据。SlowlyChangingDimensions(SCDs)捕获的数据变化缓慢而不可预测,且不按固定的周期。
主君_05c4
·
2022-02-19 15:24
华为数据之道"数据谷解读"之五 数据湖
书籍:华为公司数据管理部文字来源:大数据DT解读:数据智能谷【解读:业内对数据整合存储有很多称呼,比如
数据仓库
、数据中台、大数据、数据中心等等。
数据智能谷
·
2022-02-19 13:38
大数据
数据仓库
-概念
//大数据
数据仓库
-概念-大数据和云计算技术(欢迎关注同名微信公众号)-ITeye技术网站http://jiezhu2007.iteye.com/blog/2249889大数据经过反复炒作之后,慢慢的降温下来
葡萄喃喃呓语
·
2022-02-19 05:23
用户标签体系的意义及设计方法
1、完善数据仓之前我们讲过,企业或市场要有自己的数据仓来进行线索的存储与培育,用户标签就是存在于此,我们希望用户的标签尽可能完整,这样我们会认为我们的仓库越发丰富有价值,同样有1万人,只有电话号的
数据仓库
肯定没有信息相对齐全的
数据仓库
价值高
易观方舟
·
2022-02-18 07:38
滴滴出行-杭州职位:实时计算工程师,golang开发专家(分布式存储),前端Leader,高级java专家,
数据仓库
专家
滴滴出行-杭州/上海职位:实时计算工程师/golang开发专家(分布式存储)/前端Leader/高级java专家/
数据仓库
专家一、实时计算工程师岗位职责:1.负责滴滴实时计算平台的架构设计&开发2.负责滴滴实时数据
IT猎头fancyfrees
·
2022-02-18 07:39
clickhouse优化最佳实践(易企秀)
clickhouse在易企秀
数据仓库
项目中已投入使用两年,主要为内部用户提供快速查询和多维分析的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称OLAP领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
码到成功_易企秀
·
2022-02-18 04:42
Hive之同比环比的计算
hive通过HiveServer2访问HiveSpringBoot连接Hive实现自助取数hive关联hbase表Hiveudf使用方法Hive基于UDF进行文本分词Hive窗口函数rownumber的用法
数据仓库
之拉链表关注公众号
大数据技术派
·
2022-02-17 22:00
关于
数据仓库
、数据湖、数据平台和数据中台的概念和区别
我们谈论数据中台之前,我们也听到过数据平台、
数据仓库
、数据湖的相关概念,它们都与数据有关系,但他们和数据中台有什么样的区别,下面我们将围绕数据平台、
数据仓库
、数据湖和数据中台的区别进行介绍。
garyond
·
2022-02-17 09:26
十.
数据仓库
10.1什么是
数据仓库
数据仓库
,英文名称为DataWarehouse,可简写为DW或DWH。
数据仓库
,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
临时_01e2
·
2022-02-16 17:43
数据库、数据湖、
数据仓库
、湖仓一体、智能湖仓,分别都是什么鬼?
索性我们就来个专题,聊透数据库、
数据仓库
、数据湖以及风头正劲的“Lakehouse”——湖仓一体化。
数据仓库
是个啥?和数据库有什么不同?数据库的基本概念,大家应该都不陌生。
hzbooks
·
2022-02-16 08:58
数据库
数据仓库
编程语言
数据分析
人工智能
hive环境部署
语句完成MapReduce所能完成的功能;HiveSql语句经过Hive中的解析器(可以理解为jvm),解析,底层还是会转换成MapReduce任务,这也是为什么hive不能实现实时查询的原因Hive是
数据仓库
XtHhua
·
2022-02-16 04:02
数据仓库
-订单管理应该注意那些
订单管理的总线矩阵按照最简单的形式,想象企业
数据仓库
的总线矩阵。如图:日期是订单管理中各个环境都需要记录下来的。客户,产品,销售代理,交易他们呢关心报价,下订单,运输至客户,开发货运发票,客户退货。
数据僧
·
2022-02-15 14:38
上一页
76
77
78
79
80
81
82
83
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他