数据仓库（数仓）第10页

数仓规范

转自：https://mp.weixin.qq.com/s/mGkYRj8iV5_QvNMjS7bpIQ数据仓库是为企业所有级别的决策制定过程，提供所有类型数据支持的战略集合。

听雪10·2024-01-10 15:37

系分笔记数据库技术之分布式数据库和数据仓库

文章目录1、概要2、分布式数据库3、数据仓库4、总结1、概要数据库设计是考试重点，常考和必考内容，本篇主要记录了知识点：分布式数据库和数据仓库。

说来世事不如闲~·2024-01-10 08:07

mysql-存储引擎

MyISAMmylsam是基于isam存储引擎，并对其扩展，它是web,数据仓库和其它应用环境下最常用的储存

一个喜欢烧砖的人·2024-01-10 06:17

git入门使用

git介绍git是一个分布式版本管理控制系统，而SVN不是分布式的，git没有一个全局的版本号，而SVN有一个确定的全局版本号；git与SVN的结构如下图：git工作区、暂存区和版本库（数据仓库Repository

xiaofeilongyu·2024-01-09 18:49

基于springboot的停车场管理系统-计算机毕业设计源码82061

摘要由于数据库和数据仓库技术的快速发展，停车场管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。

vx_cxsj813·2024-01-09 16:01

【读书笔记】《 Hadoop构建数据仓库实践》第1章

02-《Hadoop构建数据仓库实践》.jpg第1章数据仓库简介1.1什么是数据仓库Inmon将数据仓库描述为一个面向主题的、集成的、随时间变化的、非易失的数据集合，用于支持管理者的决策过程。

笔名辉哥·2024-01-09 15:01

Hive基础知识（一）：Hive入门与Hive架构原理

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

依晴无旧·2024-01-09 13:25

hive基础知识大全

一、Hive基本概念1.1hive是什么hive是基于hadoop的一个数仓分析工具，hive可以将hdfs上存储的结构化的数据，映射成一张表，然后让用户写HQL(类SQL)来分析数据telupdown138383843813451567138383843953451567138383844012411657713838384413453157571383838434353551567567

不爱吃鱼的馋猫·2024-01-09 13:23

Hive基础知识笔记（含MySQL metastore伪分布式安装配置流程）

Hadoop-Exercises/tree/master/src/main/java/Hive一、介绍1.Hive是一个构建在Hadoop平台上的用类似SQL的语句HQL来协助读写与管理分布式系统上大数据集的数据仓库框架

书忆江南·2024-01-09 13:52

Hive基础知识

1）Hive是基于Hadoop的一个数据仓库工具，将结构化的数据文件映射为一张数据库的数据表，并且提供类SQL查询功能。

巷子里的猫X·2024-01-09 13:52

大数据开发：Hive基础知识点介绍

Hive简介根据官方文档的定义，Hive是一种用类SQL语句来协助读写、管理那些存储在分布式存储系统上大数据集的数据仓库软件。Hive的特点Hive最大的特

加米谷大数据张老师·2024-01-09 13:52

基于hadoop的hive数据仓库基础操作知识整理

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

大包丫·2024-01-09 13:51

Hadoop的数据仓库Hive的基础知识和安装部署

1、数据仓库和Hive 数据仓库是为了协助分析报告，支持决策，为需要业务智能的企业提供业务流程的改进和指导，从而节省时间和成本，提高质量。

姠惢荇者·2024-01-09 13:21

Spark与Hive的集成与互操作

Spark提供了强大的分布式计算能力，而Hive是一个用于查询和管理大规模数据的数据仓库工具。本文将深入探讨如何在Spark中集成和与Hive进行互操作，以充分利用它们的强大功能。

晓之以理的喵~~·2024-01-09 11:30

阿里云大数据ACA及ACP复习题（81~100)

（B）A:大数据计算服务MaxComputeB:QuickBI数据可视化分析平台C:实时计算Flink版D:云原生数据仓库（分析型数据库）AnalyticDB**解析**：阿里云实时计算Flink版（AlibabaCloudRealtimeComputeforApacheFlink

周周的奇妙编程·2024-01-09 08:20

Hive操作命令上手手册

内容来自于《大数据Hive离线计算开发实战》Hive原理Hive是一个基于Hadoop的数据仓库和分析系统，用于管理和查询大型数据集。

枫叶梨花·2024-01-09 08:50

hive的基本操作

最近新学了hive，想通过写文章的方式对所学知识进行巩固，同时希望可以帮助到大家Hive是基于Hadoop的一个数据仓库工具1.创建数据库（创建方法是和Mysql一样的）createdatabase数据库名字

暴打小赵·2024-01-09 06:49

实验6 熟悉Hive的基本操作

一、实验目的（1）理解Hive作为数据仓库在Hadoop体系结构中的角色。（2）熟练使用常用的HiveQL。

Z.Q.Feng·2024-01-09 06:47

Hive基本操作

hive简单认识Hive是建立在HDFS之上的数据仓库，所以Hive的数据全部存储在HDFS上。

X晓·2024-01-09 06:45

数仓分层结构

--图片来源尚硅谷ODS层：数据存储格式：JSON/TSV+gzip压缩（默认）OperateDataStore--存储从mysql业务数据库和日志服务器的日志文件中采集到的数据--日志数据--格式:JSON--业务数据--历史数据--格式:--全量--Datax:TSV--增量--Maxwell:JSON--汇总数据--希望用最少的资源存储最多的数据--压缩：--gzip：Hadoop默认支持的

Young_IT·2024-01-09 06:40

MySql01：初识

1.mysql数据库2.配置环境变量3.列的类型和属性，索引，注释3.1类型3.2属性3.3主键(主键索引)3.4注释4.结构化查询语句分类：5.列类型--表列类型设置1.mysql数据库数据库：数据仓库

Bruce6379·2024-01-09 06:36

某大厂大数据开发-外包面试

4.spark用过吗，用到的开发工具5.数据量多少，服务器台数6.数仓每层做了什么事，为什么这样做？

劝学-大数据·2024-01-09 06:42

大数据开发-某外包公司

1.用过那些组件2.说下HDFS读写流程3.说下varchar和char区别4.说下数据库的事务5.spark的部署模式有哪些6.数据库和数据仓库的区别7.内部表和外部表的区别8.说下数据中台、数据仓库和数据湖的区别

劝学-大数据·2024-01-09 06:10

经典！自己要学的太多了！加油吧！！！

EnterpriseComputing)是稍时髦较好听的名词，主要是指企业信息系统,如ERP软件（企业资源规划）、CRM软件（客户关系管理）、SCM软件（供应链管理，即物流软件）,银行证券软件,财务软件,电子商务/政务（包括各种网站），数据仓库

johnson_d31·2024-01-08 23:13

流式湖仓增强，Hologres + Flink 构建企业级实时数仓

流式湖仓增强，Hologres+Flink构建企业级实时数仓一、Hologres+Flink，阿里云上众多客户实时数仓的首选随着大数据从规模化走向实时化，实时数据的需求覆盖互联网、交通、传媒、金融、政府等各个领域

Elivis Hu·2024-01-08 22:52

数仓建设学习路线（二）模型建设(1)

OLTPVSOLAPOLTP概念全称OnLineTransactionProcessing，中文名联机事务处理系统，主要是执行基本日常的事务处理，比如数据库记录的增删查改,例如mysql、oracle。OLAP概念全称OnLineAnalyticalProcessing，中文名联机分析处理系统，支持复杂的分析操作，侧重决策支持，并且提供直观易懂的查询结果,例如、ClickHouse、Doris、K

语兴数据·2024-01-08 18:58

数仓建设学习路线（一）

前言数仓建设实践路线是语兴发布在B站的系列课程，搜索语兴呀即可学习完整的数仓建设理论。大数据相关岗位大数据常见的岗位主要包括实时开发、数据治理、数据安全、数据资产等。

语兴数据·2024-01-08 18:57

数仓建设学习路线（二）模型建设(2)

写在最前面本节内容主要讲解模型的具体设计过程，也是我们平常数仓工作中的重中之重。更多精彩课程关注B站语兴呀，或关注gzh：语数，获取全部课件资料。

语兴数据·2024-01-08 18:52

大数据技术架构

工作角色分工，数据处理以数据仓库开发人员为主，数据分析以数据分析师为主，其他所有组件、系统、技术相关归为数据平台。2数据源大数据的数据来源虽然多，但不杂。

乘风踏羽·2024-01-08 17:47

greenplum 历史拉链表

3.1历史拉链表数据仓库定义：是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。历史拉链表：一种数据模型，主要是针对数据仓库设计中表存储数据的方式而定义的。

用心一·2024-01-08 11:48

【数据仓库与联机分析处理】数据仓库工具Hive

目录一、Hive简介（一）什么是Hive（二）优缺点（三）Hive架构原理（四）Hive和数据库比较二、MySQL的安装配置三、Hive的安装配置1、下载安装包2、解压并改名3、配置环境变量4、修改hive-env.sh文件四、配置Hive元数据存储到MySQL1、修改hive-site.xml文件2、上传MySQL连接驱动3、初始化Hive元数据库4、验证元数据一、Hive简介（一）什么是Hiv

Francek Chen·2024-01-08 08:42

Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集【Updating】 (转)

我爱大海V5·2024-01-08 08:15

开源、云原生且实时分析型的现代数据仓库DataBend的介绍，及其与其它开源文件存储的结合使用实例

DataBend介绍Databend是一个开源、云原生且实时分析型的现代数据仓库，旨在提供高效的数据存储和处理能力。

小果运维·2024-01-08 07:14

FineBI实战项目一（3）：Kettle实现ETL到数据仓库

目前，finebi_shop_bi中是没有任何数据的，是一个空的数据库。而后续我们的所有数据分析都将在该数据库中进行。我们第一件事情就是要将「finebi_shop」数据库中的所有表抽取到「finebi_shop_bi」数据库中。要抽取并装载数据到「finebi_shop_bi」中，我们首先要在「finebi_shop_bi」中创建对应的表。1数据抽取业务分析我们已经大概熟悉了上面的6张表，这6张

不死鸟.亚历山大.狼崽子·2024-01-08 06:31

基于DataWorks+MaxCompute的公共电影票房数据预处理实践

实验内容：对MaxCompute数仓公共数据进行预处理，主要对maxcompute_public_data.dwd_product_movie_basic_info(电影基本信息，包含影片名、导演、编剧

周周的奇妙编程·2024-01-08 00:43

Hive元数据迁移及升级方案

Hive的架构和工作原理简介Hive是基于Hadoop之上的数仓，便于用户可以基于SQL（HiveQL）进行数据分析，其架构图如下:从上图可知，Hive主要用来将建立结构化数据库和后端分布式结构化文件的映射

云原生大数据·2024-01-07 22:49

Hive入门

一、Hive概述1.1Hive简介Hive是基于Hadoop的一个数据仓库工具，它可以将结构化或半结构化的数据文件转化为一张数据库表，并提供简单的sql查询功能。

爱过java·2024-01-07 17:04

物流实时数仓：数仓搭建（DWS）二

系列文章目录物流实时数仓：采集通道搭建物流实时数仓：数仓搭建物流实时数仓：数仓搭建（DIM）物流实时数仓：数仓搭建（DWD）一物流实时数仓：数仓搭建（DWD）二物流实时数仓：数仓搭建（DWS）一物流实时数仓

超哥--·2024-01-07 17:28

数据密集型应用系统设计--3.3 列式存储

虽然事实表通常超过100列，但典型的数据仓库查询往往一次只访问其中的4或5个。在大多数OLTP数据库中，存储以面向行的方式布局：来自表的一行的所有值彼此相邻存储。

下海的alpha·2024-01-07 17:45

数仓知识点总结（面试常问）

目录1数仓1.1定义1.2特点1.3架构1.4数仓的分层架构1.5常见术语1.5.1实体1.5.2维度1.5.3度量1.5.4粒度1.5.5口径

南潇如梦·2024-01-07 15:52

数仓工具—Hive进阶之常见的StorageHandler(24)

这里我们介绍一下常见的StorageHandler，但是由于目前StorageHandler的种类还是比较多的，主要包括官方的和非官方的，我们使用的时候需要注意的是版本的兼容性。常见的StorageHandlerApacheHive提供了多个存储处理程序（StorageHandler），允许用户集成Hive查询和分析引擎与不同的底层存储系统。以下是一些常见的存储处理程序：HDFSStorageHa

不二人生·2024-01-07 15:07

有用的技术分享主题

SQLServer数据库和AgentJob集成化监控工具Airflow调度工具的安装和使用Tableau报表开发网络爬虫技术开发PythonGUI应用开发基于S3的数据湖架构设计和大数据开发Hive大数据仓库超大数据集去重解决方案

weixin_30777913·2024-01-07 10:42

Teradata数据库和Informatica ETL逻辑及视图、用户定义函数和存储过程迁移到AWS的Hive数据仓库基本流程

，我们需要注册AWS帐号，并启用EC2（ElasticCloudComputing，高性能云计算）、EMR（ElasticMap-Reduce，高性能大数据计算）、Redshift/Snowflake数据仓库和

weixin_30777913·2024-01-07 10:12

FineBI实战（2）：案例架构说明及数据准备

1系统架构基于MySQL搭建数据仓库基于Kettle进行数据处理帆软FineBI基于MySQL搭建的数据仓库进行数据分析2数据流程图通过Kettle将MySQL业务系统数据库中，将数据抽取出来，然后装载到

不死鸟.亚历山大.狼崽子·2024-01-07 08:25

【数据仓库与联机分析处理】多维数据模型

目录一、数据立方体二、数据模型（一）星形模型（二）雪花模式（三）事实星座模式三、多维数据模型中的OLAP操作（一）下钻（二）上卷（三）切片（四）切块（五）转轴数据仓库和OLAP工具是基于多维数据模型的，

Francek Chen·2024-01-07 07:05

SaaS中数据仓库实战：构建智能数据基础支持业务创新

在当今数字化时代，SaaS企业越来越重视数据的价值，而构建一个高效的数据仓库是实现数据驱动业务创新的关键一步。本文将深入探讨SaaS中数据仓库的实战应用，以及如何通过智能数据基础支持业务的持续发展。

benhuyun_dev·2024-01-07 07:05

数仓工具—Hive内部表和外部表(5)

内部表和外部表未被external修饰的是内部表（managedtable），被external修饰的为外部表（externaltable）；因为默认情况下我们不加external关键字修饰，所以默认情况下是内部表区别：内部表数据由Hive自身管理，外部表数据由HDFS管理；内部表数据存储的位置是hive.metastore.warehouse.dir（默认：/user/hive/warehous

不二人生·2024-01-07 07:42

数仓工具—Hive进阶之StorageHandler(23)

另外，Hive作为数仓的核心组件，借助Stora

不二人生·2024-01-07 07:39

Hive内部表和外部表的区别

主要体现在load与drop（是否同时删除元数据与数据）的操作上：创建表：Hive创建内部表时，会将数据移动到数据仓库指向的路径，hive管理数据的生命周期；Hive创建外部表时，仅记录数据所在的路径，

airyv·2024-01-07 06:44

ssm企业人事信息管理系统-98194，（免费领取源码）计算机毕业设计选题开题+程序定制+论文书写+答辩ppt书写包售后全流程

企业人事信息管理系统的设计与实现摘要由于数据库和数据仓库技术的快速发展，企业人事信息管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。

vx_bscxy322·2024-01-07 05:21

推荐频道

数据仓库（数仓）