数据仓库第33页

阿里云大数据实战记录4：生产环境添加列

因为不同的引擎，意味着不同的配置，对应的语法也是不同的，比如mysql的引擎和maxcomputer的引擎新增列的操作不同，下面找了两个文档可供参考云原生数据仓库AnalyticDBMyS

Xin学数据·2023-08-07 21:43

1、Spark SQL 概述

SparkSQLisApacheSpark’smoduleforworkingwithstructureddata.它是spark中用于处理结构化数据的一个模块SparkSQL历史Hive是目前大数据领域，事实上的数据仓库标准

Wzideng·2023-08-07 13:13

HCatalog教程_编程入门自学教程_菜鸟教程-免费教程分享

教程简介HCatalog使用了Hive的元数据存储，这样就使得像MapReduce这样的第三方应用可以直接从Hive的数据仓库中读写数据。

IT民工爱搬砖·2023-08-07 08:55

各种大数据概念笔记

各种大数据概念1数据仓库数据分层定义1.1方式1宽表-topic事实层-fact基础整合层1.2方式二ADS：ApplicationDataService，应用数据层也可以称为或者发展为DMdatamarketing

weixin_40455124·2023-08-07 04:29

产品图鉴：Greenplum

Greenplum是老牌的MPP数据仓库，查询稳定性很强，SQL支持非常全面（支持ANSISQL2008和SQLOLAP2003扩展；支持ODBC和JDBC应用编程接口。

桥路丶·2023-08-07 02:59

大数据常见应用场景及架构改进

大数据常见应用场景及架构改进大数据典型的离线处理场景1.大数据数据仓库及它的架构改进2.海量数据规模下的搜索与检索3.新兴的图计算领域4.海量数据挖掘潜在价值大数据实时处理场景大数据典型的离线处理场景1

桥路丶·2023-08-07 02:29

2023大数据技术应用的五个主要场景总结

大数据技术应用的几个主要场景：离线处理、实时流处理、交互查询、实时检索和融合数据仓库离线数据处理和分析：一、离线处理场景：通常是指对海量数据进行分析和处理，形成结果数据，供下一步数据应用使用。

胖胖的洋葱·2023-08-07 02:58

Greenplum原理及其简介

Greenplum介绍组织架构Greenplum数据库是一种大规模并行处理（MPP）数据库服务器，其架构特别针对管理大规模分析型数据仓库以及商业智能工作负载而设计。

贾斯汀玛尔斯·2023-08-06 21:50

关于数据仓库与数据湖，4万字总结

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵

公众号:肉眼品世界·2023-08-06 14:56

HIVE学习

Hive是由Facebook开源，基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

叫我莫言鸭·2023-08-06 07:40

Hive常见面试题

Hive是一个基于Hadoop生态系统的数据仓库和数据处理工具。它提供了类似于SQL的查询语言（HiveQL），使用户能够使用SQL语句来查询和分析大规模存储在Hadoop集群上的数据。

Matthew117·2023-08-06 06:13

数据仓库知识整理

由于现在做的项目是各个银行的数据仓库的项目，因为以前也不了解，用于自己学习整理，算是在即的一份备份。如有不正确和不足的地方，希望多多指教。

heybo_zhang·2023-08-06 02:50

大数据之Hive

Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。

不如打代码·2023-08-05 22:18

关于Data Lake的概念、架构与应用场景介绍

当时核心要解决的问题是传统数据仓库报表分析面临的两个问题：只使用一部分属性，这些数据只能回答预先定义好（pre-determined）的问题。数据被聚合了，最

大数据技术架构·2023-08-05 18:38

数据仓库分层设计

美团配送数据治理实践美团配送数据治理实践-美团技术团队数据仓库分层没有绝对的规范，适合的就是最好的，特别是企业已经有一个初版的数仓的时候，需要做好改造成本和可理解性之间的平衡。

javastart·2023-08-05 15:06

【GaussDB(DWS)】数据分布式存储-三种类型的表

@toc一、环境说明华为数据仓库服务DWS，集群版本8.1.3.320集群拓扑结构：二、数据分布式方式DWS采用水平分表的方式，将业务数据表的元组打散存储到各个节点内。

若兰幽竹·2023-08-05 08:05

数据中台建设过程中“通用化+标准化+敏捷性”

数据中台的本质就是“数据仓库+数据服务中间件”。从业务视角，数据中台是指通过完成企业内外部多源异构的数据采集、治理、建模、分析、应用，打通数据孤岛实现数据集中管理应用,成为企业数据资产管理中

产品经理自我修养·2023-08-05 05:14

数据库和数据仓库到底有什么区别和联系？

有位做数据分析的小伙伴问我：老师，你们做商业智能BI的总在讲数据仓库、数据仓库，我感觉在数据仓库上还是跟其它数据库一样操作写SQL就可以跑一些数据出来，感觉跟数据库没有什么区别啊，他们的区别到底在哪里啊

派可数据BI可视化·2023-08-05 05:42

数据仓库与关系型数据库区别

数据仓库与关系型数据库区别数据仓库与数据库的主要区别在于：数据库是面向事务的设计，数据仓库是面向主题设计的。数据库一般存储在线交易数据，数据仓库存储的一般是历史数据。

cxf_coding·2023-08-05 05:12

浅析数据库与数据仓库

对于数据库的概念，大家可能都比较熟悉，但是对于数据仓库，可能理解相对模糊，两个概念很容易搞混。事实上，数据库与数据仓库差异很大，下面为大家介绍一下数据库和数据仓库的相关知识。

英方·2023-08-05 05:12

数据仓库与数据库之间的区别

数据仓库，其实也是存储数据的，相对于数据库来说存储的数据量要更庞大。而且数据仓库多是用于决策分析的。

心情这个东西·2023-08-05 05:11

数据库与数据仓库的本质区别是什么？

当用计算机来处理数据的时候,数据就需要存储和管理了。早期的数据,就是用一个文件来实现的,即是文件系统。随着处理的数据量增大,发展到用数据库来管理和存储数据了。数据库包括多媒体数据库、对象关系数据库和关系数据库。关系数据库管理系统,已经成为了事实上通用的数据库系统,因为它以关系表格式存储数据,并以简单明了的SQL标准的格式对数据进行存取。随着数据量的增多,人们开始寻找各种数据之间的关系,研究面向某一

亿信华辰软件·2023-08-05 05:11

数据库与数据仓库

数据库与数据仓库：简而言之，数据库是面向事务的设计，数据仓库是面向主题设计的。数据库一般存储在线交易数据，数据仓库存储的一般是历史数据。

AllenGd·2023-08-05 05:40

数据库和数据仓库联系和区别

数据库和数据仓库联系和区别1、前言2、来源3、用途4、特性不同4.1设计4.2优化4.3数据量1、前言不能简单的说数据仓库是数据库的扩大版，它们是针对不同的服务而产生的，传统的数据库针对（OLTP）联机事务处理

跳舞的皮埃尔·2023-08-05 05:40

数据库与数据仓库的区别及关系

数据库与数据仓库的区别及关系数据库数据仓库异同差异联系例子数据库数据库是结构化信息或数据的有序集合，一般以电子形式存储在计算机系统中。通常由数据库管理系统(DBMS)来控制。

Lin-CT·2023-08-05 05:10

hive底层与数据库交互原理

一、Hive到底是什么image.png如何理解Hive（1）从概念上来看->Hive是基于Hadoop的一个数据仓库工具；它是MapReduce的一个封装，底层就是MapReduce程序；->Hive

VincentLeon·2023-08-04 19:09

python自动化部署hadoop集群_大数据集群的自动化运维实现思路

原标题：大数据集群的自动化运维实现思路|作者简介王晓伟知数堂《大数据实战就业》课程讲师六年大数据相关工作经验清华大学软件工程硕士曾就职于网易、搜狗等互联网企业从事大数据及数据仓库的开发管理工作拥有丰富的数据平台建设

weixin_39869959·2023-08-04 19:11

关于数据仓库那些事 - 数据质量和数仓主题

数仓主题是什么数据仓库主题是指透过“上帝视角”将企业不同业务流程信息进行汇总、分类然后对其进行分析利用的一个抽象化的概念。也是指企业中某一分析领域具体的分析对象，这样一来，每

派可数据BI可视化·2023-08-04 17:16

落地数字化管理，提升企业市场竞争力

数据仓库-派可数据商业智能BI数据可视化分析平台2、客户关系管理（CRM）系统：实施一个CRM系统来跟踪和管理

派可数据BI可视化·2023-08-04 17:46

大数据开发：数据仓库建模方法与模型

大数据平台当中的数据仓库，往往需要通过建模来更好地对数据进行存储和管理，这其中涉及到性能、成本、效率、质量等多方面的综合考量，对于工程师来说，也需要细细规划。

成都加米谷大数据·2023-08-04 13:24

什么是大数据开发？

大数据作为时下火热的IT行业的词汇，随之而来的数据开发、数据仓库、数据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧的利润焦点。

yoku酱·2023-08-04 13:19

Docker快速部署Apache Kylin和体验

疫情在家，就疯狂撸起来吧~参考URL：https://zhuanlan.zhihu.com/p/2010205361.Kylin是什么ApacheKylin™是一个开源的、分布式的分析型数据仓库，提供Hadoop

万州客·2023-08-04 13:30

2022-11-15

从范围上来说，数据是从企业范围的数据库、数据仓库，或者是更加专业的数据仓库中抽取出来的。数据中心的重点就在于它迎合了专业用户群体的特殊需求，在分析、内容、表现，以及易用方面。

孤鹤横江·2023-08-04 10:36

Hive 安装介绍

介绍Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。

叱咤少帅（少帅）·2023-08-03 18:38

Greenplum功能调研

公司成立于2003年，2006年推出了首款产品，其主营业务关注在数据仓库和商业智能方面.Greenplum基于postgresql开发,架构采用了MPP(大规模并行处理)。在MPP系统中，每个SMP节

贾斯汀玛尔斯·2023-08-03 17:53

关于ETL的两种架构（ETL架构和ELT架构） qt

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。

2301_78385600·2023-08-03 15:59

基于MaxCompute/Dataworks实现数据仓库管理与全链路数据体系

那么我们回过头来考虑，什么是大数据，什么又是数据仓库，什么又是数据技术。大数据其实是个非常笼统的感念，它是由数据仓库演化而来的数据与技术方法论，那么我们先说一下数据仓库的由来：早在多年以前在Hado

weixin_30335575·2023-08-03 14:50

大数据理论体系总结--数据仓库管理与全链路数据体系

那么我们回过头来考虑，什么是大数据，什么又是数据仓库，什么又是数据技术。大数据其实是个非常笼统的感念，它是由数据仓库演化而来的数据与技术方法论，那么我们先说一下数据仓库的由来：早在多年以前在Ha

javastart·2023-08-03 14:49

关于Hive的使用技巧

前言Hive是一个基于Hadoop的数据仓库基础架构，它提供了一种类SQL的查询语言，称为HiveQL，用于分析和处理大规模的结构化数据。

auspicious航·2023-08-03 10:07

DTCC 2020 | 阿里云李飞飞：云原生分布式数据库与数据仓库系统点亮数据上云之路

云计算时代，云原生分布式数据库和数据仓库开始崛起，提供弹性扩展、高可用、分布式等特性。数据库将面临怎样的变革？云原生数据库与数据仓库有哪些独特优势？

阿里云数据库·2023-08-03 10:38

伴鱼基于 Flink 构建数据集成平台的设计与实现

▼关注「ApacheFlink」，获取更多技术干货▼摘要：数据仓库有四个基本的特征：面向主题的、集成的、相对稳定的、反映历史变化的。

Apache Flink·2023-08-02 21:14

了解ODS、DW和DM概念

在和数据架构师聊天的时候,提到了ODS.当时对这个概念并不是很了解,需要深入学习一下一.ODS、DW和DM概念ODS:操作性数据;DW:数据仓库;DM:数据集市;ODS的数据是"实时值",而数据仓库的数据却是

Cocktail_py·2023-08-02 19:00

湖仓一体概念快问快答

湖仓一体数据存储在数据湖低成本的存储架构之上，既拥有数据湖数据格式的开放灵活性，又继承了数据仓库的高性能、易用性和规范性。问题二湖仓一体是伪命题吗？

偶数科技·2023-08-02 16:17

OushuDB × 东方证券：数据仓库信创国产化最佳实践

一、案例背景2013年起，东方证券陆续引入数据仓库平台、大数据应用平台、资讯中心大数据平台，以实现对业务运行提供数据支撑，由这三个数据平台组成的数据平台体系是东方证券金融科技战略规划的重要

偶数科技·2023-08-02 16:46

Data Vault 2.0方法论简介

它来源于核心软件工程标准，并对这些标准进行了调整，以用于数据仓库。图3.1显示了影响DataVault2.0方法论的标准。

DataVault善哉·2023-08-02 11:09

ETL中前期数据分析、变化数据探测，数据获取注意事项

网络上或者数据仓库工具箱都提到总共会有34个子系统。个人理解的是这34个子系统都不会独立存在，也不需要一次全部去实现。根据当前业务的发展的阶段，当前最紧急的问题展开。

数据僧·2023-08-02 09:37

Hadoop 之 Hive 4.0.0-alpha-2 搭建（八）

安装1.解压并配置HIVE2.修改hive-site.xml3.修改hadoop的core-site.xml4.启动三.Hive测试1.基础测试2.建库建表一.Hive简介Hive是基于Hadoop的数据仓库工具

猪悟道·2023-08-02 09:37

大数据课程F1——HIve的概述

sina.cn地址：广东惠州▲本章节目的⚪了解HIve的概念；⚪了解HIve与数据库的区别；⚪了解HIve的特点；一、概述1.Hive原本是由Facebook公司开发后来贡献给了Apache的一套用于进行数据仓库管理的机制

伟雄·2023-08-02 09:36

2022年中国湖仓一体平台市场研究报告｜爱分析报告

摘要为适应数据应用需求，大数据平台架构持续演进，历经数据仓库、数据湖两个阶段。

ifenxi爱分析·2023-08-02 04:26

Hive数据管理

Hive是建立在Hadoop上的数据仓库基础架构。它提供了一系列的工具，用来进行数据提取、转换、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据机制。

凉意先生·2023-08-02 03:29

推荐频道

数据仓库