--------【数据仓库】

大数据技术人员工具包最全集合

数据科学融合了多门学科并且建立在这些学科的理论和技术之上，包括数学、概率模型、统计学、机器学习、数据仓库、可视化等。
大数据—————————————————·2023-04-04 11:29

数据科学家和大数据技术人员工具包

数据科学融合了多门学科并且建立在这些学科的理论和技术之上，包括数学、概率模型、统计学、机器学习、数据仓库、可视化等。在实际应用中，数据科学包括数据的收集、清洗、分析、可视化以及数据应用整个
weixin_34153893·2023-04-04 10:14

数据仓库、数据湖、数据中台一文读懂【1】

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对
笔名辉哥·2023-04-04 10:03

本地数据仓库项目(一) —— 本地数仓搭建详细流程

1准备1.1本地虚拟机器准备使用本地搭建三台机器，搭建数仓，模拟实际平台数据仓库的搭建。
不以物喜2020·2023-04-04 10:04

【自建分布式数据库详细指南】（四）设计：CITUS分布式数据仓库OLAP/OLTP的架构选择及PG数据库优化方法策略

关于数据库的整体设计，很少有书籍专门试讲，因为这需要博大精深的理论水平以及阅历丰富的工作经验，但往往这两者不可兼得，在设计数据库时需要考虑多方面的因素，如需求，数据体量，数据库架构，硬件环境，成本。这些因素综合起来才可以决定最终的体系架构。数据库以及方案的优化需要进行整体的设计，本文是以[数.据.仓.库]IO读写量大并发量小为例进行设计。1.从用户需求出发要考虑数据库该采用哪种“模式”总体而言，采
大板牙花生·2023-04-04 10:00

oracle如何改并行度,oracle并行度调整

oracle并行度使用多个cpu与io来执行数据库操作，能够显著改善大型数据库操作性能，比如DSS或数据仓库适用于大表查询，join,分区索引的查询创建大量的index创建大量的表(包括固化视图)批量的
weixin_39583751·2023-04-04 09:01

oracle并行度修改,oracle并行度调整

oracle并行度使用多个cpu与io来执行数据库操作，能够显著改善大型数据库操作性能，比如DSS或数据仓库适用于大表查询，join,分区索引的查询创建大量的index创建大量的表(包括固化视图)批量的
努力忏悔修行·2023-04-04 09:57

Hive中管理表（内部表）和外部表的区别是什么及使用场景

⑴区别：①Hive创建内部表时（默认创建内部表），会将数据移动到数据仓库指向的路径；创建外部表（需要加关键字external），仅记录数据所在的路径，不对数据的位置做任何改变；⑵Hive删除表时，内部表的元数据和数据会被一起删除
江边蚊子·2023-04-04 08:57

Apache Hive

hive是一个基于大数据技术的数据仓库(DataWareHouse)技术，主要是通过将用户书写的SQL语句翻译成MapReduce代码，然后发布任务给MR框架执行，完成SQL到MapReduce的转换。
祈人之忧·2023-04-04 07:26

Apache Hive实战基础

本节目标了解Hive的作用和优势了解Hive的基本架构了解Hive的数据类型了解Hive的数据库和表操作理解Hive的数据分区理解Hive的数据分桶4.1数据仓库4.1.1为什么要有数据仓库在引入数据仓库之前
羊村小柴狗·2023-04-04 07:43

HiveSQL的执行流程

hive是基于hadoop的一个数据仓库工具，他将结构化的数据存储在HDFS上，并映射到hive的一张表上，提供类SQL语句对数据进行操作。
请学习好嘛·2023-04-04 07:30

阿里大数据-数据库总结:RDS ADS OTS Maxcompute（ODPS）

Maxcompute（原odps）阿里云中的Maxcompute（原odps）其实就是hive，扮演数据仓库的角色，适合存储轨迹类历史数据，适合存储的数据量大，适合海量数据的处理，适合对数据进行离线分析
hsabrina·2023-04-04 06:37

Doris (HOLAP)，实时数据仓库的王者。

Doris+Flink将会是实时数据仓库的重要基石。
CesarChoy·2023-04-04 06:17

第1章 初始Hadoop

HDFSHadoopDistributedFileSystem分布式文件系统MapReduce并行计算框架HBase分布式NoSQL列数据库Hive数据仓库工具，将结构化的数据文件映射为一张数据库表，并提供简单的
longbow747·2023-04-04 06:58

【Doris】新东方在线教育实时数仓的落地实践

背景介绍在传统数据仓库方面，通常以T+1离线批量计算为主，按照数仓建模方式，把要处理的业务按照主题域划分，构建各种数据模型，来满足公司经营分析，财务分析等各种公司管理层的数据需求。
九层之台起于累土·2023-04-04 06:25

应用实践 | 物易云通基于 Apache Doris 的实时数据仓库建设

经数据团队的调研对比，于2021年引入了ApacheDoris作为实时数据仓库。实战过程中获得一些经验，在此分享给大家。
hf200012·2023-04-04 06:50

1.数据库基本概念

1.数据库基本概念1.1什么是数据库数据库（DB，DateBase）概念：数据仓库，软件，安装在操作系统之上作用：存数据，管理数据1.2数据库分类关系型数据库：MySQL，Oracle，，SqlServer
小张学编程·2023-04-04 05:45

比较Hive数据库与MySQL数据库

一、Hive数据库hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
晓之以理的喵~~·2023-04-04 04:17

Hive与HBase之间的区别和联系

目录概念HiveHBase共同点区别关系首先要知道Hive和HBase两者的区别，我们必须要知道两者的作用和在大数据中扮演的角色概念Hive1.Hive是hadoop数据仓库管理工具，严格来说，不是数据库
程序员阿伟·2023-04-04 02:58

Hive配置安装部署

是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。本质上是将HQL转化为Map
90后的包子·2023-04-03 20:24

利用机器学习启动数据治理2.0时代

一般而言，这些活动的重点是所谓的“数据生命周期”，即从数据采集、存储到交付到数据仓库或辅助决策支持系统的过程。挑战在于，将数据治理活动限制在操纵组织结构图或无需思考的手工任务上，无助于实现操作数据治理
数据治理侠·2023-04-03 18:08

大数据入门(二) - 初探Hadoop

介绍2应用搭建大型数据仓库，PB级数据的存储、处理、分析、统计等业务搜索引擎，从海量的数据中筛选出用户所需要的
JavaEdge·2023-04-03 17:19

万字详解大数据架构新概念：湖仓一体

随着近几年数据湖概念的兴起，业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台，各大云厂商也在纷纷的提出自己的数据湖解决方案，一些云数仓产品也增加了和数据湖联动的特性。
公众号:肉眼品世界·2023-04-03 17:51

湖仓一体架构构建与平台应用实践（PPT）

数据仓库适合存储结构化的、信息密度高的、经过处理后的数据。例如我们通过大数据分析得到的关联信息、画像信息等，都可以放在数据仓库中。“仓库”一词也将它的特点表现得清清楚楚。
公众号:肉眼品世界·2023-04-03 17:51

7000字，详解仓湖一体架构

在了解湖仓一体化之前，我们先来看一则有关数据仓库的有趣故事吧~沃尔玛拥有世界上最大的数据仓库系统，它利用数据挖掘方法对交易数据进行分析后发现"跟尿布一起购买最多的商品竟是啤酒！
大数据AI人工智能培训专家培训讲师叶梓·2023-04-03 17:50

湖仓一体数据平台架构

随着数字化技术的更新迭代，数据库、数据仓库、数据湖等各种概念层出不穷，MPP数据库、Hadoop、对象存储、Hudi等各种数据技术不断涌现，湖仓一体概念逐步被人们所关注，在国际知名机构Gartner发布的
数据文字工作者·2023-04-03 17:18

数智转型助力建筑业全产业链升级，你了解多少？

数据采集和存储通过各种数据采集手段，收集企业内外部的各类数据，并将数据存储到企业的数据仓库中，以便后续的数据分析和利用。数据分析和挖掘通过各种数
shshshhhhh·2023-04-03 16:48

数据建模方法论

如何理解数据仓库从事数据开发后，再回头来看一看数据仓库的定义：数据仓库是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合，用于支持管理决策。
sinadrew·2023-04-03 15:05

ArgoDB 5.1 正式发布：多模融合、实时分析和数据安全多重升级

基于星环科技ArgoDB数据库，可以打造一站式离线数据仓库、实时数据仓库、数据集市和联邦计算平台等数据分析系统，为企业提供全面、便捷、智能和安全的数据服务能力。
星环科技·2023-04-03 11:05

星环科技ArgoDB 3.2正式发布，全面升级易用性、性能和安全

通过一个ArgoDB数据库，就可以打造离线数据仓库、实时数据仓库、数据集市和联邦计算平台等数据分析系统，提供全面、便捷、智能和安全的数据服务能力。2021年6
星环科技·2023-04-03 11:33

《数据仓库工具箱》读书笔记（三）：维度建模宏观知识

第十七章KimballDWBI生命周期第十八章维度建模过程与任务一、组织工作1、确定参与人，特别是业务方参与人2、业务需求评审3、利用建模工具4、利用数据分析工具5、利用或建立命名规则6、日历和设施的协调二、维度模型设计1、统一高层气泡图理解2、开发详细的唯独模型3、模型评审与验证4、形成设计文档第十九章ETL子系统与技术一、需求综合需要考虑的点：业务需求、合规性、数据质量、安全性、数据集成、数据
kaiker·2023-04-03 07:30

字节数据库技术大揭秘！

字节跳动的核心技术理念是数据驱动和敏捷开发，截至2021年12月2日，字节跳动数据仓库数据总量已经达到9500PB的规模，每天新增40PB数据，指标数超过27000个。在这样
米开朗基杨·2023-04-03 06:48

ETL 与 ELT的关键区别

它们是与现代云数据仓库和ETL工具的开发并行发展的流程。在任一过程中，ETL/ELT中的字母代表：E：提取，当原始数据从不同的数据源中提取时。
98加满·2023-04-03 06:33

2023秋招—大数据开发面经—蚂蚁金融

（数据仓库、数据平台、数据算法、数据挖掘）5、讲讲MapReduce的原理6、环形缓冲区为什么要反向？7、实习的存储计算用的是什么组件8、有金融相关知识的储备吗？反问：1、这一面算是第一面吗（是）？
不断学习的克里斯·2023-04-03 06:27

【Hive进阶】-- Hive SQL、Spark SQL和 Hive on Spark SQL

Hive是基于Hadoop的数据仓库工具，可以将结构化数据映射为一张表，提供类似SQL语句查询功能本质：将HiveSQL转化成MapReduce程序。
high2011·2023-04-03 05:58

大数据培训实时数仓实践以及架构的演进

前言“数据智能”(DataIntelligence)有一个必须且基础的环节，就是数据仓库的建设，同时，数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务。
零度下的温柔·2023-04-03 05:48

etl构建数据仓库五步法_集成架构2020年最好的15个ETL工具(第一部)

最好的开源ETL工具列表与详细比较:ETL代表提取、转换和加载。它是从任何数据源中提取数据并将其转换为适当格式以供存储和将来参考的过程。最后，该数据被加载到数据库中。在当前的技术时代，“数据”这个词非常重要，因为大多数业务都围绕着数据、数据流、数据格式等运行。现代应用程序和工作方法需要实时数据来进行处理，为了满足这一目的，市场上有各种各样的ETL工具。使用这样的数据库和ETL工具使数据管理任务更加
weixin_39979080·2023-04-03 05:13

ETL工具箱3 抽取（3.1逻辑映射分析）

该文档贯穿ETL系统物理之前设计逻辑：1有一个规划2确定候选的数据源3使用数据评估分析工具分析源系统4接受数据线和业务规则的遍历5充分理解数据仓库数据模型6验证计算和公式的有效性逻辑数据映射的组成：目标表名称
weixin_30657541·2023-04-03 05:38

美图离线ETL实践

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。在美图特有的业务环境下，ETL需要做到以下需求：1.大数
浪尖聊大数据-浪尖·2023-04-03 05:33

详解用户画像与实时数仓的架构与实践

关键词：数据仓库，ApacheDori
浪尖聊大数据-浪尖·2023-04-03 05:03

关于ETL的两种架构（ETL架构和ELT架构）

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。
微服务商城技术分享·2023-04-03 04:20

关于ETL的两种架构（ETL架构和ELT架构）

ETL一词较常用在数据仓库，但其对象并不限于数据仓库。ETL是构建数据仓库的重要一环，用户从数据源抽取出所需的数据，经过数据清洗,最终按照预先定义好的数据仓库模型，将数据加载到数据仓库中去。
微服务 spring cloud·2023-04-03 04:00

谷歌云GCP

感谢公司赞助了GoogleCloudPlatform(GCP)Coursera课程：https://www.coursera.org/，包括云基础设施，应用开发，数据湖和数据仓库相关知识。
Beth_Chan·2023-04-03 02:18

Doris数据仓库介绍

目录一、Doris简介二、Doris的定位三、产品定位四、Doris的整体架构五、Doris的数据分布六、Doris的关键性技术6.1数据可靠性6.2易于维护6.3ROLLUP表七、Doris的数据模型7.1aggregate聚合模型7.2uniqukey模型7.3duplicatekey模型7.4数据模型的选择建议八、数据组织(存储原则)--按列存储九、索引：9.1前缀索引：9.2智能索引十、m
海阔天空_81·2023-04-03 02:47

34学习数据分析工具 Hive 的基本用法，包括数据仓库、SQL 查询

Hive是一个基于Hadoop的数据仓库工具，它提供了SQL-like的查询语言，使得用户可以用类似SQL的方式查询和分析存储在Hadoop上的大数据。
玩机科技社·2023-04-03 00:35

什么是数据仓库？大数据实时数仓建设架构图，及应用案例介绍

本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。全文5000字，读完需要13分钟！
hellozhxy·2023-04-02 23:51

ClickHouse原理解析与应用实践

第1章ClickHouse的前世今生在大量数据分析场景的解决方案中，传统关系型数据库很快就被Hadoop生态所取代传统关系型数据库所构建的数据仓库，被以Hive为代表的大数据技术所取代数据查询分析的手段也层出不穷
yeedom·2023-04-02 22:45

数据仓库中星型模型和雪花模型

参考：理解数据仓库中星型模型和雪花模型在数据仓库的建设中，一般都会围绕着星型模型和雪花模型来设计表关系或者结构星型模型星型模型图星型模是一种多维的数据关系，它由一个事实表和一组维表组成。
Grey____·2023-04-02 21:39

精准水位在流批一体数据仓库的探索和实践

本文结合实时计算的水位技术在流批一体数据仓库中的探索和实践，重点阐述了水位技术的概念和相关理论实践，尤其就水位在实时计算系统中的特性、边界定义和应用，最后重点描述了一种改进的精准水位的设计和实现。
百度Geek说·2023-04-02 19:04

Presto实现原理和美团的使用实践

Presto实现原理和美团的使用实践Facebook的数据仓库存储在少量大型Hadoop/HDFS集群。Hive是Facebook在几年前专为Hadoop打造的一款数据仓库工具。
星河_赵梓宇·2023-04-02 18:25
上一页 46 47 48 49 50 51 52 53 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他