数据湖数据仓库

什么是数据仓库？数据仓库测试应该考虑什么？以及如何进行数据仓库的测试？

一、数据仓库（DataWarehouse）是一个面向主题、集成、非易失的数据存储，用于支持企业决策和分析。
打了鸡血的点狗·2023-08-28 22:03

新一代数据湖存储技术Apache Paimon入门Demo

目录前言1.什么是ApachePaimon一、本地环境快速上手1、本地Flink伪集群2、IDEA中跑PaimonDemo2.1代码2.2IDEA中成功运行3、IDEA中Stream读写3.1流写3.2流读（toChangeLogStream）二、进阶：本地（IDEA）多流拼接测试要解决的问题：note：1、'changelog-producer'='full-compaction'（1）mult
Leonardo_KY·2023-08-28 19:08

基于数据湖的多流拼接方案-HUDI概念篇

目录一、为什么需要HUDI？1.传统技术选型存在哪些问题？2.Hudi有什么优点？基于HudiPayload机制的多流拼接方案：二、HUDI的应用场景1.什么场景适合使用hudi？2.什么场景不适合使用hudi？三、什么是HUDI？HUDI能做什么？1.什么是HUDI？2.HUDI能做什么（特性）？四、HUDI的概念&原理1.概念2.原理五、流批一体一、为什么需要HUDI？1.传统技术选型存在哪些
Leonardo_KY·2023-08-28 19:36

BI产品未来的发展趋势由我们共同决定

项目周期长BI项目往往在ETL处理和数据仓库建模、性能优化等方面耗
思迈特Smartbi·2023-08-28 18:52

浅谈数据治理

当然，本文也会涉及一部分技术相关的描述，所以能够对数据基础平台，数据仓库，数据应用等有所了解，会更加好
愤怒的谜团·2023-08-28 16:49

一个免费好用的全域数据集成平台

并且在数据湖项目中，采用的是Kettle作为离线开发的核心功能。这个两个开源项目虽然很优秀，
大数据指北·2023-08-28 15:10

利于搭建国内网站的免费CDN加速github和npm方式

记录下常用的免费cdn，以下链接可直接访问我部署的数据，那么根据这个格式可替换为你对应的数据仓库格式。建议有回源选回源。
木子欢儿·2023-08-28 13:42

软信天成：面对数据网格和数据湖，企业该如何取舍？

近年来，数据网格、数据湖这一类数据概念迅速蹿红，原因是它们可以有效解决数据管理所带来的挑战，使企业更加敏捷、智能地使用数据。但它们究竟是如何实现？之间有何区别？以及企业该如何选择？下文将为大家揭晓。
软信数据研究院·2023-08-28 11:17

Apache Celeborn 让 Spark 和 Flink 更快更稳更弹性

摘要：本文整理自阿里云/数据湖Spark引擎负责人周克勇（一锤）在StreamingLakehouseMeetup的分享。
·2023-08-28 11:30

【进阶篇】找个饭店，聊聊数据分析架构

燕飞出稿，必属精品~作者简介：燕飞，Kyligence大数据老司机，拥有超过15年的大数据/数据仓库领域从业经验，对大数据/数据仓库的建设规划、架构设计、技术体系、方法论及主流厂商的产品和解决方案，均有深入的研究和实践
Kyligence·2023-08-28 11:08

数仓--------简单了解

是一位爱分享的博主，有兴趣的小可爱可以来互讨个人主页::小小页面gitee页面:秦大大一个爱分享的小博主欢迎小可爱们前来借鉴数仓**作者前言**什么是数仓数仓分层数仓类型数仓规范数据走向什么是数仓数仓，又称为数据仓库
老秦包你会·2023-08-28 08:38

数据仓库环境下的超市进销存系统结构

传统的进销存系统建立的以单一数据库为中心的数据组织模式，已经无法满足决策分析对数据库系统的要求，而数据仓库技术的出现和发展，为上述问题的解决提供了强有力的工具和手段。
a66889999·2023-08-28 05:31

基于数据仓库和多维分析技术的决策支持系统

1)降低库存成本通过数据仓库系统，将成千上万种货物的销售数据和库存数据集中起来，通过数据分析，对知识进行分类，可以知道库存中一段时间内，没有收到订单的货物，很少收到订单的货物和库存中周转很快的货物。
a66889999·2023-08-28 05:31

进销存系统的数据建模

1.1需求分析对于数据仓库系统而言，决策者最为迫切的需求在于更加准确的掌握超市的经营状况及进、销、存情况，主要包括：①进货趋势；②销售市场波动趋势；③企业存货情况。
a66889999·2023-08-28 05:28

SQL Server软件安装包分享（附安装教程）

它被设计用于存储、管理和查询数据，被广泛应用于企业级应用、数据仓库和电子商务等场景。
Roc-xb·2023-08-28 00:56

Hive原理剖析

一、简介Hive是建立在Hadoop上的数据仓库框架，提供大数据平台批处理计算能力，能够对结构化/半结构化数据进行批量分析汇总完成数据计算。
Hello.Reader·2023-08-27 18:33

下一代存储解决方案：湖仓一体

文章首发地址湖仓一体是将数据湖和数据仓库相结合的一种数据架构，它可以同时满足大数据存储和传统数据仓库的需求。
Walter Sun·2023-08-27 17:12

数据湖：解锁数据价值的新时代

文章首发地址数据湖（DataLake）是一种数据存储和管理架构，它将不同类型的数据（如结构化数据、半结构化数据和非结构化数据）以原始形式保存在一个公共存储库中，而不强制执行预定义模式或数据结构。
Walter Sun·2023-08-27 17:11

hive数据调优

hive作为数据仓库工具，可以查看HDFS结构化文件内容，使用sql进行数据加工处理。
稻草人_d41b·2023-08-27 16:59

数据库系统

数据库系统数据库系统三级模式两级映像数据库设计真题数据模型概念数据模型逻辑数据模型在案例分析中也有考察数据库系统选择题考点：三级模式两级映像数据库设计（6个阶段）E-R模型关系模型关系代数函数依赖键与约束范式模式分解并发控制封锁协议分布式数据库数据仓库反规范化技术大数据
计算机CV民工·2023-08-27 15:26

数据中台产品经理初探五

2019年还剩两个半月，接触数据中台的概念将近一年，做数据中台PD有十个半月，感谢组织对我的信任，感谢领导同事对我的放心，让一个不懂数据库、一个不会数据仓库知识、一个不懂行业知识的人放手一搏。
Frank舟·2023-08-27 12:31

使用Flink将大数据写入AnalyticDB MySQL

AnalyticDBMySQL是一个高性能、高可用性的关系型数据库，适用于大数据分析和数据仓库场景。本文将介绍如何使用Flink将大数据写入AnalyticDBMySQL，并提供相应的源代码示例。
2301_78484069·2023-08-27 11:59

达梦数据库物化视图介绍

物化视图可以用于数据复制（DataReplication），也可用于数据仓库缓存结果集以此来提升复杂查询的性能。1
weixin_42942173·2023-08-27 02:57

Oracle sqlldr命令

SQL*LOADER是大型数据仓库选择使用的加载方法，因为它提供了最快速的途径（DIRECT，PARALLEL）。
ooooooooooooooxiaosu·2023-08-27 02:47

数仓建模综述

目前业界使用最多的模型是RalphKimball在《数据仓库工具》中提出的维度
精品资料学习库·2023-08-26 23:31

Apache Doris 2.0.0 版本正式发布：盲测性能 10 倍提升，更统一多样的极速分析体验

在2.0.0版本中，ApacheDoris在标准Benchmark数据集上盲测查询性能得到超过10倍的提升、在日志分析和数据湖联邦分析场景能力得到全面加强、数据更新效率和写入效率都更加高效稳定、支持了更加完善的
SelectDB技术团队·2023-08-26 19:08

Doris Summit 2023 正式启航，议题征集 & 合作伙伴招募火热进行中

作为专注于实时分析的开源实时数据仓库ApacheDoris，从开源至今已走过6个年头，这些年里ApacheDoris一直稳步向前，并在这两年取得了令人瞩目的进展。
SelectDB技术团队·2023-08-26 19:08

一键实现 Oracle 数据整库同步至 Apache Doris

在实时数据仓库建设或迁移的过程中，用户必须考虑如何高效便捷将关系数据库数据同步到实时数仓中来，ApacheDoris用户也面临这样的挑战。
SelectDB技术团队·2023-08-26 19:37

三张图讲清楚大数据基础设施Hadoop、Lambda、kappa架构

关于数据的处理技术，包含数据库、数据集市、数据仓库、数据湖、数据中台，每次数据处理的演进都代表着业务需求变化的趋势、技术的演进。除了数据处理方式在演进之外，数据处理的基础措施也在不断的演进
AI课工场·2023-08-26 19:58

数据库与数据仓库的本质区别是什么

整理自知乎：https://www.zhihu.com/question/20623931逻辑层面/概念层面数据库和数据仓库其实是一样的或者及其相似的，都是通过某个数据库软件，基于某种数据模型来组织、管理数据
这个该叫什么呢·2023-08-26 16:10

使用 Transformer 和 Amazon OpenSearch Service 构建基于列的语义搜索引擎

在数据湖中，对于数据清理和注释、架构匹配、数据发现和跨多个数据来源进行分析等许多操作，查找相似的列有着重要的应用。
亚马逊云开发者·2023-08-26 12:35

采集项目和数仓项目的关系

1.介绍采集项目和数仓项目采集和数仓是企业数据管理平台的2个核心功能模块,相对独立,所以可以独立开发区别功能采集:数据的采集和传输数仓:数据的存储流程数据库->数据采集->数据仓库->可视化界面2.数据仓库什么是数仓
叫我莫言鸭·2023-08-26 04:00

Hive面试自学版

Hive是由Facebook开源，基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。
叫我莫言鸭·2023-08-26 04:30

工作中遇到的坑(六)

MVVMModel：数据模型以及Repository数据仓库（用于获取和组合来自网络，本地数据）View：界面ViewModel:内部会有一个LiveData，将Model的数据放到LiveData中，
云呆呆·2023-08-26 04:15

Informatica 9.1 开发实战应用-孙专-专题视频课程

数据仓库的建设目标，是利用组织里的数据，更加有效地辅助决策过程，而这一过程的核心是数据处理，数据处理阶段离不开ETL过程的实现。
大厂数据专家·2023-08-25 22:46

StarRocks 3.1重磅发布，云原生湖仓新范式再升级！

StarRocks自4月底发布3.0版本，拥抱云原生，开启极速统一的湖仓新范式；8月7日，StarRocks正式发布全新3.1版本，全面提升云原生存算分离构架、极速数据湖分析、物化视图等重量级特性，让用户更简单的实现极速统一的湖仓分析
StarRocks_labs·2023-08-25 19:15

直播｜深入解析 StarRocks 存算分离—云原生湖仓 Meetup#2

StarRocks3.0正式开启极速统一的湖仓新范式，借助云原生存算分离构架、极速数据湖分析、物化视图等重量级特性实现湖仓架构升级，兼具数据仓库查询高性能与数据湖低成本可扩展的优势，让用户更简单地实现极速统一的湖仓分析
StarRocks_labs·2023-08-25 19:15

性能全面飙升！StarRocks 在贝壳找房的极速统一实践

随着数据和业务规模的增长，传统数仓的分析能力面临很大的挑战，贝壳需要引入新兴的数据湖技术来支撑业务的发展。
StarRocks_labs·2023-08-25 19:45

BigQuery

什么是BigQueryBigQuery是一种无服务器的数据仓库，它让开发者可以使用Google的架构来运行SQL语句对超级大的数据库进行操作。
追梦人在路上不断追寻·2023-08-25 17:24

40分钟500GB！轻松将MySQL数据同步到Doris

而Doris作为一款专为大数据分析设计的分布式数据仓库，具有高性能、可扩展的特点，其优异的数据处理能力也在行业内广受关注。01为什么需要把MySQL同步到Doris？
·2023-08-25 15:22

大数据-Hive

第1章Hive入门1.1什么是Hive1）Hive简介Hive是由Facebook开源，基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。
ONLYYD·2023-08-25 13:27

【数据仓库】Linux、CentOS源码安装Superset

Linux、CentOS源码安装Superset步骤，遇到的各种问题。报错问题：Linux下pip版本问题Youareusingpipversion8.1.2,howeverversion22.2.2isavailable.解决办法：安装python3的pipyuminstallpython3-pip再升级pip3install--upgradepip
wenchun001·2023-08-25 12:09

Apache Celeborn 让 Spark 和 Flink 更快更稳更弹性

摘要：本文整理自阿里云/数据湖Spark引擎负责人周克勇（一锤）在StreamingLakehouseMeetup的分享。
Apache Flink·2023-08-25 09:44

软考高级系统架构设计师系列论文八十八：财务数据仓库系统的设计与实现

软考高级系统架构设计师系列论文八十八：财务数据仓库系统的设计与实现一、摘要二、正文三、总结一、摘要近年来，数据仓库技术在信息系统的建设中得到了广泛应用，有效地为决策提供了支持。
最笨的羊羊·2023-08-25 05:23

深入解析数据仓库的支架表

前言支架表是维度设计中非常有意思的一部分，可以说是星型模型和雪花模型的结合；但在大部分维度建模书里都只是简单的一笔带过，实在是过于可惜。在本文，笔者会对支架表进行详细的介绍，并就其实际应用场景进行探讨。支架表的诞生支架表的诞生离不开经典的数仓模型之争——星型模型与雪花模型星型模型简单地说，所有的维度表都连在1个事实表上，就是星型模型星型模型星型架构是一种非规范化的结构，多维数据集的每一个维度都直接
秋夜雨凉·2023-08-24 23:52

二.维度建模技术

6.描述环境的维度维度表时数据仓库的“灵魂”。7.用于度量
阿猫阿狗Hakuna·2023-08-24 20:26

【TiDB理论知识08】HATP概述

1HTAP技术OLTP在线事务支付转账高并发每次操作的数据量少，行存OLAP报表分析每次操作大量数据列存储2传统解决方案数据抽取到数仓或者数据湖ETL有延迟，一般会有T+1T+2数据多副本3HTAP的要求
DBA之路·2023-08-24 18:05

数据仓库笔记

数据仓库笔记目录概念与数据库的对比数据仓库建模方法论ER模型维度模型维度建模理论之事实表概述特点维度建模理论之维度表维度设计要点数据仓库分层最近在学习离线数据仓库建设，学习资源：尚硅谷之数仓5.0（不得不说
·落魄书生··2023-08-24 17:52

尚硅谷-离线数仓-笔记

尚硅谷-离线数仓-笔记一、数仓建模理论第一章数仓概述1.1数仓概念数据仓库是一个为数据分析而设计的企业级数据管理系统。
林子茗·2023-08-24 17:21

数据湖是什么

数据湖(DataLake)是大数据系统中的一个重要概念,其主要特征是:1.集中存储所有原始数据数据湖试图存放所有可获得的原始数据,包括结构化数据、半结构化数据及非结构化数据。
diannao720·2023-08-24 09:09
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他