数据仓库数据中台数据湖

Acrel-EIOT能源物联网平台

Acrel-EIoT能源物联网云平台是一套基于安科瑞物联网数据中台，建立了上下行数据标准，为互联网用户提供能源物联网数据服务的平台。
安科瑞 须静燕·2023-11-01 15:40

十万字图文详解mysql、redis、kafka、elasticsearch（ES）多源异构不同种类数据库集成、数据共享、数据同步、不同中间件技术实现与方案，如何构建数据仓库、数据湖、数仓一体化？

数据库大数据量、高并发、高可用解决方案，十万字图文详解mysql、redis、kafka、elasticsearch（ES）多源异构不同种类数据库集成、数据共享、数据同步、不同中间件技术实现与方案，如何构建数据仓库
代码讲故事·2023-11-01 13:11

数据仓库-拉链表

在数据仓库中制作拉链表，可以按照以下步骤进行：确定需求：首先明确需要使用拉链表的场景和需求。例如，可能需要记录历史数据的变化，以便进行时间序列分析等。
wangqiaowq·2023-11-01 13:35

再见 MySQL！这可能不再是一个哗众取宠的梗了

麦聪软件，全球领先的DaaS厂商，轻量级数据中台领导者。世界500强集团中已有30多家选用，帮助400多家加速企业数字化转型。核心产品麦聪DaaS平台包含
麦聪聊数据·2023-11-01 08:14

建表到查询，mysql数据库的干货分享

数据库一、定义数据库(databse)：数据仓库，它是保存和管理数据的仓库如果希望在程序中实现数据持久化操作，数据库就是一种非常好的解决方案BATCMD：百度、阿里、腾讯、携程、美团、滴滴IOE：IBM
weixin_47927271·2023-11-01 08:41

基于大中台小前台模式设计高并发电商架构

一、什么是大中台（业务中台、数据中台、技术中台等）大中台小前台的组织模式最近在业界很火热，此模式最早在芬兰著名移动游戏公司Supercell实施。
musicml·2023-11-01 05:30

恒驰服务 | 华为云数据使能专家服务offering之数仓建设

数仓建设-适用场景恒驰数据仓库服务主要针对有数据仓库不同业务诉求的客户，通过服务增购的形式，提供数据仓库咨询或数据迁移服务，协助客户优化业务以及
恒云联盟·2023-11-01 03:34

Hive连接异常：无法通过JDBC连接打开客户端传输（JDBC Uri: jdbc:hive2:// 大数据）

Hive连接异常：无法通过JDBC连接打开客户端传输（JDBCUri:jdbc:hive2://大数据）在大数据领域中，Hive是一个常用的数据仓库解决方案，可以用于处理和分析大规模的结构化数据。
JieLun_C·2023-10-31 20:57

ETL 是什么？不信你看不懂！--九五小庞

ETL，全称Extract-Transform-Load，它是将大量的原始数据经过提取(extract)、转换(transform)、加载(load)到目标存储数据仓库的过程。
Up九五小庞·2023-10-31 18:48

BI数据系统的设计流程

是否需要建立数据仓库？以及前期准备工作，比如相关数据字典
hzp666·2023-10-31 15:10

大数据融合数仓场景化解决方案总结笔记

1.数据仓库与融合数仓数据库架构设计Shared-Disk各个处理单元使用自己的私有CPU和Memory，共享磁盘系统Shared-Everything一般是针对单个主机，完全透明共享CPU/Memory
BIN3399·2023-10-31 12:38

MVVM在Flutter中的实现

M-Model层数据仓库层，你可以把你获取数据的方法（不管是从服务器还是从本地，调用者不关心数据是从哪里来的，数据来源规则在自己内部定义）、数据模型（各种entity、bean什么的）都放在这一
爱静静真好·2023-10-31 11:44

【系统架构】架构风格专题

目录1、定义2、通用架构风格分类3、架构风格比较4、示例：管道-过滤VS数据仓库）比较因素分析1、定义架构风格：描述某一特定应用领域中系统组织方式的惯用模式，反映了领域中众多系统所共有的结构和语义特性，
平凡之大路·2023-10-31 08:23

Apache Hive

目录数据仓库（DW）SQL语法分类Hive和Hadoop之间的关系（底层是HadoopHive将SQL转换为MapReduce）为什么使用Hive使用HadoopMapReduce直接处理数据所面临的问题使用
liyantower·2023-10-31 05:44

数据预处理_数据清理（缺失值、噪声等详细处理）

--数据集成：将数据由多个数据源合并成一个一致的数据存储，如数据仓库。--数据归约：可以通过如聚集、删除冗余特征或聚类来降低数据的规模。--数据变换：(例如，规范化)可以用来把数据压缩
Lily_我是一个小钢豆·2023-10-31 04:14

【ETL】ETL大数据集成工具Sqoop、dataX、Kettle、Canal、StreamSets大比拼

1.摘要对于数据仓库，大数据集成类应用，通常会采用ETL工具辅助完成。
九层之台起于累土·2023-10-31 00:37

hive一次补跑数据遇到的坑

根据之前介绍的数据仓库分层架构设计，虽然有公共逻辑下沉的好处，但是一旦底层
愤怒的谜团·2023-10-30 23:53

分析师要懂的数仓知识

为什么学数据仓库工作中经常去数据库中找数据做分析，也和数仓同事对接过，做过一些表，但是只是对一些固定的事实和维度表熟悉，对数仓的整体架构、运作流程却没有一个大概的了解。
成鹏9·2023-10-30 22:57

超30万字的业务中台/数据中台实战100讲2.0最终版（建议收藏！）

目录V2.0终版迭代内容：增加最近更新的中台系列文章至本目录；根据最新热点修订并调整部分未更新内容方向；目录V1.1迭代内容：增加最近更新的中台系列文章至本目录；根据最新热点修订并调整部分未更新内容方向；本目录使用方法：本目录推文+《中台产品经理宝典》一书=中台实战100讲篇：代表章节作用，快速查询索引；主标题：将原有公众号内容根据篇主题进行重新排序（所以点击文章会出现序号不统一的情况大家请谅解）
《中台产品经理宝典》三爷·2023-10-30 22:35

奇富科技引领大数据调度革命：高效、稳定、实时诊断

刘坤元以一个数仓（数据仓库的简称，指用于存储、分析、报告的数据系统）同学熟知的起夜率指标开启了本次分
CSDN云计算·2023-10-30 21:09

第二课 Hive运行机制与使用

hive介绍hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。
Arroganter·2023-10-30 12:29

国家数据局正式揭牌，数据专业融合型人才迎来发展良机【文末送书五本】

数据专业融合型人才迎来发展良机摘要书籍简介数据要素安全流通Python数据挖掘：入门、进阶与实用案例分析数据保护：工作负载的可恢复性DataMesh权威指南分布式统一大数据虚拟文件系统Alluxio原理、技术与实践云原生数据中台
以山河作礼。·2023-10-30 11:07

hadoop组件及各自的功能

分布式资源管理系统，3.MapReduce:Hadoop的编程框架4.Pig:基于hadoop的一门数据处理语言5.Zookeeper：分布式协调服务6.Hbase:Hadoop下的分布式数据库7.Hive:分布式数据仓库
ZK_0705·2023-10-30 10:17

Impala介绍优缺点

基于Hive，使用内存计算，兼顾数据仓库、具有实时、批处理、多并发等优点。是CDH平台首选的PB级大数据实时查询分析引擎。
墨卿风竹·2023-10-30 07:17

大数据简历要点与模拟面试和项目介绍模板二

模拟面试和项目介绍模板10一、自我介绍（目前不知道怎么做）您好，我叫xxx，毕业于xxx学校，因为在大学里学过javase、mysql、web、数据结构与算法等计算机基础知识，在一份软件测试的实习中接触到数据仓库
wespten·2023-10-30 03:29

数仓建模基本类型

如果数据仓库中采用这种建模方式，还有另外的好处就是可以直接将关系型数据库中数据直接导入数仓，减少了很多的建模工作。三范式建模的一个显而易见的缺点就是查询性能，因为需要跨表查询。
浮zai梦里·2023-10-30 03:29

数据仓库系列2-数据仓库建模介绍

一.建模理论1.1ER实体模型在信息系统中，将事务抽象为“实体”（Entity）、“属性”（Property）、“关系”（Relationship）来表示数据关联和事物描述，这种对数据的抽象建模通常被称为ER实体关系模型。实体：通常为参与到过程中的主体，客观存在的，比如商品、仓库、货位、汽车，此实体非数据库表的实体表。属性：对主体的描述、修饰即为属性，比如商品的属性有商品名称、颜色、尺寸、重量、产
只是甲·2023-10-30 00:27

关于数据中台的理解和思考

一、什么是数据中台数据中台是指通过数据技术，对海量数据进行采集、计算、存储、加工，同时统一标准和口径。把数据统一后，会形成标准数据，再进行存储，形成大数据资产层，进而为客户提供高效的、可复用的服务。
骇客567·2023-10-29 10:52

Hive-day01-简单介绍

一：什么是Hive1：hive简介hive：解决海量结构化日志的数据统计工具hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。
总会有天明·2023-10-29 08:40

数字化转型系列主题：数据中台建设方法论

本文转自：大数据启示录数据中台是什么？
LarryHai6·2023-10-29 06:59

数字化转型系列主题：数据中台知识体系

笔者根据个人数据中台的工作实践和学习以及思考总结，撰写成本文数据中台知识体系。一.数据中台是什么01定义数据中台是一套可持续“让企业的数据用起来”的机制，是一种战略选择和组织形式，是依据企业特
LarryHai6·2023-10-29 06:29

数字化转型系列主题：数据中台建设的一些思考

本文是一篇关于数据中台建设的一些思考供大家借鉴：一、什么是数据中台数据中台定义数据中台是一个企业级数据管理平台，集成了数据采集、数据存储、数据处理、数据分析和数据应用等功能，旨在解决传统数据孤岛、数据分散
LarryHai6·2023-10-29 06:28

【Airflow】构建爬虫任务系统

是一个ETL工具ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程这里是一个github的地址https://github.com/apache/airflow这里是官方文档https:
瓜皮三三·2023-10-29 05:57

数据中台对于企业来讲意味着什么？_光点科技

而在这样的背景下，数据中台的出现无疑成为企业数据治理和管理的重要工具。数据中台指的是一个包含数据整合、存储、计算、分析、展示等功能的平台，能够将企业内部、外部各类数据进行整合、归类、管理、加工和利用。
光点数据治理·2023-10-29 01:55

开源大数据OLAP引擎最佳实践

现在ROLAP计算存储一体的数据仓库主要有三种，即StarRocks(DorisDB)，ClickHouse和ApacheDoris
zhisheng_blog·2023-10-28 21:59

Python+大数据-hadoop(五)--数据仓库、Apache 01

Python+大数据-hadoop(五)–数据仓库、Apache01今日课程学习目标理解数仓概念、起源由来理解数仓(OLAP)与数据库(OLTP)区别掌握数仓分层架构思想掌握ApacheHive功能与架构组件理解
呆猛的呆呆小哥·2023-10-28 21:56

【大数据前置基础】大数据聚焦层面，数据仓库，OLAP和OLTP

大数据中的几个概念1大数据聚集层面2数据仓库3OLAP和OLTP手动反爬虫，禁止转载：原博地址https://blog.csdn.net/lys_828/article/details/118599017
lys_828·2023-10-28 21:20

大数据技术之Hive

目录1.Hive入门1.1什么是Hive1.2Hive的数据存储1.3Hive的系统架构1.4Metastore1.5数据库与数据仓库的区别2.Hive安装部署2.1下载2.2安装MySQL2.3安装hive3
小猫不会去楼兰捉虫·2023-10-28 21:47

【大数据概述】Hadoop技术栈

2.2.Hive与关系型数据库关系3.Hadoop3.1.概述3.2.Hadoop生态技术3.2.1.概述3.2.2.架构4.Spark4.1.概述4.1.1.统一的引擎5.数据存储及处理的发展5.1.数据仓库
vk-fengz·2023-10-28 21:17

新手向：如何考虑将数据库技术和大数据框架结合使用？

数据湖构建：随着各种数据源的增加，组织需要一个集中的存储解决方案。大数据
Joy T·2023-10-28 21:23

国家数据局正式揭牌，数据专业融合型人才迎来发展良机

《数据要素安全流通》《Python数据挖掘：入门、进阶与实用案例分析》《数据保护：工作负载的可恢复性》《DataMesh权威指南》《分布式统一大数据虚拟文件系统Alluxio原理、技术与实践》《云原生数据中台
想你依然心痛·2023-10-28 20:04

Adventure项目python、数仓实现可视化看板总结

一、项目介绍1.1项目需求基于第一部分业务背景，公司为加强线上业务数据化方面的治理，让业务部门能够实现自主分析从而实现对市场的快速判断，现需使用Python、数据仓库实现自动更新式可视化看板。
包哥宝爷小威武·2023-10-28 19:26

双11专刊｜云原生数据仓库AnalyticDB支撑双11，大幅提升分析实时性和用户体验

简介：2021年双十一刚刚落幕，已连续多年稳定支持双十一大促的云原生数据仓库AnalyticDB，今年双十一期间仍然一如既往的稳定。除了稳定顺滑的基本盘之外，AnalyticDB还有什么亮点呢？
阿里云云栖号·2023-10-28 17:07

2019-08-26 pentaho metadata terminology

commonwarehousemetamodel公共数据仓库模型domain域元数据域代表了在元数据层创建、存储、使用的业务对象。
小糊涂神52vol·2023-10-28 17:18

数据仓库笔记

数据仓库的作用数据仓库的特点数据仓库中的数据是面向主题的数据仓库中的数据是集成的数据仓库中的数据是不可更新的数据仓库中的数据是随时间不断变化的数据仓库的发展历程简单报表阶段:生成简单报表和汇总数据帮助领导决策数据集市阶段
V1cttor·2023-10-28 10:32

基于Apache doris怎么构建数据中台(一)-什么是数据中台

这是数据中台系列的第一篇文章，主要阐述数据中台概念，从技术和业务视觉看数据中台及数据中台要解决的问题1.什么是数据中台数据是从业务系统产生的，而业务系统也需要数据分析的结果，那么是否可以把业务系统的数据存储和计算能力抽离
张家锋·2023-10-28 10:09

BI是什么？想要了解BI需要从哪些方面入手？

商业智能BI指的就是主要由数据仓库、数据分析、查询报表、数据可视化组成的数据类技术解决方案，可以将海量杂乱的数据转化为可用的信息，满足企业不同人群
派可数据BI可视化·2023-10-28 08:09

数据仓库之数据质量监控

文章目录==数据质量的理解====数据质量维度====问题反馈流程====数据质量治理的三个阶段====数据质量产生的根本原因====数据质量治理的对象====数据质量战略====数据质量战略12条指令====数据质量测试框架====最初的一次评估====初步评估执行流程====持续测量流程====持续测量的结果与交付结果====过程控制解决方案====定期测量====测试类型清单参考====数据
往事随风_h·2023-10-28 05:01

实操指南 | Resource Queue如何实现对AnalyticDB PostgreSQL的资源管理？

简介：作者：阿里云数据库OLAP产品部-子华一背景AnalyticDBPostgreSQL版（简称ADBPG）是阿里云数据库团队基于PostgreSQL内核（简称PG）打造的一款云原生数据仓库产品。
阿里云云栖号·2023-10-28 03:59

【遇见Doris】基于Doris的有道精品课数据中台建设实践

李荣谦有道精品课数据中台团队数据中台实时数仓负责人我们本次想要和大家分享一下有道精品课数据中台的架构演进过程，以及Doris作为一个MPP分析型数据库是如何为不断增长的业务体量提供有效支撑并进行数据赋能的
ApacheDoris·2023-10-28 02:44
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他