【数据中台】

数据中台为什么不好搞？

从2015年阿里提出“大中台”的数据中台战略，到2019年大厂及中台服务商“大兴”数据中台，再到2021年大厂又开始拆中台。数据中台从小甜甜变成牛夫人仅仅用了2年时间，为什么这么快数据中台就不香了？
码农code之路·2023-11-30 00:03

数据中台·实时开发计算平台

什么是数据中台·实时计算平台？实时计算（实时开发）是为构建一套一站式、高性能实时大数据处理平台，广泛适用于流式数据处理场景。
数据先生·2023-11-30 00:33

数据中台整体设计思路复盘

首先，什么是数据中台，由于每个企业每种项目对中台的定义不同，这里仅仅给一个概念：数据中台是指通过数据技术，对海量数据进行采集、计算、存储、加工，同时统一标准和口径。
qq_33744471·2023-11-30 00:32

数据中台：数据模型设计

但是在数据中台构建之前，分析师经常发现⾃⼰没有可以复⽤的数据，不得不使⽤原始数据进⾏清洗、加⼯、计算指标。由于他们⼤多是⾮技术专业出⾝，写的SQL质量⽐较差，甚⾄⻅过5层以上的嵌套。这种SQ
小晨说数据·2023-11-30 00:31

阿里云数据中台核心引擎

核心引擎MaxCompute阿里离线数据计算平台（离线数仓）原名ODPS,阿里巴巴自主研发的海量数据处理平台MaxCompute处理存储在TableStore的数据（不负责收集数据到TableStore中），使用Fluentd服务（类似的服务还有kafka、LogHub、DataX等，都大同小异，这里我用Fluentd作描述只是方便），通过Fluentd我们轻松的创建任务去按时读取各台服务器上的日
hsabrina·2023-11-30 00:30

奇点云数据中台技术汇（三）| DataSimba系列之计算引擎篇

随着移动互联网、云计算、物联网和大数据技术的广泛应用，现代社会已经迈入全新的大数据时代。数据的爆炸式增长以及价值的扩大化，将对企业未来的发展产生深远的影响，数据将成为企业的核心资产。如何处理大数据，挖掘大数据的价值，让大数据为企业的发展保驾护航，将是未来信息技术发展道路上关注的重点。传统的数据处理方式通常是将数据导入至专门的数据分析工具中，这样会面临两个问题：1、如果源数据非常大时，往往数据的移动
cuba7764·2023-11-30 00:00

数据中台架构原理与开发实战：数据中台的数据分析工具与平台

然而，对于数据中台的设计、搭建、运维、应用等工作仍存在一定的难度。如何快速、高效地构建出一个满足多变性、变化快、数据量大、并发访问量大的数据服务，是一个值得研究的问题。在本文中，作者通过从用户视角
禅与计算机程序设计艺术·2023-11-30 00:30

大数据管理平台（数据中台）方案及重难点技术分析

1.大数据管理平台(数据中台)1.1.系统概述需求描述建设大数据管理中台，按照统一的数据规范和标准体系，构建统一数据采集-治理-共享标准、统一技术开发体系、统一接口API，实现数据采集、平台治理，业务应用三层解耦
打码人的日常分享·2023-11-29 14:30

如何进行指标质量治理——指标系统（提质篇）

作者介绍@小风数据中台产品负责人；UBDC全域大数据峰会“灯塔人物”；擅长埋点模型、指标治理，数仓架构等；“数据人创作者联盟”成员。01指标质量治理概述指标质量治理主要分为两个部分：提质与增效。
一个数据人的自留地·2023-11-29 08:26

华为认证大数据工程师（HCIA-Big Data）--练习题

BCDA.实时数据处理B.基于行业领域知识库快速构建数据中台C.云上数据平台快速搭建D.一站式的数据运营治理平台2、A
大沙头三马路·2023-11-29 08:05

数据中台行业发展概况及展望

随着企业业务创新不断加快，对数据开发的响应速度提出更高的要求，数据中台就诞生在这样的大背景下。
大数据v·2023-11-29 01:20

数据中台能力成熟度评估模型

会上，中国信息通信研究院云计算与大数据研究所大数据与区块链部高级业务主管王卓发布了《数据中台能力成熟度模型》框架。一.数据中台的相关背景首先，我们来介绍一下这项工作的背景。从
公众号:肉眼品世界·2023-11-28 19:25

【数据中台】开源项目（2）-Davinci可视应用平台

1平台介绍Davinci是一个DVaaS（DataVisualizationasaService）平台解决方案，面向业务人员/数据工程师/数据分析师/数据科学家，致力于提供一站式数据可视化解决方案。既可作为公有云/私有云独立部署使用，也可作为可视化插件集成到三方系统。用户只需在可视化UI上简单配置即可服务多种数据可视化应用，并支持高级交互/行业分析/模式探索/社交智能等可视化功能。开源地址：htt
码农丁丁·2023-11-28 18:25

”敏捷知识“分享

分享主题主要是数据中台项目的敏捷实践目录1、排期表2、SprintPlanning1、明确价值观，每个人对自己的产出物负责，对应敏捷价值观“承诺”2、明确迭代周期，迭代预期交付物，也就是“Sprint目标
张熙_430d·2023-11-27 10:05

【数据中台】开源项目（1）-LarkMidTable

LarkMidTable是一站式开源的数据中台，实现中台的基础建设，数据治理，数据开发，监控告警，数据服务，数据的可视化，实现高效赋能数据前台并提供数据服务的产品。
码农丁丁·2023-11-27 09:38

【数据中台】开源项目（2）-Dbus数据总线

1背景企业中大量业务数据保存在各个业务系统数据库中，过去通常的同步数据的方法有很多种，比如：各个数据使用方在业务低峰期各种抽取所需数据（缺点是存在重复抽取而且数据不一致）由统一的数仓平台通过sqoop到各个系统中抽取数据（缺点是sqoop抽取方法时效性差，一般都是T+1的时效性）基于trigger或时间戳的方式获得增量的变更（缺点是对业务方侵入性大，带来性能损失等）这些方案都不能算完美，我们在了解
码农丁丁·2023-11-27 00:44

【数据中台】开源项目（2）-Wormhole流式处理平台

Wormhole是一个一站式流式处理云平台解决方案（SPaaS-StreamProcessingasaService）。Wormhole面向大数据流式处理项目的开发管理运维人员，致力于提供统一抽象的概念体系，直观可视化的操作界面，简单流畅的配置管理流程，基于SQL即可完成的业务逻辑开发方式，并且屏蔽了流式处理的底层技术细节，极大的降低了数据项目管理运维门槛，使得大数据流式处理项目的开发管理运维变得
码农丁丁·2023-11-27 00:44

【数据中台】开源项目（2）-Moonbox计算服务平台

Moonbox是一个DVtaaS（DataVirtualizationasaService）平台解决方案。Moonbox基于数据虚拟化设计思想，致力于提供批量计算服务解决方案。Moonbox负责屏蔽底层数据源的物理和使用细节，为用户带来虚拟数据库般使用体验，用户只需通过统一SQL语言，即可透明实现跨异构数据系统混算和写出。此外Moonbox还提供数据服务、数据管理、数据工具、数据开发等基础支持，可
码农丁丁·2023-11-27 00:44

【数据中台】开源项目（2）-Dbus系统架构

大体来说，Dbus支持两类数据源：RDBMS数据源日志类数据源1RMDBMS类数据源的实现以mysql为例子.分为三个部分：日志抽取模块(最新版DBus已经废弃该模块，使用canal直接输出到kafka)增量转换模块全量拉取模块1.1日志抽取模块（Extractor）（0.6.1版本废弃）mysql日志抽取模块由两部分构成：canalserver：负责从mysql中抽取增量日志。mysql-ext
码农丁丁·2023-11-27 00:07

MQTTC数据桥接上云

私有化部署已经不能满足当前的发展趋势了，因此dgiot在原有基础上进行创新，将私有化部署的区域数控一体机上的数据通过mqtt桥接的方式上传到云服务器上，完成数据的实时同步备份场景解析：工厂设备的数据如何稳定的传输到数据中台以便后续的数据分析一直是各大企业头痛的问题之一
DGIOT物联网平台·2023-11-25 23:31

Apache Doris 在拈花云科的统一数据中台实践，One Size Fits All

作者｜NearFarXLab团队洪守伟、陈超、周志银、左益、武超整理｜SelectDB内容团队导读：无锡拈花云科技服务有限公司（以下简称拈花云科）是由中国创意文旅集成商拈花湾文旅和北京滴普科技有限公司共同孵化组建的。拈花云科以数字化思维为导向，致力于成为文旅目的地数智化服务商。2022年底，拈花云科NearFarXLab团队在数据需求的驱动下，开始调研并引进ApacheDoris作为新架构下的数据
SelectDB技术团队·2023-11-25 13:29

熵简技术谈 | 熵简科技在资管数据中台的探索与实践

导读：数据中台是熵简科技数据智能解决方案中的核心部分。引入数据中台可以打破数据与数据的界限、技术与业务的界限，为业务层的迭代提供更快的数据响应，真正做到业务数据化、数据资产化。
熵简科技Value Simplex·2023-11-24 17:46

数据中台建设方法论

1、数仓的概念和了解--业务的痛点产生的痛点：数据资产比较模糊、数据的质量比较低、重复建设、代码的耦合性比较强。2、数据仓库中的常见的模型：1、心型模型：中间是一张事实表，周围都是维度表。对于心型模型的主要的特点：非正规化、不存在渐变维度、有冗余数据、查询的效率比较高、不用过多的考虑正规化因素，设计维护是比较简单。2、雪花模型：指的是在心型模型的基础上，在维度表上面还存在维度表。主要的特点：正规化
新手小农·2023-11-24 02:08

【案例篇】数据中台的行业应用场景

数据中台的理念和核心技术是通用的，但是其价值主要体现在具体行业业务的提升上，因此其应用场景与行业是紧密相关的。
LinkTime_Cloud·2023-11-24 00:05

【数字化转型方法论读书笔记】-数据中台角色解读

同样，数据中台对于企业内部不同角色的价值也不同，下面分别从董事长、CEO、CTO/CIO、IT架构师、数据分析师这5个角色的视角详细解读数据中台。
码农丁丁·2023-11-23 15:32

【数字化转型方法论读书笔记】-数据中台五要素

数据中台的五要素是数据、业务、算法、应用和组织，这五要素是做好数据中台的基本要求，也是帮助企业合理运用数字化平台的重点。
码农丁丁·2023-11-23 15:52

基于流计算 Oceanus（Flink） CDC 做好数据集成场景

无论是在在企业数据中台的建设，亦或者是打造一站式数据开发和数据治理的PASS平台。首先需要做的就是进行跨应用的数据融合计算，需要将数据从孤立的数据源中采集出来，汇集到可被计算平台高效访问的目的地。
腾讯云大数据·2023-11-23 09:07

flink1.10袋鼠云 迁移 flink1.15原生环境 事项汇总

表DDL(平台自动生成)修改适配1DDL语法不通用(袋鼠云DDL中支持给别名DDL采用数据中台生成的模板,并把老版本DDL中的配置通过到相应参数中)2袋鼠云DDL支持给别名sql中字段和DDL中字段不一致
Thomas2143·2023-11-22 14:04

数据中台项目

项目编号：2023年数据中台项目建设方案项目编号：2023-XX-XX编制单位：XX市XX中心编制日期：二〇二三年四月目录第2章元数据中心1.系统、全面地查询元数据信息⒉.变更评估及精准变更周知3.协助数据问题定位及解决
一凡คิดถึง·2023-11-22 14:37

数据中台之用户画像

用户画像应用领域较为广泛，适合于各个产品周期，从新用户的引流到潜在用户的挖掘、从老用户的培养到流失用户的回流等。通过挖掘用户兴趣、偏好、人口统计特征，可以直接作用于提升营销精准度、推荐匹配度，最终提升产品服务和企业利润。还包括广告投放、产品布局和行业报告等。应用场景精准营销常见的营销方式包括APP信息推送、短信营销和邮件营销等。随着运营方式从粗放式到精细化，用户画像技术能更深入和直观的了解用户，而
数据与后端架构提升之路·2023-11-22 13:12

史诗级互联网电商系统的演进过程详解

1.1.3稳定期（11-今）1.2业务模式1.2.1B2C1.2.2C2C1.2.3B2B1.2.4O2O1.2.5其他1.3电商中台1.3.1背景1.3.2概述1.3.3业务中台1.3.4技术中台1.3.5数据中台
不一样的花朵·2023-11-22 10:03

架构师们，怎么走着走着就变“烟囱”了呢？ | 文末含福利

作者|耿立超来源|《大数据平台架构与原型实现：数据中台建设实战》*文末有福利这两年，随着中台概念的兴起，一种IT过去的常态，现在的明星反面教材——“烟囱式架构”被反复提及并为大家所熟知。
csdn业界要闻·2023-11-22 10:16

Flink Operator 使用指南 之 全局配置

背景在上一个章节中已经介绍了基本的Flink-Operator安装，但是在实际的数据中台的项目中，用户可能希望看到FlinkOperator的运行日志情况，当然这可以通过修改Flink-OperatorPOD
麦田里的守望者··2023-11-22 09:45

数据产品_数据中台06_数据沼泽边资产（数据资产）

本章主要内容什么是数据资产数据资产及应用数据资产管理及服务本节目标了解什么是数据资产以及应用熟悉数仓的指标模型熟悉标签的构成了解数据资产管理与服务的方式什么是数据资产数据是一种能源数据是一种能源，不单单是客观存在，发挥了额外价值，能够给业务场景实际带来收益，源源不断供给的一种能源。数据价值的核心体现就是行成数据资产。数据资产数据的价值可以通过数据应用的收益体现。业务收益：个性化推荐、千人千面、算法
andakiwukawa·2023-11-22 06:35

数据中台架构原理与开发实战：数据中台面临的挑战与解决方案

作者：禅与计算机程序设计艺术1.背景介绍数据中台是一种以数据仓库、数据湖、数据集市和分析平台等多种技术组件组合而成的大型IT系统，能够提供企业数据存储、加工、分析、应用的综合化服务，能够实现“智能4.0
禅与计算机程序设计艺术·2023-11-21 23:38

数据中台从规划到落地的不同阶段

系统都是为应用而生的，数据中台也不例外。要构建一套数据中台服务于企业内部和外部运营，需要有成熟的建设方法论作为指导。数据中台建设方法论可分为高阶规划、系统设计、开发实施、试运行和持续运营5个阶段。
Impl_Sunny·2023-11-21 13:38

大数据最后一公里——2021年五大开源数据可视化BI方案对比

大数据在经过前几年的野蛮生长以后，开始与数据中台的概念一同向着更实际的方向落地。有人问，数据可视化是不是等同于数据大屏。数据大屏是数据可视化的一部分，其承载更多的是展示与监控的功能。
大数据流动·2023-11-21 05:53

数据中台在工程建造行业的应用实践

1前言近年来，随着人口红利、资源红利、流量红利的逐渐消失，国内工程建造市场正经历着从增量市场向存量市场的转变。与此同时，受人口老龄化、管理粗放、外部环境不可控因素多，以及同业竞争和跨界竞争等多重影响，“利润微薄”和“竞争力弱”正成为大多数工程建造企业面临的主要困境。作为工程建造行业的一员，成都某工程集团（后简称集团）同样面临上述问题。受近两年基建投资额增速放缓影响，集团下属城市轨道交通、水环境治理
大方叶·2023-11-21 04:06

数据中台：Snowflake的独特技术优势

数据中台：Snowflake的独特技术优势Snowflake已于2020年9月16日正式上市，市值超过700亿美元。
96746f611a47·2023-11-21 02:22

也就整了一万字的「数据指标体系」指南。

我是小z数据指标体系是构建数据中台的重要一环。数据指标的建立让运营及产品人员更直观地看到基本指标的变动，让数据分析师更便捷地开展数据分析工作。这篇文章就紧紧围绕“指标体系”展开，内容略干。
数据不吹牛·2023-11-20 01:14

数据中台是如何帮助企业做好数字化转型的？_光点科技

什么是数据中台没有数据中台，数字化经营是空谈。数据中台居于前台和后台之间，是企业级的数据共享、能力复用平台。
光点数据治理·2023-11-19 20:43

轻量级数据中台，大中型企业数字化转型首选

而轻量级数据中台则是面对这种情况而言很好的一种解决方案。我们可以从以下几个方面来认识数据中台：一、轻量化数据中台是什么？
ETLCloud数据集成社区·2023-11-19 19:39

智慧城市大脑数据中台解决方案：PPT全套37页，附下载

关键词：智慧城市大脑解决方案，数据中台解决方案，智慧城市建设，数据中台建设，智慧城市大脑建设，数据中台建设架构一、智慧城市大脑数据中台建设背景智慧城市大脑数据中台是一个面向城市级数据管理、开发和服务场景的重要平台
方案365·2023-11-17 16:03

Java 实现日志文件监听并读取相关数据

Java实现日志文件监听并读取相关数据项目需求由于所在数据中台项目组需要实现监听文件夹或者日志文件并读取对应格式的脏数据的需求，以便在文件、文件夹发生变化时进行相应的业务流程；所以在这里记录下相关业务的实现及技术选型
野生绿箭侠·2023-11-17 15:55

2.认识中台

业务中台更多的是支持在线业务，数据中台则提供基础数据处理能力和很多的数据产品供所有业务方使用。
Pingszi·2023-11-17 12:30

让数据中台“飞“起来— Quick BI性能优化解决方案及实践

1引言QuickBI“数据门户”在企业数据中台建设中的重要性企业在数据中台初步建设完成以后，怎样让客户直观感受到数据中台的价值？
瓴羊企业智能服务·2023-11-17 07:19

挖掘企业数据矿产，袋鼠云数栈(DTinsight)助力企业搭建数据中台

2017年5月，英国《经济学人》杂志发表文章，将数据比作“未来的石油”。自那以后，数据是“21世纪最宝贵的资源”这种观点便传播开来。石油在进入消费领域之前，往往要经历开采、储运、炼化等过程。同样，数据也要经过一系列的采集、加工、萃取，才能为业务赋能。那么，“数据原油”该怎么加工？谁来加工呢？作为国内领先的数据智能践行者，袋鼠云依托最新的数据采集、加工处理、数据挖掘、机器学习，深度学习等技术，并结合
袋鼠云技术团队·2023-11-17 07:47

《网易-数据中台》学习笔记

《网易-数据中台》学习笔记1.大数据发展历程1.1数据仓库1.2Hadoop-数据湖1.3大数据平台1.4数据中台1.5Next：大数据+人工智能2.数据仓库2.1数据仓库建模2.1.1E-R模型2.1.2
杰克jk船长·2023-11-17 07:15

数据中台外部演示脚本

作为一个以产品、方案为主要核心的公司，公司员工本身对于产品一定是不陌生的，但是做产品演示光了解产品是不够的，需要自身对演示过程反复的练习，能够突出产品的亮点，要能够调动客户的兴趣，在演示产品的同时还需要对行业内其它相同的产品有所了解，在演示过程中突出自身产品亮点，扬长避短。产品演示一般会分为三个阶段，分别为准备阶段、宣讲阶段、演示阶段和会后总结，准备阶段是在接到产品演示任务开始到正式演示开始前，对
数通畅联·2023-11-17 07:11

【数智化案例展】浙江电信——数据中台与BI技术助力通信行业驱动高质量数据价值的流通闭环...

网易数帆案例本项目由网易数帆投递并参与“数据猿行业盘点季大型主题策划活动——《2022中国企业数智化转型升级创新服务企业》榜单/奖项”评选。数据智能产业创新服务媒体——聚焦数智·改变商业对于通信行业而言，业务即数据。随着5G的逐步普及，再加上互联网的崛起，行业业务数据量骤增，对运营商网络能力的需求也越来越高，但用户数已趋于稳定，从而导致收入增长逐渐变缓。因此，以“数据密集”为突出特点的通信行业对数
数据猿·2023-11-17 07:41
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他