【数据中台】

数据体系建设-ODS|DW|TDM|ADS介绍

参考书目《数据中台：让数据用起来》ODS：各业务生成的基础数据存表，如log日志数据等DW：在ods基础上，分主题整合数据TDM：存储标签数据ADS：基于上面的数据源整合而成的供业务应用的指标报表等贴源数据层
劝学公馆·2023-07-13 20:50

数据中台（-让数据用起来）-读书笔记10

（2020.11.17）数据体系规则1、中台数据体系特征覆盖全域数据：数据集中建设，覆盖所有业务过程数据；结构层次清晰：纵向数据分层，横向主题域，业务过程划分，让整个层析结构清晰易理解；数据准确一致：定义一致性指标，统一命名，统一业务含义，统一计算口径，并有专业数据团队进行建模，保证数据的一致性；性能提升：统一的规划设计，选用合适的数据模型，清晰的定义并统一规范，考虑应用场景，整体性能更好；降低成
baidu_38792549·2023-07-13 20:28

数据中台与数据平台的关系

不管是要弄清楚数据中台还是数据平台，都逃不开这几个问题。为什么是大数据？数据资产指哪些内容？做大数据的是不是一定要写代码？数据如何体现业务价值？什么是所谓的数据安全？...
IN科技·2023-06-23 14:11

火山引擎 DataLeap：「数据血缘」踩过哪些坑？来看看字节跳动内部进化史

动手点关注干货不迷路DataLeap是火山引擎数智平台VeDI旗下的大数据研发治理套件产品，帮助用户快速完成数据集成、开发、运维、治理、资产、安全等全套数据中台建设，降低工作成本和数据维护成本、挖掘数据价值
字节跳动技术团队·2023-06-22 22:34

“中台”到底是什么？

2、中台的作用3、中台建设方法论3.1中台架构整体策略3.2业务中台设计方法论3.3数据中台设计方法论4、中台的架构与设计4.1业务中台4.2数据中台5、中台成熟度模型5.1成熟度评估模型5.2成熟度能力评估小结
微醺手册·2023-06-22 16:02

中台的介绍

大中台的概念后中台成了国内微服务实施过程中绕不开的一个目标虽然中台的实施如火如荼但是关于中台依然是雾里看花一百个人会有一百中理解所谓中台就是将各个业务线中可以复用的一些功能抽取出来，剥离个性，提取共性，形成一些可复用的组件，通过这些组件，就可以使日后的系统开发成本降低，质量提高大体上中台可以分为三类，业务中台，数据中台和技术中
染指1110·2023-06-22 16:01

大数据中台技术组件

一、平台搭建1.1.Amabari+HDP1.2.CM+CDH二、相关的技术栈数据存储：HDFS，HBase，Kudu等数据计算：MapReduce,Spark,Flink交互式查询：Impala,Presto在线实时分析：ClickHouse，Kylin，Doris，Druid，Kudu等资源调度：YARN，Mesos，Kubernetes任务调度：Oozie，Azakaban，AirFlow，
TURING.DT·2023-06-22 16:31

数据中台(spring boot)_数据库版本控制flyway

作为数据中台的一个bi组件，不断的迭代产品功能开发，对应的版本会新增很多的数据库脚本。不同的项目使用的产品的版本不同，如果不管理起来，没有办法给对应的项目，新增新的功能。
哈哈哈哈蜜瓜·2023-06-22 16:31

第2-2-1章 常见组件与中台化-中台概述

文章目录1.中台概述1.1.中台概念1.2.中台背景1.3中台分类1.3.1业务中台1.3.2技术中台1.3.3研发中台1.3.4数据中台1.中台概述1.1.中台概念随着互联网公司的崛起，“中台”这个词也进入了人们的视线
假装文艺范儿·2023-06-22 16:00

当传统企业遇到数据中台

传统企业的数据中台建设与思考一、序言在当前数字经济领域最受关注的技术趋势当属中台，这一概念由阿里提出，并迅速在众多互联网企业中传播和应用，今年以传统企业也将目光关注于此，并着手引入数据中台相关产品。
helloworldxing·2023-06-22 11:36

数据中台与传统大数据平台有什么区别？_光点科技

一、数据中台数据中台是聚合和治理跨域数据，将数据抽象封装成服务，提供给前台以业务价值的逻辑概念。数据中台是在平台概念上的升级，不再单纯的将功能进行大杂烩。理念上，中台有几个特点。
光点数据治理·2023-06-22 09:38

阿里数据中台OneID核心能力之ID-Mapping

这篇文章是我的一个好友彭文华彭总写的，IDMapping是阿里巴巴数据中台的核心能力之一。欢迎大家添加彭总微信：shirenpengwh，一起探讨大数据相关技术。
王知无(import_bigdata)·2023-06-22 03:11

数澜、宜信、贝壳三种数据中台建设模式探讨 | 数澜科技

之前做过多年的数据技术工作，这两年也对数据中台做了一些研究。今天算是给各位当个马前卒，把我之前研究和实践的结果向大家汇报一下。这是我的数据研究经历，纯技术讨论。
数澜科技Dtwave·2023-06-22 03:10

ETL还是ELT：企业如何选择构建数据仓库的最佳工具？

一、企业数据仓库的构建对于数据驱动的决策和业务增长至关重要在构建数据仓库的过程中，选择合适的工具和方法是实现高效、可靠的数据集成和转换的第一步，构建数据中台最重要的是得先有数据，出来玩最重要的是什么？
苛子·2023-06-20 23:57

透过数字化转型再谈数据中台（一）：关于数字化转型的几个见解

曾经有幸加入一家头部的产业互联网做数据中台相关工作，这个数据中台经过多年三代数据人的建设，从之前的被动响应逐步缓慢转为主动建设，总结下来是一条忐忑而艰苦
pucheung·2023-06-20 22:21

大咖观点| AIGC与因果推断的双向赋能

聚焦机器学习与数据挖掘、AB实验、因果推断、数据中台与数字化转型、用户增长与运营、数据科学最佳实践等6大数据科学主题，数十位国内外一线数据科学家围绕数据科学前沿技术成果和应用实践经验深入分享和交流。
·2023-06-20 16:51

搭建自动化 Web 页面性能检测系统 —— 设计篇

我们是袋鼠云数栈UED团队，致力于打造优秀的一站式数据中台产品。我们始终保持工匠精神，探索前端道路，为社区积累并传播经验价值。。
·2023-06-20 15:26

搭建自动化 Web 页面性能检测系统 —— 设计篇

我们是袋鼠云数栈UED团队，致力于打造优秀的一站式数据中台产品。我们始终保持工匠精神，探索前端道路，为社区积累并传播经验价值。。
·2023-06-20 15:26

搭建自动化 Web 页面性能检测系统 —— 实现篇

我们是袋鼠云数栈UED团队，致力于打造优秀的一站式数据中台产品。我们始终保持工匠精神，探索前端道路，为社区积累并传播经验价值。。
·2023-06-20 14:47

搭建自动化 Web 页面性能检测系统 —— 实现篇

>我们是[袋鼠云数栈UED团队](http://ued.dtstack.cn/)，致力于打造优秀的一站式数据中台产品。我们始终保持工匠精神，探索前端道路，为社区积累并传播经验价值。。
袋鼠云数栈前端·2023-06-20 13:00

2023九坤投资暑期实习笔试复盘

投递岗位：策略组合管理实习生身边同学有投递数据中台开发实习生岗位的，据他口述是若干选择题、4道简答题、2道算法题，他只记得简答题，数据中台开发实习生岗位部分题目回忆如下：目
不讲魔法讲道理·2023-06-19 05:22

【案例】--非结构化数据中台案例

目录一、前言1、思考2、思路一、前言最近接触一个平台架构的讨论，公司需要一个非结构化数据中台，理念是能够满足存储随时变换的非结构化数据，另外引入低代码思想。
DreamBoy_W.W.Y·2023-06-19 04:09

应用和迭代（名词解释）

应用和迭代是什么意思应用：●一个完整的前端应用，一般用应用脚手架创建，包含路由，页面，状态等●一个应用对应一个代码仓库●应用的分组（业务中心，数据中台等）只用于逻辑分类，便于管理迭代：●用于应用相关需求的发布
MissXu666·2023-06-18 05:02

大数据/数仓面试灵魂30问（转）

（如果这个问题回答的好，后面很多问题都不需要再问）2.如何建设数据中台？
Eva菠萝·2023-06-17 19:21

走好数据中台最后一公里，为什么说数据服务API是数据中台的标配？

一、课程介绍数据服务API作为数据统一服务平台建设的最上层，能够将数据仓库数据以服务化、接口化的方式提供给数据使用方，屏蔽底层数据存储、计算的诸多细节，简化和加强数据的使用。随着企业“互联网化、数字化”进程的不断深入，越来越多的业务被迁移到互联网上，产生大量的业务交互和对外服务需求，对API接口的需求与日俱增。传统的方式如后端开发人员通过Java或Python等语言进行编写来生成API接口，开发周
袋鼠云数栈·2023-06-17 07:57

数据中台

平台架构：数据应用PMS/CMS/LMS/IMS智能数据分析BIM展示/GIS展示/数字孪生技术应用数据服务数据检索数据可视化（R语言）数据模型管理数据开放接口数据编排治理报告数据管理数据管理：数据权限管理、任务调度管理、数据监控管理、数据运维管理数据访问：JDBC、SQL、API数据分析：通用计算模型管理、深度学习模型管理、指标计算、算字库、知识库数据治理：元数据管理、数据血缘管理、数据质量管理
勇敢的_心_·2023-06-16 23:40

DataX在有赞大数据平台的实践

想到指北数据中台，数据汇聚采用的是Datax-web二次开发，借鉴经验设计思路，丰富自己方案。有大平台做基础，优化指北数据中台就会更有思路。
大数据指北·2023-06-16 18:51

指北数据中台

文章目录一、项目介绍二、功能模块说明2.1平台基础设置2.2数据汇聚管理2.3数据开发2.4数据治理2.5数据集市管理2.6可视化管理三、系统核心技术栈四、系统数仓架构五、系统运行展示六、总结从事数据平台方向以来，很多时候都是以共性项目的形式进行交付。不停的研发数据平台，不停的贴合业务进行修改以交付项目。没有持续优化一个从0到1的产品。深深的感到很遗憾…与此，在写公众号文章的同时，想着光光写文章，
大数据指北·2023-06-16 18:21

数据中台的开源解决方案

文章目录一、数据中台建设方法论1.1OneData1.2OneService二、数据中台，常见的4种选型方案三、数据中台的开源解决方案3.1数据存储3.2数据开发3.3查询引擎3.4数据采集工具3.5数据仓库
大数据指北·2023-06-16 18:18

数据中台漫谈 — 数据接入

谈谈数据中台的大门口，数据接入系统，对应的领域是工业大数据，舆情大数据，设计数据接入系统，首先不应该只局限于怎么将数据接入，而要根据整个中台的数据流向来综合考虑。
正义的键盘·2023-06-16 06:10

数据中台总体技术架构

数据中台技术架构说明金融企业数据中台架构阿里中台技术栈说明中台的概念热了将近两年，有人认为中台是趋势，有人认为中台是炒作。
数字化转型架构师·2023-06-15 19:11

数栈运维案例：客户生产服务器CPU负载异常处理

本文整理自：袋鼠云技术荟|某客户生产服务器CPU负载异常处理数栈是云原生—站式数据中台PaaS，我们在github和gitee上有一个有趣的开源项目：FlinkX，FlinkX是一个基于Flink的批流统一的数据同步工具
·2023-06-14 15:06

火山引擎 DataLeap 数据调度实例的 DAG 优化方案

DAG介绍DataLeap是火山引擎自研的一站式大数据中台解决方案，集数据集成、开发、运维、治理、资产管理能力于一身的大数据研发治理套件。
·2023-06-14 12:08

业务中台与数据中台学习心得

中台一般分为业务中台和数据中台。业务中台业务中台建设，涉及到组织架构、工程边界、收益评估等多个层面，统筹协调难度大，从这点来看业务中台能不做就别做。
大强BJ·2023-06-13 19:04

博睿学院 | 本周四：ETL技术在数据标准化中的应用实践

随着当前数据环境的愈发复杂，建设数据中台，构建出一个高效、可靠、安全、可扩展的数据共享平台，实现数据在企业内部的共享、交换、加工、挖掘和应用，已成为企业推进数据流动与融合，实现数据价值的必经之路。
·2023-06-13 18:54

博睿学院 | 本周四，博睿学院数据集成系列公开课正式开讲

✓提升采集数据的质量，对其进行标准化处理；✓为全系统提供数据中台能力，推进数据价值深挖；✓全面提升业务质量，赋能企业发展；……数据集成如何完成上述任务？
·2023-06-13 18:22

ADBPG&Greenplum成本优化之磁盘水位管理

另外，随着近年来数据中台的价值被
阿里云云栖号·2023-06-13 17:05

ADBPG&Greenplum 成本优化之磁盘水位管理

另外，随着近年来数据中台的价值被广泛认可，企业建设数据中台的需求也非常迫切，数据中台的很多场景都会用到Greenplum或ADBPG。因此，
阿里云技术·2023-06-13 17:34

数据孤岛下的新破局 Real Time DaaS：面向 AP+TP 业务的数据平台架构

从传统数仓，到大数据平台，再到数据中台和湖仓一体新数据平台，在日益加重的数据孤岛困扰下，面向AP场景的解决方案可谓浩如烟海。
·2023-06-13 12:49

助力长城汽车数据管道平台连接“数据孤岛”，加强数据一元化，Apache DolphinScheduler 的角色定位

讲师简介长城汽车-IDC-数据中台部-刘永飞高级工程师我是长城汽车IDC-数据中台部的刘永飞，给大家分享一下我们自研的一个数据同步工具平台，以及在使用这个工具过程中遇到的问题。
·2023-06-13 12:55

从数据中台实践，浅谈数据质量管理

时代背景近20年来，我国的科学技术发展日新月异，各种新兴技术层出不穷，深刻的改变着各行各业，也改变着我们的生活。大数据、云计算、人工智能的出现更是将技术革命推向了高潮。在这种背景下，继农业经济、工业经济之后，数字经济诞生了，并且随着科技的不断发展，它将成为主要经济形态。在2022年，我国数字经济核心产业增加值占国内生产总值（GDP）比重达到7.8%，数字经济为经济社会持续健康发展提供了强大动力。也
元年技术·2023-06-13 11:15

助力长城汽车数据管道平台连接“数据孤岛”，加强数据一元化，Apache DolphinScheduler 的角色定位...

点击蓝字关注我们讲师简介长城汽车-IDC-数据中台部-刘永飞高级工程师我是长城汽车IDC-数据中台部的刘永飞，给大家分享一下我们自研的一个数据同步工具平台，以及在使用这个工具过程中遇到的问题。
DolphinScheduler社区·2023-06-13 10:43

大数据中台架构以及建设全流程一（Paas层设计）

目录设计背景问题点中台目标复用，赋能，降本增效中台整体架构Pass层技术选型实时存储平台----------->KAFKA（未来pulsar也不错）离线存储平台（Hadoop系列）Hadoop选型机架感知硬件选型(PB级)内存配置资源计算关键参数存储平台常见故障调度系统（Yarn）管理平台AmbariClouderaManagerCloud自研+开源组件日志采集调度平台实时数据Sql查询平台设计背
只会写demo的程序猿·2023-06-13 01:29

一体化数据安全平台-解决方案-数据API监控审计

企业的数据团队通常基于数据中台提供各种类型的数据API，供企业其他部门的业务应用系统使用和集成。
原点安全·2023-06-12 20:12

一体化数据安全平台uDSP-解决方案-数据访问权限治理与合规保护

除了数据库运维人员和研发人员，诸如数据分析人员、数据工程师等许多其他岗位的人员也能够使用各种业务应用直接访问数据中台、数据仓库中的数据，以完成自己的工作任务。
原点安全·2023-06-12 20:12

亿级大表毫秒关联，荔枝微课基于Apache Doris 统一实时数仓建设实践

作者：陈城，数据中台组组长深圳十方融海科技有限公司成立于2016年，是一家数字职业在
·2023-06-12 14:30

顺丰数据治理总体框架与实践PPT(附下载)

【中台实践】华为大数据中台架构分享.pdf华为的数字化转型方法论华为如何实施数字化转型（附PPT）超详细280页Dock
公众号:肉眼品世界·2023-06-12 06:50

从数仓到数据中台，谈技术选型最优解

文章摘自https://mp.weixin.qq.com/s?__biz=MzI4NTA1MDEwNg==&mid=2650787725&idx=1&sn=673a0ac485e776dcd51667549f08628a&chksm=f3f97a18c48ef30e7adc3fe6c34c7fc644edde95443997188514742417eb4b7d0d1bad3f4baa&scene=
时光漫步de大数据之路·2023-06-12 05:26

09 | 中台：数字转型后到底应该共享什么？

今天我们主要讨论业务中台和数据中台。作为企业数字化中台转型的整体，我也会顺带聊一聊前台和后台的一些设计思路。
-停泊·2023-06-12 04:41

数据中台及数据仓库设计

数据中台建设深度好文文章目录1：数据中台介绍1.1：概述1.2：架构2：数据中台建设2.1：业务和数据资产调研2.2：数据架构设计2.2.1：技术选型2.2.2：数据仓库建设1：主题设计2：数仓建模3：
猿来如此dj·2023-06-11 07:23
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他