【数据中台】

【数据架构系列-03】数据仓库、大数据平台、数据中台... 我不太认同《DataFun数据智能知识地图》中的定义

关注DataFunTalk有2年多了，DataFun确实像创始人王大川讲的那样，践行选择、努力和利他原则，专注于大数据、人工智能技术应用的分享与交流，秉承着开源开放的精神，免费的共享了很多有营养的行业实践专业知识，对于这样有情怀的团队真心希望他们越办越好。2022年底DataFun发布《DataFun数据智能知识地图》，一看就做得很用心，内容涵盖数据采集与治理、数据架构、数据能力、数据应用等四大领
zhulangfly·2023-03-30 12:48

从数据中台前世今生，看大数据“网红”的多视角解读

大约从2019年上半年开始，“数据中台”这个词，相信大家或多或少都听到过，俨然已经成为了大数据领域的新任“网红”。那么数据中台究竟是“新瓶装旧酒”，还是真正可以助力企业的“大杀器”？
微见Weidea·2023-03-30 09:54

可以二次开发的 数据治理系统

这是一款为数据治理而生的企业一站式数据中台，采用微服务云原生技术，富含各类开箱即用的组件，提供了统一的元数据采集和维护入口，支持常见的数据库元数据采集，用来帮助构建企业数据资产目录和数据安全体系；数据质量模块可以定时对数据质量进行管控
微learn1205·2023-03-30 08:14

企业复杂的数据治理需求,TempoDF让数据开发更简单！

为了实现企业全局数据的系统化运作管理，不少企业开始着手建立数据仓库和数据中台，以此来发挥数据在数字化转型中的价值，数据分析和挖掘离不开从数据库到数据仓库的数据整合与深度治理，而整合就需要用到ETL工具。
美林数据Tempodata·2023-03-30 06:12

收藏：不错的数据中台建设方法论

数据中台建设方法论体系，需要从组织、保障、准则、内容、步骤5个层面全面考虑，以确保数据中台建设和实施能如期完成。
jackyrongvip·2023-03-30 03:42

现代数据栈MDS应用落地介绍—Vero营销自动化平台

DazdataMDS现代数据栈MDS的出现使得中小企业低成本获得大数据处理能力成为可能，技术的进步使得各种基于MDS的大数据应用如雨后春笋般涌现，不同于国内的数据中台更多强调数据处理技术，MDS注重落地和最后一公里的大数据应用
98加满·2023-03-29 19:00

大咖分享｜姚秀清：数据资产管理平台如何建设？

10余年行业数据经验，擅长为企业数字化转型提供专业的技术方案和实施服务，帮助企业高效的建立数据中台，提高企业数据资产的使用效率。
数澜科技Dtwave·2023-03-29 16:12

数智学习｜多图详解数据中台建设框架

导语本文从技术、服务、数据、运营4个体系回顾了数据中台建设框架1.0，并在此基础上优化给出了数据中台建设框架2.0，同时指出数据中台是企业数字化转型的关键创新引擎。
数澜科技Dtwave·2023-03-29 16:12

数据中台当前与未来-数字化架构设计(1)

背景动机：中台最早的概念来源于美军航母战斗群，后被阿里成功的引进，演变成：技术中台，业务中台，数据中台，安全中台等。优势劣势：对于大型头部企业来
luozhonghua2000·2023-03-29 12:39

人人都在说的数据中台是什么？附9张架构图优质模板！

数据中台的概念由阿里巴巴首次提出，它的目的是将企业沉睡的数据变成数据资产，从而实现数据价值变现的系统和机制。
xiaobaiyanghaowa·2023-03-29 07:38

数据中台架构

中台一般分为业务中台、数据中台、技术中台。数据中台的意义数据
扁豆的主人·2023-03-29 06:13

大数据中台架构以及建设全流程二（Daas层设计）

目录背景面临问题解决方案数仓架构演进离线数仓架构案例Lambda数仓架构案例问题点Kappa数仓架构架构选型数仓整体架构（图片来自网络）数仓分层架构（图片来自网络）主题域划分维度建模需求标准化维度及指标规范管理指标管理流程图数仓建库表规范字段规范实时数仓实时数仓1.0缺点：实时数仓2.0实时数仓3.0数据地图血缘关系数据湖离线数仓痛点实时数仓痛点数据湖vs数仓写实模式和读诗时模式基于数据湖数仓架构
只会写demo的程序猿·2023-03-29 06:02

【大数据架构】浅谈数据中台

数据中台背景大环境背景近几年较火的数字化转型，很多企业也从信息化到数字化。信息化时代：是信息化为物理世界活动服务的；更多的是为物理世界活动提升效率。
mmoo296225053·2023-03-29 06:54

数据中台已成气候！

所以，阿里一直非常重视大数据领域的建设和投入，其中赫赫有名的就是大数据中台战略。OneData体系下的数据公共层已经支撑了淘宝、天猫、聚划算
LiangGzone·2023-03-29 05:11

大数据中台-什么是中台一文详解就够了

怎么又提到数据中台了，现在不是都在拆中台了吗？这是一个疑惑，我一直也疑惑，也没有认真想过，以前也是道中途说。没有想到面试的时候，面试官又问道这个问题了。
chenzhihao·2023-03-29 05:57

大数据中台架构

大数据中台架构1.数据采集传输1.1Flume和Logstash1.2日志采集如何工作1.3数据传输Kafka2.数据存储HDFSHBaseHive和PigMapReduce3.数据计算&查询3.1批计算和流计算
嗷嗷的特Man·2023-03-29 05:07

大数据&数据中台&数据治理系列

（持续更新中...）序号主题快捷访问1数据中台系列什么是数据中台？2数据中台数据分层3数据中台建设五部走4数据中台建设与架构5数据中台建设的成熟度评估模型6数据汇聚联通7891011
Happy编程·2023-03-28 19:45

技术沉淀(1) - 中台化 - 从一个数据产品说开去

作为在一个业务快速发展的互联网公司的技术团队，尤其是公司的业务模式开始逐渐地稳定时，应该越来越注重“技术沉淀”--将各业务系统中的某些“通用能力”平台化/中台化（如，货&车源信息的检索平台、数据中台（产出诸如供需模型
Geoffrey_fx·2023-03-28 17:21

一文搞懂业务中台、数据中台、AI中台区别及联系

导读自从阿里提出中台的概念后，近年来业务中台、数据中台、AI中台等有关中台的名词相继涌现出来，相关概念如雨后春笋一般应运而生，如何去认识并区分这些中台呢，今天小亿对它们进行一个简要的介绍、以便大家更好的理解和掌握数据领域相关概念
宋懵懵的数据生活·2023-03-28 05:05

数据清洗是清洗什么？

在搭建数据中台、数据仓库或者做数据分析之前，首要的工作重点就是做数据清洗，否则会影响到后续对数据的分析利用。那么数据清洗到底是做什么事情呢？今天我就来跟大家分享一下。
产品要主动·2023-03-27 16:15

建设方法论onedate：极客数据中台课程总结

文章大部分内容摘录自极客数据中台课程：https://time.geekbang.org/column/article/220290一、前言数据开发职业规划：熟练的使用数据中台支撑技术体系内的工具，熟悉数据中台模式下数据研发的流程
夜希辰·2023-03-26 00:57

搭了数据中台怎么用？AI+BI 让数据产生价值

作者简介：王春波，著有《高效使用Greenplum：入门、进阶和数据中台》，“数据中台研习社”号主，十年数据开发从业者，资深零售数仓项目实施专家。
蚂蚁_8173·2023-03-25 11:08

民生数据中台体系探索实践

作者：中国民生银行信息科技部何鹏周礼罗京在大数据、人工智能、区块链等新兴技术的驱动下，各家银行纷纷利用新技术制订数字转型改革战略，寻找差异化经营的可行模式。民生银行积极推进改革转型，2018年在“民营企业的银行、科技金融的银行、综合服务的银行”战略指导下，民生银行从科技视角制订了“技术+数据”双轮驱动的改革方案，全力打造以客户为中心的数字化智能银行，为广大客户提供科技+金融的综合生态服务。如何真正
数据智能谷·2023-03-24 03:21

实时数据仓库的发展、架构和趋势

当前基于Hive的离线数据仓库已经非常成熟，数据中台体系也基本上是围绕离线数仓进行建设。
TASKCTL·2023-03-23 17:33

李卓豪：网易数帆数据中台逻辑数据湖的实践

file导读：本文将介绍过去15年中，网易大数据团队在应对不断涌现的新需求、新痛点的过程中，逐渐形成的一套逻辑数据湖落地方法。内容分为五部分：关于网易数帆为什么做逻辑数据湖怎么做逻辑数据湖未来规划精彩问答--01关于网易数帆网易数帆是从网易杭州研究院孵化出来的。网易杭研的重要职责是公共技术的研究和产品孵化。下图是网易数帆的整体产品架构。file1.网易大数据发展历史网易是国内领先的互联网技术公司，
DataFunTalk·2023-03-22 23:05

Dataphin分析

首先来看下百度词条：“Dataphin是阿里云旗下智能数据构建与管理的数据中台建设引擎。
追寻者的小憩书铺·2023-03-22 11:27

MySQL 千万数据库深分页查询优化，拒绝线上故障！

文章首发在公众号（龙台的技术笔记），之后同步到和个人网站：xiaomage.info优化项目代码过程中发现一个千万级数据深分页问题，缘由是这样的库里有一张耗材MCS_PROD表，通过同步外部数据中台多维度数据
是龙台呀·2023-03-21 17:01

前伽蓝CIO刘江演讲：如何“一键”进入新零售

从最早的单片机、286、386，领导企业开发MIS系统，最后到ERP、SAP，再到互联网、做移动互联网，到现在的大数据中台，一路走过来。尤其这3年我感概非常多，今天主要想跟大家分享一下。
欧电云大中台情报局·2023-03-21 14:18

IP·CDP

基于阿里巴巴成熟的数据中台理念，锁定「用户价值创造」，引入CDP技术，在内容赛道上，我们完成了一次数据理想主义者的实践之旅，沉淀了IP·CDP（IP用户资产管理和增长策略平台），在实践过程中，我们对CDP
悟棋·2023-03-20 08:23

数据 数据中台

数据实际上是一个非常传统的行业。有软件开始的那一天起，数据这个行业就存在了。比如说原来最早的时候，有非常多的数据报表数据可视化，然后到后来，有了商业智能，有了DataWarehouse（就是数据仓库），然后数据挖掘。数据这个行业不仅仅是软件，它还有管理的部分，也就是说数据治理，即如何让企业的数据治理的质量更好。所以数据这个行业本身是一个非常传统的行业。每个大型一点的企业都有自己的数据分析部门，数据
流浪山人·2023-03-19 05:34

数据仓库、数据湖、数据中台一文读懂【2】

大数据封面.png4.1概述Pentaho首席技术官JamesDixon创造了“数据湖”一词。它把数据集市描述成一瓶水（清洗过的，包装过的和结构化易于使用的）。而数据湖更像是在自然状态下的水，数据流从源系统流向这个湖。用户可以在数据湖里校验，取样或完全的使用数据。这个也是一个不精确的定义。数据湖还有以下特点：从源系统导入所有的数据，没有数据流失。数据存储时没有经过转换或只是简单的处理。数据转换和定
笔名辉哥·2023-03-18 12:13

如何搭建一个PB级大数据中台？我之前是这么搞的！

2015年，阿里率先布局中台战略，虽然张勇近期在阿里内网发布文章表示，他对目前阿里的中台并不满意，但“大数据中台”这个由中台延伸
军哥手记·2023-03-18 07:32

MySQL 千万数据量深分页优化，拒绝线上故障！

优化项目代码过程中发现一个千万级数据深分页问题，缘由是这样的库里有一张耗材MCS_PROD表，通过同步外部数据中台多维度数据，在系统内部组装为单一耗材产品，最终同步到ES搜索引擎MySQL同步ES流程如下
废柴程序员·2023-03-18 07:43

最近爆红的“数据中台”是什么，看完这篇就懂了｜硬核干货

公元234年，诸葛亮六出祁山，来到五丈原。司马懿固守城池，拒不出战。诸葛亮送女人衣服给司马懿穿，司马懿欣然穿上。皇帝曹叡三番五次下令催战，手下的将士不忍羞辱也纷纷请战，司马懿不为所动，龟缩了一个多月后，诸葛亮已经病死军中。公元1643年，大明崇祯皇帝强令孙传庭出战李自成，孙传庭不愿仓促行事，可是在崇祯皇帝的催逼下，孙传庭不得已率领仅存的主力出潼关，最终兵败，孙传庭战死沙场，关内再无坚城，李自成一日
贾君鹏大侠·2023-03-18 05:34

中小型城市商业银行数字化转型实践(三)数据中台建设思路和路径

数据资产变现能力一直是困扰中小型城市商业银行业务运营转型的关键痛点，虽然通过试点引入外部数据，引入实时计算引擎和数据建模，在辅助营销决策，网贷风控等方面做了一些尝试，但是还没有找到为银行数字化运营赋能的关键。一、现状和痛点目前中小型城市商业银行在数据方面存在以下的痛点：业务层面数据研发中心无法快速支持业务数据任务要求各个系统提供的数据标准规范不一致，主要体现在命名规范不一致、不同的人所跑出来的数据
泡菜小仙·2023-03-16 02:57

基于Apache doris怎么构建数据中台(三)-数据资产管理

前面我们讲了什么是数据中台，及数据中台的架构及功能规划，这次我们开始从数据资产开始拆解每个功能模块做的内容1.概述数据资产管理平台可以定量评估数据资产的成本，价值，质量。
张家锋·2023-03-15 12:22

数据指标是什么？必知必会的数据指标类型都在这了

导读：数据指标体系是构建数据中台的重要一环。数据指标的建立让运营及产品人员更直观地看到基本指标的变动，让数据分析师更便捷地开展数据分析工作。
hzbooks·2023-03-14 13:06

关于数据仓库面试题的整理

数据库：数据仓库：3.关于构建数据仓库4.数据中台是什么？5.数据中台、数据仓库、大数据平台的关键区别在哪里？6.大数据的相关系统7.构建数据中台8.关于数据湖的相关理论9.DW最重要的是什么？
DB架构·2023-03-14 04:48

《数据中台-让数据用起来》第3章-数据中台建设与架构

不能把数据中台简单看做一个项目或产品，建设数据中台要从战略、认知、组织保障等更高的层面做规划。
奕城_笔记·2023-03-13 20:02

业务中台

业务中台与数据中台：Part1：智能营销案例：企业营销：营销闭环：营销数据管理：营销自动化：营销智能化：DMP：Part2：会员CRM-客户关系管理用户生命周期管理CRM与DMP的关系CRM\DMP\CDP
严国华·2023-03-13 15:51

老刀也在看@2019-07-30

InfoQ:数据中台不是技术平台，没有标准架构InfoQ:Gartner全球IaaS魔力象限：AWS去年收入远超2至5名总和Medium:Kubernetes&12-factorappsMedium:7missingfactorsfrom12factorapplicationopenshift.com
老刀IBM·2023-03-13 09:08

这可能是你见过的字节火山引擎大数据模块最详细的分析

3、数据中台部分，目前产品矩阵为
追寻者的小憩书铺·2023-03-13 05:38

火山引擎大数据研发治理套件DataLeap详细分析

一、结论汇总对比行业竞品来看，DataLeap已经基本具备了数据中台建设和管理所需的各个功能模块，并有不少特色功能、概念，如SLA管理、数据质量的数据对比功能；同时在一些体验上也超过主流竞品。
追寻者的小憩书铺·2023-03-11 14:48

《数据中台：让数据用起来 》读书笔记

数据中台核心认知数据中台需要提升到企业下一代基础设施的高度,进行规模化投入数据中台需要全新的数据价值观和方法论,并在其指引下形成平台级能力数据中台围绕业务、数据、分析会衍生出全新人才素养要求,需要尽快启动人才储备数据中台发展三个阶段数据中台探索阶段这个阶段会将数据生命周期各个阶段的技术与现有业务场景或创新业务场景结合
我来问道无馀说·2023-03-11 12:25

“数据中台、读写分离、表分区”解决MySQL 单表数据量、并放量双高的效率瓶颈

需求情景：现有一数据库表，用于记录每一台设备的各种指标项数据，每台设备指标项约150个左右，共有10台设备（后期还会增加），每台设备每2秒写入1次数据，即：数据库单表每秒写入数据量=10台设备*150个指标项数据/2=750写/秒的并发。单日写数据量高达6,480万。在单台数据库服务器的情况下肯定并发卡死，更不用谈查询效率。解决方案：在数据采集端，将每台设备每次需要采集的数据做成json字符串，而
瀚岳-诸葛弩·2023-03-11 11:10

从0到1-中台搭建项目启动

数字中台前期只做了数据中台和业务中台的搭建计划。11月开始，年前结束，我把它称作中台1.0阶段。中台计划因为涉及到组织结构，业务
我叫姜子牙·2023-03-10 17:57

数据中台架构体系理解

数据中台的出现弥补了数据开发和应用开发之间由于开发速度不匹配而出现的响应力不足等缺陷问题。数据中台是国内学者提出的概念，起始于阿里的“大中台、小前台”概念。
splendor.s·2023-03-09 08:15

【数据中台战略】可配置化数学建模的应用案例图解

【数据中台战略】可配置化数学建模的应用案例图解关键词：维度模型、事件体系、数据中台、数据平台、数学建模、数学模型、条件系统、公式系统、数据维度、数据度量、中科院分词系统、核子秤、卡尔曼滤波导航、加速度计
ygluu·2023-02-28 08:11

【平台数仓设计——2023】

平台数仓设计——2023前言一、选取大数据平台1、CDH大数据平台2、HDP大数据平台3、CDP大数据平台4、各种云数据中台二、选取调度平台1、DolphinScheduler(海豚调度)2、AzKaban3
BigData_LYT·2023-02-27 18:44

轻量级数据中台-数据可视化建模平台

项目介绍数据可视化建模平台是一站式业务管家，它把多元数据、算法封装成算子，通过拖拉拽算子组件自助搭建业务模型，并提供各类成熟的业务模型智能应用、图表数据分析、微应用等功能。平台定位数字化转型工具，为企业、政府客户，提供数据集成、数据开发和数据展示的工具能力。产品架构业务流程架构产品技术路线服务端：采用SpringCloud、Alibaba微服务架构版本;前端:采用Vue、Element前后端分离的
ccddtomato·2023-02-26 06:39
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他