【数据中台】

常见的中台架构

—01—数据中台通用体系架构不同的企业对数据有不同的需求。企业数据应用不断更新迭代，企业的中台系统也需要不断变化。从数据处理与数据治理两个维度出发，可以设计一个解耦的数据中台体系架构。
Elivis Hu·2024-01-04 08:10

「曾哥读书」数据中台实战：手把手教你搭建数据中台

本书题目中有两个“数据中台”，但是实际上大部分内容是“电商数据分析”。名不副实，所以豆瓣上的评分有点低。但是如果把它当作电商数据分析入门书来看，基本的架构还是挺完整的。
frozeng·2024-01-03 12:06

数睿通2.0功能更新：支持多版本 Flink 切换，新增数据标签模块

文章目录引言支持多版本Flink切换功能展示使用方法数据标签合并微服务Bug修复，细节优化结语引言小伙伴们，大家好，数睿通2.0数据中台迎来了12月份的更新，由于年底工作繁忙，所以本次更新内容稍微少了点
小螺旋丸·2024-01-03 10:22

数睿通2.0数据接入、数据开发、系统权限、集群监控全面升级

引言数睿通2.0数据中台迎来了11月份的更新，感谢大家的支持，本次更新主要包括以下内容：数据库支持MongoDB数据接入支持MongoDB，支持自定义SQL采集，支持停止运行中的任务数据生产支持FlinkJar
小螺旋丸·2024-01-03 10:21

数睿通2.0数据中台数据资产、数据集市功能发布

引言数睿通2.0数据中台迎来了7月份的首次更新，本次更新主要是添加了数据资产，数据集市的相关核心功能，完整的功能实现尚需要时间打磨，因为最近工作实在是有些繁忙，琐事也多，所以能投入开发的时间着实有限，只实现了部分功能
小螺旋丸·2024-01-03 10:51

数字化转型必备：数睿通 2.0 数据中台升级详解

引言转眼又过了一个月的时间，数睿通2.0数据中台也迎来了本月的更新，本次更新主要包括：数据资产完善（资源评价）数据集市完善，打通审批流程修复数据生产由于DruidSQLUtils不支持Doris导致无法建表的问题优化贴源数据模块
小螺旋丸·2024-01-03 10:51

数睿通2.0：高效的数据处理，主数据与数据表功能全面升级

引言八天很短，七天很长，数睿通2.0数据中台也随之迎来了新一轮的版本迭代，本次更新主要包括：主数据模型（可视化建模）主数据派发（支持派发主数据到下游数据表，rabbitMq，kafka，接口）数据表（数仓分层表信息展示
小螺旋丸·2024-01-03 10:51

数睿通2.0数据中台数据治理—元数据功能发布

文章目录引言数据集成-实时日志数据治理-元模型数据治理-元数据采集数据治理-元数据管理结语引言数睿通2.0目前基本完成了数据集成，数据开发，数据服务三大模块，初步具备了拉数，造数，供数的能力。因为平台相关人员都是兼职开发，并非全职，所以进度没有那么快，这点希望大家可以理解。3月份主要是完善了一下数据集成，添加了实时日志的展示，同时开发了数据治理模块—元数据的相关功能，主要包括元模型，元数据采集，元
小螺旋丸·2024-01-03 10:21

新年快乐—数睿通2.0数据中台全新功能模块发布

文章目录引言数据集成数据库管理文件管理数据接入贴源数据数据开发数据生产sql作业开发FlinkSql作业开发调度中心运维中心资源中心配置中心其他模块结语引言离上次发文已经有接近三个月了，这三个月主要在开发数睿通的数据生产模块，同时优化了一下数据集成，目前已经基本开发完毕了，集成了Flink，Hadoop，可以在线开发FlinkSql作业任务，同时支持Sql任务开发，使平台初步具备了拉数，造数的能力
小螺旋丸·2024-01-03 10:43

全面解读数据中台、数据仓库和数据湖

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵
公众号:肉眼品世界·2024-01-03 00:44

MongoDB学习红宝书 - MongoDB官网使用指南

产品：包含云服务Atlas、MongoDBStich、Server、Compass，Charts以及最新推出的Atlas数据湖等MongoDB所有产品解决方案：包含企业战略的创新方法：遗留系统现代化以及数据中台等
MongoDB中文社区·2024-01-02 09:17

数据中台的数据处理及应用说明

数据中台把数据统一之后，会形成标准数据，再进行存储，形成大数据资产层，进而为客户提供高效服务。支持海量数据的存储、计算、产品化包装过程，为前台基于数据的定制化创新及为业务中台
数通畅联·2024-01-01 11:57

李广乾ppt：数据中台促进“互联网＋”产业创新

2019年9月26日，我应邀参加了中国信息协会主办的“2019（第二届）中国互联网+产业创新合作发展论坛”，并作了《数据中台促进“互联网+”产业创新》的主题报告。
数据智能谷·2024-01-01 03:53

评估数据中台成熟度的7个维度

我们认为数据中台的成熟度评估应该从文中的七个维度入手。
ThoughtWorks·2023-12-31 20:25

HBase 例行灾备方案：快照备份与还原演练

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
　Laurence·2023-12-31 12:28

数据中台-架构、构建与体系建设

数据中台-架构、构建与体系建设数据中台架构数据中台构建方法论技术体系数据体系服务体系运营体系数据中台功能架构数据中台技术架构企业构建数据中台评估统计分析阶段决策支持阶段数据驱动阶段运营优化阶段数据汇集-
Ybb_studyRecord·2023-12-30 03:53

大数据实践之路 读后感

CSDN博客商业银行数据资产估值白皮书，推荐系统源码下载-CSDN博客用友BIP数据资产入表解决方案白皮书，推荐系统源码下载-CSDN博客1、内容总体概括简单来说一下，本书内容可以分四个大部分：一是介绍了数据中台的五大功能模块即元数据中心
Michael_Shentu·2023-12-29 19:24

重磅发布！《2022中国数据智能产业图谱+中国企业数智化转型升级服务全景图》

中新赛克海睿思从数千家企业中脱颖而出，成功入选大数据、大数据分析平台、数据中台等3大板块，被评选为典型代表企业。此图谱中，中新赛克海睿思入选的核心服
海睿思·2023-12-29 17:24

Flink开发利器StreamX

背景Hadoop体系虽然在目前应用非常广泛，但架构繁琐、运维复杂度过高、版本升级困难，且由于部门原因，数据中台需求排期较长，我们急需探索敏捷性开发的数据平台模式。
Apache StreamPark·2023-12-28 15:34

推荐几个开源HTTP服务接口快速生成工具

（3）数据中台架构中，企业数据资产对外
大龄码农有梦想·2023-12-28 13:10

数据中台架构原理与开发实战：从数据采集到数据清洗

1.背景介绍数据中台是一种架构模式，主要用于解决企业内部数据的采集、存储、清洗、分析和应用等问题。
一枚可爱的程序女孩·2023-12-28 05:13

构建高效数据中台：集群规划与搭建的最佳实践指南

架构设计Rack(机架)配置建议大数据集群规划安装细节见配套文档YARN资源管理平台队列调度策略CapacityScheduler默认配置下，CapacityScheduler将尝试保证每个队列在其分配的容量内公平地使用资源。然而，Hadoop也支持通过调整队列的权重和使用抢占策略来优化资源的使用。例如&
数据与后端架构提升之路·2023-12-28 04:20

如何更好地建设数据中台？

“数据中台”也成为挖掘数据价值、辅助企业快速决策，实现降本增效，甚至重构企业商业模式的关键。然而在TOP50房企里，仅有38%的企业实现了内部系统数据的互通。数据中台为何建不起来？
WakeData惟客数据·2023-12-26 14:09

案例 | 数据中台如何支撑6000+门店降本提效？

对于企业来说，上中台不是目的，借助数据中台让企业建立数据驱动意识，并结合数据中台持续做好各项业务运营，才是根本。那么对于零售行业来说，该如何利用数据中台为业务赋能？
WakeData惟客数据·2023-12-26 14:39

数据中台与数据仓库有什么区别？

数字化转型浪潮卷起各种新老概念满天飞，数据中台、数据仓库轮番在朋友圈刷屏，企业还没推开数字化大门，先被各种概念绊了一脚。今天咱们就来看下这两者究竟有啥区别。
WakeData惟客数据·2023-12-26 14:38

HBase 超大表迁移、备份、还原、同步演练手册：全量快照 + 实时同步（Snapshot + Replication）不停机迁移方案

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》
　Laurence·2023-12-26 10:34

数据中台包含哪些模块

本文将通过对数据中台架构的介绍，让大家了解数据中台总体架构、包含的模块、模块之间的关系以及运转机制。
xuanxing123·2023-12-24 15:05

功能强大的开源数据中台系统 DataCap 1.18.0 发布

推荐一套基于SpringBoot开发的简单、易用的开源权限管理平台，建议下载使用:https://github.com/devlive-community/authx推荐一套为Java开发人员提供方便易用的SDK来与目前提供服务的的OpenAI进行交互组件：https://github.com/devlive-community/openai-java-sdk推荐一套全平台数据库管理工具，建议下载
qianmoQ·2023-12-24 02:36

机场数据治理系列介绍（1）：机场行业数据中台中的数据管理顶层设计方案

目录1、战略目标与价值2、组织架构与角色分配3、数据流程管理4、数据质量管理5、数据安全与隐私保护6、技术平台选择与部署7、数据服务与API管理8、数据培训与文化推广9、持续改进与优化民航机场行业的数据中台中
机场信息系统研究员·2023-12-24 02:27

秋天的第一杯奶茶

关注微信公众号：一个数据人的自留地1、回复“数据中台”，获取2、回复“数据产品”，获取3、回复“商业分析”，获取4、回复“交个朋友”，进入大家是不是在这周突然被“秋天的第一杯奶茶”这个梗刷屏了呢？
一个数据人的自留地·2023-12-22 19:24

浅谈数据中台之数据开发

目录01前言‍02中台概念及背景‍‍‍‍‍‍‍03数据中台建设方法‍‍‍‍‍‍04数据开发实践01‍前言‍‍2015年阿里在国内首次提出了中台概念，由阿里引领发展，迅速在互联网企业中形成了一股浪潮。
EAWorld·2023-12-21 10:03

7.数据中台 --- 数据开发：数据体系建设

数据中台数据体系是在全域原始数据的基础上，进行标准定义及分层建模，数据体系建设最终呈现的结果是一套完整、规范、准确的数据体系，可以方便的支撑数据应用。
enlyhua·2023-12-21 09:30

数据中台之旅(五)数据开发介绍

功能介绍数据开发包含:作业开发(sqoop\hive\impala\python\shell)、实时开发(flink)、调度管理(工作流\定时调度\DAG查询)、日志管理(定时调度日志\作业运行日志)建设思路作业开发:数仓开发使用频率最高的一个功能。通过web化的开发方式大大提升开发效率,降低技术门槛。以前在平安使用的是shell、sql脚本，自己写整套的指令。我希望的是，开发人员只要关注业务逻辑
belialxing·2023-12-21 09:59

数据中台架构原理与开发实战：数据集成与数据交换

作者：禅与计算机程序设计艺术1.背景介绍数据中台（DataStudio）是由数据团队在业务部门和技术部门协同下，通过构建统一的数据运维中心，实现数据集成、数据质量管理、数据分析及数据价值转化等数据的价值的一种方法论
禅与计算机程序设计艺术·2023-12-21 09:56

数据中台架构原理与开发实战：从监控告警到故障处理

1.背景介绍数据中台概述数据中台(DataHub)是一个数据服务平台，它提供了包括各种数据源、数据采集、清洗、计算、存储和分析等数据服务功能。
禅与计算机程序设计艺术·2023-12-21 02:17

数据中台未来一定需要具备三种能力

这在数据中台就表现为数据的中心化，也就是数据的高内聚、低耦合，需要对共性问题抽象出业务的规则，建立数据模型。
求知笔记·2023-12-20 20:07

数据中台架构原理与开发实战：数据中台的数据可视化工具与平台

1.背景介绍概述如今互联网业务呈爆炸式增长，用户需求也日渐复杂，数据处理能力要求越来越高。大量的数据产生、存储、分析和管理必然会给企业带来巨大的挑战。数据仓库和数据湖作为企业级的基础设施建设的重要组成部分，可以提供数据源头，汇聚和加工各种异构数据源并形成统一的价值信息。然而，对于企业中不同业务线的应用部门，往往需要通过不同的界面或方式才能看到这些数据。比如对于零售部门，可能只能通过APP进行数据的
禅与计算机程序设计艺术·2023-12-20 05:03

数据中台架构原理与开发实战：实例解析数据中台项目

作者：禅与计算机程序设计艺术1.背景介绍数据中台（DataCenterDataWarehouse，DCDW）是企业为了整合数据而建立的一个集中化平台，主要包括数据采集、存储、处理、分析、智能决策支持等环节
禅与计算机程序设计艺术·2023-12-20 05:00

用Q-learning算法实现自动走迷宫机器人

2019独角兽企业重金招聘Python工程师标准>>>【技术沙龙002期】数据中台：宜信敏捷数据中台建设实践|宜信技术沙龙将于5月23日晚8点线上直播，点击报名项目描述：在该项目中，你将使用强化学习算法
weixin_33901641·2023-12-19 15:59

订单峰值激增 230%，Serverless 如何为世纪联华降本超 40%？｜双11 云原生实践

作者|朱鹏导读：2020年双11，世纪联华基于阿里云函数计算(FC)弹性扩容，应用于大促会场SSR、线上商品秒杀、优惠券定点发放、行业导购、数据中台计算等多个场景，业务峰值QPS较去年提升230%，研发效率交付提效超过
阿里云云原生·2023-12-19 14:10

数据中台架构原理与开发实战：数据服务与API接口

1.背景介绍“数据中台”是一个新的IT技术概念，它是指将数据、计算、应用等技术能力进行整合的一体化平台。
禅与计算机程序设计艺术·2023-12-19 07:48

我对大数据的理解

在这种大环境下，部分企业或政府建立的大数据平台，并且在此之上建立了数据湖、数据仓库、数据中台。相关概念或定义如下：大数据平台是一个以处
王永翔·2023-12-19 07:54

数据中台与数据仓库有什么区别？

数字化转型浪潮卷起各种新老概念满天飞，数据中台、数据仓库轮番在朋友圈刷屏，企业还没推开数字化大门，先被各种概念绊了一脚。今天咱们就来看下这两者究竟有啥区别。
惟客数据·2023-12-19 00:48

数据中台演进的四个阶段

数据中台的演进可以分为四个阶段，分别是：数据库阶段；数据仓库阶段；数据平台阶段；数据中台阶段。
求知笔记·2023-12-18 08:20

什么是BI、数据仓库、数据湖和数据中台，他们有什么差异？

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵进行系统的解析
公众号:肉眼品世界·2023-12-17 15:03

数据中台：企业数据质量参差不齐？听听专家怎么说

本文节选自《数据中台》作者：付登坡，江敏，任寅姿，孙少忆等1数据质量管理的目标数据质量管理主要解决“数据质量现状如何，谁来改进，如何提高，怎样考核”的问题。
中生代技术·2023-12-17 14:30

数据中台架构原理与开发实战：ETL过程深度解析

1.背景介绍随着互联网的蓬勃发展，越来越多的企业和机构开始在线存储、分析、报告各种数据。数据存储成为新旧应用、新旧数据管理和数据报表需求交织相成的一个重要原因。为了解决这个难题，数据仓库（DataWarehouse）应运而生。它是一个集中汇聚所有业务数据并提供统一视图的数据集合。同时也充当了数十年来存储、分析、报告数据的“单点故障”。数据仓库不仅能够满足内部各个部门对数据的查询需求，还可以作为“云
禅与计算机程序设计艺术·2023-12-17 14:29

数据采集方法

数据采集过程是数据流入数据中台的关键步骤，主要通过认证鉴权、关键数据源管控、采集数据传输安全、临时数据限制、日志记录和告警等多种措施来保障采安全性。
manok·2023-12-16 11:23

DataFunSummit：2023年数据科学在线峰会-核心PPT资料下载

数据中台如何发挥功效？用户增长有捷径吗？数据科学的最佳实践有哪些？本次峰会共包含了：机器学习与数据挖掘、AB实验、因果推断、数据中台与数字化转型、用户增长与运营、数据科学最佳实践等6大论坛。
百家峰会·2023-12-16 02:39

6000字长文，终于将数据中台架构体系讲明白了

数据中台的出现弥补了数据开发和应用开发之间由于开发速度不匹配而出现的响应力不足等缺陷问题。数据中台是国内学者提出的概念，起始于阿里的“大中台、小前台”概念。阿里的中台是从管理的角度出发，以中台
公众号:肉眼品世界·2023-12-15 19:46
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他