中台技术篇第8页

开源多组件数据中台整体框架设计

本文参考该论证思维工具，结合自身的工作经验，来论证下当前为什么“开源多组件数据中台”是政务数据应用的选择之一。一、什么是数据中台？

开源数据中台·2023-12-02 01:50

数据中台架构原理与开发实战：数据中台项目管理流程

作者：禅与计算机程序设计艺术1.背景介绍数据架构概述数据架构（DataArchitecture）作为IT企业运用新型信息技术（IT）技术革命带来的变革，已经成为越来越重要的领域。随着互联网、移动互联网、物联网、云计算等新一代技术的发展，人类活动产生的数据量正在以指数级增长。而数据架构就成为了构建和维护这些海量数据的基石。由于数据量的爆炸性增长，传统单体数据库已无法满足业务需求的同时，还面临新的挑战

禅与计算机程序设计艺术·2023-12-02 01:49

数据中台架构原理与开发实战：数据可视化与数据报表

2017年，阿里巴巴集团发布了"支付宝数据中台",该平台旨在打通数据分析、决策制定和营

禅与计算机程序设计艺术·2023-12-01 23:48

数据中台之核心调度模块的设计

目录1.DAG图的设计1.1功能设计要点1.2数据库设计要点2.调度器设计2.1XXL-JOB调度架构特点

数据与后端架构提升之路·2023-12-01 12:51

数据中台之OneService

OneService定义数据服务（OneService）作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。如何构建OneService●第一步：API定义API的定义包括：快速配置参数、选择排序字段、API类型多样性、数据预览、复制字段等方面。API的类型又包括生成API、注册API、服务分组及服务编排这4个方面。●第二步：API发布API的发

数据与后端架构提升之路·2023-12-01 12:50

某银行重要交易系统基于高端全闪信创存储两地三中心架构设计及应用实践

对于数字化转型的探索，国内商业银行已经经历了从业务信息化、互联网金融的1.0阶段到金融科技、中台建设的2.0阶段。关于如何开展“数字化转型”，随着国

罗思付之技术屋·2023-12-01 10:29

一文读懂：制造业头部企业如何构建经营分析数字化体系

用BI数据分析手段，通过SAPBW/4HANA、SAPSACPlanning、数据中台、Hadoop等构建大数据平台，实现企业经营分析的数字化在近年逐步被认可和推崇，尤其是数字化场景的经营分析会成为数字化转型的亮点应用之一

智扬信达·2023-12-01 09:11

你所认为的不一定是你所认为的

印象中台湾的偶像剧都是那种假假的、腻腻的，就连当年火爆的《流星花园》我都没有看完。同事说：“去看，绝对颠覆你对台剧的认知。”我将信将疑地点开剧集，竟然津津有味地看了起来，边看边赞叹这是一部良心剧。

杨柳依依_b375·2023-12-01 02:13

“你不看我不看，烂尾剧会完蛋”，“菊式”应援烂尾剧get了吗？

这是在《宫心计2：深宫计》播出之初，凭借剧中台词蹭了一波热度。尽管编剧将成语、对仗、押韵运用得炉火纯青，但是仍然弥补不了剧本主体内容的硬伤。

深壹·2023-11-30 22:00

价值驱动交付

核心思路问题目标精益产品开发ALPD：advancedleanProductdevelopment三步走：全链路精益协作及精益需求分析中台化技术及云原生工程实践精益互联网创新方法四大手段：拉通、对齐、反馈

AgileHouse·2023-11-30 18:02

基于Apache doris怎么构建数据中台(五)-数据质量管理

上一次我们讲了，数据怎么进行快速的接入，这次我们讲在接入及后续的数据处理中质量怎么控制如何更加合理、高效的监控每类作业的运行状态，并将原本分散、孤岛式的监控日志信息通过规则引擎集中共享、关联、处理；洞察关键信息，形成事前预判、事中监控、事后跟踪的质量管理闭环流程；沉淀故障问题，搭建解决方案的知识库体系。在数据质量监管平台的规划建设中，面临如下挑战：缺乏统一监控视图，离线和实时作业监控分散，影响性、

张家锋·2023-11-30 17:48

数据中台具体是怎么解决数据孤岛的？_光点科技

为了解决这一问题，数据中台应运而生。数据中台是一种新型的数据管理架构，旨在打破数据孤岛，通过集中处理和管理数据，提高数据的可访问性和可用性。具体来说，

光点数据治理·2023-11-30 14:22

光点数据中台能干啥？怎么做？用在哪？_光点科技

数据中台的支持是企业中任何高层次的业务应用不可或缺的。数据中心面向的公司业务不再是单一业务线，而是从公司整体角度审视业务全景，寻找可重用的沉淀能力。今天，让我们来了解一下。

光点数据治理·2023-11-30 14:52

企业的数据中台到底指的是什么？_光点科技

随着数据技术的不断发展和企业数据应用的广泛应用，越来越多的企业开始将数据中台作为数字化转型的核心战略之一。那么，企业的数据中台到底指的是什么呢？

光点数据治理·2023-11-30 14:52

光点高校数据中台，助力高校信息化迎来发展新格局_光点科技

数据是教育信息化改革创新过程中的核心资产。从大数据的角度构建高校数据治理体系，支持高校管理信息向智能化服务和教育数字化转型，已成为必然趋势。然而，高校拥有更大的数据规模、更复杂的数据类型、更密集的数据交换和对数据治理的需求。因此，数据的应用仍然或多或少困扰着许多学校。为了清除这些信息问题，充分满足高校的数据进行应用市场需求，光点科技基于在大数据研究领域积累的技术优势和实施经验，为高校提供相关数据中

光点数据治理·2023-11-30 14:51

企业数据中台（CDP）为什么突然火了？_光点科技

数据中台CDP其实是从2019年开始火的。

光点数据治理·2023-11-30 14:21

我的私密学习小圈子~

前某厂中台架构，公众号小哈学Java作者。91年生人，码龄9年，先后供职于支付、共享等互联网领域，主导负责过数据传输、日志中台、任务调度、文件平台等产品，以支撑各部门业务线。

犬小哈·2023-11-30 11:54

实战JVM高CPU、内存问题分析定位

背景：业务中台组件MOSC开展压测工作，并发场景下发现CPU使用率达到100%，虽然程序没有报错，但是这种情况显然已经达到性能瓶颈，对服务带来了验证的效能影响，所以针对该CPU问题必须进行详细的根因分析处理

Survivor001·2023-11-30 10:54

17. Spring Cloud Stream消息驱动持久化

首先看到消息驱动，我们会想到消息中间件，比如以下几种ActiveMQRabbitMQRocketMQKafka但是在实际开发中，可能会遇到一些问题，比如说上图的中台和后台可能存在两种MQ，它们之间的实现都是不一样的

AlvinUnity·2023-11-30 09:53

一文了解前台、中台、后台的职责与关联

导读很多人提到中台时自然会问：“既然有中台，那是否有前台和后台？它们各自的职责又是什么呢？”本文为你详细解答。我们来看一下某科技巨头对前台、中台和后台职责的定位。

产品经理之禅·2023-11-30 06:19

合阔智云：实现API无代码开发，连接ERP系统和CRM系统提高运营效率

概述合阔智云，一家成立于2011年的科技公司，核心业务是提供云原生和移动化设计的新一代全渠道“云端一体”履约中台和去中心化模式智能门店供应链业务中台。

集简云-软件连接神器·2023-11-30 04:56

数据中台架构原理与开发实战：数据中台的数据索引与搜索

作者：禅与计算机程序设计艺术1.背景介绍随着互联网的蓬勃发展，社会数据越来越多地被收集、处理、分析并呈现出来。如何在快速变化的社会环境下有效管理、发现和利用这些海量数据，是一个非常重要的问题。2017年，英国政府发布了“数字转型”的新数据指南，要求各级政府在年底前推出基于数据的决策支持工具，对社会数据进行采集、处理、存储、分析、呈现、利用，形成信息经济。而最近十几年里，随着数据产业的兴起，数据中心

禅与计算机程序设计艺术·2023-11-30 01:38

数据中台为什么不好搞？

从2015年阿里提出“大中台”的数据中台战略，到2019年大厂及中台服务商“大兴”数据中台，再到2021年大厂又开始拆中台。数据中台从小甜甜变成牛夫人仅仅用了2年时间，为什么这么快数据中台就不香了？

码农code之路·2023-11-30 00:03

数据中台·实时开发计算平台

什么是数据中台·实时计算平台？实时计算（实时开发）是为构建一套一站式、高性能实时大数据处理平台，广泛适用于流式数据处理场景。

数据先生·2023-11-30 00:33

数据中台整体设计思路复盘

首先，什么是数据中台，由于每个企业每种项目对中台的定义不同，这里仅仅给一个概念：数据中台是指通过数据技术，对海量数据进行采集、计算、存储、加工，同时统一标准和口径。

qq_33744471·2023-11-30 00:32

数据中台：数据模型设计

但是在数据中台构建之前，分析师经常发现⾃⼰没有可以复⽤的数据，不得不使⽤原始数据进⾏清洗、加⼯、计算指标。由于他们⼤多是⾮技术专业出⾝，写的SQL质量⽐较差，甚⾄⻅过5层以上的嵌套。这种SQ

小晨说数据·2023-11-30 00:31

阿里云数据中台核心引擎

核心引擎MaxCompute阿里离线数据计算平台（离线数仓）原名ODPS,阿里巴巴自主研发的海量数据处理平台MaxCompute处理存储在TableStore的数据（不负责收集数据到TableStore中），使用Fluentd服务（类似的服务还有kafka、LogHub、DataX等，都大同小异，这里我用Fluentd作描述只是方便），通过Fluentd我们轻松的创建任务去按时读取各台服务器上的日

hsabrina·2023-11-30 00:30

奇点云数据中台技术汇（三）| DataSimba系列之计算引擎篇

随着移动互联网、云计算、物联网和大数据技术的广泛应用，现代社会已经迈入全新的大数据时代。数据的爆炸式增长以及价值的扩大化，将对企业未来的发展产生深远的影响，数据将成为企业的核心资产。如何处理大数据，挖掘大数据的价值，让大数据为企业的发展保驾护航，将是未来信息技术发展道路上关注的重点。传统的数据处理方式通常是将数据导入至专门的数据分析工具中，这样会面临两个问题：1、如果源数据非常大时，往往数据的移动

cuba7764·2023-11-30 00:00

数据中台架构原理与开发实战：数据中台的数据分析工具与平台

然而，对于数据中台的设计、搭建、运维、应用等工作仍存在一定的难度。如何快速、高效地构建出一个满足多变性、变化快、数据量大、并发访问量大的数据服务，是一个值得研究的问题。在本文中，作者通过从用户视角

禅与计算机程序设计艺术·2023-11-30 00:30

Hawkeye:助力TISPLUS实现数据化运营

背景阅读本文的同时，建议大家先阅读洪震的文章《阿里集团搜索中台TisPlus》。

weixin_34148456·2023-11-29 23:36

npm创建React组件

趁着有时间就想自己搞一个中台框架组件，我最喜欢干这种闭门造轮子的事情。然而打包组件这玩意水深得很，网上很难查找到趁手的资料，很多都是2018的资料了，加上前端本来就是个更新超快的玩意，结果可想而知。

夜里小郎君·2023-11-29 19:02

大数据管理平台（数据中台）方案及重难点技术分析

1.大数据管理平台(数据中台)1.1.系统概述需求描述建设大数据管理中台，按照统一的数据规范和标准体系，构建统一数据采集-治理-共享标准、统一技术开发体系、统一接口API，实现数据采集、平台治理，业务应用三层解耦

打码人的日常分享·2023-11-29 14:30

Batrix企业能力库之物流交易域能力建设实践 | 京东物流技术团队

简介Batrix企业能力库，是京东物流战略级项目-技术中台架构升级项目的基础底座。

京东云技术团队·2023-11-29 13:50

无代码编程时代下，程序员要失业了？

“中台之后，便是无代码编程。”无代码编程是什么？开发流程是怎么样的？有何优缺点？无代码编程时代来了，就不需要程序员编写代码了吗？下面作者将跟大家聊聊无代码编程的那些事儿。

程序员与Python·2023-11-29 10:34

金融行业

以我们最熟悉的券商为例，具体可以细分为前台业务（经纪业务、投行业务、资管业务、自营业务）、中台业务（产品设计、风险控制、合规法务、IT信息）、后台（人力资源、行政岗位、运营岗位、

vhtk·2023-11-29 10:26

如何进行指标质量治理——指标系统（提质篇）

作者介绍@小风数据中台产品负责人；UBDC全域大数据峰会“灯塔人物”；擅长埋点模型、指标治理，数仓架构等；“数据人创作者联盟”成员。01指标质量治理概述指标质量治理主要分为两个部分：提质与增效。

一个数据人的自留地·2023-11-29 08:26

华为认证大数据工程师（HCIA-Big Data）--练习题

BCDA.实时数据处理B.基于行业领域知识库快速构建数据中台C.云上数据平台快速搭建D.一站式的数据运营治理平台2、A

大沙头三马路·2023-11-29 08:05

双11黑科技，阿里百万级服务器自动化运维系统StarAgent揭秘

阿里巴巴运维中台技术专家宋意，首次直播揭秘阿里IT运维的基础设施StarAgent，详细分析StarAgent是如何支持百万级规模服务器管控？

阿里云云栖号·2023-11-29 08:04

技术篇纯分享—支付平台服务器被攻击怎么应对？

在商业部门，特别是在跨境电子商务中，支付和付款是不可或缺的。第三方和第四方支付遍地开花，造成了狼多肉少的情况，为市场占有量，不少人动起了歪脑筋，利用互联网攻击同行业务服务器（常见DDOS,CC攻击），让竞争对手业务瘫痪，从而坐收渔利，那么，被ddos，cc攻击后，该怎么应对呢？需要一台能承受你现在攻击量的高防服务器，例如当你遇到200G流量攻击时，务必选择300G以上的防御，留下足够的空间，预防发

群联ai云安全雨露·2023-11-29 03:31

阿里测试环境运维及研发效率提升之道

在全球运维大会上，阿里巴巴研发效能事业部运维中台技术专家——刘湘疆（青冥），从资源稳定性、部署效率，以及业务稳定性方面为大家分享测试环境的那些事儿。

哈哈和呵呵·2023-11-29 01:32

数据中台行业发展概况及展望

随着企业业务创新不断加快，对数据开发的响应速度提出更高的要求，数据中台就诞生在这样的大背景下。

大数据v·2023-11-29 01:20

数据中台能力成熟度评估模型

会上，中国信息通信研究院云计算与大数据研究所大数据与区块链部高级业务主管王卓发布了《数据中台能力成熟度模型》框架。一.数据中台的相关背景首先，我们来介绍一下这项工作的背景。从

公众号:肉眼品世界·2023-11-28 19:25

「曾哥读书」业务中台产品搭建指南：电商业务平台全流程设计

以中台之名，行平台之实。本书只是一本披着中台外衣的电商平台简介，广度还行，深度不够。推荐指数：6.5颗星01整体评价本书的优点是有脉络和层次感，从平台的初步搭建到完善，以及数据驱动和平台化，等等。

frozeng·2023-11-28 18:13

【数据中台】开源项目（2）-Davinci可视应用平台

1平台介绍Davinci是一个DVaaS（DataVisualizationasaService）平台解决方案，面向业务人员/数据工程师/数据分析师/数据科学家，致力于提供一站式数据可视化解决方案。既可作为公有云/私有云独立部署使用，也可作为可视化插件集成到三方系统。用户只需在可视化UI上简单配置即可服务多种数据可视化应用，并支持高级交互/行业分析/模式探索/社交智能等可视化功能。开源地址：htt

码农丁丁·2023-11-28 18:25

玩转微服务-技术篇-JSDOC教程

一.简介JSDoc3是一个用于JavaScript的API文档生成器，类似于Javadoc或phpDocumentor。可以将文档注释直接添加到源代码中。JSDoc工具将扫描您的源代码并为您生成一个HTML文档网站。JSDoc是一种用于JavaScript代码文档注释的标记语言和工具。它不仅仅是一种文档编写方式，更是一种代码规范和团队协作工具。通过使用JSDoc注释，开发人员可以将关于函数、类、方

Elcker·2023-11-28 11:44

软件开发王者搭配：80%低代码+20%高代码

数字化领域从来不缺新概念，前两年市场大谈云原生、技术中台、业务中台等概念，企业更多聚焦在业务与IT架构的升级。而这两年，随着低代码、生成式AI的盛行，大家则开始挖掘数字化应用的低成本建设模式。

这我可不懂·2023-11-27 11:46

”敏捷知识“分享

分享主题主要是数据中台项目的敏捷实践目录1、排期表2、SprintPlanning1、明确价值观，每个人对自己的产出物负责，对应敏捷价值观“承诺”2、明确迭代周期，迭代预期交付物，也就是“Sprint目标

张熙_430d·2023-11-27 10:05

【数据中台】开源项目（1）-LarkMidTable

LarkMidTable是一站式开源的数据中台，实现中台的基础建设，数据治理，数据开发，监控告警，数据服务，数据的可视化，实现高效赋能数据前台并提供数据服务的产品。

码农丁丁·2023-11-27 09:38

【数据中台】开源项目（2）-Dbus数据总线

1背景企业中大量业务数据保存在各个业务系统数据库中，过去通常的同步数据的方法有很多种，比如：各个数据使用方在业务低峰期各种抽取所需数据（缺点是存在重复抽取而且数据不一致）由统一的数仓平台通过sqoop到各个系统中抽取数据（缺点是sqoop抽取方法时效性差，一般都是T+1的时效性）基于trigger或时间戳的方式获得增量的变更（缺点是对业务方侵入性大，带来性能损失等）这些方案都不能算完美，我们在了解

码农丁丁·2023-11-27 00:44

【数据中台】开源项目（2）-Wormhole流式处理平台

Wormhole是一个一站式流式处理云平台解决方案（SPaaS-StreamProcessingasaService）。Wormhole面向大数据流式处理项目的开发管理运维人员，致力于提供统一抽象的概念体系，直观可视化的操作界面，简单流畅的配置管理流程，基于SQL即可完成的业务逻辑开发方式，并且屏蔽了流式处理的底层技术细节，极大的降低了数据项目管理运维门槛，使得大数据流式处理项目的开发管理运维变得