数据中台建设项目

数据中台未来一定需要具备三种能力

这在数据中台就表现为数据的中心化，也就是数据的高内聚、低耦合，需要对共性问题抽象出业务的规则，建立数据模型。
求知笔记·2023-12-20 20:07

数据中台架构原理与开发实战：数据中台的数据可视化工具与平台

1.背景介绍概述如今互联网业务呈爆炸式增长，用户需求也日渐复杂，数据处理能力要求越来越高。大量的数据产生、存储、分析和管理必然会给企业带来巨大的挑战。数据仓库和数据湖作为企业级的基础设施建设的重要组成部分，可以提供数据源头，汇聚和加工各种异构数据源并形成统一的价值信息。然而，对于企业中不同业务线的应用部门，往往需要通过不同的界面或方式才能看到这些数据。比如对于零售部门，可能只能通过APP进行数据的
禅与计算机程序设计艺术·2023-12-20 05:03

数据中台架构原理与开发实战：实例解析数据中台项目

作者：禅与计算机程序设计艺术1.背景介绍数据中台（DataCenterDataWarehouse，DCDW）是企业为了整合数据而建立的一个集中化平台，主要包括数据采集、存储、处理、分析、智能决策支持等环节
禅与计算机程序设计艺术·2023-12-20 05:00

生态环境部：环境影响很小的建设项目，不再纳入环评管理

生态环境部环境影响评价与排放管理司司长刘志全表示，生态环境部将积极推进环评改革，以环境影响相对小的建设项目为重点，推出一系列改革举措，增强小微企业的获得感，进一步优化营商环境。
环评资讯·2023-12-19 16:22

用Q-learning算法实现自动走迷宫机器人

2019独角兽企业重金招聘Python工程师标准>>>【技术沙龙002期】数据中台：宜信敏捷数据中台建设实践|宜信技术沙龙将于5月23日晚8点线上直播，点击报名项目描述：在该项目中，你将使用强化学习算法
weixin_33901641·2023-12-19 15:59

订单峰值激增 230%，Serverless 如何为世纪联华降本超 40%？｜双11 云原生实践

作者|朱鹏导读：2020年双11，世纪联华基于阿里云函数计算(FC)弹性扩容，应用于大促会场SSR、线上商品秒杀、优惠券定点发放、行业导购、数据中台计算等多个场景，业务峰值QPS较去年提升230%，研发效率交付提效超过
阿里云云原生·2023-12-19 14:10

2022-06-30

就业：每年建筑行业都会有很多的建设项目，这些项目需要很多的注册建造师在岗，市场需求量不断上升，然而二建注册证书持有人数不足，满足不了市场所需，就会导致建造师薪酬待遇上升，这时候持有二级建造师证书的阶层
山东九斗教育·2023-12-19 08:39

数据中台架构原理与开发实战：数据服务与API接口

1.背景介绍“数据中台”是一个新的IT技术概念，它是指将数据、计算、应用等技术能力进行整合的一体化平台。
禅与计算机程序设计艺术·2023-12-19 07:48

我对大数据的理解

在这种大环境下，部分企业或政府建立的大数据平台，并且在此之上建立了数据湖、数据仓库、数据中台。相关概念或定义如下：大数据平台是一个以处
王永翔·2023-12-19 07:54

数据中台与数据仓库有什么区别？

数字化转型浪潮卷起各种新老概念满天飞，数据中台、数据仓库轮番在朋友圈刷屏，企业还没推开数字化大门，先被各种概念绊了一脚。今天咱们就来看下这两者究竟有啥区别。
惟客数据·2023-12-19 00:48

数据中台演进的四个阶段

数据中台的演进可以分为四个阶段，分别是：数据库阶段；数据仓库阶段；数据平台阶段；数据中台阶段。
求知笔记·2023-12-18 08:20

什么是BI、数据仓库、数据湖和数据中台，他们有什么差异？

随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵进行系统的解析
公众号:肉眼品世界·2023-12-17 15:03

数据中台：企业数据质量参差不齐？听听专家怎么说

本文节选自《数据中台》作者：付登坡，江敏，任寅姿，孙少忆等1数据质量管理的目标数据质量管理主要解决“数据质量现状如何，谁来改进，如何提高，怎样考核”的问题。
中生代技术·2023-12-17 14:30

数据中台架构原理与开发实战：ETL过程深度解析

1.背景介绍随着互联网的蓬勃发展，越来越多的企业和机构开始在线存储、分析、报告各种数据。数据存储成为新旧应用、新旧数据管理和数据报表需求交织相成的一个重要原因。为了解决这个难题，数据仓库（DataWarehouse）应运而生。它是一个集中汇聚所有业务数据并提供统一视图的数据集合。同时也充当了数十年来存储、分析、报告数据的“单点故障”。数据仓库不仅能够满足内部各个部门对数据的查询需求，还可以作为“云
禅与计算机程序设计艺术·2023-12-17 14:29

数据采集方法

数据采集过程是数据流入数据中台的关键步骤，主要通过认证鉴权、关键数据源管控、采集数据传输安全、临时数据限制、日志记录和告警等多种措施来保障采安全性。
manok·2023-12-16 11:23

DataFunSummit：2023年数据科学在线峰会-核心PPT资料下载

数据中台如何发挥功效？用户增长有捷径吗？数据科学的最佳实践有哪些？本次峰会共包含了：机器学习与数据挖掘、AB实验、因果推断、数据中台与数字化转型、用户增长与运营、数据科学最佳实践等6大论坛。
百家峰会·2023-12-16 02:39

6000字长文，终于将数据中台架构体系讲明白了

数据中台的出现弥补了数据开发和应用开发之间由于开发速度不匹配而出现的响应力不足等缺陷问题。数据中台是国内学者提出的概念，起始于阿里的“大中台、小前台”概念。阿里的中台是从管理的角度出发，以中台
公众号:肉眼品世界·2023-12-15 19:46

数据中台架构原理与开发实战：理解数据湖与数据中台的关系

但是，由于需求的不断变化，公司面临的数据维度爆炸、数据价值难以量化、数据分析延迟增长等一系列数据管理难题，如何构建一个具有自主知识产权保护能力和数据价值的数据中台成为迫切需求。
禅与计算机程序设计艺术·2023-12-15 19:08

马骑顿部署实在RPA，所产价值超该项目投入6倍

2022年，马骑顿搭建企业数据中台，统一管理线上数据，但在做数据化的时候，发现很难将各个模块的数据链路打通。
实在智能RPA·2023-12-15 12:46

实践分享 | 数据中台高效交付的秘笈

基于保障数字化转型成功的数据中台建设过程中，“速度”决定了市场竞争力——建设周期越短，能节约越多成本；中台上线越快，能释放越多价值。
美林数据Tempodata·2023-12-15 10:08

水闸水雨情监测设施建设项目

功能设计在水闸上、下游挡墙外侧各安装1套雷达水位计，水闸屋顶布置个雨量计，水位及雨量监测数据的采集与传输主要是实时的完成水位、雨量数据的采集与处理，并按照设定的工作方式、时间间隔、增量范围将数据上传至扬压力监测站边缘计算终端，再由边缘计算终端统一打包上传到服务器。现场设置及远程控制功能在现场对监测站运行用到的参数进行设置，设置好后自动保存，掉电后不丢失；监测站可接收服务器端的命令，更改测站运行参数
广州创科水利·2023-12-14 18:33

最最弱日记-045-从前的自己

最近有一个建设项目，将要开一场多方的碰头会，需要作为建筑设计的丁晓发言。为此他准备了许久。本来不是一个什么重要的会议，但是小丁怯场的个性对其造成了较大的阻碍。
最最弱·2023-12-06 05:31

记一次系统上线的JVM调优

前言开发了大半年的数据中台系统，近期在测试环境上线压测，监控JVM时发现GC频繁，开启GC日志后发现隔几秒就要做一次MinorGC（对新生代内存进行回收），并且堆内存不到十分之一的时候就进行GC（测试-
南风过境jz·2023-12-06 04:05

数据中台学习和实战系列文章

【华为数据之道学习笔记】1-2华为数字化转型与数据治理-CSDN博客【华为数据之道学习笔记】非数字原生企业的特点-CSDN博客【数字化转型方法论读书笔记】选型数据中台的几大建议-CSDN博客【数字化转型方法论读书笔记
码农丁丁·2023-12-05 22:32

【数据中台】开源项目（4）-BitSail

介绍BitSail是字节跳动开源的基于分布式架构的高性能数据集成引擎,支持多种异构数据源间的数据同步，并提供离线、实时、全量、增量场景下的全域数据集成解决方案，目前服务于字节内部几乎所有业务线，包括抖音、今日头条等，每天同步数百万亿数据。开源地址：GitHub-bytedance/bitsail:BitSailisadistributedhigh-performancedataintegratio
码农丁丁·2023-12-05 22:55

“改造”云南

胡旺雄16春中级电子班中国铁路昆明局集团有限公司介绍，云南将继续加快推进铁路建设项目，今年预计将完成铁路建设投资250亿元，完成广大铁路扩能改造，开工建设弥蒙高铁，做好渝昆高铁等前期工作，全力打造面向南亚东南亚的国际交通枢纽
话不投机还谈nmp·2023-12-04 21:16

建筑设计全过程碳排放计算与案例分析

特别是全文强制性国标标准《建筑节能与可再生能源利用通用规范》GB55015-2021的实施，对建设项目可行性研究报告、建设方案和初步设计要求进行建筑碳排放分析；国家标准《绿色建筑评价标准》GB/T50378
天青色等烟雨..·2023-12-04 15:43

电气工程品牌专业建设项目评审

今天，参加电气工程品牌专业建设项目评审会。系主任L丹汇报清楚，思路清晰。围绕三个关键词展开，师资、五维一体的实践平台、深度教学改革—人才培养体系的调整与完善。然后分别介绍这几部分的建设亮点。
容玲·2023-12-04 14:19

5G信号“配送员”

原来，广州市一家公司承接了某运营商的5G基站建设项目，需要向西藏、广东、贵州等地基站运输并协助安装相关设备。
307c8f4548c7·2023-12-04 09:26

《数据中台：让数据用起来》书评

有幸被选中为数澜科技《数据中台：让数据用起来》抢鲜品鉴者，首先感谢数澜科技的小伙伴们能够系统的介绍和分享关于数据中台相关理念、知识、技术及工具。
礼_7f0b·2023-12-04 06:36

永昌瑞园建设项目三标段（4#地块）——2019年6月22日现场施工形象进度

天气：晴17~30℃一、人、材、机组织情况1、人员情况（1）管理人员：共13人（2）在场人员：共86人主体班组：13人钢筋班组：18人塔吊班组：6人施工电梯：4人木工班组：29人外架班组：2人水电运转：3人爬架班组：8人临时用工：3人2、6月22日材料进场情况无材料进场3、机械塔吊3台、施工电梯4台、泵机2台、砂浆搅拌机2台、整体全钢式附着升降脚手架4台。二、交底情况施工电梯安全技术交底钢筋班组安
9eee74eedcf0·2023-12-04 01:13

数据中台架构原理与开发实战：数据分析与决策支持

作者：禅与计算机程序设计艺术1.背景介绍数据中台（DataStudio）是一个重要的开源工具和框架，用于帮助企业进行数据采集、清洗、加工、存储、分析和可视化。
禅与计算机程序设计艺术·2023-12-03 23:15

【数据中台】开源项目（3）-Linkis

关于LinkisLinkis在上层应用程序和底层引擎之间构建了一层计算中间件。通过使用Linkis提供的REST/WebSocket/JDBC等标准接口，上层应用可以方便地连接访问MySQL/Spark/Hive/Presto/Flink等底层引擎，同时实现统一变量、脚本、用户定义函数和资源文件等用户资源的跨上层应用互通，以及通过REST标准接口提供了数据源管理和数据源对应的元数据查询服务。作为计
码农丁丁·2023-12-03 23:42

数据中台方案

平台引擎DataSphereStudio基于插拔式的集成框架设计，及计算中间件Linkis，可轻松接入上层各种数据应用系统，让数据开发变得简洁又易用。在统一的UI下，DataSphereStudio以工作流式的图形化拖拽开发体验，将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出应用等，数据应用开发全流程场景需求。数据治理引擎数据平台的数据治理：数据治理是一个大而全的治
aaaak_·2023-12-03 23:11

【数据中台】开源项目（3）-DataSphere Studio

DataSphereStudio（简称DSS）是微众银行自研的数据应用开发管理集成框架。基于插拔式的集成框架设计，及计算中间件Linkis，可轻松接入上层各种数据应用系统，让数据开发变得简洁又易用。在统一的UI下，DataSphereStudio以工作流式的图形化拖拽开发体验，将满足从数据交换、脱敏清洗、分析挖掘、质量检测、可视化展现、定时调度到数据输出应用等，数据应用开发全流程场景需求。DSS通
码农丁丁·2023-12-03 23:10

浅析数据中台技术架构

@toc引言数据中台总体架构图前面我们通过理论层面对数据中台有了一定的了解，下面我们通过架构层面来详细看一下数据中台的设计。数据中台是位于底层存储计算平台与上层的数据应用之间的一整套体系。
kobe_OKOK_·2023-12-03 15:23

大数据湖项目建设方案：文档全文101页，附下载

关键词：大数据解决方案，数据湖解决方案，数据治理解决方案，数据中台解决方案一、大数据湖建设思路1、明确目标和定位：明确大数据湖的目标和定位是整个项目的基础，这可以帮助我们确定项目的内容、规模、所需的技术以及如何评估项目的效果
方案365·2023-12-03 08:05

【数据中台】开源项目（5）-Amoro

介绍AmoroisaLakehousemanagementsystembuiltonopendatalakeformats.WorkingwithcomputeenginesincludingFlink,Spark,andTrino,Amorobringspluggableandself-managedfeaturesforLakehousetoprovideout-of-the-boxdataw
码农丁丁·2023-12-03 08:05

复杂JSON的实时接入解析与可视化展示

数据在后端处理好通过API将JSON返回给前端页面2、SaaS产品对外通过WebAPI返回JSON提供数据服务，而不是让用户直接连接到数据库（这样太危险，而且数据库服务通常是多租户公用，无法直接登录访问）3、数据中台已经得到广泛应用
Crystalllleee·2023-12-02 21:46

2023.11.30 -hzmx电商平台建设项目05 - member会员主题建模开发

1.需求说明1.11各类数据信息说明说明:公司为了对不同会员进行不同的营销策略，对各类会员的数量都非常敏感，比如注册会员、消费会员、复购会员、活跃会员、沉睡会员。不仅需要看新增数量还要看累积数量。9个指标:新增注册会员数,累计注册会员数(上一次累积的+本次新增的),新增消费会员数,累计消费会员数,新增复购会员数,累计复购会员数,活跃会员数,沉睡会员数(沉睡会员是指在一段时间内未活跃或者没有产生消费
白白的wj·2023-12-02 09:23

2023.11.29 -hmzx电商平台建设项目 -核销主题阶段总结

目录1.准备源数据2.准备数仓工具进行源数据同步到ods层,本项目使用Datax3.使用Datax完成数据同步前建表时的方案选择3.1同步方式区别:3.2存储格式和压缩区别:4.在hive中创建表,共31个表5.数仓概念和数仓建模方案5.1数仓的基本概念5.2数仓建模方案关系建模:维度建模:两张表关系:数仓发展的三种模型:5.3数仓建设方案:6.使用海豚调度完成ODS层到DWD层数据导入6.1先在
白白的wj·2023-12-02 09:53

开源多组件数据中台整体框架设计

本文参考该论证思维工具，结合自身的工作经验，来论证下当前为什么“开源多组件数据中台”是政务数据应用的选择之一。一、什么是数据中台？  
开源数据中台·2023-12-02 01:50

数据中台架构原理与开发实战：数据中台项目管理流程

作者：禅与计算机程序设计艺术1.背景介绍数据架构概述数据架构（DataArchitecture）作为IT企业运用新型信息技术（IT）技术革命带来的变革，已经成为越来越重要的领域。随着互联网、移动互联网、物联网、云计算等新一代技术的发展，人类活动产生的数据量正在以指数级增长。而数据架构就成为了构建和维护这些海量数据的基石。由于数据量的爆炸性增长，传统单体数据库已无法满足业务需求的同时，还面临新的挑战
禅与计算机程序设计艺术·2023-12-02 01:49

数据中台架构原理与开发实战：数据可视化与数据报表

2017年，阿里巴巴集团发布了"支付宝数据中台",该平台旨在打通数据分析、决策制定和营
禅与计算机程序设计艺术·2023-12-01 23:48

高软之十：变更、战略与组织级项目管理

一、项目变更管理指在信息系统工程建设项目的实施过程中，由于项目环境或其他的原因对项目的功能、性能、架构、技术指标、集成方法、项目进度等方面做出的变更。
沙棘茶馆·2023-12-01 21:33

“国培计划（2019）”乡村中小学教师专业能力建设项目新教师入职培训心得体会

2019年10月12日至21日，我到河南省实验小学参加为期十天的新教师入职培训。此次培训从专家讲座到实地跟岗学习，再到个人微课展示，无论是理论还是实践，都让我有不同层次的提高。现将收获归纳为以下几点：一、理论武装头脑，并指导实践周宝荣专家分析当下教师专业发展的现状：“心有余而力不足”。我十分赞同，我们的学习力、思考力、实践力、协作力以及教研能力都处于一个初级水平。我们要想获得专业发展，就必须学习一
蜗牛的旅行_03c8·2023-12-01 15:30

什么是智慧工地？

智慧工地是指利用先进的信息技术，将传感器、互联网、人工智能等技术融入到建设项目中，实现项目全生命周期的智能化管理和
星辰大海里编程·2023-12-01 13:50

数据中台之核心调度模块的设计

目录1.DAG图的设计1.1功能设计要点1.2数据库设计要点2.调度器设计2.1XXL-JOB调度架构特点
数据与后端架构提升之路·2023-12-01 12:51

数据中台之OneService

OneService定义数据服务（OneService）作为统一的数据服务出口，实现了数据的统一市场化管理，有效地降低数据开放门槛的同时，保障了数据开放的安全。如何构建OneService●第一步：API定义API的定义包括：快速配置参数、选择排序字段、API类型多样性、数据预览、复制字段等方面。API的类型又包括生成API、注册API、服务分组及服务编排这4个方面。●第二步：API发布API的发
数据与后端架构提升之路·2023-12-01 12:50

一文读懂：制造业头部企业如何构建经营分析数字化体系

用BI数据分析手段，通过SAPBW/4HANA、SAPSACPlanning、数据中台、Hadoop等构建大数据平台，实现企业经营分析的数字化在近年逐步被认可和推崇，尤其是数字化场景的经营分析会成为数字化转型的亮点应用之一
智扬信达·2023-12-01 09:11
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他