E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据架构
网络游戏架构的前世今生——总结
上文:网络游戏架构的前世今生——
数据架构
https://blog.csdn.net/finishy/article/details/1293347186.总结我们将这一大章介绍的网络、计算、数据三大块内容结合在一起
王元恺David
·
2023-03-11 11:26
游戏微服务架构实践
架构
微服务
游戏
服务器
网络游戏架构的前世今生——
数据架构
上文:网络游戏架构的前世今生——拓展数据库https://blog.csdn.net/finishy/article/details/1292283385.
数据架构
数据架构
,或者说是数据存储架构,其实包含了上文介绍的数据库方案
王元恺David
·
2023-03-11 11:56
游戏微服务架构实践
架构
elasticsearch
大数据
游戏
数据分析
2019-11-15
数据架构
:数据仓库:BI分析:数据化运营:方法论:分布式文件存储:并行计算:
阳光照我心房
·
2023-03-09 19:38
如何成为一个合格的
数据架构
师?
【与数据同行】已开通综合、数据仓库、数据分析、产品经理、数据治理及机器学习六大专业群,加微信号frank61822702为好友后入群。新开招聘交流群,请关注【与数据同行】公众号,后台回复“招聘”后获得入群方法。正文开始写在前面早在1980年,未来学家阿尔文·托夫勒就在《第三次浪潮》中,将大数据比喻为“第三次浪潮的华彩乐章”。21世纪以来,数据量进入每两年翻一番的增长期,越来越多人意识到了数据的价值
傅一平
·
2023-02-26 07:46
企业数据治理(1)之道与术
企业数据治理之道与术首先介绍了企业数据治理的背景,企业数据治理的需求和治理原则,然后从数据治理的标准体系、
数据架构
和数据治理的过程展开说明如何进行数据治理,最终通过一个集团企业的数据治理案例,把企业如何根据自身情况
ccddtomato
·
2023-02-26 06:08
企业数据治理系列
大数据
人工智能
数据库
数据分析
数据挖掘
TDengine 如何助力钢铁行业处理日均亿级的数据量?来看几个真实案例
本篇文章汇总了三大钢铁行业数据治理场景下的
数据架构
升级方案,供有相关业务需求的开发者参考。中天钢铁xTDengine“
·
2023-02-22 15:04
tdengine数据库
OushuDB 小课堂丨如何评估现代数据管道的数据质量准备情况
组织的
数据架构
选择加剧了这种情况。遗留架构通常缺乏扩展能力来支持不断
·
2023-02-22 15:02
oushudb-hawq
Apache Flink 实时计算在美的多业务场景下的应用与实践
摘要:本文整理自美的集团实时数据负责人、资深
数据架构
师董奇,在FlinkForwardAsia2022主会场的分享。
·
2023-02-21 14:42
后端flink大数据实时计算
从 ClickHouse 到 Apache Doris,腾讯音乐内容库数据平台架构演进实践
目前,内容库数据平台的
数据架构
已经从1.0演进到了4.0,经历了分析引擎从ClickHouse到ApacheDoris的替换、经历了
数据架构
语义层的初步引入到深度应用,有效提高了数据时效性、降低了运维成本
·
2023-02-20 16:13
分布式数据平台Data Mesh
DataMesh是一种基于领域驱动和自服务的
数据架构
设计新模式,借鉴了微服务和ServiceMesh的分布式架构思想,最初源于ThoughtWorks首席技术顾问ZhamakDehghani发表在MartinFo
FlyerTian
·
2023-02-18 01:19
怎样成功实现大数据项目架构?
本文作者ArmelNene是大数据公司ETAPIXGlobal创始人,在软件开发和
数据架构
领域有多年经验,熟悉Java、SOA、BI、企业搜索和数据仓库,同时也是开源贡献者,曾在诺基亚、Tata等多家公司工作
丨程序之道丨
·
2023-02-17 17:26
为什么西门子、美的等企业这样进行架构升级,看看改造效果就知道了
这种情况下,从业务发展的角度出发,
数据架构
改造成为了当务之急
涛思数据(TDengine)
·
2023-02-16 21:54
用户案例
架构
玖章算术CEO叶正盛:程序员必须掌握的数据库原理
分享内容合理的设计
数据架构
是程序员的核心竞争力,也是普通程序员走向技术专家的必修课。数据库一直是计算机核心基础软件,经历了40年的发展,从关系型数据库,到数据仓库
·
2023-02-16 20:38
动环监控系统大
数据架构
设计
传统的动环监控系统体系架构包含三个组成部分:监控对象(SO)、现场监控单元(FSU)、集中监控中心(SC),体系结构如下图所示:传统动环监控系统架构以上架构设计适合小规模的应用场景,难以解决大规模采集数据场景下的动环监控业务应用,本文提出一种集群大数据平台技术架构,以满足动环监控系统对大规模测点实时性采集和处理、大数据高效存储和查询、分布式容错处理等要求,同时为第三方SC、SC、大数据分析、其它应
皮皮杂谈
·
2023-02-06 15:22
[读书笔记]用户画像:方法论与工程化解决方案
目录前言第一章用户画像基础1.1用户画像是什么1.1.1画像简介1.1.2标签类型1.2
数据架构
1.3主要覆盖模块1.4开发阶段流程1.4.1开发上线流程1.4.2各阶段关键产出1.5画像应用的落地1.6
N刻后告诉你
·
2023-02-06 09:45
读书笔记
数据分析
数仓架构的演变
此时仅仅是工具的取代,架构上并没有根本的区别,可以把这个架构叫做离线大
数据架构
。
斯文遮阳
·
2023-02-05 14:44
什么是数据治理?
DMBOK2定义并划分了11个数据管理职能:包括数据治理、
数据架构
、数据建模和设计、数据存储
蒋珍波
·
2023-02-04 14:40
数据治理
数据中台
数据仓库
数据治理
数据资产管理
数据中台
大数据
首汽约车驶向极速统一之路!出行平台如何基于StarRocks构建实时数仓?
作者:王满,高级
数据架构
工程师首汽约车(以下简称“首约”)是首汽集团为响应交通运输部号召,积极拥抱互联网,推动传统出租车行业转型升级,加强建设交通强国而打造的网约车出行平台。
StarRocks_labs
·
2023-02-03 17:03
数据库
如何快速构建企业级数据湖仓?
数据湖仓开源趋势趋势一:
数据架构
向LakeHouse方向发展LakeHouse是什么?简言之,LakeHouse是在DataLake基础上融合了DataWareho
字节数据平台
·
2023-02-03 10:43
大数据
数据湖
湖仓一体
常用的几种大
数据架构
剖析
数据分析工作虽然隐藏在业务系统背后,但是具有非常重要的作用,数据分析的结果对决策、业务发展有着举足轻重的作用。随着大数据技术的发展,数据挖掘、数据探索等专有名词曝光度越来越高,但是在类似于Hadoop系列的大数据分析系统大行其道之前,数据分析工作已经经历了长足的发展,尤其是以BI系统为主的数据分析,已经有了非常成熟和稳定的技术方案和生态系统,对于BI系统来说,大概的架构图如下:可以看到在BI系统里
不羁风马
·
2023-02-02 14:57
数据仓库
数据挖掘
数据库
到底什么是
数据架构
,如何管理,谁来负责?
到底什么是
数据架构
,如何管理,谁来负责?理解概念是理解数据管理的第一步,很多概念我们知道,但内涵却不清楚,或者你以为清楚,这类澄清概念的文章可以很好的帮到你!
Ralap_Data
·
2023-02-02 14:23
数据
架构
安全架构
人工智能
系统架构设计方法-4-
数据架构
设计篇
数据架构
设计工作内容数据分布:数据实体和应用的对应关系个人感觉:这里面写数据流转不太妥,流传应该都是应用层面来完成的。应用和数据之间的读写关系的组合。
hsabrina
·
2023-02-02 14:22
系统架构设计方法
系统架构
总体架构
系统架构
架构
软件构建
数据库架构
数据库架构设计
作为数据库设计者在大方向上最为关心的是如下几点,也是要实现的目标:数据库架构硬件选型运营维护以一个创建平台系统为例,要经历业务架构设计,
数据架构
设计,应用架构设计,系统架构设计,运营维护业务架构:公
老帽爬新坡
·
2023-02-02 14:52
数据库架构
数据库
数据架构
建设方法及案例
数据架构
的本质是数据模型和数据流(或叫数据分布),《华为数据之道》将
数据架构
分为数据资产目录、数据标准、数据模型及数据分布,DAMA将
数据架构
分为数据模型和数据流设计,差不多就是这个意思。
云 祁
·
2023-02-02 14:51
大数据
java
编程语言
机器学习
人工智能
数据中台系统架构设计
针对不同的行业,系统托管方式各不一样,比如传统企业更倾向于采用私有云或自建机房,小型互联网企业倾向采用公有云等;针对不同应用场景的不同,技术架构也不相同,比如推荐场景,往往采用实时
数据架构
,传统报表应用采用离线
数据架构
咬定青松
·
2023-02-02 14:51
数据仓库
分布式
大数据
数据分析
hadoop
数据架构
设计
20220715一点点摆烂记录
数据架构
设计
数据架构
设计概述数据总体架构贴源层基础层通用层应用层数据流转关系各层之间数据流转应用服务和数据之间关系数据库数据库程序命名规范注释规范书写规范模型设计规范模型建设思路建模步骤建模原则贴源层基础层通用层应用层贴源层设计基础层设计通用层设计
数据架构
设计
数据架构
设计概述数据仓库
数据架构
设计是为应用架构设计提供数据框架支撑
happyhwq
·
2023-02-02 14:21
数据仓库
数据库
数据挖掘
E. 数据仓库 --- 数据管理能力成熟度评估模型
E.数据仓库—数据管理能力成熟度评估模型数据战略数据战略规划数据战略实施数据战略评估数据治理数据治理组织数据制度建设数据治理沟通
数据架构
数据模型数据分布数据集成和共享元数据管理数据应用数据分析数据开放分享数据服务数据安全数据安全策略数据安全管理数据安全审计数据质量数据质量需求数据质量检查数据质量分析数据质量提升数据标准业务术语参考数据和主数据数据元指标数据数据生存周期数据需求数据设计和开发数据运维
micklongen
·
2023-02-02 09:55
数据中台
数据仓库
数据分析
数据挖掘
到底什么是
数据架构
,如何管理,谁来负责?
但是,
数据架构
是什么,如何管理,谁来负责,还没有形成一致的共识。早前,在技术领域,系统架构、应用架构、信息架构相对为人了解,近年来一些企业级架构师也开始提出业务架构等概念。就
数据架构
而言,实践还呼
hanxiaolaa
·
2023-02-01 22:36
数据治理
大数据
经验分享
【
数据架构
系列-02】从《数据中台能力成熟度模型》的发布,聊聊火了的中台
热点之所以会“热起来”,是由于万众瞩目的那份炽烈,也是因为无数双“手”的奋力炒作。所以,要穿过那“缭绕烟雾”看到本质,便需要冷静的头脑。2023年1月4日,信通院发布了《数据中台能力成熟度模型》框架,不由让我浮想联翩,之后是不是还会出现业务中台、技术中台、AI中台、算法中台的能力成熟度模型呢。不知道为什么,按理应该同时公开发布的文档截止到1月30日在网上也没有找到,只是查到发布会的部分PPT,大致
zhulangfly
·
2023-02-01 08:18
数据架构
架构
大数据
中台思想
大
数据架构
师从入门到精通 学习必看宝典
经常有初学者在博客和QQ问我,自己想往大数据方向发展,该学哪些技术,学习路线是什么样的,觉得大数据很火,就业很好,薪资很高。如果自己很迷茫,为了这些原因想往大数据方向发展,也可以,那么我就想问一下,你的专业是什么,对于计算机/软件,你的兴趣是什么?是计算机专业,对操作系统、硬件、网络、服务器感兴趣?是软件专业,对软件开发、编程、写代码感兴趣?还是数学、统计学专业,对数据和数字特别感兴趣。其实这就是
yoku酱
·
2023-01-30 16:09
Hologres揭秘:高性能原生加速MaxCompute核心原理
Hologres(中文名交互式分析)是阿里云自研的一站式实时数仓,这个云原生系统融合了实时服务和分析大数据的场景,全面兼容PostgreSQL协议并与大数据生态无缝打通,能用同一套
数据架构
同时支持实时写入实时查询以及实时离线联邦分析
阿里云Hologres
·
2023-01-30 15:05
数据中台如何搭建
天启,奇点云数据模型架构专家、原海尔集团
数据架构
师、原阿里巴巴政务团队
数据架构
师,精通数据仓库建模理论及数据开发技术,具备零售、政务、医药、制造等多个领域数仓和数据中台建设经验,及PB级数据仓库与数据中台建设经验
山野市民
·
2023-01-30 15:49
数据仓库
数据库
大数据
Data Lakehouse (湖仓一体) 到底是什么
0、背景DataLakehouse(湖仓一体)是新出现的一种
数据架构
,它同时吸收了数据仓库和数据湖的优势,数据分析师和数据科学家可以在同一个数据存储中对数据进行操作,同时它也能为公司进行数据治理带来更多的便利性
Impl_Sunny
·
2023-01-30 07:06
#
数据存储与管理方案
#
概念
data
lakehouse
湖仓一体
大
数据架构
系列:如何理解湖仓一体?
导语|本文推选自腾讯云开发者社区-【技思广益·腾讯技术人原创集】专栏。该专栏是腾讯云开发者社区为腾讯技术人与广泛开发者打造的分享交流窗口。栏目邀约腾讯技术人分享原创的技术积淀,与广泛开发者互启迪共成长。本文作者是腾讯后台开发工程师叶强盛。引言这十多年大数据技术蓬勃发展,从市场的表现来看基于大数据的数据存储和计算是非常有价值的,其中以云数据仓库为主打业务的公司Snowflake市值最高(截止当前44
腾讯云开发者
·
2023-01-30 07:58
数据仓库
腾讯
大数据
编程语言
java
企业架构基本概念和发展历程
IT架构包括了
数据架构
、应用架构和技术架构。“企业”是指由一整套可识别的、互为作用的业务功能构成的商业组织。企业架构是企业的基础框架
美城智慧大学
·
2023-01-29 05:25
Spring中眼花缭乱的BeanDefinition
本篇博客主要参考:Spring官网阅读(四)BeanDefinition(上)碎碎念在某课网看到很多培训课程,有Java架构师、大前端架构师、大
数据架构
师等等,销量都不错,但是数据结构与算法、计算机基础这两门课程的销量少的可怜
CoderBear
·
2023-01-28 03:16
银行大数据的演变趋势是什么?
首届KylinDataSummit特别邀请了建信金融科技的架构团队技术总监朱志,为大家分享银行大
数据架构
的演变过程、未来展望和深度思考。
Kyligence
·
2023-01-26 08:26
数据网格(Data Mesh)是什么?
本专栏目录结构和参考文献请见大数据理论体系背景在自助的商业智能时代,几乎每家公司都认为自己是数据优先的公司,但并非每家公司都以应有的民主化和可扩展性来对待其
数据架构
。
Shockang
·
2023-01-22 14:18
大数据理论体系
大数据
湖仓一体
数据网格
深入理解大
数据架构
之——Lambda架构
传统系统的问题“我们正在从IT时代走向DT时代(数据时代)。IT和DT之间,不仅仅是技术的变革,更是思想意识的变革,IT主要是为自我服务,用来更好地自我控制和管理,DT则是激活生产力,让别人活得比你好”——阿里巴巴董事局主席马云。数据量从M的级别到G的级别到现在T的级、P的级别。数据量的变化数据管理系统(DBMS)和数仓系统(DW)也在悄然的变化着。传统应用的数据系统架构设计时,应用直接访问数据库
LBJ_小松鼠
·
2023-01-17 15:02
Flink
数据管理知识体系指南(第二版)-第四章——
数据架构
-学习笔记
目录4.1引言4.1.1业务驱动因素4.1.2
数据架构
成果和实施4.1.3基本概念4.2活动4.2.1建立企业
数据架构
4.2.2整合其他企业架构4.3工具4.3.1数据建模工具4.3.2资产管理软件4.3.3
键盘上的五花肉
·
2023-01-15 10:36
数据治理
架构
数据治理
主题域、概念、逻辑、物理四种模型有什么区别与联系?
以下文章来源于大
数据架构
师,作者彭文华傅一平荐语:概念是理解知识的关键,虽然你可能每天都听到主题域、概念、逻辑、物理模型这种数据仓库的名词,虽然你可能也实践过了,但不代表理解了这些概念的本质,理解本质的一个好处就是发现第一性原理
hanxiaolaa
·
2023-01-13 09:23
数据治理
数据结构
大数据
迁移学习
集成学习
数据平台建设指南(上)
先来看下整体的大
数据架构
图:数据采集篇 我们的数据来源主要有三部分:业务数据库,
woloqun
·
2023-01-12 10:19
数字化转型
大数据
时序数据库的4个误区,你踩了几个?
近几年IoT、IIoT、AIoT和智慧城市快速发展,时序数据库成为
数据架构
技术栈的标配。
YMatrix 官方技术社区
·
2023-01-10 12:54
数据库
武汉理工大学 大
数据架构
与模式期末复习
武汉理工大学大
数据架构
与模式期末复习在发现学长学姐们上一届是大作业结课而我们是考试结课之后整理复习的结果,可能不会很全,感觉最后老师稍微划知识点的时候没有为难我们(),总之大体是这么些考试内容,也不知道后面几届会不会改内容
安_荼生
·
2023-01-08 10:46
big
data
hdfs
mapreduce
基于 Flink 的实时数仓建设实践
图1初期实时
数据架构
但是,随着产品和业务人员对实时数据需求的不断增多,新的挑战也随之发生。数据指标越来越多,“烟囱式”的开发导致代码耦合问题严重。需求越来越多,有的需要明细数据,
高个子男孩
·
2023-01-08 10:15
数据中台
flink
知乎案例分享: 万字详解用户画像与实时数仓的架构与实践
文章目录1.前言1.1名词解释1.2实时数据与用户画像与各业务的结合2.面临的挑战和痛点2.1有价值2.2数据实效性2.3接口实时性2.4复杂性3.实践及经验分享3.1整体业务架构3.2实时数据的
数据架构
选型
Pushkin.
·
2023-01-08 10:44
大数据平台优秀案例
优秀案例
大数据
用户画像
Doris实践
实时数据
分布式文件存储系统不得不说的灵动元数据服务
本文我们就来分布式文件存储系统是如何设计元
数据架构
的。元数据的重要性元数据是用来描述文件系统和文件特征的系统数据,例如文件类型、文件大小、访问权限和数据索引信息等。
新爷话数据
·
2023-01-07 17:03
分布式
经验分享
大数据
云计算
同盾科技 x TiDB丨实时
数据架构
为风控智能决策保驾护航
经过长时间调研,他们最终选择了新一代分布式数据库TiDB作为离线层的核心数据库,基于TiDB打造的实时
数据架构
为风控智能决策保驾护航。
·
2023-01-06 19:48
tidb
同盾科技 x TiDB丨实时
数据架构
为风控智能决策保驾护航
经过长时间调研,他们最终选择了新一代分布式数据库TiDB作为离线层的核心数据库,基于TiDB打造的实时
数据架构
为风控智能决策保驾护航。
·
2023-01-06 19:46
tidb
python基础语法(一),快来看看你掌握了没?
Python支持各种
数据架构
的迭代和扩展:列表(list)推导式字典(dict)推导式集合(set)推导式元组(tuple)推导式列表推导式列表推导式格式为:[表达式 for 变量 in 列表] [out_exp_res
Echo-Niu
·
2023-01-06 10:11
python基础知识
python
开发语言
上一页
9
10
11
12
13
14
15
16
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他