E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据治理DAMA
数据治理
是一个怎样的体系化的过程?_光点科技
数据治理
是一个复杂而系统化的过程,旨在确保企业能够有效地管理、维护和利用其日益增长的数据资产。这一过程涉及多个层面和步骤,需要有明确的框架和战略规划。
数据治理
的体系化始于明确定义的目标和愿景。
光点数据治理
·
2023-10-15 14:10
科技
人工智能
大数据
读书笔记--华为数据之道有感
因此华为在开展
数据治理
过程中明确了由谁来对数据负责,特别是对数据质量负责,明确了数据质量的衡量或度量指标,并成立了数据管理部,确定其职能定位,构建了面向业务交易支撑的信息架构。
一马平川的大草原
·
2023-10-15 09:24
高级数据应用
读书笔记
数据应用
华为
人工智能
数据治理
MongoDb学习笔记-1
主要特点:存储数据模型是json不需要提前创建数据模型4.0后支持分布式事物多形性(同一个集合可以包含不同字段(类型)的文档对象动态性(线上修改数据模式,修改时应用于数据库无续修改schema)
数据治理
六默
·
2023-10-14 20:55
工作学习总结
mongodb
「五度情报站」网罗全量企业情报,找客户、查竞品、寻商机!
为满足不同企业及角色对于情报信息获取、分析及应用的多元化需求,‘五度易链’依托全体量产业大数据及强大的
数据治理
能力,打造了轻量级高效能的微信应用小程序‘企
五度易链-产业大数据服务解决方案提供商
·
2023-10-13 19:29
大数据
人工智能
数据分析
数据挖掘
apache atlas 案例_元
数据治理
Apache Atlas
ApacheAtlas是Hadoop社区为解决Hadoop生态系统的元
数据治理
问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎、数据血缘、安全和生命周期管理在内的元
数据治理
核心能力
CelioHsu
·
2023-10-13 18:47
apache
atlas
案例
Apache Atlas
数据治理
开源项目源代码解析
ApacheAtlas版本号:2.0.0从官方网站下载ApacheAtlas2.0.0版本源代码,用开发工具(如IntelliJIDEA)打开。根目录结构一、3party-licenses第三方组件许可,可以看出Atlas主要用到的第三方技术组件,绝大部分是前端技术组件,janusgraph和titan是图数据库组件,JanusGraph是Titan的继承者,老版本用的是Titan,新版本是用的J
tomalun
·
2023-10-13 18:17
大数据
数据治理
元数据管理
大数据
Apache Atlas元数据 最全资料
第1章介绍atlas是apache下的大数据的元数据管理和
数据治理
平台,是Hadoop社区为解决Hadoop生态系统的元
数据治理
问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎
丨Apricity丨
·
2023-10-13 18:46
Atlas
大数据
Hadoop生态系统的元数据管理和
数据治理
平台--Atlas 学习
最近在规划
数据治理
的功能,所以研究了一下ApacheAltasAtlas介绍Atlas是apache下的大数据的元数据管理和
数据治理
平台,是Hadoop社区为解决Hadoop生态系统的元
数据治理
问题而产生的开源项目
m0_67401660
·
2023-10-13 18:16
java
hadoop
学习
大数据
运维
后端
Hadoop的元
数据治理
--Apache Atlas0.8
Hadoop的元
数据治理
--ApacheAtlasApacheAtlas是Hadoop社区为解决Hadoop生态系统的元
数据治理
问题而产生的开源项目,它为Hadoop集群提供了包括数据分类、集中策略引擎
大跃ET
·
2023-10-13 18:15
数据仓库
Apache Atlas精讲:由浅入深,从概念,原理,使用,到自定义数据模型,生成血缘关系,带你玩转Atlas
AtlasRestApi详解及示例结语引言ApacheAtlas是托管于Apache旗下的一款元数据管理和治理的产品,目前在大数据领域应用颇为广泛,可以很好的帮助企业管理数据资产,并对这些资产进行分类和治理,为数据分析,
数据治理
提供高质量的元数据信息
小螺旋丸
·
2023-10-13 18:15
java
大数据
java
大数据
数据仓库
Docker下的Apache-Atlas元
数据治理
组件安装
Docker下的Apache-Atlas元
数据治理
组件安装一、Docker镜像制作组件版本一、安装JDK二、安装MAVEN安装zookeeper安装hadoop安装hbase,在hive之前安装hive
Amorji
·
2023-10-13 18:45
docker
Apache Atlas
数据治理
和元数据框架
ApacheAtlas元数据框架一、概述二、特点1.元数据类型&实例(Metadatatypes&instances)2.分类(Classification)3.血缘(Lineage)4.搜索/发现(Search/Discovery)5.安全和数据屏蔽三、高级架构1.Atlas的架构2.核心层(Core)3.集成层(Integration)4.元数据源层(Metadatasources)5.应用层
lightupworld
·
2023-10-13 18:15
#
Atlas
【技术分享】
数据治理
工具Apache Atlas初体验
ApacheAtlas就是为解决这些问题而产生的
数据治理
工具,利用Atlas可以自动构建数据字典,自动生成数据血缘,快速检索数据资源,不仅支持Hadoop生态的Hive、HBase、Sqoop等组件,还可以支持传统关系型数据
yestolife123
·
2023-10-13 18:14
笔记
apache
big
data
hadoop
Apache atlas 元数据管理治理平台使用和架构
1、前言ApacheAtlas是托管于Apache旗下的一款元数据管理和治理的产品,目前在大数据领域应用颇为广泛,可以很好的帮助企业管理数据资产,并对这些资产进行分类和治理,为数据分析,
数据治理
提供高质量的元数据信息
白鸽呀
·
2023-10-13 18:13
大数据
apache
架构
HIVE小文件合并
【
数据治理
】HIVE小文件合并开启动态分区,并设置文件大小,重新insertsethive.support.concurrency=fals;sethive.exec.dynamic.partition
关掉别看了,再学就秃啦!
·
2023-10-13 08:26
hive
hadoop
大数据
什么是主数据管理?企业主数据管理方法论
对企业来说,主数据的重要性如何强调都不为过,主
数据治理
是企业
数据治理
中最为重要的一环。主数据管理的内容包括主数据管理标准、主数据应用标准和主数据集成服务标准三大类。主数据管理的作用是什么?
CORNERSTONE365
·
2023-10-12 18:01
数字化转型
数据库
主数据
数据分析
数据治理
的核心是什么?_光点科技
数据治理
是当今数字化时代中企业管理的关键组成部分。在信息爆炸的时代,企业积累了大量的数据,这些数据不仅是企业宝贵的资产,也是推动业务决策和创新的重要驱动力。
光点数据治理
·
2023-10-12 16:30
科技
人工智能
大数据
“五度情报站”微信小程序上线,让情报信息唾手可得!
‘五度易链’作为中国产业大数据服务先锋,围绕企业对于情报信息的多元化需求,依托全体量产业大数据及强大的
数据治理
能力,打造了轻量级高效能的微信小程序应用‘企业情报信息监测分析系统-五度情报站’。
五度易链-产业大数据服务解决方案提供商
·
2023-10-12 13:25
数据分析
数据挖掘
大数据
人工智能
CDGA
数据治理
工程师考试心得
CDGA就是
数据治理
工程师(CertifiedDataGovernanceAssociate),“
DAMA
中国”组织的
数据治理
方面的职业认证考试。2.是否需要培训?
只爱大锅饭
·
2023-10-11 02:39
数据治理
数据治理
CDGA
数据管理
电子科大软件系统架构设计——系统架构设计
文章目录系统架构设计系统设计概述系统设计定义系统设计过程系统设计活动系统设计基本方法系统设计原则系统设计方法分类面向对象系统分析与设计建模过程系统架构基础系统架构定义系统架构设计定义系统架构作用系统架构类型系统总体架构系统拓扑架构系统拓扑架构类型系统拓扑架构技术演化阶段系统拓扑架构案例系统数据架构系统数据分层架构设计系统
数据治理
架构设计系统数据存储架构设计数据架构设计案例
Palp1tate
·
2023-10-10 14:05
软件系统架构设计
系统架构
架构
多项能力升级,助力企业提升全链路
数据治理
能力!
Dataphin(智能数据建设与治理)是阿里巴巴集团
数据治理
方法论基于内部实践的产品化输出,致力于帮助企业用中台方法论治理企业级好数据,构建起质量可靠、消费便捷、生产安全经济的企业级数据中台。
瓴羊企业智能服务
·
2023-10-09 18:28
数据库
时隔十年,我要再次学习一下数据知识体系DMBOK
由数据管理专业人员、行业专家和编辑组成的团队在
DAMA
国际的指导和赞助下创建了DMBOK
周金根
·
2023-10-08 23:11
2020-05-13关于数据需求的分类
实时准实时离线从研发角度划分:数据接入需求:业务接入、日志接入、埋点接入数据开发需求:数仓建模、统计开发、算法开发数据输出需求:离线报表、离线决策、在线报表、在线决策数据管理需求:流程管理、规范管理、资产管理、
数据治理
Simple701
·
2023-10-08 09:37
大数据之巅:深入分析数据湖架构的优势
数据湖的优势1.弹性扩展性2.多样化的数据3.原始数据保存4.成本效益5.灵活性和创新6.基于云的部署数据湖的挑战1.
数据治理
2.查询性能3.安全性4.数据发现结论欢迎来到AIGC人工智能专栏~大数据之巅
IT·陈寒
·
2023-10-08 08:30
Java学习路线
AIGC人工智能
大数据
架构
一文讲透什么是
数据治理
和数据管理
数据管理和
数据治理
有很多地方是互相重叠的,它们都围绕数据这个领域展开,因此这两个术语经常被混为一谈。
宋懵懵的数据生活
·
2023-10-07 17:56
什么是DCMM认证?什么是数据管理能力成熟度评估?
该标准将组织对象的数据管理划分为八大能力域(数据战略、
数据治理
、数据架构、数据标准、数据质量、数据安全、数据应用、数据生存周期),并对每项能力域进行了二级能力项(28个能力项)和成熟度等级的划分(
hb13370587609
·
2023-10-07 10:40
经验分享
DCMM认证是什么
DatamanagementCapabilityMaturityModel,简称:DCMM)借鉴国内外成熟度相关理论思想,结合数据生命周期管理各个阶段的特征,对数据管理能力进行了分析、总结,提炼出组织数据管理的八大能力域(数据战略、
数据治理
kdrz_
·
2023-10-07 10:40
DCMM认证
经验分享
DCMM认证评审要求
自身业务交易产生的结构化数据总量:100G及以上(证据:提供信息系统清单、各信息系统主要的数据范围以及存储量);2.具有专职的数据管理人员:2人及以上(证据:提供正式发布的岗位说明书以及人员资质证明);3.具有
数据治理
dong17605413502
·
2023-10-07 10:39
物联网
大数据
人工智能
火山引擎 ByteHouse:TB 级数据下,如何实现高效、稳定的数据导入
活动主要从数据分析、
数据治理
、研发提效等角度,带领数据领域从业者全面了解数智化转型背景下的火山引擎数据飞轮模式在数据资产建设上的技术与实践。其中,火山引擎ByteHouse产品专家受邀
字节数据平台
·
2023-10-05 19:32
火山引擎
数据库
云原生
一站式大数据开发治理DataWorks学习
大数据开发治理平台DataWorks产品文档大数据开发治理平台DataWorks体验馆一站式大数据开发治理DataWorks使用宝典一站式大数据开发治理DataWorks学习路径实验:全链路
数据治理
实践
qiufeng1ye
·
2023-10-03 17:49
DAMA
-DMBOK2重点知识整理CDGA/CDGP——第17章 数据管理和组织变革管理
目录一、分值分布二、重点知识梳理1、引言2、变革法则3、并非管理变革:而是管理转型过程4、科特的变革管理八大误区5、科特的重大变革八步法6、变革的秘诀7、创新扩散和持续变革8、持续变革9、数据管理价值的沟通一、分值分布CDGA:2分(2单选)CDGP:0分二、重点知识梳理1、引言成功的数据管理实践需要:1)根据信息价值链调整数据责任制度,以此来学习横向管理。2)将垂直的(筒仓)数据责任制度转变为共
醉酒的戈多
·
2023-10-02 18:59
数据治理
数据仓库
大数据
云计算
浅谈数据质量管理
数据质量管理不是一时的
数据治理
手段,而是循环的管理过程。数据质量管理不仅包含了对数据质量的改善,同时还包含了对组织的改善。
000X000
·
2023-10-02 10:30
数据仓库
数据建模
数据分析
数据质量管理
数据质量
别和我说您懂
数据治理
,这些方面你做到了吗?
图片发自App
数据治理
有一套标准的方法论,涵盖从获取到使用到处置的整个数据生命周期。
数据治理侠
·
2023-09-30 10:42
DAMA
-DMBOK2重点知识整理CDGA/CDGP——第13章 数据质量
目录一、分值分布二、重点知识梳理1、引言1.1业务驱动因素1.2目标和原则1.3基本概念2、活动2.1定义高质量数据2.2定义数据质量战略2.3识别关键数据和业务规则2.4执行初始数据质量评估2.5识别改进方向并确定优先排序2.6定义数据质量改进目标2.7开发和部署数据质量操作3、工具4、方法4.1预防措施4.2纠正措施4.3质量检查和审核代码模块4.4有效的数据质量指标4.5统计过程控制SPC4
醉酒的戈多
·
2023-09-29 08:21
数据治理
数据仓库
大数据
云计算
DAMA
-DMBOK2重点知识整理CDGA/CDGP——第14章 大数据与数据科学
目录一、分值分布二、重点知识梳理1、引言1.1业务驱动因素1.2原则1.3基本理念2、活动2.1定义大数据战略和业务需求2.2选择数据源2.3获得和接收数据源2.4制定数据假设和方法2.5集成和调整数据进行分析2.6使用模型探索数据2.7部署和监控3、工具3.1大规模并行处理(MPP)3.2基于分布式文件的数据库4、方法4.1解析建模4.2大数据建模5、实施指南5.1战略一致性5.2就绪评估/风险
醉酒的戈多
·
2023-09-29 08:21
数据治理
数据仓库
大数据
云计算
DAMA
-DMBOK2重点知识整理CDGA/CDGP——第16章 数据管理组织与角色期望
、数据管理组织的结构4、关键成功因素5、建立数据管理组织6、数据管理组织与其他数据相关机构之间的沟通7、数据管理角色一、分值分布CDGA:4分(4单选)CDGP:0分二、重点知识梳理1、引言数据管理和
数据治理
组织需要足够灵活
醉酒的戈多
·
2023-09-29 08:21
数据治理
数据仓库
大数据
云计算
DAMA
-DMBOK2重点知识整理CDGA/CDGP——第15章 数据管理成熟度评估
目录一、分值分布二、重点知识梳理1、引言1.1业务驱动因素1.2目标和原则1.3基本概念2、活动2.1规划划评估活动2.2执行成熟度评估2.3解释结果及建议2.4制订有针对性的改进计划2.5重新评估成熟度3、工具4、方法4.1选择DMM框架5、实施指南5.1就绪评估/风险评估6、成熟度管理治理一、分值分布CDGA:6分(6单选)CDGP:5分(1单选2多选)考点:驱动因素、目标和原则;活动;指南;
醉酒的戈多
·
2023-09-29 08:48
数据治理
数据仓库
大数据
云计算
产品解读 | 数据服务平台:KDP
KDP是一款面向AIoT场景的数据服务平台——以一体多模的大数据基础平台作为基座,提供OLTP、OLAP、HTAP、时序、图、全文检索、宽表等多种数据存储和计算服务;此外,还提供上层数据集成、数据开发、
数据治理
KaiwuDB 数据库
·
2023-09-28 21:17
KaiwuDB
KDP
马哈鱼——
数据治理
中Oracle SQL和存储过程的数据血缘分析
数据治理
中的一个重要基础工作是分析组织中数据的血缘关系。有了完整的数据血缘关系,我们可以用它进行数据溯源、表和字段变更的影响分析、数据合规性的证明、数据质量的检查等。
chensuper
·
2023-09-28 16:20
sqlflow
数据治理
马哈鱼
sql
oracle
数据库
解析数据仓库里的"元数据管理"
引言元数据管理是企业
数据治理
的基础,是数据仓库的提升;作为一名数据人,首要任务就是理解元数据管理。本篇文章将为大家梳理元数据的概念,介绍元数据管理在数据仓库的地位。
秋夜雨凉
·
2023-09-28 16:15
华为:
数据治理
方法论
导读 本文先概要介绍了
数据治理
框架、
数据治理
组织架构和
数据治理
度量评估体系,然后结合华为
数据治理
案例和新冠疫情简单描述了
数据治理
的应用,最后描述了DAYU方法论在DataArtsStudio产品上的落地以及详细的落地指导文档
大数据食铁兽
·
2023-09-28 06:36
大数据
数据治理
:数据标准建设方法和流程
1引言数据标准就是通过制定一套由管理制度、管控流程、技术工具共同组成的体系,来对数据定义、分类、格式、编码等标准化管理。通俗地讲,对企业来说,数据标准就是对数据类型、长度、归属部门等定义一套统一的规范,以保障不同业务系统之间可以做到对同样的数据理解统一和使用统一。01什么是数据标准?数据标准根据不同的数据域分为基础、分析类和专有类三类,其中:基础类数标是企业日常业务开展过程中所产生的具有共同业务特
智慧化智能化数字化方案
·
2023-09-27 19:03
大数据
数据治理
系列:数据标准管理
目录数据标准:数据标准建设方法和流程01什么是数据标准?02为什么需要数据标准?1、数据共享难以实现2、数据同名不同义导致错误3、沟通成本增加4、数据来源不明03数据标准分类1、从数据结构角度进行的数据标准分类2、从数据内容来源进行的数据标准分类3、从技术业务角度进行的数据标准分类04数据标准建设方法和流程1、数据标准规划,2、数据标准现状调研,3、数据标准设计,4、数据标准实施映射,5、数据标准
Alex_81D
·
2023-09-27 19:31
数据治理
大数据
产品解读 | 数据服务平台:KDP
KDP是一款面向AIoT场景的数据服务平台——以一体多模的大数据基础平台作为基座,提供OLTP、OLAP、HTAP、时序、图、全文检索、宽表等多种数据存储和计算服务;此外,还提供上层数据集成、数据开发、
数据治理
·
2023-09-27 16:55
数据库
什么是数据中台?全面解读数据中台的定义
一、定义数据中台数据中台是一种集成了数据管理、
数据治理
、数据服务等多个方面的平台。它旨在为企业提供稳定、高效、安全的数据支持和服务,从而帮助企业更好地进行数字化转型。
·
2023-09-25 19:02
etl数据中台
数仓命名规范
1.词根设计规范词根属于数仓建设中的规范,属于元数据管理的范畴,现在把这个划到
数据治理
的⼀部分。
后季暖
·
2023-09-25 16:15
大数据
企业级数据目录实战:从组织、方法、流程到平台
自2021年启动企业级
数据治理
工作,做的第一个事情就是打造企业级数据目录,今天就来谈谈企业级数据目录的构建之路。
后季暖
·
2023-09-25 16:45
大数据
人工智能
数据湖在爱奇艺数据中台的应用
在实施
数据治理
的过程中,我们不断吸收新的理念,引入尖端的工具,以精细化我们的数据体系管理。“数据湖”作为近年来数据领域广泛热议的概念,其技术层面也受到了业界的广泛关注。
爱奇艺技术产品团队
·
2023-09-24 18:31
大数据
人工智能
数据挖掘
数据分析
Mysql 学习总结(89)—— Mysql 库表容量统计
前言统计每个库每个表的大小是
数据治理
中最简单的一个要求,下面从抽样统计结果及精确统计结果两方面来统计MySQL的每个库每个表的数据量情况。
科技D人生
·
2023-09-24 11:17
Mysql
mysql
数据库
mysql
库表容量统计
mysql
数据量统计
mysql
数据库大小统计
提升政府决策水平和保障数据交易安全的角度谈一谈如何开展
数据治理
为解决大数据创新应用面临的问题,“
数据治理
”的概念应运而生。
数据治理
主要聚焦在治理目
治理之路
·
2023-09-24 02:41
上一页
4
5
6
7
8
9
10
11
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他