E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库商业价值
总监眼里的数仓和中台、报表平台的概念及意义和你认为的不一样
总监眼里的数仓和中台、报表平台的概念及意义和你认为的不一样在大数据时代,
数据仓库
、中台和报表平台等概念逐渐成为企业数字化转型的热门话题。然而,不同职位和背景的人对这些概念的理解可能存在差异。
UI设计前端开发一线员工
·
2024-01-27 19:03
electron
javascript
前端
信息可视化
低代码
【华为云-云驻共创】数据高速公路—数仓集群通信技术详解
数据仓库
服务GaussDB(DWS)是一种基于华为云基础架构和平台的在线数据分析处理数据库,提供即开即用、可扩展且完全托管的分析型数据库服务。GaussDB(DWS)是基于华为融合
数据仓库
Gaus
IT民工金鱼哥
·
2024-01-27 18:29
在华为云社区的故事
华为云
GaussDB
银行
数据仓库
体系实践(11)--
数据仓库
开发管理系统及开发流程
数据仓库
管理着整个银行或公司的数据,数据结构复杂,数据量庞大,任何一个数据字段的变化或错误都会引起数据错误,影响数据应用,同时业务的发展也带来系统不断升级,数据需求的不断增加,
数据仓库
需要不断的升级和维护
南极找南
·
2024-01-27 08:51
银行数据仓库
数据仓库
银行
数据仓库
体系实践(10)--汇总指标层和集市模型设计
建立多层次的数据访问服务体系,有力提升
数据仓库
的价值。基于指标汇总层、集市层、可以提供面向业务人员的即席数据查询、以及面向应用开发者的数据接口、应用访问接口,满足不同类型应用的需要。
南极找南
·
2024-01-27 08:21
银行数据仓库
数据仓库
银行
数据仓库
体系实践(8)--主数据模型设计
主数据区域中保留了
数据仓库
的所有基础数据及历史数据,是
数据仓库
中最重要的数据区域之一,那主数据区域中主要分为近源模型区和整合(主题)模型区。上一节讲到了模型的设计流程如下图所示。
南极找南
·
2024-01-27 08:36
银行数据仓库
数据仓库
【技术预研】StarRocks官方文档浅析(2)
参考文档产品简介|StarRocksStarRocksStarRocks是一款高性能分析型
数据仓库
,使用向量化、MPP架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析
偏振万花筒
·
2024-01-27 06:16
大数据
starRocks
数据库
1分钟了解基于Hadoop的
数据仓库
工具Hive(附超实用示例)
Hive功能Hive是基于Hadoop构建的一套
数据仓库
分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据:可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL
yuyuyuyo
·
2024-01-27 05:53
复盘流量破局
流量的
商业价值
大,但是终生价值更大。“内容获客”就是普通人获客的唯一途径。
宏杰_b406
·
2024-01-27 01:06
企业
数据仓库
环境
企业
数据仓库
环境企业
数据仓库
(EDW)是从普通
数据仓库
演变而来的,它们已在上篇文章中进行了描述。企业
数据仓库
试图表示组织的所有业务数据及其业务规则,而不是将重点放在单个主题域进行分析。
DataVault善哉
·
2024-01-27 00:04
Hive调优策略
Hive调优策略Hive作为大数据领域常用的
数据仓库
组件,在设计和开发阶段需要注意效率。
奋斗的蛐蛐
·
2024-01-26 23:24
MySQL技术探究(1)「索引技术」体验前所未有的技术探险,看穿索引的本质和技术体系(上篇)
数据库类型OLAP:联机分析处理----对海量历史数据进行分析,产生决策性的策略----
数据仓库
—HiveOLTP:联机事务处理----要求很短时效内返回对应的结果----数据库—关系型
洛神灬殇
·
2024-01-26 22:26
数据仓库
现代化和迁移解决方案Datametica
Datametica利用自动化将数据/工作负载/ETI/分析迁移到云,从而为企业提供支持。Datametica是一家通过建立数据湖来帮助企业实现数据平台现代化的公司,该数据湖安全地保存结构化和非结构化数据。随着企业数据湖从各种来源收集大量数据,需要利用信息并帮助做出更明智的业务决策。Datametica通过使用大数据技术和独特的自动化技术建立数据湖来帮助企业,这有助于以更快的速度和更低的成本完成该
weixin_30777913
·
2024-01-26 20:20
数据仓库
数据中台架构原理与开发实战:构建数据中台的步骤与方法
它可以对业务数据进行收集、加工处理、存储、分析,为各个部门提供简单有效的数据服务,包括
数据仓库
、数据湖、数据应用平台等。
OpenChat
·
2024-01-26 20:15
AI实战
大数据AI人工智能
Python实战
大数据
人工智能
语言模型
Java
Python
架构设计
ERD-ONLINE 免费在线数据库建模工具
ERD-ONLINE说明功能特点ERD-ONLINE是一款在线协作
数据仓库
设计软件,无需本地安装应用程序,在线操作数据库,是桌面数据建模工具的一个优秀的替代方案。
ERD Online
·
2024-01-26 14:02
ERD-ONLINE
数据建模
在线
web
ERD
用户画像项目背景
1,用户画像项目介绍大数据平台简介
数据仓库
+用户画像+推荐系统(1)
数据仓库
:加快数据的分析和查询
数据仓库
分层:ODS层(映射HDFS的数据)—DW(
数据仓库
层)–APP(层)—BI(层)DW:DWD明细数据层
祈愿lucky
·
2024-01-26 13:20
大数据
spark
kafka
剽悍一只猫:我的个人品牌经营战略(九)
这些代表作,帮我影响了很多很多人,也给我带来了很多用户,从而产生了可观的
商业价值
。
洛柒姑娘
·
2024-01-26 10:23
对韭当歌,区块链泡沫里的阳春白雪
不能否认的是区块链具备强大的去中心化的机制,可以极大地缩减信任成本,实现中间环节的有效递进,其长期的
商业价值
值得肯定,或许在将
天涯等风小郎君
·
2024-01-26 08:22
第2章 信息技术发展——2.1 信息技术及其发展
软件定义网络3.第五代移动通信技术2.1.3存储和数据库1.存储技术2.数据结构模型1)层次模型2)网状模型3)关系模型3.常用数据库类型1)关系型数据库2)非关系型数据库3)不同存储方式数据库的优缺点4.
数据仓库
Mrlibai
·
2024-01-26 07:06
信息系统项目管理
网络
信息与通信
笔记
学习
深度干货|谈谈阿里云AnalyticDB Spark如何构建低成本数据湖分析
文/李少锋阿里云瑶池旗下的云原生
数据仓库
AnalyticDBMySQL版是基于湖仓一体架构打造的实时湖仓。本文将分享AnalyticDBMySQLSpark助力构建低成本数据湖分析的最佳实践。
阿里云瑶池数据库
·
2024-01-26 06:57
阿里云
spark
云计算
Docker安装Clickhouse详细教程
简介ClickHouse是一种列式数据库管理系统,专门用于高性能数据分析和
数据仓库
应用。它是一个开源的数据库系统,最初由俄罗斯搜索引擎公司Yandex开发,用于满足大规模数据分析和报告的需求。
AscendKing
·
2024-01-26 01:13
clickhouse
休假杂记
与北京的地铁相比,上海地铁最大的特点就是和商业设施结合得很好,便利店、商场、集市,充分发挥地下空间的
商业价值
。发信息给娃爸,晚上能否接站。娃爸回复约了饭局,让自己打车回。
seagle_a22b
·
2024-01-26 00:02
大数据|Spark介绍
前文回顾:Hive和
数据仓库
目录为什么会有SparkSpark的基本架构和组件主要体系结构和组件Spark集群的基本结构Spark系统的基本结构Spark应用程序的基本结构Spark程序运行机制⭐️Spark
啦啦右一
·
2024-01-25 21:08
大数据与数据分析
#
大数据管理与分析笔记
大数据
spark
sqoop之hive
数据仓库
和oracle数据库数据转换
1sqoop简介1.1什么是sqoop?sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、oracle)间进行数据的传递,可以将一个关系型数据库(例如:MySQL,Oracle,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。Sqoop项目开始于2009年,最早是作为Hadoop的一个
Summer_1981
·
2024-01-25 20:37
三层架构到DDD分层架构的演变
数据访问层业务接口层:主要是API的定义,包括资源路径定义、请求报文接受、响应报文返回、请求编码等定义的内容;业务逻辑层:主要做业务逻辑处理,这一层包括数据映射DTO转VO,业务核心逻辑编写,组合不同
数据仓库
rickJinzhu
·
2024-01-25 19:59
银行
数据仓库
体系实践(7)--数据模型设计及流程
数据仓库
作为全行或全公司的数据中心和总线,汇集了全行各系统以及外部数据,通过良好的系统架构可以保证系统稳定性和处理高效性,那如何保障系统数据的完备性、规范性和统一性呢?
南极找南
·
2024-01-25 17:51
银行数据仓库
数据仓库
大数据
银行
数据仓库
体系实践(5)--数据转换
数据转换作业主要是指在
数据仓库
内的结构化数据批量加工,对于非结构化数据以及在线查询接口、数据流的开发主要是遵循代码开发规范以及各中间件的开发规范,如使用java来开发遵守java开发规范,使用Kafka
南极找南
·
2024-01-25 17:21
银行数据仓库
数据仓库
银行
数据仓库
体系实践(6)--调度系统
调度系统是
数据仓库
的重要组成部分,也是每个银行或公司一个基础软件或服务,需要在全行或全公司层面进行规划,在全行层面统一调度工具和规范,由于数据类系统调度作业较多,交易类系统批量优先级高,为不互相影响可以和交易类系统独立分开
南极找南
·
2024-01-25 17:19
银行数据仓库
数据仓库
白话文讲
数据仓库
系统
标准的
数据仓库
系统一般包含四层:ETL层、
数据仓库
层、数据集市层、应用展现层。数据其实本质上就是一种虚拟商品。
数据仓库
系统实现的就是将虚拟的商品(数据)从原材料到成品售卖的过程。
江边蚊子
·
2024-01-25 15:23
web1.0到web3.0,哪些技术应用项目会成功
今天,各行各业的企业都明白数据是实现
商业价值
最大化的关键。几乎所有企业都在挖掘数据以推动创新和增长。同时,如果敏感信息因数据洩露而洩露,数据可能会对企业、声誉和人们的生活造成无法弥补的损害。
Aix17
·
2024-01-25 15:59
大数据分析组件Hive-集合数据结构
Hive的数据结构前言一、array数组类型二、map键值对集合类型三、struct结构体类型前言Hive是一个基于Hadoop的
数据仓库
基础设施,用于处理大规模分布式数据集。
Aimyon_36
·
2024-01-25 15:15
Hive
数据分析
hive
数据结构
[AIGC 大数据基础]hive浅谈
Hive作为一个基于Hadoop的
数据仓库
基础设施,为用户提供了类SQL的查询语言和丰富的功能,使得处理大规模数据变得更加简单和高效。
程序员三木
·
2024-01-25 14:17
大后端
大数据
AIGC
hive
如何避免
数据仓库
项目失败
什么是
数据仓库
?在深入研究不同的
数据仓库
概念之前,了解
数据仓库
的实际含义非常重要。
数据仓库
通常被认为是商业智能系统,旨在帮助满足业务实体的日常报告需求。
国强_dev
·
2024-01-25 14:32
数据仓库
为什么需要
数据仓库
OLTP环境也会存储历史数据,但这些历史数据并不是业务运行所需的,这些历史数据需要经常归档到
数据仓库
,并且在OLTP数据库中删除。
howard_shooter
·
2024-01-25 13:46
Doris
数据仓库
数据库
大数据
【技术预研】StarRocks官方文档浅析(1)
参考文档产品简介|StarRocksStarRocksStarRocks是一款高性能分析型
数据仓库
,使用向量化、MPP架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析
偏振万花筒
·
2024-01-25 12:37
大数据
starRocks
数据库
大数据
starRocks
数据库
数据库基础知识以及mysql的安装步骤
(
数据仓库
)数据:描述事务的符号记录,包含但不限于数字、文字、图形、图像、声音、语言等。数据有多重形式,它们都可以经过数字化后存入计算机。数据库:
数据仓库
。
匿名好友657
·
2024-01-25 10:44
数据库
mysql
oracle
Hudi学习笔记(一)
学习目标什么是数据湖为什么使用数据湖Hudi基本功能如何编译Hudi源码Hudi与Spark集成管理Hudi中COW和ROW不同类型表功能Hudi的三种查询方式Hudi中不同表数据写入流程
数据仓库
数据仓库
是一个用于存储
一一|一一一亅
·
2024-01-25 09:37
学习
笔记
StarRocks本地部署
介绍StarRocks是一款高性能分析型
数据仓库
,使用向量化、MPP架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析。
keyson R
·
2024-01-25 06:14
数据库
数据库
大数据
StarRocks
数据仓库
Hive运行机制与使用
hive介绍hive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张数据库表,并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。
小猪Harry
·
2024-01-25 05:09
个体商户公众号认证购买
微信公众号已经成为了许多企业和个人进行线上宣传的重要平台,而随着微信生态体系不断完善,个体商户公众号认证更是让很多个体商户看到了更大的
商业价值
。
指北针聊天项目
·
2024-01-25 04:27
基于大模型(LLM)的
数据仓库
数据仓库
作为企业数据存储和管理的重要基础设施,其运维和管理面临着越来越多的挑战。如何构建一个高效、智能的
数据仓库
,成为了运维开发人员关注的焦点。
百度_开发者中心
·
2024-01-24 16:14
数据仓库
大模型
自然语言处理
llama
人工智能
从数据处理到规模化应用
为了满足这一需求,许多组织开始转向
数据仓库
来提供稳定、高效的数据存储和处理能力。HashData等现代
数据仓库
解决方案的出现,为大模型的规模化应用提供了新的可能性。
百度_开发者中心
·
2024-01-24 16:14
人工智能
大模型
自然语言处理
在SQL Server中的关系型
数据仓库
分区策略
developer.51cto.com/art/200702/41068.htmhttp://www.fengfly.com/plus/view-29754-1.html在SQLServer中的关系型
数据仓库
分区策略
king_idea8848
·
2024-01-24 08:49
SQL
海量数据
表分区和分表
sql
server
数据仓库
microsoft
磁盘
存储
数据库
元数据管理在
数据仓库
中的实践应用
一、什么是
数据仓库
的元数据管理?1、什么是元数据?元数据(Metadata),又称中介数据、中继数据,为描述数据的数据(dataaboutdata)。
小枫@码
·
2024-01-24 08:53
数据治理
数据仓库
大数据
数据仓库
建模
简介
数据仓库
建模是指将
数据仓库
中的数据进行组织和结构化,以便支持分析、报告和查询。
数据仓库
建模需要考虑多个方面的因素,包括业务需求、数据源、查询性能等。
不加班程序员
·
2024-01-24 07:44
Hadoop相关
原理
ETL
数据仓库
数学建模
hadoop
银行
数据仓库
体系实践(4)--数据抽取和加载
1、ETL和ELTETL是Extract、Transfrom、Load即抽取、转换、加载三个英文单词首字母的集合:E:抽取,从源系统(Souce)获取数据;T:转换,将源系统获取的数据进行处理加工,比如数据格式转化、数据精度转换、数据清洗、缺失数据补齐、异常数据排除等。L:加载,将数据加载到目标数据库(Target)。ELT也是同样三个单词的首字母组合,只是把T、L颠倒了下顺序。ETL强调的是先进
南极找南
·
2024-01-24 07:12
银行数据仓库
数据仓库
银行
数据仓库
体系实践(3)--数据架构
狭义的
数据仓库
数据架构用来特指数据分布,广义的
数据仓库
数据架构还包括数据模型、数据标准和数据治理。
南极找南
·
2024-01-24 07:42
银行数据仓库
数据仓库
架构
数据仓库
-相关概念
简介
数据仓库
是一个用于集成、存储和管理大量数据的系统。它用于支持企业决策制定过程中的数据分析和报告需求。
数据仓库
从多个来源收集和整合数据,并将其组织成易于查询和分析的结构。
不加班程序员
·
2024-01-24 07:10
Hadoop相关
hive
ETL
数据仓库
大数据
【数据库】第一章 数据库基础理论
(
数据仓库
)数据:描述事务的符号记录,包含但不限于数字、文字、图形、图像、声音、语言等。数据有多重形式,它们都可以经过数字化后存入计算机。数据库:
数据仓库
。
悲伤自画像
·
2024-01-24 04:55
数据库
数据库
oracle
数据仓库
-日期维度表的设计与实现
时间维度表的制作1需求背景在大数据分析模块中,我们需要从不同的维度分析主题表,包括常用的公用维度:时间维,地区维度,教育信息维…以及各种各样的业务维度:员工维度,部门维度…,业务维度就是我们从哪些角度去分析业务过程,本文就是做一张常用时间维度表。时间维表由于是可预见的,因此可以一次性导入未来几十年的,当然对于一些节假日的设置可能只能获取未来一年的,因此可以每年全量更新一次。2维表设计给出时间维度表
yongfeicao
·
2024-01-23 21:17
Hive
数据仓库
维度建模
大数据
日期维度
pymsql
【大数据精讲】全量同步与CDC增量同步方案对比
ETLETL
数据仓库
话数Science
·
2024-01-23 20:44
面试
大数据
大数据
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他