E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据中台数据仓库
数据系统架构-10.数仓开发平台
数仓开发平台1.背景
数据仓库
是存储各种数据的仓库,形同于现实当中存储货物的仓库,不可避免的存在“乱放”、“不方便存取”、“浪费空间”等情况。
·
2024-02-19 11:45
大数据系统架构数据仓库
StarRocks 介绍
其逻辑就是,基于页面的点击事件流,面向
数据仓库
进行OLAP
·
2024-02-19 10:16
dorisdb
大厂的供应链采购系统设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-19 10:16
后端
怎么用ETL工具实现MQ消息同步
而在一些特定场景下,需要将MQ中的消息同步到
数据仓库
或其他存储系统中,以便进行更深入的数据分析和挖掘。这时候,ETL工具可以成为实现MQ消息同步的利器。
·
2024-02-19 10:43
etl数据同步mq
基于 Webpack5 Module Federation 的业务解耦实践
我们是袋鼠云数栈UED团队,致力于打造优秀的一站式
数据中台
产品。我们始终保持工匠精神,探索前端道路,为社区积累并传播经验价值。
·
2024-02-19 10:01
Hive入门,Hive是什么?
Hive是一个开源的
数据仓库
工具,主要用于处理大规模数据集。它是建立在Hadoop生态系统之上的,利用Hadoop的分布式存储和计算能力来处理和分析数据。
JayGboy
·
2024-02-19 10:31
hive
hadoop
数据仓库
数仓面试
4).长的帅或漂亮,前四条都可以忽略1.什么是
数据仓库
?如何构建
数据仓库
?
China_mr001
·
2024-02-14 21:46
中金易云:为出版社找到下一本《解忧杂货店》
中金易云出版发行大数据平台正是以数字化转型为核心思路,以大
数据中台
与智能算法为基础的出版业供给侧结构性改革的成果。
猫耳呀
·
2024-02-13 19:57
Java+springboot+MYSQL停车场管理系统的设计与实现82061-计算机毕业设计项目选题推荐(免费领源码)
摘要由于数据库和
数据仓库
技术的快速发展,停车场管理系统建设越来越向模块化、智能化、自我服务和管理科学化的方向发展。
QQ_3376098506
·
2024-02-13 13:45
java
spring
boot
mysql
hadoop
php
python
c++
一份简单的产品经理转正工作总结
记得先点蓝字关注我哦~关注微信公众号:一个数据人的自留地1、回复“
数据中台
”,获取2、回复“数据产品”,获取3、回复“商业分析”,获取4、回复“交个朋友”,进入引言今天下大雨,小诺打着伞去公司上班,路上他小心翼翼的避开水坑
一个数据人的自留地
·
2024-02-13 12:06
五,Geoserver栅格
数据仓库
(/coveragestores)
覆盖率存储描述如何访问光栅数据源。/workspaces/{workspace}/coveragestoresGet:获取{workspace}中所有覆盖范围存储的列表Post:向服务器添加新的覆盖率存储条目。Put:无效。Delete:无效。改用/coverage/{style}/workspaces/{workspace}/coveragestores/{store}Get:在{workspa
武汉小强
·
2024-02-13 08:07
ETL入门系列 之 ETL是什么
简单定义:将数据从OLTP系统中转移到
数据仓库
中的一系列操作的集合。ETL应用范围抽取:一般抽取过程需要连接到不同的数据源,以便为随后的步骤提供数据。
小纠结在简书
·
2024-02-13 00:34
数据仓库
内容分享(十七):Doris实践分享:它做了哪些架构优化和场景优化?
ApacheDoris是一款开源的实时
数据仓库
,由百度旗下的技术团队开发。它具有高性能、高可靠性、易扩展等特点,能够满足大规模数据实时查询和分析的需求。
之乎者也·
·
2024-02-12 20:13
数据仓库内容分享
架构设计
内容分享
数据仓库
架构
供应链领域
数据中台
架构建设(上)
负责:中央/分销预订系统性能优化;活动&优惠券等营销中台建设;交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可
JavaEdge.
·
2024-02-12 11:40
架构
字节跳动官方出品AI,白嫖使用GPT4!
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
JavaEdge.
·
2024-02-12 03:44
java
大厂的供应链域
数据中台
设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-11 18:16
后端
深入浅出 testing-library
我们是袋鼠云数栈UED团队,致力于打造优秀的一站式
数据中台
产品。我们始终保持工匠精神,探索前端道路,为社区积累并传播经验价值。
·
2024-02-11 18:52
前端单元测试单测
云计算 - 对象存储服务OSS技术全解
从媒体存储到数据备份,再到
数据仓库
与数据湖,我们不仅解析了OSS在各种应用场景下的关键角色,还深入讨论了其与机器学习、多媒体处理以及日志和监控等多个开发场景的结合。
·
2024-02-11 18:21
go后端
基于 Webpack5 Module Federation 的业务解耦实践
我们是袋鼠云数栈UED团队,致力于打造优秀的一站式
数据中台
产品。我们始终保持工匠精神,探索前端道路,为社区积累并传播经验价值。
·
2024-02-11 17:16
供应链域
数据中台
设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-11 17:09
后端
大厂的供应链域
数据中台
设计
负责:中央/分销预订系统性能优化活动&优惠券等营销中台建设交易平台及
数据中台
等架构和开发设计目前主攻降低软件复杂性设计、构建高可用系统方向。
·
2024-02-11 17:09
后端
离线数仓(一)【数仓概念、需求架构】
1、
数据仓库
概念1.1、概念
数据仓库
(DataWarehouse),是为企业制定决策,提供数据支持的。可以帮助企业,改进业务流程、提高产品质量等。(
数据仓库
的目的
让线程再跑一会
·
2024-02-11 11:58
离线数仓
大数据
Hive与ClickHouse的区别
Hive是Hadoop生态系统中事实上的
数据仓库
标准。Hive是建立在Hadoop生态中的
数据仓库
中间件,其本身并不提供存储与计算能力。
晓之以理的喵~~
·
2024-02-11 08:18
Hadoop
大数据
hive
hive
clickhouse
hadoop
Spring框架常见的注解Spring、SpringMVC、SpringBoot)
@Repository:表示一个
数据仓库
组件,用于数据库访问。@Controller:定义
辞暮尔尔-烟火年年
·
2024-02-11 03:31
框架
Spring
spring
java
京东面试总结
1
数据仓库
的概念?和数据库的区别?2hdfs上传文件有哪几种方式?3Hive的优化问题?4Hive的数据倾斜问题?5数据分析?概念和总结6Django源码?7python的浅拷贝和深拷贝?
小小少年Boy
·
2024-02-09 21:45
OLAP 和数据挖掘的关系
从技术角度看,商务智能的过程是企业的决策人员以企业中的
数据仓库
为基础,经由数据挖掘工具、联机分析处理工具加上决策规划人员的专业知识,从数据中获得有用的信息和知识,帮助企业获取更多的利润。
挣扎的菜鸟
·
2024-02-09 18:02
数据库
数据中台
pdf_
数据中台
到底怎么建设,有人把他说清楚了
各位朋友,大家晚上好,我给大家分享的是《关于
数据中台
建设之思考》。
weixin_39699121
·
2024-02-09 18:59
数据中台
pdf
读透《阿里
数据中台
实践》
最近阿里巴巴分享了《阿里巴巴
数据中台
实践》这个PPT(自行搜索原始文章),对于
数据中台
的始作俑者,还是要怀着巨大的敬意去学习的,因此仔细的研读了,希望能发现一些不一样的东西。
TD_TH
·
2024-02-09 18:58
阿里技术阅读
阿里数据中台
数据中台
中台实践
中台
八问
数据中台
:关于
数据中台
你想知道的都在这里!
数据中台
最近特别火,各个企业都在关注如何构建自己的
数据中台
,利用
数据中台
打造数据驱动的经营能力。
pucheung
·
2024-02-09 18:58
大数据
亚马逊认证考试系列 - 知识点 - Redshift简介
AWSRedshift是一种快速、可扩展的
数据仓库
服务,可简化数据分析和BI工作负载的管理。它提供了强大的数据处理能力,使得用户能够轻松地分析海量的数据,并从中汲取有价值的信息。
customservice
·
2024-02-09 02:32
考试专栏
-
AWS
大数据
aws
云计算
IT认证
认证考试
学习
浅谈ETL
前言ETL开发是数据工程师必备的技能之一,在
数据仓库
、BI等场景中起到重要的作用。但很多从业者连ETL对应的英文是什么都不了解,更不要谈对ETL的深入解析,这无疑是非常不称职的。
秋夜雨凉
·
2024-02-08 21:15
SQL在云计算中的新角色:重新定义数据分析
文章目录1.云计算与数据分析的融合2.SQL在云计算中的新角色3.分布式SQL查询引擎4.SQL-on-Hadoop解决方案5.SQL与其他数据分析工具的集成6.实时数据分析与SQL7.SQL在云
数据仓库
中的角色
程序边界
·
2024-02-08 13:01
sql
云计算
数据分析
Apache Doris 用户案例库
物化视图与索引在京东的典型应用ApacheDoris在京东客服OLAP中的应用实践京东搜索实时OLAP探索与实践知乎基于ApacheDoris的DMP平台架构建设实践同程数科基于ApacheDoris的
数据仓库
建设货拉拉基于
hf200012
·
2024-02-08 11:03
Doris
大数据
doris
13
数据仓库
设计
1.
数据仓库
分层该项目数据分层如下:2.
数据仓库
构建流程2.1数据调研数据调研重点做两项工作,分别是业务调研和需求分析。2.1.1业务调研业务调研主要目标是熟悉业务流程、熟悉业务数据。
kk_io
·
2024-02-08 10:32
数据仓库
数据仓库
大数据
数据库学习笔记
数据库学习笔记数据库系统概述基本概念关系型数据库和非关系型数据库redis数据库引擎MyISAM与InnoDB的区别OLTP联机事务处理onlinetransactionprocessingOLAP联机分析处理
数据仓库
三流淼货
·
2024-02-08 08:10
数据库
数据库
面试
涤生大数据实战:基于Flink+ODPS历史累计计算项目分析与优化(上)
涤生大数据实战:基于Flink+ODPS历史累计计算项目分析与优化(一)1.前置知识ODPS(OpenDataPlatformandService)是阿里云自研的一体化大数据计算平台和
数据仓库
产品,在集团内部离线作为离线数据处理和存储的产品
涤生大数据
·
2024-02-08 08:55
数仓建模/数据架构/数据治理
大数据
flink
odps
数据仓库
入门介绍框架(附带完整项目实战)
一、诞生背景企业数据分析需要:各个部门自己建立独立的数据抽取系统,导致数据不一致概述
数据仓库
是一个面向主题的、集成、非易失的且随时间变化的数据集合主要用于组织积累的历史数据,并使用分析方法(OLAP、数据分析
麻辣清汤
·
2024-02-07 23:34
数据仓库
大数据用户画像系统架构设计
文章目录一、用户画像
数据仓库
搭建、数据抽取部分二、大数据平台、用户画像集市分层设计、处理三、离线计算部分四、实时计算部分五、Solr/ES搜索引擎部分六、JavaWeb毫秒级实时用户画像接口服务七、用户画像实时展示异步触发获取
充电了么
·
2024-02-07 19:37
数仓:事实表设计方法,原则和三种类型选择
关注公众号,回复关键字【资料】,获取【10万字大数据框架面试知识点】与【大数据开发的命令手册】事实表设计方法事实表作为
数据仓库
维度建模的核心,紧紧围绕着业务过程来设计。
大数据左右手
·
2024-02-07 09:35
大数据
数据仓库
数据挖掘
数据分析
即席查询框架怎么选?
即席查询与批处理的区别批处理在
数据仓库
系统中,根据应用程序的需求,需要对源数据进行加工,这些加工过程往往是固定的处理原则,这种情况下,可以把数据的增删改查SQL语句写成一个批处理脚
大数据左右手
·
2024-02-07 09:32
大数据
大数据
数仓-数据质量体系建设
注:文章参考:
数据仓库
数据质量体系建设涤生推荐:未来的行业中,数据是企业的重要资产,而
数据仓库
则是对企业数据进行有效管理和利用的重要手段。
爱吃辣条byte
·
2024-02-07 08:26
数仓建设
大数据
数据仓库
数据湖与
数据仓库
一、数据湖的定义维基百科上定义,数据湖(DataLake)是一个以原始格式存储数据的存储库或系统。它按原样存储数据,而无需事先对数据进行结构化处理。一个数据湖可以存储:结构化数据(如关系型数据库中的表),半结构化数据(如CSV、日志、XML、JSON),非结构化数据(如电子邮件、文档、PDF)二进制数据(如图形、音频、视频)。但是随着大数据技术的融合发展,数据湖不断演变,汇集了各种技术,包括数据仓
四月天03
·
2024-02-07 05:36
绕过去除 union 和 select 的 SQL 注入
环境准备:构建完善的安全渗透测试环境:推荐工具、资源和下载链接_渗透测试靶机下载-CSDN博客一、基础知识MySQL是一个流行的开源关系型数据库管理系统(RDBMS),广泛用于Web应用、
数据仓库
、嵌入式应用等场景
狗蛋的博客之旅
·
2024-02-07 05:33
Web安全渗透
sql
数据库
各互联网企业测绘资质调研
1导航地图甲级测绘资质2互联网地图服务甲级资质2007空间
数据中台
产品间数据同步、空间数据探查、空间数据标准与质量、空间数据开发、空间数据建模与融合、空间数据服
shishi521
·
2024-02-07 03:04
测绘资质申请
网络
数据仓库
-Hive基础(二)Hive 的基本概念
什么是HiveHive是基于Hadoop的一个
数据仓库
工具,可以将结构化的数据文件映射为一张数据库表,并提供类SQL查询功能。
做个合格的大厂程序员
·
2024-02-07 03:42
ETL是什么,有哪些ETL工具?就业前景如何?
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。
得帆云
·
2024-02-06 23:46
iPaaS干货
etl
数据仓库
数据仓库
数据仓库
(DataWarehouse)是一个面向主题(SubjectOriented))的、集成(Integrate)的、稳定(Non-Volatile)的、反映历史变化(TimeVariant)的数据集合
茶盏浮花
·
2024-02-06 20:47
性能实测:分布式存储 ZBS 与集中式存储 HDS 在 Oracle 数据库场景表现如何
在《分布式存储支持
数据仓库
业务系统性能验证》文章中,我们对比了SmartX分布式存储ZBS与全闪集中式存储(EMCPowerStore)执行数仓跑批任务的效率。为了帮助用
志凌海纳SmartX
·
2024-02-06 18:40
数据库
分布式
oracle
Flink 动态表 (Dynamic Table) 解读
博主历时三年精心创作的《大数据平台架构与原型实现:
数据中台
建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行,点击《重磅推荐:建大数据平台太难了!给我发个工程原型吧!》
Laurence
·
2024-02-06 11:26
大数据专题
flink
dynamic
table
动态表
连续查询
无界表
【技术预研】StarRocks官方文档浅析(4)
参考文档产品简介|StarRocksStarRocksStarRocks是一款高性能分析型
数据仓库
,使用向量化、MPP架构、CBO、智能物化视图、可实时更新的列式存储引擎等技术实现多维、实时、高并发的数据分析
偏振万花筒
·
2024-02-06 09:16
starRocks
大数据
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他