E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
数据仓库数据中台数据湖
广告案例|10亿数据、查询<10s,论基于OLAP搭建广告系统的正确姿势
精细化营销意味着要在数以亿计的人群中优选出那些最具潜力的目标受众,这无疑对提供基础引擎支持的
数据仓库
能力,提出了极大的技术挑战。背景人群圈选分析是客户画像平台(CDP)中的核心功能。
字节跳动技术团队
·
2023-09-24 14:19
大数据
spark
分布式
同程数科基于 Apache Doris 的
数据仓库
建设
同程数科基于ApacheDoris的
数据仓库
建设导读:同程数科成立于2015年,是同程集团旗下的旅游产业金融服务平台。
SelectDB技术团队
·
2023-09-24 10:10
大数据
apache
数据库
数据仓库
后端
数据仓库
的概念、特点与组成
目录1概念2特点2.1面向主题2.2集成2.3相对稳定2.4反映历史变化3组成3.1
数据仓库
数据库3.2数据抽取工具3.3元数据3.4访问工具3.5数据集市(DataMart)3.6
数据仓库
管理3.7信息发布系统
hellosc01
·
2023-09-24 10:31
大数据
数据仓库
大数据
数据分析
数仓
离线
数据仓库
1
数据仓库
建模1.1建模工具 PowerDesigner/SQLYog/EZDML…1.2ODS层 (1)保持数据原貌不做任何修改,起到备份数据的作用。
满床清梦覆星河
·
2023-09-24 10:30
Resume
数据仓库
数据中心与
数据仓库
发展趋势
一、
数据中台
与
数据仓库
的概念及作用
数据中台
是指将企业内外各种数据通过数据采集、数据处理、数据存储、数据分析、数据可视化等方式进行整合、处理和挖掘,为企业提供数据服务的一体化平台。
a谷雨c
·
2023-09-24 10:58
计算机视觉
数据仓库
大数据杂谈
架构师如何在面试中说服面试官根据课程项目做一些改动(变成自己熟悉的东西),形成一个新的项目,去增强面试的能力学习建议勤动手,执行范例多思考结合实际业务,深入思考会排错查看日志学会查阅官方文档定目标做分享所学知识运用到实际项目中番外
数据湖
是数仓的增强版本格式管理数据管理时间旅行
February13
·
2023-09-24 08:26
大数据
什么是中台,什么不是中台。所有的中台都是业务中台
中台的概念一热,很多似是而非的东西都在往中台的概念上凑,一下子出现很多中台,如业务中台、
数据中台
、技术中台、算法中台、移动中台等等。特别是很多原来称作平台的,现在也都摇身一变成了中台,赶时髦。
忘书_GirlKiller
·
2023-09-24 07:21
数据仓库
整理
OLAP主要用于支持复杂的数据分析,如
数据仓库
、决策支持等,强调数据的维度、聚合和可视化。
haobu枳
·
2023-09-24 04:17
数据仓库
大数据的崭露头角:
数据湖
与
数据仓库
的融合之道
文章目录
数据湖
与
数据仓库
的基本概念
数据湖
(DataLake)
数据仓库
(DataWarehouse)
数据湖
和
数据仓库
的优势和劣势
数据湖
的优势
数据湖
的劣势
数据仓库
的优势
数据仓库
的劣势
数据湖
与
数据仓库
的融合之道
IT·陈寒
·
2023-09-24 04:31
AIGC人工智能
大数据
数据仓库
看全域消费者运营Quick Audience如何实现自动化营销?
-更多关于数智化转型、
数据中台
内容请加入阿里云
数据中台
交流群—数智俱乐部和关注官方微信公总号(文末扫描二维码或点此加入)-阿里云
数据中台
官网https://dp.alibaba.com/indexQuickAudience
阿里开发者
·
2023-09-24 00:09
消息中间件
移动开发
小程序
数据可视化
大数据
BI
Kafka
决策智能
数据仓库
数据库与
数据仓库
的本质区别是什么?:https://www.zhihu.com/question/20623931BI与
数据仓库
(DW)之间的关系是怎么样的?
shuff1e
·
2023-09-23 14:01
数据分析思维学习1:业务指标、数据获取、
数据仓库
、数据治理、数据分析方法
数据分析入门实战最近上了一个关于数据分析思维的网课,内容比较偏业务上的实际应用,关注点更多在于数据思维。以下是我在学习过程中的笔记整理。文章目录数据分析入门实战第一章数据分析与数据分析师数据分析思维是什么第二章业务指标与指标体系2.1什么是指标,如何找到正确的指标1.什么是指标,什么是维度2.好的指标3.快的指标2.2北极星指标及其重要性1.什么是北极星指标?2.北极星指标有什么用?3.如何选择北
真是喵啊
·
2023-09-23 13:34
数据分析
数据仓库
数据仓库
模型全景
数据仓库
模型构建一、
数据仓库
构建需要考虑的问题与数据库的单表基于ER模型构建思路不同,其面向特定业务分析的特性,决定了它的构建需要整合多套数据输入系统,并输出多业务条线的、集成的数据服务能力,需要考虑更全面的因素
公众号:肉眼品世界
·
2023-09-23 13:33
数据仓库
大数据
编程语言
数据库
java
实时数仓新选择——Doris构建实时数仓落地方案详解
一、实时
数据仓库
概述**首先,**我们从
数据仓库
说起。
数据仓库
的概念可以追溯到20世纪80年代,当时IBM的研究人员提出了商业
数据仓库
的概念。
胖胖胖胖胖虎
·
2023-09-23 13:32
Flink
doris
数据仓库
doris
flink
数据仓库
大数据项目实战之
数据仓库
:电商
数据仓库
系统——第10章 数仓开发之DWS层
文章目录第10章数仓开发之DWS层10.1最近1日汇总表10.1.1交易域用户商品粒度订单最近1日汇总表10.1.2交易域用户商品粒度退单最近1日汇总表10.1.3交易域用户粒度订单最近1日汇总表10.1.4交易域用户粒度加购最近1日汇总表10.1.5交易域用户粒度支付最近1日汇总表10.1.6交易域省份粒度订单最近1日汇总表10.1.7交易域用户粒度退单最近1日汇总表10.1.8流量域会话粒度页
yiluohan0307
·
2023-09-23 13:29
大数据项目实战之数据仓库
大数据
数据仓库
华为云 FusionInsight 大数据技术普惠创新,释放千行百业数据价值
主题,从金融、运营商等行业在大数据创新的实践,顶级高校的大数据顶尖人才培养和科学研究,以及华为云FusionInsight智能
数据湖
系列大数据产品的技术创新等方面,以产学研深度融合的方式展开分享和探讨。
数据湖洞见
·
2023-09-23 10:37
大数据
spark
hadoop
同一份数据全域共享,HashData UnionStore实时性背后的故事
云数仓的出现,不仅改变了传统
数据仓库
的服务模式,更给用户带来了应对海量、新型数据的存储和处理能力,为满足业务现代化需求提供了基础。
HashData酷克数据
·
2023-09-23 09:59
数据库
大数据
数据仓库
智慧公厕未来
数据中台
,实现公厕跨域跨级跨平台聚合应用
智慧公厕头部厂家广州中期科技有限公司,以大量的精品案例项目实景实图,详细解读构建一个
数据中台
,将智慧公厕的数据进行聚合应用。通过将公共厕所的数据集中存储和管理,可以实现公厕跨区域、跨层级、跨平台
中期科技ZONTREE
·
2023-09-23 08:08
负载均衡
运维
智慧厕所
智慧公厕
智慧城市
数据仓库
&数据库
数据仓库
和数据库是两个重要的数据存储和管理工具,它们有着不同的特点和用途。一、
数据仓库
与数据库的定义1.
数据仓库
数据仓库
,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略集合。
Elseide艾思
·
2023-09-23 08:26
数据仓库
数据库
大数据
hive mysql初始_hive mysql 初始化
Hive简介Hive是一个基于hadoop的开源
数据仓库
工具,用于存储和处理海量结构化数据。
戴舜
·
2023-09-23 04:14
hive
mysql初始
使用 Databend 加速 Hive 查询
许多企业的数仓/
数据湖
中都有PB级的数据,其中绝大多数都属于旧有系统中的
Databend
·
2023-09-23 03:27
hive
hadoop
数据仓库
pg数据表同步到hive表数据压缩总结
为了解决pg的压力,尝试采用hive
数据仓库
存数,利用hive支持的parquet列式存储,同时支持lzo、none、uncompressed、brotil、snappy和gzip的压缩算法,更节省空间
zcc_0015
·
2023-09-23 00:28
hive
hadoop
数据仓库
数据中台
是什么?
数据中台
是一套可持续“让企业的数据用起来”的机制,一种战略选择和组织形式,是依据企业特有的业务模式和组织架构,通过有形的产品和实施方法论支撑,构建一套持续不断把数据变成资产并服务于业务的机制。
裘马轻狂大帅
·
2023-09-22 22:18
仔仔细细的给您讲,如何建立
数据仓库
数据仓库
的定位在整个数据价值生产链路中,
数据仓库
的主要作用就是中心化分发,将原始数据与数据价值挖掘活动隔离。所有的原始数据都会进入
数据仓库
,再由
数据仓库
统一分发给下游的数据使用者。
派可数据BI可视化
·
2023-09-22 20:06
数据仓库
数字化转型
商业智能
数据仓库
大数据
spark
数据分析
信息可视化
干货:
数据仓库
基础知识(全)
1、什么是
数据仓库
?权威定义:
数据仓库
是一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策。
派可数据BI可视化
·
2023-09-22 20:01
数字化转型
数据要素
商业智能
数据仓库
数据分析
信息可视化
大数据
同一份数据全域共享,HashData UnionStore实时性背后的故事
云数仓的出现,不仅改变了传统
数据仓库
的服务模式,更给用户带来了应对海量、新型数据的存储和处理能力,为满足业务现代化需求提供了基础。
·
2023-09-22 16:27
数据库postgresql
ByConity 技术详解之 ELT
谈到
数据仓库
,一定离不开使用Extract-Transform-Load(ETL)或Extract-Load-Transform(ELT)。将来源不同、格式各异的数据提取到
数据仓库
中,并进行处理加工。
·
2023-09-22 16:27
ETL工具介绍
ETL是BI/DW(商务智能/
数据仓库
)的核心和灵魂,按照统一的规则集成并提高数据的价值,是负责完成数据从数据源向目标
数据仓库
转化的过程,是实施
数据仓库
的重要步骤。ETL包含了三方面,首先是“抽取
quanlin_kuccynl
·
2023-09-22 13:52
工具
数据仓库
平台
引擎
电子商务
产品
[转载]ETL 数据抽取、转换、加载_徐川江的博客_新浪博客
原文地址:ETL数据抽取、转换、加载作者:SAP_Jimmy
数据仓库
的一个重要功能就是对不同来源的数据进行归集和处理。不同类型的数据对象可以用来存储这些数据或者实现数据的联合视图。
徐川江的个人博客
·
2023-09-22 13:51
数据仓库
大数据
编程语言
python
人工智能
六、
数据仓库
详细介绍(ETL)工具篇上
对于相对简单的ETL系统我们可以完全依赖数据库或者内部开发一个小型的的流程控制、调度工具去实现,但是对于大多数的
数据仓库
项目,从数据源到最终数据应用,至少也有大几十上百甚至几百个ETL过程(节点),这些过程之间的依赖关系
Hanson,
·
2023-09-22 13:50
数据仓库
数据仓库
etl
数据库
ETL工具点评
ETL所完成的工作主要包括三方面:首先,在
数据仓库
和业务系统之间搭建起一座桥梁,确保新的业务数据源源不断地进入
数据仓库
;其次,用户的分析和应用也能反映出最新的业务动态,虽然ETL在
数据仓库
架构的三部分中技术含量并不算高
赵一一
·
2023-09-22 13:20
数据湖
干货丨常用的数据集成ETL工具有哪些?
ETL一词较常用在
数据仓库
,但其对象并不限于
数据仓库
。
传智播客
·
2023-09-22 13:19
数据仓库
java
编程语言
大数据
项目管理
推荐一款可以快速抽取sap数据的ETL工具
然而,使用SAPERP系统面临着一些数据分析不方便,数据导出困难等问题:数据集成困难:将SAP中的数据整合到其他系统或本地
数据仓库
通常是一项复杂的任务。
苛子
·
2023-09-22 13:46
etl
数据仓库
BD就业复习第五天
回答:Hive是一个
数据仓库
工具,它建立在Hadoop之上,用于分析和查询大规模数据。Hive将SQL查询转化为MapReduce任务,但由于MapReduce的延迟,性能可
密斯特.张先生
·
2023-09-22 12:48
数据仓库
BD就业复习第三天
1.连续活跃区间表的实现思路实现连续活跃区间表是
数据仓库
中常见的需求,通常用于分析用户或实体在一段时间内的活跃情况。
密斯特.张先生
·
2023-09-22 11:42
数据仓库
MPPDB是什么?
个问题搞定大数据理论体系解答MPPDB是一款SharedNothing架构的分布式并行结构化数据库集群,具备高性能、高可用、高扩展特性,可以为超大规模数据管理提供高性价比的通用计算平台,并广泛地用于支撑各类
数据仓库
系统
Shockang
·
2023-09-22 02:29
大数据理论体系
大数据
MPP
系统稳定性保障设计总结和思考
是选择Mysql这类OLTP数据库还是MPP型OLAP
数据仓库
。如何进行消息队列选型?是选择可靠性更强的RabbitMQ还是还是轻松吞吐百万流量的Kafka,这些都是需要根据具体的业务和场景来抉择的。
yangnk42
·
2023-09-22 00:00
系统优化
NineData X SelectDB 联合发布会,即将上线!
本次发布会将聚焦于实时
数据仓库
技术和数据开发能力,展示SelectDB新一代实时
数据仓库
产品如何解决实时数据分析的行业痛点,以及「NineData如何提供高效、智能、安全的数据管理能力」。
·
2023-09-21 21:31
Tapdata Connector 实用指南:云原生数仓场景之数据实时同步到 Databend
典型用例包括数据库到数据库的复制、将数据引入
数据仓库
或
数据湖
,以及通用ETL处理等。引用随着TapdataConnector的不断增长,我们最新推
·
2023-09-21 14:28
数据库mysql
ELT in ByteHouse 实践与展望
更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群谈到
数据仓库
,一定离不开使用Extract-Transform-Load(ETL)或Extract-Load-Transform
·
2023-09-21 12:18
大数据数据库云原生
ELT in ByteHouse 实践与展望
更多技术交流、求职机会,欢迎关注字节跳动数据平台微信公众号,回复【1】进入官方交流群谈到
数据仓库
,一定离不开使用Extract-Transform-Load(ETL)或Extract-Load-Transform
·
2023-09-21 12:46
大数据数据库云原生
活动报名 | Modern Data Stack Meetup 北京首站启动!与三大开源社区共同探索现代数据栈的最佳实践
现代数据堆栈的流行伴随着云计算和云
数据仓库
的崛起,本质上是各种软件工具的组合,用于在一个完全集成的基于云的数据平台上收集、处理和存储
·
2023-09-21 12:42
数据库
Doris-05-集成Spark、Flink、Datax,以及
数据湖
分析(JDBC、ODBC、ES、Hive、多源数据目录Catalog)
Doris准备Spark环境使用SparkDorisConnectorFlinkDorisConnector准备Flink环境使用FlinkDorisConnectorDataXdoriswriter
数据湖
分析
迷雾总会解
·
2023-09-21 12:33
大数据
数据库
spark
flink
elasticsearch
大数据
doris
HIVE,SparkSql和Presto对比
HIVE,SparkSql和Presto对比HIVEhive是基于Hadoop的一个
数据仓库
工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。
loophome
·
2023-09-21 09:20
大数据处理
hive
hadoop
数据仓库
【架构】阿里中台内容整理(部分)
目录中台基本概念小前台大中台移动中台
数据中台
阿里-云效核心阿里-EMAS顶层模型架构演进中台基本概念定义:通过制定标准和机制,把不确定的业务规则和流程通过工业化和市场化的手段确定下来,以减少人与人之间的沟通成本
平凡之大路
·
2023-09-21 06:15
软件架构
中台
电商数仓学习笔记(一)
第一章
数据仓库
概念第二章项目需求及架构设计项目需求项目框架第三章数据生成模块目标数据数据埋点服务器和jdk准备编写集群分发脚本xsync模拟数据集群日志生成脚本第四章数据采集模块集群所有进程查看脚本Hadoop
芝士雪豹.
·
2023-09-21 06:01
大数据
hadoop
数仓主题域和数据域、雪花模型,星型模型和星座模型
数据域和主题域都是
数据仓库
中的重要概念,但含义略有不同,常常作为面试官的面试考点。数据域指的是特定的业务领域或是业务过程,如销售、采购、人力资源管理、财务等。在
数据仓库
中。
Aimyon_36
·
2023-09-20 23:23
数据仓库
spark
大数据
分布式
发挥现代数据栈MDS的更大价值
将碎片数据集成到集中式
数据仓库
依赖于ELT或ETL过程,为此您可能需要多个提供程序来连接所有源。以下步骤-存储,转换,可视化和分析-都涉及将数据重新
qq_38767591
·
2023-09-20 21:47
大数据
数据仓库
必示科技赋能广发证券运维数字化实践案例,入选信通院《中国AIOps现状调查报告(2023)》
近期,“必示科技赋能广发证券运维数字化实践,打造智能运维
数据中台
”合作案例被中国信息通信研究院作为优秀金融案例项目,收录在最新的《中国AIOps现状调查报告(2023)》(金融行业仅3家)。
BizSeer必示科技
·
2023-09-20 19:46
科技
运维
必示科技赋能广发证券运维数字化实践案例,入选信通院《中国AIOps现状调查报告(2023)》
近期,“必示科技赋能广发证券运维数字化实践,打造智能运维
数据中台
”合作案例被中国信息通信研究院作为优秀金融案例项目,收录在最新的《中国AIOps现状调查报告(2023)》(金融行业仅3家)。
·
2023-09-20 14:39
运维人工智能
上一页
30
31
32
33
34
35
36
37
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他