E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Olap
统一
OLAP
查询平台之语义层
这些问题都可以通过统一
OLAP
查询平台来解决。一、数据从需求到加工过程中痛点从下图1-1看出数据开发的一般过程:由业务方提出各种指标的分析需求。产品和应用讨论分析指标,并拉上数仓和业务一起确认指标。
XianMing的博客
·
2024-01-14 11:27
olap
数据仓库
语义分析
数据仓库(2)-认识数仓
BillInmon)于1990年提出,主要功能仍是将组织透过资讯系统之联机事务处理(OLTP)经年累月所累积的大量资料,透过数据仓库理论所特有的资料储存架构,做有系统的分析整理,以利各种分析方法如联机分析处理(
OLAP
XianMing的博客
·
2024-01-14 10:53
数据仓库
数据仓库
spark
大数据
5分钟了解什么是SQL窗口函数
窗口函数的概述窗口函数(开窗函数),也叫
OLAP
函数(OnlineAnallyticalProcessing,联机分析处理,可以对数据库据进行实时分析处理。
码农zz
·
2024-01-14 08:43
sql
数据库
brpc: a little source code
singleDoc#《
olap
/clickhouse-编译器优化与向量化》中我谈过brpc的汇编控制bthread。
SakamataZ
·
2024-01-14 03:26
c++
OLAP
型数据库 ClickHouse的简介 应用场景 优势 不足
ClickHouse是一个开源的分布式列式数据库管理系统(DBMS),专门用于在线分析处理(
OLAP
)。它最初由Yandex开发,并且在处理大规模数据分析和实时查询方面表现出色。
KevinAha
·
2024-01-13 18:15
数据库
clickhouse
实战营|阿里云 x StarRocks 邀你现场体验云上极速湖仓--深圳站
StarRocks自3.0大版本起,实现了从计算
OLAP
分析到统一Lakehouse的重大产品能力升级。
StarRocks_labs
·
2024-01-13 13:25
StarRocks
数据库
数据仓库
湖仓
数据仓库Apache Hive
为了分析数据而来数据分析的平台2、数据仓库的特性3、数据仓库和数据库的区别OLTP系统
OLAP
系统注意:这里要解决一个核心的误区:数仓绝不是大型数据库。
江枫渔火R
·
2024-01-13 09:29
数据仓库
apache
hive
大数据
2022-02-01大数据学习日志——Hadoop离线阶段——数据仓库、Apache Hive
学习目标理解数仓概念、起源由来理解数仓(
OLAP
)与数据库(OLTP)区别掌握数仓分层架构思想掌握ApacheHive功能与架构组件理解ApacheHive远程模式部署安装内容大纲#数据仓库基础核心知识
王络不稳定
·
2024-01-13 09:28
数据仓库
big
data
hive
PostgreSQL使用clickhousedb_fdw访问ClickHouse
ClickHouse是一款快速的开源
OLAP
数据库管理系统,它是面向列的,允许使用SQL查询实时生成分析报告。
PostgreSQLChina
·
2024-01-13 06:53
实战营|阿里云 x StarRocks 邀你现场体验云上极速湖仓--深圳站
StarRocks自3.0大版本起,实现了从计算
OLAP
分析到统一Lakehouse的重大产品能力升级。
阿里云大数据AI技术
·
2024-01-13 03:22
阿里云
云计算
【数据库学习】ClickHouse(ck)
1,ClickHouse(CK)是一个用于联机分析(
OLAP
)的列式数据库管理系统(DBMS)。
兔兔西
·
2024-01-13 01:39
数据库
学习
clickhouse
ClickHouse介绍
ClickHouse官方文档地址
OLAP
场景的关键特征ClickHouse的特点接口引擎数据库引擎延时引擎LazyAtomicMySQL数据库引擎表引擎合并树家族VersionedCollapsingMergeTree
“孤酒”
·
2024-01-12 15:46
ClickHouse
大数据
nosql
kylin4.0.3升级问题
原本的cube太多了,换其他
OLAP
数据库太麻烦。相比之下,升级是一个很好的选择(官网有说明内存降低和构建时间更快的原因)。,导致经常内存溢出,kylin挂掉。
向他一样rap
·
2024-01-12 14:38
kylin
kylin
大数据
big
data
kylin升级(3.0.1->kylin-4.0.3)
原本的cube太多了,换其他
OLAP
数据库太麻烦。相比之下,升级是一个很好的选择(官网有说明内存降低和构建时间更快的原因)。
向他一样rap
·
2024-01-12 14:08
kylin
kylin
大数据
big
data
linux
Rockset 陈博玚:从数据库创新看云原生技术
Rockset是新一代的云原生
OLAP
数据库,通过多维聚合索引和存储、计算、导入三层分流,使得各种企业的实时高并发查询需求得到很好的解决。打通物联网的孤岛,是Shifu和
KubeShifu
·
2024-01-12 07:01
【大数据架构】
OLAP
实时分析引擎选型
OLAP
引擎面临的挑战常见
OLAP
引擎对比
OLAP
分析场景中,一般认为QPS达到1000+就算高并发,而不是像电商、抢红包等业务场景中,10W以上才算高并发,毕竟数据分析场景,数据海量,计算复杂,QPS
话数Science
·
2024-01-11 04:33
大数据
大数据
架构
【大数据
OLAP
引擎】StarRocks为什么快?
StarRocks的优势StarRocks最初主要的优势是性能,当时在单表查询方面与性能标杆ClickHouse不相上下,而join优化特性使其在多表关联查询场景下的性能表现要远远优于ClickHouse,替换ClickHouse自然也就成了StarRocks的第一个目标。而StarRocks的野心不止于此,后来又进一步发展了联邦查询功能,成为Presto的性能升级替代方案。与此同时,StarRo
话数Science
·
2024-01-11 04:33
StarRocks
大数据
大数据
架构
【大数据
OLAP
引擎】StartRocks存算分离
存算分离的原因降低存储成本:同样的存储大小对象存储价格只有SSD的1/10,所以号称存储成本降低80%不是吹的。存算一体到存算分离存算一体作为MPP数据库的典型代表,StarRocks3.0版本之前使用存算一体(shared-nothing)架构,BE同时负责数据存储和计算,在查询时可以直接访问BE本地数据,进行本地计算,避免数据传输与拷贝,从而能够得到极速的查询分析性能。存算一体架构支持数据的多
话数Science
·
2024-01-11 04:02
大数据
StarRocks
大数据
架构
转转
OLAP
自助分析实践
.背景介绍2.1为什么要做自助分析2.2核心解决的问题2.3建设初期的卡点3.技术实现3.1技术架构3.2基于QuickBI+StarRocks的自助分析功能实现3.3为什么选择StarRocks作为
OLAP
转转技术团队
·
2024-01-11 03:58
大数据
大数据
OLAP
引擎发展原因及特性分析
前言:谈到当下应用最广的大数据技术,很多人都会说是数据分析;而体现大数据分析能力的则是
OLAP
。
i7杨
·
2024-01-10 01:31
大数据技术分析
大数据
StarRocks Awards 2023 年度贡献人物
这一年,StarRocks继续全方位大步向前迈进,在300+贡献者的辛勤建设下,社区先后发布了50+版本,并完成了从全场景
OLAP
到云原生湖仓的进化。
StarRocks_labs
·
2024-01-09 13:06
数据仓库
大数据
clickhouse
数仓建设学习路线(二)模型建设(1)
OLTPVS
OLAP
OLTP概念全称OnLineTransactionProcessing,中文名联机事务处理系统,主要是执行基本日常的事务处理,比如数据库记录的增删查改,例如mysql、oracle。
语兴数据
·
2024-01-08 18:58
数仓建设-学习路线
大数据
数据仓库
人工智能
UE5如何将屏幕坐标转为世界坐标和世界方向
屏幕坐标转为世界坐标在PlayerControoler下找到这个函数:DeprojectScreenPositionToWorldbo
olAP
layerController::DeprojectScreenPositionToWorld
人宅
·
2024-01-08 16:56
UE5插件
renzhai
UE4C++
ue5
游戏引擎
虚幻
浅谈Doris在物联网应用
Doris专门用于
OLAP
场景,具有优秀的查询性能和易用性,广泛应用于企业数据分析领域。二、物联网设备数据分析物联网设备数量越来越多,产生的数据也越来越庞大。这些数据包含了丰富的
shinelord明
·
2024-01-08 11:03
大数据
物联网
大数据
iotdb
olap
/spark-tungsten:codegen
15721这一章没什么好说的,不再贴课程内容了。codegen和simd在工业界一般只会选一种实现。比如phothon之前用codegen,然后改成了向量化引擎。一般gen的都是weldIR/LLVMIR/当前语言,gen成C++的也要检查是不是有本地预编译版本,要不没法用。因为clickhouse没有codegen,这节课就拿我比较熟悉的spark的tungsten来当例子,tungsten会g
SakamataZ
·
2024-01-08 07:28
spark
大数据
分布式
【数据仓库与联机分析处理】多维数据模型
目录一、数据立方体二、数据模型(一)星形模型(二)雪花模式(三)事实星座模式三、多维数据模型中的
OLAP
操作(一)下钻(二)上卷(三)切片(四)切块(五)转轴数据仓库和
OLAP
工具是基于多维数据模型的,
Francek Chen
·
2024-01-07 07:05
大数据技术基础
数据仓库
大数据
实时数仓模型
实时数仓主要是基于数据采集工具,如canal等原始数据写入到kafka这样的数据通道中,最后一般都是写入到类似于HBase这样的
OLAP
存储系统中。对外提供分钟级别,甚
jero_lei
·
2024-01-06 23:48
Greenplum集群部署小结
属于一种看起来“较重”的数据库MPP架构,不像基于MySQL基于中间件的架构那么轻量,但是要说一些具体的场景,比如Greenplum支持存储过程,支持列式存储,加上分区表和内置的数据分片等多种模式,都是典型的
OLAP
jeanron
·
2024-01-06 15:57
ClickHouse为什么这么快?ClickHouse原理解析与实践
说在前头:
OLAP
的分类与
OLAP
操作
OLAP
的架构分类1.R
OLAP
:使用关系模型进行建模,数据建模通常使用星型模型或雪花模型。
袋鼠先森
·
2024-01-06 13:15
clickhouse
数据库
大数据
ClickHouse为什么这么快
ClickHouse作为一款开源列式数据库管理系统(DBMS)主要用于数据分析(
OLAP
)领域。近年来国内开源社区非常火热,各个大厂纷纷跟进大规模使用。
数新网络
·
2024-01-06 13:40
数据库
java
服务器
clickhouse是什么
1.简介ClickHouse是俄罗斯的Yandex于2016年开源的用于在线分析处理查询(
OLAP
:OnlineAnalyticalProcessing)MPP架构的列式存储数据库(DBMS:DatabaseManagementSystem
繁星-赵老师
·
2024-01-06 13:09
clickhouse
ClickHouse为什么那么快
实际上,这也是传统的
OLAP
系统所追求的指标。体现到语义上,就是实现GROUPBY查询的实现。为了实现这一
GaleZhang
·
2024-01-06 13:09
中间件
clickhouse
数据库
java
TiDB简介(转)
它支持水平弹性扩展、ACID事务、标准SQL、MySQL语法和MySQL协议,具有数据强一致的高可用特性,是一个不仅适合OLTP场景还适合
OLAP
场景的混合数据库。下面是对有关资料的整理还有一些
liuzx32
·
2024-01-06 03:02
ClickHouse基础介绍
目录前言1、什么是clickhouse2、
OLAP
场景的关键特征3、列式存储更适合于
OLAP
场景的原因4、clickhouse的独特功能5、clickhouse的缺点6、性能6.1、单个大查询的吞吐量6.2
小徐很努力
·
2024-01-05 23:38
数据库
clickhouse
大数据
oceanbase
数据仓库系列7-
OLAP
是什么
什么是
OLAP
?在线分析处理(OnlineAnalyticalProcessing:
OLAP
)是一类允许用户同时分析来自多个数据库系统的信息的软件。
allwit
·
2024-01-05 21:32
ClickHouse数据库详解和应用实践
如何生成可参考右边的帮助文档文章目录概述1.适用场景2.不适用场景一、核心特性1.完备的DBMS功能2.列式存储与数据压缩二、安装部署1.在线安装2.离线安装三、jdbc访问总结概述ClickHouse是一个用于联机分析(
OLAP
shandongwill
·
2024-01-05 20:53
大数据
数据库
clickhouse
数据库
Apache Doris (六十一): Spark Doris Connector - (1)-源码编译
个人主页:IT贫道_大数据
OLAP
体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-05 14:40
大数据OLAP体系技术栈
apache
spark
大数据
doris
Apache Flink连载(八):Apache Flink架构
个人主页:IT贫道_大数据
OLAP
体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-05 14:36
大数据计算体系技术栈
Apache
Flink
apache
flink
架构
大数据 - Doris系列《一》- Doris简介
目录1.1Doris概述1.2
OLAP
和OLTP(面试)1.应用场景联机事务处理OLTP(On-LineTransactionProcessing)联机分析处理
OLAP
(On-LineAnalyticalProcessing
王哪跑nn
·
2024-01-05 09:55
大数据
Doris
大数据
Apache Doris (五十八): Doris - Join优化原理
个人主页:IT贫道_大数据
OLAP
体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-05 04:49
大数据OLAP体系技术栈
doris
优化
Apache Doris (五十九): Doris - BITMAP精准去重
个人主页:IT贫道_大数据
OLAP
体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-05 04:49
大数据OLAP体系技术栈
Doris
Apache Doris (六十): Doris - 物化视图
个人主页:IT贫道_大数据
OLAP
体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主:加入大数据技术讨论群聊,获取更多大数据资料。
IT贫道
·
2024-01-05 04:48
大数据OLAP体系技术栈
Apache
Doris
apache
doris
Clickhouse 为什么快
ClickHouse是一个用于联机分析处理(
OLAP
)的开源列式数据库管理系统(DBMS)。
nai598455803
·
2024-01-05 04:17
数据库
clickhouse
kudu NoSQL数据库详解
Clickhouse是一个用于联机分析(
OLAP
)的列式数据库管理系统(DBMS)。能够使用SQL查询实时生成分析数据报告。它同样拥有优秀的数据存储能力。ApacheK
wespten
·
2024-01-04 23:09
数据库存储
块存储
文件存储
对象存储
分布式网络存储
ui
微信基于StarRocks的湖仓一体实践
作者:StarRocksActiveContributer、微信
OLAP
内核研发工程师微信作为国内活跃用户最多的社交软件,其数据平台建设经历了从Hadoop到ClickHouse亚秒级实时数仓的阶段,但仍旧面临着数据体验割裂
StarRocks_labs
·
2024-01-04 20:38
后端
StarRocks 在小红书自助分析场景的应用与实践
作者:小红书
OLAP
研发负责人王成近两年StarRocks一直是小红书
OLAP
引擎体系里非常重要的部分,过去一年,小红书的StarRocks使用规模呈现出翻倍的增长速度,目前整体规模已经达到30个集群,
StarRocks_labs
·
2024-01-04 20:07
后端
【从零开始的数据库系统概念】 1.引言
第1章引言数据库系统用于管理:1.具有很高价值的数据集合,2.相对庞大的数据集合常用的数据库方式:OLTP(onlinetrasactionprocessing),
OLAP
1.1文件系统和数据库的区别文件系统由操作系统控制
吉雷草
·
2024-01-04 09:43
细读经典系列-数据库系统概念
数据库
java
sql
c++
MySQL5.7 多主一从(多源复制)同步配置
查询分析:从库可以作为统计、报表等数据分析工作所使用的的
OLAP
库。异地备份:将从库放置在异地可作为异地数据同步备
jerry-89
·
2024-01-04 07:43
MYSQL主从
服务器
数据库
mysql
SeaTunnel同步SQLserver数据至ClickHouse
ClickHouse是一种
OLAP
类型的列式数据库管理系统,ClickHouse完美的实现了
OLAP
和列式数据库的优势,因此在大数据量的分析处理应用中ClickHouse表现很优秀。
万山数据@yqj1987
·
2024-01-04 06:28
clickhouse
sqlserver
Canal+RabbitMQ实现MySQL数据同步至ClickHouse
ClickHouse作为一个被广泛使用
OLAP
分析引擎,在执行分析查询时的速度优势很好的弥补了MySQL的不足,但是如何将MySQL数据同步到ClickHouse就成了用户面临的第一个问题。
万山数据@yqj1987
·
2024-01-04 06:21
clickhouse
rabbitmq
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他