E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BI&OLAP
136.如何进行离线计算-2
136.1数据建模维度建模专门适用于
OLAP
的设计模式存在着两种类型的表:事实表维度表事实表:主题的客观度量能够以记录主题为准信息多不精准维度表:看问题分析问题的角度信息精但是不全可跟事实表关系维度建模三种常见模型星型模型一个事实表带多个维度表维度之间没关系数仓发展建立初期
大勇任卷舒
·
2023-08-29 15:07
>>技术应用:clickhouse 帮助命令一览表
ClickHouse是一个真正的列式数据库管理系统(DBMS),用于联机分析(
OLAP
)常见的列式数据库有:Vertica、Paraccel(ActianMatrix,AmazonRedshift)、SybaseIQ
六月暴雪飞梨花
·
2023-08-29 13:08
#
数据|数据库
数据库
大数据
帮助文档
Electron和单纯的vue单页面结合通讯
electron-quick-start#进入这个仓库$cdelectron-quick-start#安装依赖并运行$npminstall&&npmstart然后通讯Api地址h1主程序//Modulestocontr
olap
plicationlifeandcreat
俗人彭jin
·
2023-08-29 04:16
ClickHouse进阶(二):ClickHouse MergeTree表引擎及目录解析
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-29 00:44
大数据OLAP体系技术栈
clickhouse
实时数仓
数据库
数据仓库
sql
ClickHouse(二十五):ClickHouse 可视化工具操作
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-29 00:14
大数据OLAP体系技术栈
clickhouse
sql
数据库
数据仓库
大数据
ClickHouse进阶(一):ClickHouse 使用场景及分布式集群安装
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-29 00:14
大数据OLAP体系技术栈
clickhouse
sql
数据库
分布式数据库
数据仓库
ClickHouse进阶(三):ClickHouse 索引
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-29 00:13
大数据OLAP体系技术栈
clickhouse
实时数仓
olap
当 Apache Doris 遇上大模型:探秘腾讯音乐如何基于大模型 +
OLAP
构建智能数据服务平台
本文将详细介绍腾讯音乐如何基于ApacheDoris构建查询高效、实时统一分析的
OLAP
引擎,使
OLAP
作为底层基建加强模型连接转化效率、结果输出准确率,最终将大模型+
OLAP
引擎结合为用户提供个性化、
·
2023-08-28 14:24
JVM实战(一): dump文件的产生以及执行shell脚本
1.dump文件产生1.1絮絮叨叨目前,公司使用的
OLAP
组件实现了k8s容器化如果使用宿主机磁盘存储日志,pod升级(本人是删除后重建)后,日志数据会丢失为了保证日志数据不丢失,专门配置了一个基于ceph
晓之木初
·
2023-08-28 03:17
java相关
#
《深入理解Java
虚拟机》
java
【大数据】初步认识StarRocks
StarRocks充分吸收关系型
OLAP
数据库和分布式存储系统在大数据时代的优秀研究成果,在业界实践的基础上,进一步改进优化、升级架构,并增添了众多全新功能,形成了全新的企业级产品。
慕沐.
·
2023-08-28 00:32
大数据
StarRocks
数据库与数据仓库的本质区别是什么
数据库通常更关注业务交易处理(OLTP),而数据仓库更关注数据分析层面(
OLAP
),由此产生的数据库模型上也会有很大的差异。数据库通常追求交易的速度,交易完整性,数据的一致性,等等,在数据库
这个该叫什么呢
·
2023-08-26 16:10
一. 窗口函数
窗口函数(
OLAP
实时分析处理函数),可以一般聚合函数无法实现的高级操作。诸如排序、生成序列号等功能。目前DBMS逐步都完成了对窗口函数的支持,唯独MySql不支持(但是Mysql8开始支持了)。
cqzhangjian
·
2023-08-26 09:41
爱奇艺Java开发实习面试的10个问题,这些问题你会几个?2018-01-25
近日,w3cscho
olap
p开发者头条上分享了一篇“爱奇艺Java开发实习面经”,引来不少java程序员们的关注。不可否认,现在还是有大量的程序员从事Java开发。
编程狮W3Cschool
·
2023-08-25 21:22
Clickhouse物化视图原理和使用详解
前言ClickHouse广泛用于用户和系统日志查询场景中,主要针对于
OLAP
场景,为业务方提供稳定高效的查询服务。在业务场景下,数据以不同的格式、途径写入到clickhouse。
dkjhl
·
2023-08-25 21:28
大数据
clickhouse
数据库
物化视图
行式存储与列式存储
1.概述 数据处理大致可分为两大类,联机事务处理OLTP(on-linetransactionprocessing)和联机分析处理
OLAP
(on-lineanalyticalprocessing)。
独影月下酌酒
·
2023-08-25 17:56
大数据
数据库
hive
Starrocks与MySQL函数的区别
Starrocks与MySQL函数的区别Starrocks是一款分布式
OLAP
数据库,而MySQL则是一种关系型数据库。由于其不同的架构和用途,它们在支持的函数方面存在一些差异。
璐先生
·
2023-08-24 22:01
mysql
数据库
starrocks
【TiDB理论知识08】HATP概述
1HTAP技术OLTP在线事务支付转账高并发每次操作的数据量少,行存
OLAP
报表分析每次操作大量数据列存储2传统解决方案数据抽取到数仓或者数据湖ETL有延迟,一般会有T+1T+2数据多副本3HTAP的要求
DBA之路
·
2023-08-24 18:05
TiDB
数据库
搭建测试mongodb副本集
看:https://gitee.com/xiaofeipapa/docker_mongodb)我司数据说多不多,说少不少,也到了搭个大数据系统的时候了.更何况我们系统最重要的环节-风控系统,本来就需要
OLAP
小肥爬爬
·
2023-08-24 17:46
Elasticsearch Split和shrink API
背景:尝试解决如下问题:单分片存在过多文档,超过lucene限制分析1.一般为日志数据或者
OLAP
数据,直接删除索引重建2.尝试保留索引,生成新索引-数据写入新索引,查询时候包含old_index,new_index3
zmc@
·
2023-08-24 15:09
elasticsearch
大数据
搜索引擎
大数据------Kylin单机集成CDH安装(详细教程)
https://www.acfun.cn/a/ac10294589(免费教程)ApacheKylin是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(
OLAP
)能力(可以把Kylin
ItStar
·
2023-08-24 12:26
如何快速地将Hive中的数据导入ClickHouse
如何快速地将Hive中的数据导入ClickHouseClickHouse是面向
OLAP
的分布式列式DBMS。
Ricky_Huo
·
2023-08-24 04:44
Waterdrop
Prometheus
大数据
ClickHouse
解读《Benchmarking Hybrid OLTP&
OLAP
Database Systems》| StoneDB学术分享会
现有的这些测评TPC-X标准(Benchmarking)真的适合现有的OLTP&
OLAP
混合型数据库吗?
来来士
·
2023-08-23 19:43
MySQL8.0窗口函数
MySQL的窗口函数也称为
OLAP
函数,
OLAP
是OnlineAnalyticalProcessing的简称,意思是对数据库进行实时分析处理,也叫分析函数。
像豆芽一样优秀
·
2023-08-23 16:31
数据仓库
数据库
mysql
sql
hive
java
mysql 8.0 窗口函数
1.什么是窗口函数含义:窗口函数也叫
OLAP
函数(OnlineAnallyticalProcessing,联机分析处理),可以对数据进行实时分析处理。
guoyiguang2
·
2023-08-23 16:00
mysql
mysql
数据库
database
MPP 还是主流架构吗
MPP架构:MPP架构的产品:ImpalaClickHouseDruidDoris很多
OLAP
引擎都采用了MPP架构批处理系统-使用场景分钟级、小时级以上的任务,目前很多大型互联网公司都大规模运行这样的系统
菠萝-琪琪
·
2023-08-23 11:03
架构
hadoop
数据库
【实践案例分享】Apache Doris在美团外卖数仓中的应用实践
美团外卖数据仓库通过M
OLAP
+R
OLAP
双引擎模式来适配不同应用场景。M
OLAP
引擎使用了ApacheKylin。R
OLAP
我们经过综合考虑,选择了ApacheDoris。
木东居士
·
2023-08-23 09:34
单机数万QPS!Apache Doris高并发特性解读
ApacheDoris去承担更大业务规模的处理和分析——既包含了更大规模的数据量、也包含了更高的并发承载,而另一方面,也意味着需要应对企业更加多样化的数据分析诉求,从过去的统计报表、即席查询、交互式分析等典型
OLAP
王知无(import_bigdata)
·
2023-08-23 09:02
apache
数据库
java
开发语言
Apache Kylin VS Apache Doris
作者:康凯森日期:2018-04-17分类:
OLAP
1系统架构1.1WhatisKylin1.2WhatisDoris2数据模型2.1Kylin的聚合模型2.2Doris的聚合模型2.3KylinCuboidVSDorisRollUp2.4Doris
hellozhxy
·
2023-08-23 09:59
big
data
数据建模.
OLTP系统和
OLAP
系统的区别。一个是联机事务(业务)处理系统,另一个是联机分析处理系统。两个系统的关注点不一样,所以需要进行不同
天下一般
·
2023-08-22 20:02
数据库
数据仓库
数据分析问答总结
一、SQL窗口函数1.是什么
OLAP
(OnlineAnallyticalProcessing联机分析处理),对数据库数据进行实时分析处理。
haohaoxuexilmy
·
2023-08-22 10:13
数据分析
ClickHouse(二十三):Java &Spark读写ClickHouse API
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-22 09:55
大数据OLAP体系技术栈
clickhouse
java
spark
实时数仓
olap
大数据
数据仓库
【数仓建设系列之二】数仓基本概念介绍
一、OLTP和
OLAP
OLTP(OnlineTransactionProcessing)和
OLAP
(OnlineAnalyticalPr
码猿小站
·
2023-08-21 23:32
数据仓库
数仓建设
大数据
数据仓库
database
数据库架构
为什么列式存储广泛应用于
OLAP
领域?
四畳半神話大系前言233酱工作中开始接触Presto等大数据分析场景下的内容,列式存储属于
OLAP
中重要的一环。
Monica2333
·
2023-08-21 21:49
SQL助你面大厂(窗口函数)
所谓的窗口函数就是动态处理数据的一类函数,也叫做“
OLAP
”函数,可以对数据库数据进行实时分析处理,“窗口函数”由两部分组成:分析函数+窗口函数:--模板函数名(字段名)over(partitionbyxxx
吃橘子的Crow
·
2023-08-21 20:37
SQL突击
sql
数据库
Starrocks--数据插入方式
Starrocks数据插入方式Starrocks是一款快速、可伸缩的分布式
OLAP
数据库,支持多种数据插入方式。下面将详细介绍几种常用的数据插入方式,并提供选择建议。
璐先生
·
2023-08-21 11:45
starrocks
睿思BI正式支持ClickHouse
ClickHouse作为一个列存数据库,非常适合用来做
OLAP
分析,而睿思BI主要包括多维分析和报表功能,使用ClickHouse可以解决基于mysql查询的效率问题,现目前睿思BIV5.1版本已完全支持
睿思BI
·
2023-08-21 03:10
商业智能
数据库
database
mysql窗口函数_Mysql中的窗口函数
窗口函数初识窗口函数也叫
OLAP
函数(OnlineAnallyticalProcessing,联机分析处理),可以对数据进行实时分析处理。
依然有光
·
2023-08-20 09:30
mysql窗口函数
MYSQL窗口函数用法及区别
本博客转自:https://blog.csdn.net/weixin_34384915/article/details/87551597窗口函数(
OLAP
实时分析处理函数),可以一般聚合函数无法实现的高级操作
weixin_43866709
·
2023-08-20 09:30
MySQL
MYSQL窗口函数
OLTP与
OLAP
混合使用实例—TiDB
目录TiDB简介五大核心特性四大核心应用场景TiDB整体架构同城多数据中心部署TiDB了解Raft协议
数据与后端架构提升之路
·
2023-08-20 02:17
大数据
数据库
mysql
sql
技术争鸣——关于
OLAP
引擎你所需要知道的一切
1.主流
OLAP
引擎技术原理大阅兵1.1何为
OLAP
在前文BI系统与ClickHouse:探索式BI的
OLAP
技术演进之路中已经涉及过
OLAP
的概念,这里再简要介绍下。
登高且赋
·
2023-08-20 00:22
ClickHouse(2)- CK介绍与MergeTree引擎
其逻辑就是,基于页面的点击事件流,面向数据仓库进行
OLAP
分析,ck在研发之初就是应用与
OLAP
(OnLineAnalyticalProcessing,即联机分析处理)领域。
·
2023-08-19 13:11
clickhouse
Apache Durid(入门 安装 数据摄取 查询 集成SpringBoot)
1.1.5多种部署方式1.2使用场景1.2.1常见的使用场景1.2.1.1用户活动和行为1.2.1.2网络流1.2.1.3数字营销1.2.1.4应用性能管理1.2.1.5物联网和设备指标1.2.1.6
OLAP
Ybb_studyRecord
·
2023-08-18 15:08
Durid
Durid查询
集成Springboot
Durid数据摄取
安装
ClickHouse(二十二):Clickhouse SQL DML操作及导入导出数据
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-18 14:11
大数据OLAP体系技术栈
clickhouse
sql
数据库
实时数仓
数据仓库
分布式数据库
大数据
Clickhouse——
OLAP
工具
1.基础知识clickhouse的特点:DBMS的功能:使用SQL列式存储:在列的统计计算上有优势,便于压缩,节省磁盘空间高吞吐写入能力:顺序写,充分利用了磁盘的吞吐能力数据分区与线程级并行:多核并行处理,单条查询就可以利用所有CPU,对应多并行查询优势不大多样化引擎:TinyLog(不支持索引,无并发控制),Memory(不支持索引),MergeTree(支持索引和分区),ReplacingMe
July2333
·
2023-08-18 08:30
分布式 | 浅谈 dble 引入 ClickHouse 的配置操作
一、功能背景我们知道,dble是基于MySQL的⾼可扩展性的分布式中间件,而MySQL擅长的是联机事务处理(OLTP),那么面对越来越多的联机分析(
OLAP
)需求,MySQL就显得有些捉襟见肘了。
ActionTech
·
2023-08-18 07:39
DBLE
dble
ClickHouse
dble快速入门
数据仓库 ODS->DWD->DWS->ADS
数据仓库的方案建设的目的,是为前端查询和分析作为基础,主要应用于
OLAP
(on-lineAnalyticalProcessing),支持复杂的分析操作,侧重决策支持,听且提供直观
desmond_assis
·
2023-08-18 05:12
数据仓库
ClickHouse初探
简介首先介绍下ClickHouse的特点以及适用场景,引用官方的介绍ClickHouse是一个用于联机分析(
OLAP
)的列式数据库管理系统(DBMS)。
typ0520
·
2023-08-18 00:49
【Windows系统编程】04.动态库与静态库(详解远线程注入dll)-笔记
include"StaticLib1.h"项目属性-链接器-输入:附加依赖项:加入lib文件#pragmacomment(lib,"路径")然后直接调用静态库中的函数了.动态库(dll)创建动态链接库:BO
OLAP
IENTRYDllMain
WdIg-2023
·
2023-08-18 00:21
Windows系统编程
windows
笔记
安全
SQL Server bcp
D:/projects/openi/misc/xxxx_data_20090828>bcp[xxxx
olap
].[dbo].
raojm
·
2023-08-17 16:59
sql
server
microsoft
sqlserver
login
database
user
ClickHouse(二十):Clickhouse SQL DDL操作-2-分区表DDL操作
个人主页:含各种IT体系技术,IT贫道_ApacheDoris,大数据
OLAP
体系技术栈,Kerberos安全认证-CSDN博客订阅:拥抱独家专题,你的订阅将点燃我的创作热情!
IT贫道
·
2023-08-17 11:54
大数据OLAP体系技术栈
clickhouse
sql
数据库
数据仓库
大数据
实时数仓
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他