olap

大数据业务解析：探索OLAP、数据挖掘、即席查询和仪表板的无限潜力

大数据业务解析：探索OLAP、数据挖掘、即席查询和仪表板的无限潜力这个系列主要帮助那些想要了解大数据和想结合大数据到自己实际业务的人，使其掌握对应的技术和业务水平引言：在当今数据驱动的商业环境中，理解联机分析处理
Wade_Crab·2024-01-17 15:23

mysql 解析json字符串、数组字符串、json数组字符串

背景：笔者使用mysql5.7进行了一次json字符串的解析，因为一直在搞大数据相关的数据库、olap等，太久没有用mysql5.x的版本，一些函数已经不知道支不支持，我的同事建议我使用like、rlike
扫地增·2024-01-17 12:55

Apache doris ODBC外表使用方式

ODBCExternalTableOfDoris提供了Doris通过数据库访问的标准接口(ODBC)来访问外部表，外部表省去了繁琐的数据导入工作，让Doris可以具有了访问各式数据库的能力，并借助Doris本身的OLAP
张家锋·2024-01-17 05:07

【总结】Dinky学习笔记

概述Dinky是一个开箱即用、易扩展，以ApacheFlink为基础，连接OLAP和数据湖等众多框架的一站式实时计算平台，致力于流批一体和湖仓一体的探索与实践官网：Dinky核心特性沉浸式：提供专业的DataStudio
THE WHY·2024-01-17 04:11

一文了解数据库vs数据仓库vs数据湖

拆解几个OLAP核心概念大数据技术架构演进过程什么是数据湖？数据库、数据仓库、数据湖：哪个更合适？什么是数据库？数据库这个概念相信大家其实都不太陌生，无论是做应用服务还是做App开发，或者说是大数
KubeData·2024-01-17 02:11

ClickHouse（一）什么是ClickHouse？

ClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。
我犟不过你·2024-01-16 18:51

高斯数据库 Gauss

gaussDBOLTP交易保证数据和安全，主要是银行使用gaussDBOLAP分析大部分是网络公司gsql使用gauss数据库的工具$gsql-d数据库名-p端口号-u用户名-w密码-h客户端ipgsql
许一世流年 绝不嵩手 cium·2024-01-16 05:28

通过shell脚本上传IPA

:/Applications/Xcode.app那么之前使用到的工具的路径就是下面的路径:/Applications/Xcode.app/Contents/Developer/usr/bin/altoolAPPLEACCOUNT
MeteoriteMan·2024-01-15 16:11

数仓选型必列入考虑的OLAP列式数据库ClickHouse(中)

实战案例使用背景ELK作为老一代日志分析技术栈非常成熟，可以说是最为流行的大数据日志和搜索解决方案；主要设计组件及架构如下：而新一代日志监控选型如ClickHouse、StarRocks特别是近年来对ELK地位发起较大的挑战，不乏有许多的大公司如携程，快手已开始把自己的日志解决方案从ES迁移到了Clickhouse，将日志从ES迁移到ClickHouse可以节省更多的服务器资源，总体运维成本更低，
IT小神·2024-01-15 13:45

用 C++ 开启技术创业之旅

我们通过构建自己的数据库系统来打造一个现代的、基于云的OLAP数据集（多维数据存储和检索）。由于我主导技术层面并且我最熟悉C++，所以决定用它来构建我们的OLAP引擎。
Python编程导师·2024-01-15 05:40

OLAP和OLTP的区别1

从目前来看需要大数据的主要应用领域，也只有两个：联机事务处理OLTP（On-lineTransactionProcessing）、联机分析处理OLAP（On-LineAnalyticalProcessing
liuzx32·2024-01-14 13:09

数据仓库（3）-模型建设

1、OLTPVSOLAPOLTP：全称OnLineTransactionProcessing，中文名联机事务处理系统，主要是执行基本日常的事务处理，比如数据库记录的增删查改,例如mysql、oracleOLAP
XianMing的博客·2024-01-14 11:57

统一OLAP查询平台之语义层

这些问题都可以通过统一OLAP查询平台来解决。一、数据从需求到加工过程中痛点从下图1-1看出数据开发的一般过程：由业务方提出各种指标的分析需求。产品和应用讨论分析指标，并拉上数仓和业务一起确认指标。
XianMing的博客·2024-01-14 11:27

数据仓库（2）-认识数仓

BillInmon）于1990年提出，主要功能仍是将组织透过资讯系统之联机事务处理(OLTP)经年累月所累积的大量资料，透过数据仓库理论所特有的资料储存架构，做有系统的分析整理，以利各种分析方法如联机分析处理(OLAP
XianMing的博客·2024-01-14 10:53

5分钟了解什么是SQL窗口函数

窗口函数的概述窗口函数(开窗函数),也叫OLAP函数(OnlineAnallyticalProcessing,联机分析处理,可以对数据库据进行实时分析处理。
码农zz·2024-01-14 08:43

brpc: a little source code

singleDoc#《olap/clickhouse-编译器优化与向量化》中我谈过brpc的汇编控制bthread。
SakamataZ·2024-01-14 03:26

OLAP型数据库 ClickHouse的简介 应用场景 优势 不足

ClickHouse是一个开源的分布式列式数据库管理系统(DBMS)，专门用于在线分析处理(OLAP)。它最初由Yandex开发，并且在处理大规模数据分析和实时查询方面表现出色。
KevinAha·2024-01-13 18:15

实战营｜阿里云 x StarRocks 邀你现场体验云上极速湖仓--深圳站

StarRocks自3.0大版本起，实现了从计算OLAP分析到统一Lakehouse的重大产品能力升级。
StarRocks_labs·2024-01-13 13:25

数据仓库Apache Hive

为了分析数据而来数据分析的平台2、数据仓库的特性3、数据仓库和数据库的区别OLTP系统OLAP系统注意：这里要解决一个核心的误区：数仓绝不是大型数据库。
江枫渔火R·2024-01-13 09:29

2022-02-01大数据学习日志——Hadoop离线阶段——数据仓库、Apache Hive

学习目标理解数仓概念、起源由来理解数仓(OLAP)与数据库(OLTP)区别掌握数仓分层架构思想掌握ApacheHive功能与架构组件理解ApacheHive远程模式部署安装内容大纲#数据仓库基础核心知识
王络不稳定·2024-01-13 09:28

PostgreSQL使用clickhousedb_fdw访问ClickHouse

ClickHouse是一款快速的开源OLAP数据库管理系统，它是面向列的，允许使用SQL查询实时生成分析报告。
PostgreSQLChina·2024-01-13 06:53

实战营｜阿里云 x StarRocks 邀你现场体验云上极速湖仓--深圳站

StarRocks自3.0大版本起，实现了从计算OLAP分析到统一Lakehouse的重大产品能力升级。
阿里云大数据AI技术·2024-01-13 03:22

【数据库学习】ClickHouse(ck）

1，ClickHouse（CK）是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。
兔兔西·2024-01-13 01:39

ClickHouse介绍

ClickHouse官方文档地址OLAP场景的关键特征ClickHouse的特点接口引擎数据库引擎延时引擎LazyAtomicMySQL数据库引擎表引擎合并树家族VersionedCollapsingMergeTree
“孤酒”·2024-01-12 15:46

kylin4.0.3升级问题

原本的cube太多了，换其他OLAP数据库太麻烦。相比之下，升级是一个很好的选择（官网有说明内存降低和构建时间更快的原因）。，导致经常内存溢出，kylin挂掉。
向他一样rap·2024-01-12 14:38

kylin升级(3.0.1-＞kylin-4.0.3)

原本的cube太多了，换其他OLAP数据库太麻烦。相比之下，升级是一个很好的选择（官网有说明内存降低和构建时间更快的原因）。
向他一样rap·2024-01-12 14:08

Rockset 陈博玚：从数据库创新看云原生技术

Rockset是新一代的云原生OLAP数据库，通过多维聚合索引和存储、计算、导入三层分流，使得各种企业的实时高并发查询需求得到很好的解决。打通物联网的孤岛，是Shifu和
KubeShifu·2024-01-12 07:01

【大数据架构】OLAP实时分析引擎选型

OLAP引擎面临的挑战常见OLAP引擎对比OLAP分析场景中，一般认为QPS达到1000+就算高并发，而不是像电商、抢红包等业务场景中，10W以上才算高并发，毕竟数据分析场景，数据海量，计算复杂，QPS
话数Science·2024-01-11 04:33

【大数据OLAP引擎】StarRocks为什么快？

StarRocks的优势StarRocks最初主要的优势是性能，当时在单表查询方面与性能标杆ClickHouse不相上下，而join优化特性使其在多表关联查询场景下的性能表现要远远优于ClickHouse，替换ClickHouse自然也就成了StarRocks的第一个目标。而StarRocks的野心不止于此，后来又进一步发展了联邦查询功能，成为Presto的性能升级替代方案。与此同时，StarRo
话数Science·2024-01-11 04:33

【大数据OLAP引擎】StartRocks存算分离

存算分离的原因降低存储成本：同样的存储大小对象存储价格只有SSD的1/10，所以号称存储成本降低80%不是吹的。存算一体到存算分离存算一体作为MPP数据库的典型代表，StarRocks3.0版本之前使用存算一体(shared-nothing)架构，BE同时负责数据存储和计算，在查询时可以直接访问BE本地数据，进行本地计算，避免数据传输与拷贝，从而能够得到极速的查询分析性能。存算一体架构支持数据的多
话数Science·2024-01-11 04:02

转转OLAP自助分析实践

.背景介绍2.1为什么要做自助分析2.2核心解决的问题2.3建设初期的卡点3.技术实现3.1技术架构3.2基于QuickBI+StarRocks的自助分析功能实现3.3为什么选择StarRocks作为OLAP
转转技术团队·2024-01-11 03:58

大数据OLAP引擎发展原因及特性分析

前言：谈到当下应用最广的大数据技术，很多人都会说是数据分析；而体现大数据分析能力的则是OLAP。
i7杨·2024-01-10 01:31

StarRocks Awards 2023 年度贡献人物

这一年，StarRocks继续全方位大步向前迈进，在300+贡献者的辛勤建设下，社区先后发布了50+版本，并完成了从全场景OLAP到云原生湖仓的进化。
StarRocks_labs·2024-01-09 13:06

数仓建设学习路线（二）模型建设(1)

OLTPVSOLAPOLTP概念全称OnLineTransactionProcessing，中文名联机事务处理系统，主要是执行基本日常的事务处理，比如数据库记录的增删查改,例如mysql、oracle。
语兴数据·2024-01-08 18:58

UE5如何将屏幕坐标转为世界坐标和世界方向

屏幕坐标转为世界坐标在PlayerControoler下找到这个函数:DeprojectScreenPositionToWorldboolAPlayerController::DeprojectScreenPositionToWorld
人宅·2024-01-08 16:56

浅谈Doris在物联网应用

Doris专门用于OLAP场景，具有优秀的查询性能和易用性，广泛应用于企业数据分析领域。二、物联网设备数据分析物联网设备数量越来越多，产生的数据也越来越庞大。这些数据包含了丰富的
shinelord明·2024-01-08 11:03

olap/spark-tungsten：codegen

15721这一章没什么好说的，不再贴课程内容了。codegen和simd在工业界一般只会选一种实现。比如phothon之前用codegen，然后改成了向量化引擎。一般gen的都是weldIR/LLVMIR/当前语言，gen成C++的也要检查是不是有本地预编译版本，要不没法用。因为clickhouse没有codegen，这节课就拿我比较熟悉的spark的tungsten来当例子，tungsten会g
SakamataZ·2024-01-08 07:28

【数据仓库与联机分析处理】多维数据模型

目录一、数据立方体二、数据模型（一）星形模型（二）雪花模式（三）事实星座模式三、多维数据模型中的OLAP操作（一）下钻（二）上卷（三）切片（四）切块（五）转轴数据仓库和OLAP工具是基于多维数据模型的，
Francek Chen·2024-01-07 07:05

实时数仓模型

实时数仓主要是基于数据采集工具，如canal等原始数据写入到kafka这样的数据通道中，最后一般都是写入到类似于HBase这样的OLAP存储系统中。对外提供分钟级别，甚
jero_lei·2024-01-06 23:48

Greenplum集群部署小结

属于一种看起来“较重”的数据库MPP架构，不像基于MySQL基于中间件的架构那么轻量，但是要说一些具体的场景，比如Greenplum支持存储过程，支持列式存储，加上分区表和内置的数据分片等多种模式，都是典型的OLAP
jeanron·2024-01-06 15:57

ClickHouse为什么这么快？ClickHouse原理解析与实践

说在前头：OLAP的分类与OLAP操作OLAP的架构分类1.ROLAP：使用关系模型进行建模，数据建模通常使用星型模型或雪花模型。
袋鼠先森·2024-01-06 13:15

ClickHouse为什么这么快

ClickHouse作为一款开源列式数据库管理系统（DBMS）主要用于数据分析（OLAP）领域。近年来国内开源社区非常火热，各个大厂纷纷跟进大规模使用。
数新网络·2024-01-06 13:40

clickhouse是什么

1.简介ClickHouse是俄罗斯的Yandex于2016年开源的用于在线分析处理查询（OLAP:OnlineAnalyticalProcessing）MPP架构的列式存储数据库（DBMS：DatabaseManagementSystem
繁星-赵老师·2024-01-06 13:09

ClickHouse为什么那么快

实际上，这也是传统的OLAP系统所追求的指标。体现到语义上，就是实现GROUPBY查询的实现。为了实现这一
GaleZhang·2024-01-06 13:09

TiDB简介(转)

它支持水平弹性扩展、ACID事务、标准SQL、MySQL语法和MySQL协议，具有数据强一致的高可用特性，是一个不仅适合OLTP场景还适合OLAP场景的混合数据库。下面是对有关资料的整理还有一些
liuzx32·2024-01-06 03:02

ClickHouse基础介绍

目录前言1、什么是clickhouse2、OLAP场景的关键特征3、列式存储更适合于OLAP场景的原因4、clickhouse的独特功能5、clickhouse的缺点6、性能6.1、单个大查询的吞吐量6.2
小徐很努力·2024-01-05 23:38

数据仓库系列7-OLAP是什么

什么是OLAP？在线分析处理(OnlineAnalyticalProcessing:OLAP)是一类允许用户同时分析来自多个数据库系统的信息的软件。
allwit·2024-01-05 21:32

ClickHouse数据库详解和应用实践

如何生成可参考右边的帮助文档文章目录概述1.适用场景2.不适用场景一、核心特性1.完备的DBMS功能2.列式存储与数据压缩二、安装部署1.在线安装2.离线安装三、jdbc访问总结概述ClickHouse是一个用于联机分析(OLAP
shandongwill·2024-01-05 20:53

Apache Doris (六十一）： Spark Doris Connector - (1)-源码编译

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 14:40

Apache Flink连载（八）：Apache Flink架构

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。
IT贫道·2024-01-05 14:36
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他