E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
BI&OLAP
ceph delete pool
网上的写的乱七八糟不是你抄我就是我抄你写的完全瞎扯简直看不下去官网截图:#准备1.查看pool名称cephosdlspools#创建一个pool用于做测试/设置分类cephosdpoolcreatepool-demo66cephosdpo
olap
plicationenablepool-demorbd
GEGEWU-
·
2023-06-14 04:52
云计算
linux
运维
服务器
TiDB 3.0 GA,稳定性和性能大幅提升
作者:段兵TiDB是PingCAP自主研发的开源分布式关系型数据库,具备商业级数据库的数据可靠性,可用性,安全性等特性,支持在线弹性水平扩展,兼容MySQL协议及生态,创新性实现OLTP及
OLAP
融合。
·
2023-06-13 20:02
数据库源码开源
小米 A/B 实验场景基于 Apache Doris 的查询提速优化实践
导读:ApacheDoris是小米集团内部应用最为广泛的
OLAP
引擎之一,本文主要从数据的角度分析A/B实验场景查询的性能现状,探讨基于ApacheDoris的性能优化的解决方案。
·
2023-06-13 19:21
Fluid 助力阿里云 Serverless 容器极致提速
但单有数据是不够的,真正让数据产生价值的,是针对各业务场景运行的对大量数据的密集分析与计算,如机器学习、大数据分析、
OLAP
聚合分析等等。
·
2023-06-13 18:47
ADBPG&Greenplum成本优化之磁盘水位管理
在核心技术自主可控的大环境下,政企行业客户都在纷纷尝试使用国产数据库或开源数据库,尤其在数据仓库
OLAP
领域的步伐更快,Greenplum的应用越来越广泛,阿里云ADBPG的市场机会也越来越多。
阿里云云栖号
·
2023-06-13 17:05
云栖号技术分享
数据仓库
数据库
big
data
ADBPG&Greenplum 成本优化之磁盘水位管理
在核心技术自主可控的大环境下,政企行业客户都在纷纷尝试使用国产数据库或开源数据库,尤其在数据仓库
OLAP
领域的步伐更快,Greenplum的应用越来越广泛,阿里云ADBPG的市场机会也越来越多。
阿里云技术
·
2023-06-13 17:34
数据仓库
数据库
big
data
一款
OLAP
数据库ClickHouse
ClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C++语言编写,主要用于在线分析处理查询(
OLAP
),能够使用SQL查询实时生成分析数据报告。
高阳很捷迅
·
2023-06-13 17:04
数据分析
数据库
clickhouse
hive
Dinky: 实时即未来,让 Flink SQL 纵享丝滑--如何本地编译、运行
Dinky是一个开箱即用、易扩展,以ApacheFlink为基础,连接
OLAP
和数据湖等众多框架的一站式实时计算平台,致力于流批一体和湖仓一体的探索与实践。
java编程艺术
·
2023-06-13 17:27
flink实战
程序员实用工具集合
flink
sql
dinky
flink-sql
flink-cdc
BIGO 使用 Flink 做
OLAP
分析及实时数仓的实践和优化
本文整理自BIGOStaffEngineer邹云鹤在FlinkForwardAsia2021的分享。主要内容包括:业务背景落地实践&特色改进应用场景未来规划FFA2021直播回放&演讲PDF下载一、业务背景BIGO是一家面向海外的以短视频直播业务为主的公司,目前公司的主要业务包括BigoLive(全球直播服务),Likee(短视频创作分享平台),IMO(免费通信工具)三部分,在全球范围内拥有4亿用
·
2023-06-13 16:29
南大通用GBase 8c 多模多态分布式数据库系列一之基本介绍、核心技术、架构演进
目录前言感谢一、基本介绍1.OLTP和
OLAP
2.GBase8c名词概念3.架构演进4.名词—分片及分片键5.分布式环境下的一致性二、产品特性1.多模——多存储模式2.多态——多部署形态分布式形态主备式形态单节点形态
SheldonTT
·
2023-06-13 12:14
GBAase
分布式数据库
database
数据库
大数据
分布式
数据库架构
猿辅导基于 EMR StarRocks 的
OLAP
演进之路
一、数据需求产生猿辅导成立多年,早期是基于关系型的MySQL数据库来做数据的需求。随着业务的发展,多个服务在一个DB去做数据的汇总,以及一些微服务架构的产生,使得数据逐渐走向分裂,很难在MySQL里完成统一的数仓。因此在2014年,公司开始了统一数仓的建设,采用的是比较成熟的Hadoop体系。虽然是用Hive、MapReduce做离线的批量的ETL,但是为了保证用户交互足够快、延迟足够短,还是会把
·
2023-06-13 11:49
猿辅导基于 EMR StarRocks 的
OLAP
演进之路
一、数据需求产生猿辅导成立多年,早期是基于关系型的MySQL数据库来做数据的需求。随着业务的发展,多个服务在一个DB去做数据的汇总,以及一些微服务架构的产生,使得数据逐渐走向分裂,很难在MySQL里完成统一的数仓。因此在2014年,公司开始了统一数仓的建设,采用的是比较成熟的Hadoop体系。虽然是用Hive、MapReduce做离线的批量的ETL,但是为了保证用户交互足够快、延迟足够短,还是会把
·
2023-06-13 10:09
python 读取kafka 写hive_Flink 读取Kafka写入Hive
而对于
OLAP
查询需求,我们往往需要将数据输出到Hive。一般的,我们使用Parquet格式来存储(Spark对parquet的支持较好)。
weixin_39566864
·
2023-06-13 05:02
python
读取kafka
写hive
探究核心技术&最佳实践,云原生
OLAP
论坛火热开启!
2023/06/11,09:00-12:30,在DataFunSummit2023:
OLAP
引擎架构峰会上,由阿里云资深技术专家,实时数仓Hologres研发负责人姜伟华老师出品的云原生
OLAP
论坛讲邀请来自阿里云
阿里云大数据AI技术
·
2023-06-12 23:22
云原生
大数据
多维数据库
4.多维数据分析领域中的概念5.
OLAP
(OnlineAnalyzeProcess在线分析处理)6.Mondrain7.Kylin1.多维数据是什么?
xnninger
·
2023-06-12 21:37
数据库
大数据
数据管道思考
起因虽然数据管道各种开源/商业项目的数量上没有
OLAP
数据库那么多、选型那么复杂但是在面对flume、rabbitmq、kafka等等的有时候是消息队列、有时候是数据管道/采集的组件总还是存在不少疑惑我什么时候应该用这个
ohmyadd
·
2023-06-12 11:21
Termux + Git + 码云,安卓端实现查看修改云端代码
安装官网安装apk:https://termux.com/酷安网安装:https://www.co
olap
k.com/apk/com.termux入门教程具体入门教程可以参考
horizon08
·
2023-06-11 23:52
termux
git
git
linux
ssh
github
SQL高级处理
什么是窗口函数窗口函数也称为
OLAP
函数。
OLAP
是OnLineAnalyticalProcessing的简称,意思是对数据库进行实时分析处理。窗口函数
心是凉的
·
2023-06-11 21:19
java
开发语言
Kyligence Zen 产品体验 ——AI数据指标洞察专家
基本信息体验时间2023年5月体验博主风尚云网目标产品KyligenceZen开发团队跬智信息(Kyligence)由ApacheKylin创始团队于2016年创办,是领先的大数据分析和指标平台供应商,提供企业级
OLAP
风尚云网
·
2023-06-11 17:53
人工智能
低代码
大数据
【云原生数据库如何完成性能优化之路?拓数派邀您一起参加第12届PostgreSQL中国技术大会】...
届时,会为大家解析PieCloudDB优化器——「达奇」的完整设计思路,及针对
OLAP
分析型场景(人工智能、商业智能背后的强大支撑技术)的多阶段聚集、聚集下推、BlockSkipping等一系列功能优化
OpenPie|拓数派
·
2023-06-11 10:42
数据库
云原生
clickhouse数据模型之用户路径分析
绝大多数人拿到这个需求的做法就是进行数据抽样观察以及进行一些简单的问卷调参工作,这种方式不但费时费力还不具有代表性,那么这个时候你就需要一套用户行为路径分析的模型作为支撑,才能快速帮组你找到最佳答案前言clickhouse是我见过最完美的
OLAP
与AI零距离
·
2023-06-11 09:53
MPP大规模并行处理架构
文章目录一、MPP架构二、批处理架构和MPP架构三、MPP架构的
OLAP
引擎本文分为三部分讲解,第一部分详解MPP架构,第二部分剖析MPP架构与批处理架构的异同点,第三部分是采用MPP架构的
OLAP
引擎介绍
正在沿着IT树往上爬
·
2023-06-11 02:53
BigData
架构
服务器
运维
开源大数据平台 E-MapReduce Serverless StarRocks 产品介绍
主要包括四个部分,第一部分介绍StarRocks全托管形态,以及免运维服务的
OLAP
云产品;第二部分介绍StarRocksManager的实例管理、诊断分析、元数据管理、安全中心等功能;第三部分介绍在社交
阿里云云栖号
·
2023-06-10 23:18
云栖号技术分享
阿里云
云计算
大数据
Kylin
一、数仓回顾1.1核心概念数据仓库,
OLAP
和OLTP,维度和度量,事实表和维度表。星形模型和雪花模型。
爱过java
·
2023-06-10 05:22
kylin
数据仓库
数据挖掘
浅谈 ByteHouse Projection 优化实践
预聚合是
OLAP
系统中常用的一种优化手段,在通过在加载数据时就进行部分聚合计算,生成聚合后的中间表或视图,从而在查询时直接使用这些预先计算好的聚合结果,提高查询性能,实现这种预聚合方法大多都使用物化视图来实现
字节数据平台
·
2023-06-09 21:55
数据库
clickhouse
olap
clickhouse优化最佳实践
clickhouse在易企秀数据仓库项目中已投入使用两年,主要为内部用户提供快速查询和多维分析的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称
OLAP
领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
weixin_42993799
·
2023-06-09 15:12
clickhouse
大数据
clickhouse 查询优化_clickhouse优化最佳实践(持续更新...)
clickhouse在易企秀数据仓库项目中已投入使用两年,主要为内部用户提供快速查询和多维分析的能力;希望你在业务当中遇到的性能问题,在这里都能得到解决Clickhouse堪称
OLAP
领域的黑马,最近发布的几个版本在多表关联分析上也有了极大的性能提升
Gigiain
·
2023-06-09 15:11
clickhouse
查询优化
clickhouse hadoop_ClickHouse国家级项目最佳实践
原标题:ClickHouse国家级项目最佳实践编者按ClickHouse自从2016年开源以来,在数据分析(
OLAP
)领域火热,各个大厂纷纷跟进大规模使用,百分点在某国家级项目中的完成了多数据中心的ClickHouse
神丶废
·
2023-06-09 15:40
clickhouse
hadoop
【数据仓库】即席查询
文章目录定义特点OLTP、
OLAP
、即席查询(adhocquery)区别与联系相关框架Kylin来源定义即席查询(AdHoc)是用户根据自己的需求,灵活的选择查询条件,系统能够根据用户的选择生成相应的统计报表
软泡芙
·
2023-06-09 14:29
#
数据库
数据仓库
大数据
即席查询
StarRocks 3.0 极速统一的湖仓新范式
从
OLAP
到Lakehouse,从存算一体到存算分离,从ETL到ELT,经过两个大版本后StarRocks在为用户创造极速统一的数据分析新范式上有了更深一层的思考。
StarRocks_labs
·
2023-06-09 13:12
数据仓库
大数据
数据挖掘
直播|StarRocks 3.0 极速统一的湖仓新范式
自此,StarRocks开启了从
OLAP
到Lakehouse演进的新篇章。
StarRocks_labs
·
2023-06-09 13:11
数据库
大数据
java
c++
新手必看|StarRocks 入门教程来啦
StarRocks高可用、高可靠、易运维等特性使其广泛应用于实时数仓、
OLAP
报表、数据湖分析等场景并获得了各行业领军企业的青睐。
StarRocks_labs
·
2023-06-09 13:41
大数据
数据库
直播 | StarRocks 实战系列第四期--查询性能优化
通过实际操作和应用场景的结合,我们将帮你系统性地学习StarRocks这个当今最热门的开源
OLAP
数据库。
StarRocks_labs
·
2023-06-09 13:40
性能优化
数据库
java
直播 | StarRocks 实战系列第三期--StarRocks 运维的那些事
通过实际操作和应用场景的结合,我们将帮你系统性地学习StarRocks这个当今最热门的开源
OLAP
数据库。
StarRocks_labs
·
2023-06-09 13:10
运维
java
开发语言
直播 | StarRocks 实战系列第二期--导入优化&问题排查
通过实际操作和应用场景的结合,我们将帮你系统性地学习StarRocks这个当今最热门的开源
OLAP
数据库。
StarRocks_labs
·
2023-06-09 13:39
java
数据库
开发语言
OLAP
系列:三、clickhouse Docker集群部署指南(3分片1副本模式)
一、背景一是为了学习容器,另外也是帮助一些同学解决机器资源紧缺,能够在一台是宿主机部署一套clickhouse集群服务。本章内容适合开发测试环境使用,生产环境还需要更多细节的处理工作,只能作为参考。二、部署准备1、机器准备172.25.16.1082、创建容器网络dockernetworkcreateckcluster3、镜像准备#查看仓库镜像列表curl-XGEThttps://nexus.**
幽幽之心
·
2023-06-09 09:41
docker
clickhouse
容器
基于linux安装部署clickhouse+基本操作
安装部署clickhouse+基本操作1.clickhouse简介ClickHouse是俄罗斯的Yandex于2016年开源的列式存储数据库(DBMS),使用C++语言编写,主要用于在线分析处理查询(
OLAP
北凉-徐凤年
·
2023-06-09 09:10
大数据相关软件的部署安装使用
linux
clickhouse
运维
Flink
OLAP
助力 ByteHTAP 亮相数据库顶会 VLDB
复杂查询QPS破百,字节跳动Flink
OLAP
助力ByteHTAP亮相数据库顶会VLDB。2022年9月5日至9月9日,VLDB2022在澳大利亚悉尼举行。
字节跳动云原生计算
·
2023-06-09 07:52
云原生计算
数据库
flink
大数据
【Clickhouse】ReplaceingMergeTree引擎final实现合并去重探索 | 京东云技术团队
前言在
OLAP
实践中,在有数据更新的场景中,比如存储订单数据,我们经常会用到ReplaceingMergeTree引擎来去重数据,以获取数据的最新状态。
京东云技术团队
·
2023-06-09 03:37
数据库
clickhouse
京东云
MergeTree
数据库
数据
【Clickhouse】ReplaceingMergeTree引擎final实现合并去重探索 | 京东云技术团队
前言在
OLAP
实践中,在有数据更新的场景中,比如存储订单数据,我们经常会用到ReplaceingMergeTree引擎来去重数据,以获取数据的最新状态。
·
2023-06-08 15:14
探究核心技术&最佳实践,云原生
OLAP
论坛火热开启!
2023/06/11,09:00-12:30,在DataFunSummit2023:
OLAP
引擎架构峰会上,由阿里云资深技术专家,实时数仓Hologres研发负责人姜伟华老师出品的云原生
OLAP
论坛讲邀请来自阿里云
·
2023-06-08 11:25
云原生大数据
Kyligence Zen产品体验--小白也能快速上手的指标平台
KyligenceZen是基于Kyligence核心
OLAP
能力打造的一站式指标平台。
指剑
·
2023-06-08 07:06
Kyligence
Kyligence
Zen
人工智能
云计算
大数据
OLAP
系列:四、clickhouse分布式表使用指南
一、背景ClickHouse中最强大的表引擎当属MergeTree(合并树)引擎及该系列(*MergeTree)中的其他引擎,支持索引和分区,地位可以相当于innodb之于Mysql。而且基于MergeTree,还衍生出了很多小弟,也是非常有特色的引擎。本篇简单介绍基于MergeTree引擎建表以及分布式表的使用,更多基础概念和知识点请关注官网文档介绍。二、分布式表实践1、前序准备请参考系列-上篇
幽幽之心
·
2023-06-08 00:45
clickhouse
数据库
分布式表
MergeTree
ClickHouse集群搭建总结
简介ClickHouse是俄罗斯最大的搜素引擎Yandex于2016年开源的列式数据库管理系统,使用C++语言编写,主要应用于
OLAP
场景。使用理由在大数据量的情况下,能以很低的延迟返回查询结果。
csdncjh
·
2023-06-07 17:07
clickhouse
千亿级爱奇艺数据湖平台建设实践
主要内容包括以下几大部分:1.爱奇艺
OLAP
简介2.为什么要数据湖3.数据湖平台建设4.性能优化5.业务落地分享嘉宾|林豪爱奇艺助理研究员出品社区|DataFun01爱奇艺
OLAP
简介首先简单介绍一下爱奇艺
架构师小秘圈
·
2023-06-07 14:32
大数据
kafka
hadoop
spark
分布式
apktool 反编译与编译出现appt command not found 的解决方法
使用autoapkto
olap
k改之理等安卓软件修改器的人,可能曾经面临过如下的尴尬:java配置正确,apktool已经更新到最新版本,但是操作命令apktooldf:\aa.apk没有做任何其他操作
wu_huashan
·
2023-06-07 10:36
OLAP
和OLTP
1:
OLAP
和OLTP对比数据库系统可以在广义上分为联机事务处理(OnlineTransactionProcess,OLTP)和联机分析处理(OnlineAnalyzeProcess,
OLAP
)两种面向不同领域的数据库
猿来如此dj
·
2023-06-07 09:33
hive专栏
数据库
Apache Doris
ApacheDoris是一个现代化的MPP(MassivelyParallelProcessing,即大规模并行处理)分析型(
OLAP
)数据库产品。仅需
All996
·
2023-06-06 22:36
apache
数据库
大数据
数据仓库理论
数据仓库理论基础理论数据仓库主要特征面相主题集成性非易失性、非易变性时变性OLTP、
OLAP
OLTP
OLAP
对比数据库与数据仓库的区别数据仓库、数据集市数据仓库分层架构分层思想和标准阿里巴巴数仓三层架构
不知落叶何时落
·
2023-06-06 22:16
大数据
hive
数据仓库
数据挖掘
数据库
浅谈 ByteHouse Projection 优化实践
预聚合是
OLAP
系统中常用的一种优化手段,在通过在加载数据时就进行部分聚合计算,生成聚合后的中间表或视图,从而在查询时直接使用这些预先计算好的聚合结果,提高查询性能,实现这种预聚合方法大多都使用物化视图来实现
·
2023-06-06 22:04
上一页
16
17
18
19
20
21
22
23
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他