Doris性能调优

Apache Doris的性能优化之Runtime Filter

目录1.介绍2.原理3.使用3.参数说明4.注意事项1.介绍当进行tb1jointb2时，tb2的数据非常小，将tb2数据经过计算得到一个过滤条件，发送到tb1所在的节点，利用索引的功能，直接对tb1的数据进行过滤。来减少扫描的数据量，避免不必要的I/O和网络传输，从而加速查询2.原理RuntimeFilter在查询规划时生成，在HashJoinNode中构建，在ScanNode中应用T1表的数据
Bulut0907·2023-11-07 03:27

Apache Doris 入门教程04：连接方式与使用指南

使用指南Doris采用MySQL协议进行通信，用户可通过MySQLclient或者MySQLJDBC连接到Doris集群。
sunjian286·2023-11-07 03:26

【浅谈 Apache Doris FE 处理查询 SQL 源码解析】

Doris查询语句和市面主流的数据库处理阶段都差不多，需要经过Parse,Analyz
齐木木9406·2023-11-07 03:56

【转】最佳实践｜Apache Doris Join 实现与调优实践

【转】https://mp.weixin.qq.com/s/YNGdTbnG6iBjT1qtsK912wDoris简介首先简单介绍一下Doris。
lehsyh·2023-11-07 03:25

Doris初步使用2

使用命令查看创建表语句：HELPCREATETABLE;创建表完整语句：CREATE[EXTERNAL]TABLE[IFNOTEXISTS][database.]table_name(column_definition1[,column_definition2,...][,index_definition1[,ndex_definition12,]])[ENGINE=[olap|mysql|bro
黄瓜炖啤酒鸭·2023-11-07 03:25

Apache Doris在美团外卖数仓中的应用实践

本文将介绍Doris在美团外卖数仓的实践。序言本文侧重于以Doris引擎为“发动机”的数仓生产架构的改进与思考。
架构师小秘圈·2023-11-07 03:25

Apache Doris (五十二）： Doris Join类型 - Broadcast Join

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.BroadcastJoin原理
IT贫道·2023-11-07 03:53

mysql数据库简介ppt，100%好评！

二、六大性能调优技术（JVM调优+网络调优+数据库调优+LINUX内核调优+中间件底层探索+容器环境调优）手绘板（脑图）1、JVM调优JVM调优必备理论知识-GcCOLLECTOR-三色标记垃圾回收算法串讲
前端陈萨龙·2023-11-06 16:19

jvm深度学习（2）： jvm的内存区域

前言：JVM能涉及非常庞大的一块知识体系，比如内存结构、垃圾回收、类加载、性能调优、JVM自身优化技术、执行引擎、类文件结构、监控工具等。但是在所有的知识体系中，都或多或少跟内存结构有一定的关系。
TofuCai·2023-11-06 15:15

Doris Manager集群的工具，运维更顺畅

哈喽！大家好，我是【IT邦德】，江湖人称jeames007，10余年DBA及大数据工作经验一位上进心十足的【大数据领域博主】！中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。✨如果有对【数据库】感兴趣的【小可爱】，欢迎关注【IT邦德】❤️❤️❤️感谢各位大可爱小可爱！❤️❤️
IT邦德·2023-11-06 11:55

mysql性能调优_MySQL性能优化的最佳12条经验

数据库的操作越来越成为整个应用的性能瓶颈了，这点对于Web应用尤其明显。关于数据库的性能，这并不只是DBA才需要担心的事，而这更是我们程序员需要去关注的事情。当我们去设计数据库表结构，对操作数据库时(尤其是查表时的SQL语句)，我们都需要注意数据操作的性能。这里，我们不会讲过多的SQL语句的优化，而只是针对MySQL这一Web应用最多的数据库。希望下面的这些优化技巧对你有用。1.为查询缓存优化你的
周鸟·2023-11-06 05:46

《MySQL管理之道：性能调优、高可用与监控》迷你书

《MySQL管理之道：性能调优、高可用与监控》迷你书51CTO技术博客之星、资深MySQL技术专家多年工作经验结晶，指导MySQLDBA进阶修炼的最佳实践之作。
拟声的主扬·2023-11-06 05:13

Apache Doris 系列： 基础篇-清理垃圾数据

垃圾数据如何产生delete/drop/truncate等操作只是在逻辑上删除了数据，并没有进行物理删除数据文件合并完成后没有物理删除旧的数据清理所有BE节点的垃圾数据ADMINCLEANTRASH;清理指定BE节点的垃圾数据ADMINCLEANTRASH[ON("BackendHost1:BackendHeartBeatPort1","BackendHost2:BackendHeartBeatP
修破立生·2023-11-06 02:48

技术实现 | Apache Doris 冷热数据存储（一）

1.前言对于任何一种数据库类软件来说，无论其基于传统数据库模型还是基于分布式结构，作为核心的永远是数据本身。而数据的生命周期，则体现在CRUD操作（创建、查询、更新、删除）上。任何一条数据从其生成的时刻开始，数据价值随着时间的推移而逐渐降低，直至成为无用数据，最终删除。作为使用数据的主体——用户，对于各种数据的需求程度是不同的，人们往往对重要的数据有更高效、稳定的访问需求；而对于不重要的数据则没有
ApacheDoris·2023-11-06 02:17

Apache Doris整体架构、FE元数据管理及数据组织

目录1.Doris整体架构2.FE元数据管理3.Doris数据组织1.Doris整体架构Doris主要分为FE和BE两个组件，FE主要负责查询的编译，分发和元数据管理（基于内存，类似HDFSNN）；BE
国林哥·2023-11-06 02:47

Apache Doris 入门教程08：建立和使用索引

目前Doris主要支持两类索引：内建的智能索引，包括前缀索引和ZoneMap索引。
sunjian286·2023-11-06 02:17

Apache Doris : 一个开源 MPP 数据库的架构与实践

ApacheDoris:一个开源MPP数据库的架构与实践一、Doris背景介绍1.1Doris1.2Doris定位二、适用场景&案例介绍2.1适用场景2.1.1对数据分析、统计2.1.2报表2.1.3多维分析
明月清风，良宵美酒·2023-11-06 02:16

Apache Doris (五十一）： Doris数据缓存

个人主页：IT贫道_大数据OLAP体系技术栈,ApacheDoris,Clickhouse技术-CSDN博客私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。博主个人B栈地址：豹哥教你大数据的个人空间-豹哥教你大数据个人主页-哔哩哔哩视频目录1.
IT贫道·2023-11-06 02:12

JVM性能调优参数详解 JVM启动参数详解 进阶月薪5w之路

JVM启动参数JVM启动参数-Xmx4096m设置JVM最大可用内存为4096m。-Xms4096m设置JVM促使内存为4096m。此值可以设置与-Xmx相同，以避免每次垃圾回收完成后JVM重新分配内存。-Xmn2048m设置年轻代大小为2048M。整个堆大小=年轻代大小+年老代大小+持久代大小。持久代一般固定大小为64m，所以增大年轻代后，将会减小年老代大小。此值对系统性能影响较大，Sun官方推
冰忆往昔·2023-11-06 01:22

Android 绘制性能优化

接下来就可以正式的性能调优了。第一个学习的就是绘制优化，因为绘制和界面流畅度有关，这个优化的效果是最直观的。
RikkaTheWorld·2023-11-05 07:28

官宣：Apache Doris 顺利毕业，成为 ASF 顶级项目！

|作者：ApacheDoris|编辑：朱天瑜|责编：金心悦|设计：马丽娜2022年6月16日，Apache软件基金会（ASF）官方宣布ApacheDoris顺利毕业，成为顶级项目（TLP）。01关于ApacheDorisApacheDoris源于百度自研的MPP分析型数据库，旨在解决百度凤巢高并发、高吞吐、低延迟的报表问题。2017年正式在GitHub进行开源，并于2018年8月正式捐献给全球顶级
开源社·2023-11-05 07:44

手把手教你快速在生产环境搭建Doris集群附集群启停管理脚本

手把手教你快速在生产环境搭建Doris集群一、部署规划组件分布规划节点node4node5node6node7node8Node9Node10Node11服务FE（follower）BEFE（follower
薛定谔的猫不吃猫粮·2023-11-04 06:24

Apache Doris 开源最顶级基于MPP架构的高性能实时分析数据库

背景介绍ApacheDoris是一个基于MPP架构的易于使用，高性能和实时的分析数据库，以其极高的速度和易用性而闻名。海量数据下返回查询结果仅需亚秒级响应时间，不仅可以支持高并发点查询场景，还可以支持高通量复杂分析场景。这些都使得ApacheDoris成为报表分析、即席查询、统一数据仓库和数据湖查询加速等场景的理想工具。在ApacheDoris上，用户可以构建各种应用，如用户行为分析、AB测试平台
yue_stack·2023-11-04 05:32

【协议森林】Linux TCP/IP网络性能调优方法

1.简述TCP全称为TransmissionControlProtocol，每一个IT人士对TCP都有一定了解。TCP协议属于底层协议，对于大部分研发人员来说，这是透明的，无需关心TCP的实现与细节。不过如果想做深入的性能优化，TCP是绕不过去的一环。2.proc参数BDP（Bandwidth-delayproduct，带宽延迟积）数据链路的容量与其端到端延迟的乘积。这个结果就是任意时刻处于在途未
协议森林·2023-11-04 01:33

Doris：StreamLoad导入数据

.请求参数3.2.返回参数4.StreamLoad实践4.1.使用curl命令4.2.使用Java代码Streamload是一个同步的导入方式，用户通过发送HTTP协议发送请求将本地文件或数据流导入到Doris
m0_37559973·2023-11-03 22:24

性能测试常用术语

负载对被测系统不断施加压力，直到性能指标超过预期或某项资源使用达到饱和，以验证系统的处理极限，为系统性能调优提供依据；并发①狭义上的并发：所有用户在同一时间点进行同样的操作，一般指同一类型的业务场景，比如
软件测试玲雪·2023-11-03 19:49

Apache Doris系列之：数据模型

ApacheDoris系列之：数据模型一、数据模型基本概念二、聚合模型Aggregate模型1.导入数据聚合2.保留明细数据3.导入数据与已有数据聚合三、Unique模型四、Duplicate模型五、聚合模型的局限性六、数据模型的选择建议一、数据模型基本概念数据以表的形式进行逻辑上的描述。一张表包括行（Row）和列（Column）。Row即用户的一行数据。Column用于描述一行数据中不同的字段。
最笨的羊羊·2023-11-03 18:38

5分钟搞定 PostgreSQL 到 Doris 数据迁移和同步

本文主要介绍如何使用CloudCanal快速构建一条稳定高效运行的PostgreSQL到Doris数据同步链路。技术点基于StreamLoad的导入方式Doris提供了多种导入方式。
ClouGence·2023-11-03 18:05

Apache Doris导出数据到HDFS

部署broker配置文件为apache_hdfs_broker/conf/apache_hdfs_broker.conf注意：Broker没有也不需要priority_networks参数，Broker的服务默认绑定在0.0.0.0上，只需要在ADDBROKER时，填写正确可访问的BrokerIP即可。如果有特殊的hdfs配置，复制线上的hdfs-site.xml到conf目录下启动：./apac
贾斯汀玛尔斯·2023-11-03 18:04

Doris之数据导出

数据导出数据导出（Export）是Doris提供的一种将数据导出的功能。该功能可以将用户指定的表或分区的数据，以文本的格式，通过Broker进程导出到远端存储上，如HDFS/BOS等。
墨卿风竹·2023-11-03 18:32

备份doris数据到minio

CREATEREPOSITORY`minio`WITHS3ONLOCATION"s3://doris"PROPERTIES("AWS_ENDPOINT"="http:
陕西小伙伴网络科技有限公司·2023-11-03 18:50

Flink 统计接入的数据量-滚动窗口和状态的使用

1、概述在生产场景值，经常需要和上游、下游对数，离线场景可以直接groupby再count，但是实时场景中，如果使用kafka作为中间件，中间经过几个job的过滤转化后，再对照像Doris或Clickhouse
猫猫爱吃小鱼粮·2023-11-03 17:37

Unity手机游戏性能优化系列：针对CPU端的性能调优

接下来我们从CPU的性能调优的角度来总结一下Unity手游开发中需要注意和优化CPU的一些点。我们把手机游戏的CPU调优分成几个
Clank的游戏栈·2023-11-03 14:02

Doris分区表使用

一、动态分区官网链接动态分区是在Doris0.12版本中引入的新功能。旨在对表级别的分区实现生命周期管理(TTL)，减少用户的使用负担。目前实现了动态添加分区及动态删除分区的功能。
有语忆语·2023-11-03 13:54

Apache Doris 系列：基础篇-创建动态分区表

文章目录动态分区的重要参数使用案例查看分区插入和查看数据动态分区的重要参数dynamic_partition.enable是否启用动态分区true|false,默认为true,即启用动态分区dynamic_partition.time_unit动态分区的时间单位,HOUR|DAY|WEEK|MONTH,可根据配置的时间单位创建或者删除时间分区dynamic_partition.replicatio
修破立生·2023-11-03 00:31

doris表唯一模型如何自由选择字段删除数据

Doris唯一模型，只能根据首个字段（主键位）删除数据。并且条件值要写死具体值。。有时为了满足需求，不得不把表做出复制模型。但是，一定要删除唯一模型的数据还是办法的。
斑鸠同学·2023-11-03 00:29

Doris--数据表基本概念和字段类型

文章目录1.doris表基本概念1.1.1Row&Column1.1.2Partition&Tablet2.doris字段类型1.doris表基本概念在Doris中，数据都以关系表（Table）的形式进行逻辑上的描述
韩家小志·2023-11-03 00:58

Apache Doris (二十) ：Doris 索引详细内容

目录1.前缀索引2.Bitmap索引2.1Bitmap位图索引原理2.2Bitmap位图索引语法
IT贫道·2023-11-03 00:27

大数据Doris（十五）：Doris表的字段类型

文章目录Doris表的字段类型一、TINYINT数据类型二、SMALLINT数据类型三、INT数据类型
Lansonli·2023-11-03 00:54

【文档笔记】doris数据仓库-数据表设计：数据模型及数据划分

数据表设计：数据模型及数据划分一、Doris的数据模型在Doris中，数据以表（Table）的形式进行逻辑上的描述。一张表包括行（Row）和列（Column）。Row即用户的一行数据。
KevinBrain·2023-11-03 00:54

Apache Doris (二十六）：Doris 数据导入(四）Broker Load -2 案例及注意事项

目录1.BrockerLoad案例1.1导入HDFS数据到Doris表1.2通配符导入HDFS数据，并指定列顺序
IT贫道·2023-11-02 12:46

分布式数据库Apache Doris HA集群部署

哈喽！大家好，我是【IT邦德】，江湖人称jeames007，10余年DBA及大数据工作经验一位上进心十足的【大数据领域博主】！中国DBA联盟(ACDU)成员，目前服务于工业互联网擅长主流Oracle、MySQL、PG、高斯及Greenplum运维开发，备份恢复，安装迁移，性能优化、故障应急处理等。✨如果有对【数据库】感兴趣的【小可爱】，欢迎关注【IT邦德】❤️❤️❤️感谢各位大可爱小可爱！❤️❤️
IT邦德·2023-11-02 12:13

linux运维好书《高性能Linux服务器构建实战Ⅱ》已出版发售，附封面照！

《高性能Linux服务器构建实战Ⅱ----系统安全、故障排查、自动化运维与集群架构》仍然沿用了《高性能Linux服务器构建实战---运维监控、性能调优、集群应用》的写作特点：实战、实用、通俗、易懂的特点
weixin_30367873·2023-11-02 12:16

《高性能Linux服务器构建实战Ⅱ》已出版发售，附封面照！

《高性能Linux服务器构建实战Ⅱ----系统安全、故障排查、自动化运维与集群架构》仍然沿用了《高性能Linux服务器构建实战---运维监控、性能调优、集群应用》的写作特点：实战、实用、通俗、易懂的特点
choujia2758·2023-11-02 12:13

Linux运维好书《高性能Linux服务器构建实战Ⅱ》已出版发售，附封面照！

《高性能Linux服务器构建实战Ⅱ----系统安全、故障排查、自动化运维与集群架构》仍然沿用了《高性能Linux服务器构建实战---运维监控、性能调优、集群应用》的写作特点：实战、实用、通俗、易懂的特点
exitgogo·2023-11-02 12:13

解决nginx: [emerg] the “ssl“ parameter requires ngx_http_ssl_module in /usr/local/nginx的问题

local/nginx的问题Nginx如果未开启SSL模块，配置Https时提示错误Nginx开启SSL模块Nginx配置Http和Https共存Nginx配置SSL安全证书重启避免输入密码NginxSSL性能调优
徊忆羽菲·2023-11-02 10:49

Doris：物化视图

自动匹物化视图4.1.总数据量4.2.可以使用EXPLAIN检查sql是否使用物化视图4.3.统计各省年度数据4.4.统计某年各月数据物化视图是将预先计算（根据定义好的SELECT语句）好的数据集，存储在Doris
m0_37559973·2023-11-02 08:26

MySQL - 系统库之 sys

性能调优：sys系统库可帮助我们识别性能问题和瓶颈，以进行性能调优。通过分析性能数据，可以采取措施来改善查询性能和数据库服务器的整体性能。查询执行计划：sys系统库提供了视图，用于查看和
冷风扇666·2023-11-02 07:46

MySQL - 系统库之 performance_schema

这有助于识别性能问题并进行性能调优。资源利用：performance_schema跟踪数据库服务器如何利用系统资源，包括CPU、内存和
冷风扇666·2023-11-02 06:42

命令行工具：jps、jstack、jmap、jhat、jstat、hprof

JVM性能调优监控工具jps、jstack、jmap、jhat、jstat、hprof使用详解jps(JavaVirtualMachineProcessStatusTool)jsp详细说明jstackjstack
Kate_Blog·2023-11-02 04:16
上一页 13 14 15 16 17 18 19 20 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他