Doris性能调优

Doris架构中包含哪些技术？

Doris主要整合了GoogleMesa(数据模型)，ApacheImpala(MPPQueryEngine)和ApacheORCFile(存储格式，编码和压缩)的技术。为什么要将这三种技术整合?
传智教育·2023-08-30 10:53

【基于鲲鹏及openEuler20.03TLS下MySQL8.0.17性能调优】

【基于鲲鹏及openEuler20.03TLS下MySQL8.0.17性能调优】一、环境说明二、实验过程三、实验小结一、环境说明华为云ECS规格：8vCPU32Garm架构操作系统：openEuler20.03
若兰幽竹·2023-08-30 08:42

Ceph入门到精通-Lunix性能分析工具汇总

本文档主要是结合Linux大牛，Netflix高级性能架构师BrendanGregg更新Linux性能调优工具的博文，搜集L
瓦哥架构实战·2023-08-30 06:23

Doris数据库BE——rowset版本追踪

rowset代码位置be/src/olap/version_graph.cpp，字面意思行集合，由一行或多行组成。rowset版本简单理解为rowset编号，每次导入生成一个rowset，比如insert执行10次会生成10个rowset，一次streamload生成一个rowset。版本的格式为：version=[start_version,end_version]，比如你执行10次insert
肥叔菌·2023-08-30 05:41

Spark（十四） Spark性能调优之广播变量

一、背景举例来说，（虽然是举例，但是基本都是用我们实际在企业中用的生产环境中的配置和经验来说明的）。50个executor，1000个task。一个map，10M。默认情况下，1000个task，1000份副本。10G的数据，网络传输，在集群中，耗费10G的内存资源。如果使用了广播变量。50个execurtor，50个副本。500M的数据，网络传输，而且不一定都是从Driver传输到每个节点，还可
文子轩·2023-08-30 02:55

95%的技术面试必考的JVM知识点都在这，另附加分思路

性能调优部分偏重实际应用，重点突出实践能力。编译器优化和执行模式部分偏重理论基础，主要掌握知识点。
拉勾教育·2023-08-29 19:39

PostgreSQL 性能优化

提出问题PostgreSQL数据库如何进行简单的性能调优？？？解决问题前言PostgreSQL的配置参数作为性能调优的一部分，起着重要的位置。有时候一个简单的配置参数就会决定应用的性能。
AllenLeungX·2023-08-28 21:15

postgresql 性能调优

性能调优是为了提高PostgreSQL数据库的性能和响应速度。
乐享极致·2023-08-28 21:15

当 Apache Doris 遇上大模型：探秘腾讯音乐如何基于大模型 + OLAP 构建智能数据服务平台

本文导读：当前，大语言模型的应用正在全球范围内引发新一轮的技术革命与商业浪潮。腾讯音乐作为中国领先在线音乐娱乐平台，利用庞大用户群与多元场景的优势，持续探索大模型赛道的多元应用。本文将详细介绍腾讯音乐如何基于ApacheDoris构建查询高效、实时统一分析的OLAP引擎，使OLAP作为底层基建加强模型连接转化效率、结果输出准确率，最终将大模型+OLAP引擎结合为用户提供个性化、实时化、灵活化的智能
·2023-08-28 14:24

自然语言处理长文本场景下的信息结构化实践：文本分割（话题分割、段落分割、Text segmentation、TextTiling算法）标题生成两大任务

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-08-28 10:04

人工智能自然语言处理：抽取式文本分割（Text Segmentation）算法介绍总结，智能断句解决文本过长问题

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-08-28 10:59

红帽RHCA考试内容解析

红帽RHCA考试内容解析：最新的RHCA有3大方向体系，考试内容分别为：一、Platform平台技术RH442：性能调优使用红帽企业Linux和红帽网络提供的工具来学习Linux的性能调优和规划的技巧及方法
Sunday_ding·2023-08-28 03:53

使用 Flink CDC 实现 MySQL 数据实时入 Apache Doris

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星本文通过实例来演示怎么通过FlinkCDC结合Doris的FlinkConnector实现从Mysql数据库中监听数据并实时入库到
hf200012·2023-08-27 15:08

Tomcat 和 JVM 性能调优总结

Tomcat性能调优：找到Tomcat根目录下的conf目录，修改server.xml文件的内容。
新一993·2023-08-27 15:05

多场景下 3-11 倍性能提升，Apache Doris 1.2 新版本性能揭秘！

自ApacheDoris1.1.0版本发布距今已经有数月之久，在这一期间，我们重新思考并确立了社区新版本发布的流程，正式引入了LTS（Long-TermSupport，长周期支持）版本的概念，在1.1.x系列版本中不再引入大的功能Feature、仅提供问题修复和稳定性改进，力求满足更多社区用户在稳定性方面的高要求。值得高兴的是，这一行动已经有了明显的成效，目前1.1.x系列最新版本的稳定性经受了众
张家锋·2023-08-27 15:17

Mysql知识梳理

Mysql知识梳理索引索引分类索引未命中的原因性能调优命令Explain回表mysql性能优化事务四大特性事务隔离级别设置事务隔离级别存储引擎聚簇索引和非聚簇索引聚簇索引非聚簇索引最左前缀结合原则全文索引索引索引分类
小小的人儿居然已存在·2023-08-27 11:49

【大数据】Doris：基于 MPP 架构的高性能实时分析型数据库

Doris：基于MPP架构的高性能实时分析型数据库1.Doris介绍ApacheDoris是一个基于MPP（MassivelyParallelProcessing，大规模并行处理）架构的高性能、实时的分析型数据库
G皮T·2023-08-27 05:58

基于Apache doris怎么构建数据中台(三)-数据资产管理

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星前面我们讲了什么是数据中台，及数据中台的架构及功能规划，这次我们开始从数据资产开始拆解每个功能模块做的内容数据资产管理平台可以定量评估数据资产的成本
hf200012·2023-08-26 19:39

万字讲述如何通过Doris构建数据中台

目录基于Apachedoris怎么构建数据中台(一)-什么是数据中台基于Apachedoris怎么构建数据中台(二)-数据中台建设内容基于Apachedoris怎么构建数据中台(三)-数据资产管理基于Apachedoris怎么构建数据中台(一)-什么是数据中台这是数据中台系列的第一篇文章，主要阐述数据中台概念，从技术和业务视觉看数据中台及数据中台要解决的问题1.什么是数据中台数据是从业务系统产生的
浪尖聊大数据-浪尖·2023-08-26 19:39

Apache Doris 2.0.0 版本正式发布：盲测性能 10 倍提升，更统一多样的极速分析体验

亲爱的社区小伙伴们，我们很高兴地向大家宣布，ApacheDoris2.0.0版本已于2023年8月11日正式发布，有超过275位贡献者为ApacheDoris提交了超过4100个优化与修复。在2.0.0版本中，ApacheDoris在标准Benchmark数据集上盲测查询性能得到超过10倍的提升、在日志分析和数据湖联邦分析场景能力得到全面加强、数据更新效率和写入效率都更加高效稳定、支持了更加完善的
SelectDB技术团队·2023-08-26 19:08

Doris Summit 2023 正式启航，议题征集 & 合作伙伴招募火热进行中

在数字化进程不断演进的时代，数据呈现爆发增长。在这数据洪流之中，数据实时分析的重要性愈发凸显，并成为企业成功的关键要素。作为专注于实时分析的开源实时数据仓库ApacheDoris，从开源至今已走过6个年头，这些年里ApacheDoris一直稳步向前，并在这两年取得了令人瞩目的进展。在DorisSummit2022年度峰会上，社区公布了2023年Roadmap，并在此指引下，ApacheDoris完
SelectDB技术团队·2023-08-26 19:08

Apache Doris 2.0-beta 盲测性能 10 倍提升，更统一的多场景极速分析体验！

下载链接：https://doris.apache.org/downloadGitHub源码：https://github.com/apache/doris/tre
SelectDB技术团队·2023-08-26 19:38

Apache Doris 助力中国联通万亿日志数据分析提速 10 倍

本文导读：在数据安全管理体系的背后，离不开对安全日志数据的存储与分析。以终端设备为例，中国联通每天会产生百亿级别的日志数据，对于保障网络安全、提高系统稳定性和可靠性具有至关重要的作用。目前，ApacheDoris在联通体系的落地已支持了30多条业务线和数百个实时作业，不仅帮助联通实现了万亿级安全日志的高效分析和低成本，也为其他运营商提供了成功的参考案例和学习经验，对推动运营商的数字化转型进程具有重
SelectDB技术团队·2023-08-26 19:38

一键实现 Oracle 数据整库同步至 Apache Doris

而对于从Oracle到Doris的数据同步，通常会用到以下两种常见的同步方式：OGG/XStream/LogMiner工具：通过该方式先将数据同步到Kafka中，然后通过RoutineLoad消费Kafka
SelectDB技术团队·2023-08-26 19:37

性能测试报告-用于项目的性能验证、性能调优、发现性能缺陷等应用场景

一、概述性能测试报告的目的是对软件系统的性能进行全面的评估，以便更好地进行性能调优、发现性能缺陷并提供优化的解决方案。
软件测评闲聊站·2023-08-26 13:48

开源大数据：Apache Doris

令您的数据分析工作更加简单高效ApacheDoris核心特性Doris存储文
ejinxian·2023-08-26 10:44

Arthas 线上定位工具简单使用 arthas安装 阿里性能调优工具使用

1.下面是arthas官网有非常详细的使用文档:简介|arthas2.官方推荐的下载，使用方式：#自己找个文件夹下载arthasjar包cd/home#下载curl-Ohttps://arthas.aliyun.com/arthas-boot.jar#运行java-jararthas-boot.jar3.选择监控的jar端口（输入数字即可）4.命令行输入：dashboard5.thread19查看
qq_33919114·2023-08-25 20:57

轻松将MySQL数据同步到Doris

而Doris作为一款专为大数据分析设计的分布式数据仓库，具有高性能、可扩展的特点，其优异的数据处理能力也在行业内广受关注。01为什么需要把MySQL同步到Doris？
·2023-08-25 15:22

Greenplum问题定位及性能调优

《基于fdw的跨Greenplum集群数据库查询实现》，《基于Greenplum构建下一代数据分析平台》），今天，第三篇演讲内容是由Greenplum中文社区成员阿福带来的Greenplum问题定位与性能调优
Greenplum中文社区·2023-08-25 10:49

京东面试题：ElasticSearch深度分页解决方案

关注公众号：码猿技术专栏，回复关键词：1111获取阿里内部Java性能调优
·2023-08-25 08:25

接口性能测试避坑 Django+Nginx+uwsgi接口性能调优postman，Apifox，ab

使用Django开发了个接口供外部调用，Django的并发性能弱早有所闻，所以采用了Django+Nginx+uwsgi架构来提高并发量，来测试一下并发能力到底如何。服务器配置：CPU2，内存8G接口内容只有3句，暂不用sleep模拟接口的处理耗时：request_data={"code":"0","msg":"test"}logger.info(f'---------------')return
嗨客递锅·2023-08-25 03:28

D36 2组阿德doris+《被讨厌的勇气》读书笔记

本周开启新书《被讨厌的勇气》。这本书采用青年与哲人“对话”的形式展开本书，用贴近生活的实例帮助我们加深对人性的理解，带我们一步步走进阿德勒心理学和阿德勒思想。这本书的语言很平实，没有晦涩难懂的专业心理学词汇。是每个人都可以很容易看懂的心理学著作。“一切烦恼都来自人际关系”“所谓的自由，就是被别人讨厌”“人真的可以摆脱过去的创伤吗？”“为什么说自卑感不是真的？”“满足别人的期待有什么不对的？”“人最
阿德doris·2023-08-24 23:33

Apache Doris 入门教程36：文件分析和文件缓存

文件分析通过TableValueFunction功能，Doris可以直接将对象存储或HDFS上的文件作为Table进行查询分析。并且支持自动的列类型推断。
sunjian286·2023-08-24 13:58

JVM 下篇：性能监控与调优

文章目录性能优化三部曲第1步(发现问题):性能监控何时需要性能监控第2步(排查问题):性能分析第3步(解决问题):性能调优性能评价/测试指标JVM监控及诊断工具命令行jpsjstatjinfojmap导出内存镜像文件显示堆内存相关信息其它作用
程序员的暴击·2023-08-24 10:09

Linux学习13-CentOS安装ab做压力测试

前言网站性能压力测试是服务器网站性能调优过程中必不可缺少的一，测试环境准备好了后，如何对网站做压力测试？
上海-悠悠·2023-08-24 07:35

14.VisualVM使用详解、15.VisualVM堆查看器使用的内存不足、19.class文件--文件结构--魔数、20.文件结构--常量池、21.文件结构访问标志（2个字节）、22.类加载机制概

14.VisualVM使用详解15.VisualVM堆查看器使用的内存不足16.性能调优概述17.性能调优–案例118.性能调优—案例三19.class文件–文件结构–魔数20.文件结构–常量池21.文件结构访问标志
涂作权的博客·2023-08-23 23:47

从PCRE到Hyperscan

作者简介：昌昊，英特尔软件工程师，负责Hyperscan算法开发和性能调优相关工作。主要研究领域包括自动机与正则表达式匹配等。
明翼·2023-08-23 22:40

性能调优篇 一、Jvm监控及诊断工具-命令行篇

目录一、概述1、简单命令行工具二、jps：查看正在运行的Java程序1、是什么？2、测试3、基本语法三、jstat：查看jvm统计信息一、概述性能诊断是软件工程师1、简单命令行工具二、jps：查看正在运行的Java程序1、是什么？JavaProcessStatus：用于查询正在运行的Java虚拟机进程2、测试3、基本语法1）options如何将信息输出到同级文件中：语法：命令>文件名称例如：jps
小晨想好好学习·2023-08-23 16:48

一键实现 Oracle 数据整库同步至 Apache Doris

而对于从Oracle到Doris的数据同步，通常会用到以下两种常见的同步方式：OGG/XStream/LogMiner工具：通过该方式先将数据同步到Kafka中，然后通过RoutineLoad消费Kafka
·2023-08-23 12:48

存储大师班 | 浅谈 RDMA 与无损网络

魏国武QingStor资深研发工程师近10年企业级软件开发经验，专注于大规模分布式存储研发，擅长集群性能调优、高可用研究及容灾。
QingStor分布式存储·2023-08-23 11:35

Day3+8组+83号Doris周《学习力》

☞旧知当有了一份所谓的稳定工作之后，有多少人还愿意继续去折腾;当这份工作足够稳定到养老的时候，谁还愿意轻易改行。大部分人应该都会按部就班的做下去吧，工作做完之后，就可以随意挥霍剩下的光阴……而我呢？☞新知《学习力》中提到80%的时间，投入到你的“最”兴趣当中，20%的时间探索人生边界。我的理解是把我们每天的时间、精力的80%投入到自己的工作中，毕竟每一份工作，只要深耕下去，全力聚焦地可以打造成为自
木词·2023-08-23 10:50

【实践案例分享】Apache Doris在美团外卖数仓中的应用实践

本文将介绍Doris在美团外卖数仓的实践。序言本文侧重于以Doris引擎为“发动机”的数仓生产架构的改进与思考。
木东居士·2023-08-23 09:34

【遇见Doris】 Apache Doris 基于 Bitmap的精确去重和用户行为分析

Doris线下沙龙完美收官！本次沙龙邀请了来自百度、美团、京东的技术大牛带来实战分享。了解更多详情请关注Doris官方公众号，嘉宾分享回顾会陆续放出。
ApacheDoris·2023-08-23 09:32

Apache Doris高并发特性解读

300万字！全网最全大数据学习面试社区等你来！随着用户规模的极速扩张，越来越多用户将ApacheDoris用于构建企业内部的统一分析平台，这一方面需要ApacheDoris去承担更大业务规模的处理和分析——既包含了更大规模的数据量、也包含了更高的并发承载，而另一方面，也意味着需要应对企业更加多样化的数据分析诉求，从过去的统计报表、即席查询、交互式分析等典型OLAP场景，拓展到推荐、风控、标签画像以
王知无(import_bigdata)·2023-08-23 09:02

Apache Kylin VS Apache Doris

作者:康凯森日期:2018-04-17分类:OLAP1系统架构1.1WhatisKylin1.2WhatisDoris2数据模型2.1Kylin的聚合模型2.2Doris的聚合模型2.3KylinCuboidVSDorisRollUp2.4Doris
hellozhxy·2023-08-23 09:59

Apache Doris 入门教程35：多源数据目录

概述多源数据目录（Multi-Catalog）功能，旨在能够更方便对接外部数据目录，以增强Doris的数据湖分析和联邦数据查询能力。
sunjian286·2023-08-23 05:10

java代码判断doris的某一天的分区是否存在

需要使用doris的SHOWPARTITIONS命令来查看表的分区信息。这个命令会显示表的所有分区信息，包括分区名、范围、副本数等。您可以根据您设定的动态分区规则判断是否有缺失或多余的分区1。
linweidong·2023-08-23 04:42

Spark写数据到Doris报错node and exceeded the max retry times

用sparkdataframe向doris写数据时，报下面错误：FailedtoloaddataonBE:http://192.168.50.10:18040/api/mydb/dwd_virtual_table
linweidong·2023-08-23 04:42

[06][03][04] MySQL性能优化总结

我们在第一节课开始的时候讲了,这四节课的目标是为了让大家建立数据库的知识体系,和正确的调优的思路我们说到性能调优,大部分时候想要实现的目标是让我们的查询更快.一个查询的动作又是由很多个环节组成的,每个环节都会消耗时间
悠娜的奶爸·2023-08-22 20:32

开启形象管理的window

看了彭小六的《洋葱阅读法》，加入了西安的读书会，周末碰到的第一个活动是Doris的形象管理-年末穿衣搭配以及化妆技巧。形象好气质佳，也是我一直追求的目标，便于周六下午报名参加了一把。
慧不慧·2023-08-22 18:49
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他