Doris性能调优

docker踩坑记录：docker容器创建doris容器间无法通讯问题

背景：开发大数据平台，使用doris作为数据仓储，使用docker做集群部署，先进行开发环境搭建，环境为BE1;FE1，原来使用官方例子，但是官方例子是创建了一个bridge使用172.20.80.0/
Alaia.·2023-12-02 14:47

GaussDB如何进行性能调优

GaussDB如何进行性能调优GaussDB性能调优过程需要综合考虑多方面因素，因此，调优人员应对系统软件架构、软硬件配置、数据库配置参数、并发控制、查询处理和数据库应用有广泛而深刻的理解。
Gauss松鼠会·2023-12-02 12:56

记录一次性能调优过程

目录配置参数调优程序调优带宽优化其他配置参数调优配置参数调优往往是投入最小但能立竿见影看到效果的方式JVM调优。根据服务器的内存，适当调整JVM的运行内存。例如服务器是256GB内存，jvm内存可调整至16GB。数据库连接数调优。通常可以配置最大200，最小100进行优化。在采购第三方数据库服务时一般要求供应商将此参数完成调优。中间件线程数调优。金蝶默认最大线程数是50，tomcat默认是200。
峪幽兰·2023-12-02 12:27

Doris 数据导入二：Stream Load 方式

Streamload是一个同步的导入方式，用户通过发送HTTP协议发送请求将本地文件或数据流导入到Doris中。Streamload同步执行导入并返回导入结果。
shangjg3·2023-12-02 10:22

Doris 上卷（Rollup）和前缀索引

1基本概念在Doris中，我们将用户通过建表语句创建出来的表称为Base表（BaseTable）。Base表中保存着按用户建表语句指定的方式存储的基础数据。
shangjg3·2023-12-02 10:21

Doris 外部表

DorisODBC外部表ODBCExternalTableOfDoris提供了Doris通过数据库访问的标准接口(ODBC)来访问外部表，外部表省去了繁琐的数据导入工作，让Doris可以具有了访问各式数据库的能力
shangjg3·2023-12-02 10:21

Doris 数据导入一：Broker Load 方式

1.Doris导入数据的方式总结导入（Load）功能就是将用户的原始数据导入到Doris中。导入成功后，用户即可通过Mysql客户端查询数据。
shangjg3·2023-12-02 10:18

【性能测试】性能分析和调优——步骤及案例

文章目录性能测试瓶颈分析常见的性能瓶颈分析性能调优性能调优步骤性能调优案例案例一——CPU案例二——网络案例三——SQL查询案例四——JVM内存溢出阅读前建议先了解前一篇文章：【性能测试】性能测试监控关键指标性能测试瓶颈分析常见的性能瓶颈分析
最最菜的菜鸟·2023-12-02 09:32

【Java笔记+踩坑】设计模式——原型模式

导航：【Java笔记+踩坑汇总】Java基础+JavaWeb+SSM+SpringBoot+SpringCloud+瑞吉外卖/黑马旅游/谷粒商城/学成在线+设计模式+面试题汇总+性能调优/架构设计+源码
程序员小海绵【vincewm】·2023-12-02 08:25

【阿里规约】阿里开发手册解读——代码格式篇

导航：【Java笔记+踩坑汇总】Java基础+JavaWeb+SSM+SpringBoot+SpringCloud+瑞吉外卖/黑马旅游/谷粒商城/学成在线+设计模式+面试题汇总+性能调优/架构设计+源码阿里规约
程序员小海绵【vincewm】·2023-12-02 08:25

【阿里规约】阿里开发手册解读——命名规范篇

导航：【Java笔记+踩坑汇总】Java基础+JavaWeb+SSM+SpringBoot+SpringCloud+瑞吉外卖/黑马旅游/谷粒商城/学成在线+设计模式+面试题汇总+性能调优/架构设计+源码
程序员小海绵【vincewm】·2023-12-02 08:54

什么是JVM的内存模型？详细阐述Java中局部变量、常量、类名等信息在JVM中的存储位置

导航：【Java笔记+踩坑汇总】Java基础+JavaWeb+SSM+SpringBoot+SpringCloud+瑞吉外卖/黑马旅游/谷粒商城/学成在线+设计模式+面试题汇总+性能调优/架构设计+源码
程序员小海绵【vincewm】·2023-12-02 08:50

用 CloudCanal 快速验证阿里云 EMR for StarRocks 和 Doris

背景StarRocks和Doris是近两年来相当流行的、国产的、开源的实时数仓，不仅数据检索、分析能力出众，而且数据准备实时性好、准确度高、使用丝滑，可如同在线数据库般使用。
ClouGence·2023-12-02 08:47

8年资深测试，性能测试体系流程总结，从0到1性能压测（详细）

有效的性能测试能给研发，运维团队提供有效的容量规划能力，系统风险识别，系统瓶颈识别，性能调优指导。2、性能测试流程与方法分析现状获取当
百度测试开发·2023-12-02 02:07

「架构思维导图」搞定数据库索引就是这么简单

性能调优、Spring，MyBatis，Netty源码分析和大数据等多个知识点高级进阶干货的直播免费学习权限及相关资料，群号：835638062点击链接加入群聊【Java高级架构】：https://jq.qq.com
Java黎先生·2023-12-01 23:51

Jprofiler分析性能调优--远程连接服务器服务

java性能监控工具，调优工具，因为现在用IDEA编辑器的比较多，所以选择使用Jprofiler。可以在IDE中安装插件，直接使用监控方式启动。这篇文章主要记录远程连接linux服务器上的服务，进行实时监控cpu，线程内存等属性变化。1.需要在linux服务器安装和本地版本一致的JProfiler下载地址https://www.ej-technologies.com/download/jprofi
所执者唯己·2023-12-01 23:42

Python连接Doirs查询实战

问题背景有客户提出来他们的客户端是Python的，需要使用Python语言查询Doris。
wangleigiser·2023-12-01 15:47

Apache Doris : 一个开源 MPP 数据库的架构与实践

分享提纲：Doris背景介绍适用场景&案例介绍Doris整体架构Doris关键技术Doris背景介绍介绍Doris的整体架构，以及Doris的一些特性。
hellozhxy·2023-12-01 15:43

日志检索场景ES-＞Doris迁移最佳实践：函数篇

函数列表函数：term函数功能说明：查询某个字段里含有某个关键词的文档参数说明：返回值说明：ES使用示例：{"query":{"term":{"title":"blog"}}}Doris使用示例：select
wangleigiser·2023-12-01 15:40

程序员精进之路：性能调优利器--火焰图

本文主要分享火焰图使用技巧，介绍systemtap的原理机制，如何使用火焰图快速定位性能问题原因，同时加深对systemtap的理解。让我们回想一下，曾经作为编程新手的我们是如何调优程序的？通常是在没有数据的情况下依靠主观臆断来瞎蒙，稍微有些经验的同学则会对差异代码进行二分或者逐段调试。这种定位问题的方式不仅耗时耗力，而且还不具有通用性，当遇到其他类似的性能问题时，需要重复踩坑、填坑，那么如何避免
简说Linux·2023-12-01 06:43

JVM性能调优（2） —— 内存设置和查看GC日志

来源：博客园作者：bojiangzhou链接：https://www.cnblogs.com/chiangchou/p/jvm-2.html四、内存设置和查看GC日志1、设置JVM内存1）JVM内存分配有如下一些参数：-Xms：堆内存大小-Xmx：堆内存最大大小-Xmn：新生代大小，扣除新生代剩下的就是老年代大小-Xss：线程栈大小-XX:NewSize：初始新生代大小-XX:MaxNewSize
小郭子·2023-12-01 02:13

mysql高可用集群部署方案（mha+atlas+keepalived）

好，问题来了，当应用程序的性能调优后，那么瓶颈就卡在数据库上。这个时候，就要对数据库进行优化。  在进行去IOE后，基本上许多的数据库都采用的是开源的mysql数据库。  
w_124816·2023-11-30 22:23

基于Apache doris怎么构建数据中台(五)-数据质量管理

上一次我们讲了，数据怎么进行快速的接入，这次我们讲在接入及后续的数据处理中质量怎么控制如何更加合理、高效的监控每类作业的运行状态，并将原本分散、孤岛式的监控日志信息通过规则引擎集中共享、关联、处理；洞察关键信息，形成事前预判、事中监控、事后跟踪的质量管理闭环流程；沉淀故障问题，搭建解决方案的知识库体系。在数据质量监管平台的规划建设中，面临如下挑战：缺乏统一监控视图，离线和实时作业监控分散，影响性、
张家锋·2023-11-30 17:48

微信小程序制作工具gamemaker（积木式游戏）入门案例——飞机大战

该微信小程序制作工具是一种典型的积木式游戏制作工具，它的特点是：可视化编程:游戏制作所见即所得,快速上手、无需代码高效开发:丰富的官方组件,排行榜、性能调优一键完成赋能创意:
盐水鸭的守护神·2023-11-30 13:56

docker集群部署doris

1.前言这篇文章主要讲述如何在docker环境下搭建doris集群，以及一些注意事项。
yedajiang44·2023-11-30 02:18

Doris系列9-表结构变更

目前Doris支持
只是甲·2023-11-30 02:13

Doris之Stream load

StreamloadStreamload是一个同步的导入方式，用户通过发送HTTP协议发送请求将本地文件或数据流导入到Doris中。Streamload同步执行导入并返回导入结果。
墨卿风竹·2023-11-30 02:41

doris导入报错问题集合

dorisspark导入报错：Inserthasfiltereddatainstrictmode,tracking_url由于enable_insert_strict的默认值是false，当前执行INSERT语句时，有不符合目标表格式的数据，比如字符串超过字段类型等等，导入任务会直接报错。解决办法修改数据类型，比如varchar的长度setenable_insert_strict=false；只要
炼数成器·2023-11-30 02:39

Apache Doris常见问题答疑(二)

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星Q：showbackends/frontends查看到的信息不完整A：在执行如showbackends/frontends
hf200012·2023-11-30 02:38

Doris_Doris导入常见问题

Doris数据导入错误：thelengthofinputistoolargerthanschema可能原因：varchar长度设置过短Doris表字段乱序导入palo表中的csv本身无schema信息，
高达一号·2023-11-30 02:34

Spark性能调优系列：Spark参数配置大全（官网资料）

Spark参数配置大全Spark提供了三个位置来配置系统Spark属性控制大多数应用程序参数，可以使用SparkConf对象或Java系统属性来设置。通过conf/spark-env.sh每个节点上的脚本，环境变量可用于设置每台计算机的设置，例如IP地址。可以通过配置日志log4j.properties。Spark属性Spark属性控制大多数应用程序设置，并分别为每个应用程序配置。这些属性可以在传
Mr Cao·2023-11-29 22:07

Doris-集群部署（四）

创建目录并拷贝编译后的文件1）创建目录并拷贝编译后的文件mkdir/opt/module/apache-doris-0.15.0cp-r/opt/software/apache-doris-0.15.0
玖玖1704·2023-11-29 21:12

Doris单机版安装和初步使用

参考官方文档https://doris.apache.org/zh-CN/docs/dev/get-starting/下载安装包下载-ApacheDorisIndexof/apache/doris/1.2
未竟·2023-11-28 21:54

stream分页+排序：Java实际开发中list.sort()集合排序详解之多条件排序、分页、空值null的最常用解决方案（JAVA8用lamda表达式和增强版Comparator进行排序）

Java实际开发中list.sort集合排序详解之多条件排序、分页、空值null的最常用解决方案前言一、单条件排序二、多条件排序三、分页处理四、空值处理❤️作者主页：温文尔雅的清欢渡❤️近期学习方向：性能调优
爱喝皮蛋瘦肉粥的小饶·2023-11-28 20:17

Stream load doris

代码如下：经测试有效packageDemo;importcom.alibaba.fastjson.JSONObject;importorg.apache.commons.net.util.Base64;importorg.apache.http.HttpHeaders;importorg.apache.http.client.methods.CloseableHttpResponse;import
weixing_2006·2023-11-28 19:52

Doris-Broker Load（二十四）

适用场景源数据在Broker可以访问的存储系统中，如HDFS。数据量在几十到百GB级别。基本原理用户在提交导入任务后，FE会生成对应的Plan并根据目前BE的个数和文件的大小，将Plan分给多个BE执行，每个BE执行一部分导入数据。BE在执行的过程中会从Broker拉取数据，在对数据transform之后将数据导入系统。所有BE均完成导入，由FE最终决定导入是否成功。基本语法LOADLABELdb
玖玖1704·2023-11-28 16:18

Doris-导入示例（二十五）

1）Doris中创建表createtablestudent_result(idint,namevarchar(50),ageint,scoredecimal(10,4))DUPLICATEKEY(id)
玖玖1704·2023-11-28 16:18

Doris-Stream Load（二十六）

Streamload是一个同步的导入方式，用户通过发送HTTP协议发送请求将本地文件或数据流导入到Doris中。Streamload同步执行导入并返回导入结果。
玖玖1704·2023-11-28 16:18

Doris-Routine Load（二十七）

例行导入（RoutineLoad）功能为用户提供了一种自动从指定数据源进行数据导入的功能。适用场景当前仅支持从Kafka系统进行例行导入，使用限制：（1）支持无认证的Kafka访问，以及通过SSL方式认证的Kafka集群。（2）支持的消息格式为csv,json文本格式。csv每一个message为一行，且行尾不包含换行符。（3）默认支持Kafka0.10.0.0（含）以上版本。如果要使用Kafka
玖玖1704·2023-11-28 16:58

终于拿到了阿里2023年度九大Java技术文档——面试题+文档+白皮书

2023年阿里巴巴面试参考指南（泰山版）阿里巴巴1000道Java工程师面试题（2023版）阿里巴巴2023版JDK源码笔记（2月第三版）阿里巴巴Java开发手册1.4.0阿里巴巴Java性能调优实战（
隔壁老王的代码·2023-11-28 12:06

Java中的jvm——面试题+答案（JVM的一些高级概念、调优技巧、垃圾回收算法等）——第13期

当涉及到Java虚拟机（JVM）时，面试官可能涉及更深入的问题，涵盖性能调优、垃圾回收算法、类加载机制等方面。什么是类加载机制？请解释类加载的过程。
Keep forward upup·2023-11-28 12:31

Nginx性能调优策略

以下是一些常见的Nginx性能调优策略：一、调整worker_processes和worker_connections在Nginx配置文件中，可以通过worker_processes和worker_connections
Y2000104·2023-11-28 10:34

apache doris windows下fe开发环境搭建

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星1.环境准备JDK1.8+,IntelljIDEA1.linux上编译好fe前端代码，主要目的是获取自动生成的代码
hf200012·2023-11-28 07:35

Apache Doris 系列： 入门篇-创建数据表

本文档我们介绍Doris怎么创建表及其他的相关操作。
hf200012·2023-11-28 07:35

Apache Doris 数据建模之 Aggregate Key 模型

了解Doris数据模型对于我们使用Doris来解决我们业务问题非常重要，这个系列我们将详细介绍Doris的三种数据模型及Doris数据分区分桶的一些策略，帮助用户更好的使用Doris。
hf200012·2023-11-28 07:35

Apache Doris Stream load 数据导入方式

ApacheDoris代码仓库地址：apache/incubator-doris欢迎大家关注加星1.概要Streamload是一个同步的导入方式，用户通过发送HTTP协议发送请求将本地文件或数据流导入到
hf200012·2023-11-28 07:05

Apache Doris 整合 FLINK 、 Hudi 构建湖仓一体的联邦查询入门

1.概览多源数据目录（Multi-Catalog）功能，旨在能够更方便对接外部数据目录，以增强Doris的数据湖分析和联邦数据查询能力。
hf200012·2023-11-28 07:59

Doris DUPLICATE KEY数据覆写方案

1.问题背景因为业务侧存在数据口径和ETL出错的问题，需要对数据历史部分数据进行删除后重新生成并写入的需求。2.实现步骤创建表CREATETABLEIFNOTEXISTStest1(`day`DATENOTNULLCOMMENT"default1980-00-00",`user_type`VARCHAR(20)COMMENT"",`product`VARCHAR(20)COMMENT"",`use
wangleigiser·2023-11-28 04:50

Doris的数据模型和增删改查操作

Doris的数据模型和增删改查Doris数据模型了解Doris的朋友都知道，Doris是一个MPP的分析型数据库。可以支持大数据下的实时分析。说到数据分析，不得不提的是Doris的数据模型。
Dennis985·2023-11-28 04:20

Zabbix 性能优化(学习笔记十八)

1、性能调优思路.不要使用默认的模板，应该自己定制模板.数据库调优.架构优化，如果使用分布式，各服务器功能独立.Items、trigger调优.更换更好的硬件2、性能调优参数zabbix_server.confStartPollers
SkTj·2023-11-28 00:17
上一页 7 8 9 10 11 12 13 14 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他