doris调优

JVM 调优指南

JVM调优指南Java虚拟机（JVM）的性能调优是保证Java应用程序高效运行的关键。通过合理的调优，可以提高程序的性能、降低延迟，以及更好地利用硬件资源。
hymua·2024-01-29 23:17

Hive调优 | Hive常见数据倾斜及调优技巧

Hive在执行MapReduce任务时经常会碰到数据倾斜的问题，表现为一个或者几个reduce节点运行很慢，延长了整个任务完成的时间，这是由于某些key的条数比其他key多很多，这些Key所在的reduce节点所处理的数据量比其他节点就大很多，从而导致某几个节点迟迟运行不完。那么经常有哪些情况会产生数据倾斜呢，又该如何解决，这里梳理了几种最常见的数据倾斜场景。一、小表与大表JOIN小表与大表Joi
王知无·2024-01-29 21:10

spark调优之资源调优

资源调优为spark程序提供合理的内存资源，cpu资源等spark-sumbmit脚本常见参数1、–confPROP=VALUE==》手动给sparkConf指定相关配置，比如–confspark.serializer
XLMN·2024-01-29 20:54

Oracle性能调优——查看执行计划

在对oracle查询进行优化的时候，我们可以通过查看SQL语句的解释计划，从而找到SQL查询缓慢的原因以及对应的优化方法。具体来说，查看SQL的解释计划，有三种方式：explainplanfor命令、PL/SQLDeveloper、OracleSQLDeveloper。其中，explainplanfor命令可以通过sqlplus执行，OracleSQLDeveloper在安装数据库的时候应该已经安
土土豆进·2024-01-29 17:12

mysql 慢查询调优实战

目录异常现象：进行复现：寻找原因：解决办法：办法一：指定执行索引办法二：先按二级索引里字段排序，再按id排序办法三：取消排序最终方案：复盘：异常现象：报错慢查询原sql：selectid,infoid,orderid,utel,stel,refusetime,reasoncd,reason,deleteflag,params,cityid,paidanid,cateid,baojieworkert
王木风·2024-01-29 14:22

Redis学习——高级篇②

==========Redis7高级之BigKey（二）==========1.MoreKey案例2.BigKey案例2.1多大算BigKey以及它的危害2.2如何产生、发现、删除3.bigKey生产调优
_Matthew·2024-01-29 08:22

doris安装文档翻译-标准部署(Standard deployment)

文档地址:对应1.2版本Standarddeployment-ApacheDorisThistopicisaboutthehardwareandsoftwareenvironmentneededtodeployDoris,therecommendeddeploymentmode,clusterscaling,andcommonproblemsoccurincreatingandrunningclu
zxfBdd·2024-01-29 06:11

BAT面试需要什么样的程序员？阿里七年经验面试官现身说法；

一、性能调优几乎每个JAVA后端开发程序员，都会在面试时碰到诸如如何性能调优的问题，如何回答好这个问题，不
风平浪静如码·2024-01-29 05:16

Spark | 记录下Spark作业执行时常见的参数属性配置

理解作业基本原理，是进行Spark作业资源参数调优的基本前提。
点滴笔记·2024-01-28 23:11

24件反人类服装设计，没有一件你能看懂

服装设计既要有很强的审美观和价值观，既然设计出来的衣服是要在生活中穿的，既要美观时尚，又要低调优雅，使服装永远不会落后，所以一个设计师在设计服装的过程中要忘掉自己是自
创意生活趣事·2024-01-28 21:30

剖析线程池ThreadPoolExecutor

文章目录线程池一、线程池概述二、ThreadPoolExecutor类详解三、线程池参数配置与优化四、线程池监控与调优五、线程池与其他并发工具比较六、线程池在实际应用中的案例分析案例背景线程池的配置配置线程池参数
小阳小朋友·2024-01-28 20:46

【JVM故障问题排查心得】「Java技术体系方向」Java虚拟机内存优化之虚拟机参数调优原理介绍

Java技术体系方向-JVM虚拟机参数调优原理内容简介栈上分配与逃逸分析逃逸分析(EscapeAnalysis)栈上分配基本思想使用场景线程私有对象虚拟机内存逻辑图JVM内存分配源码：代码总体逻辑在某些场景使用栈上分配设置
洛神灬殇·2024-01-28 16:00

1.doris简介

doris概述ApacheDoris是现代化的MPP（MassivelyParallelProcessing大规模并行处理）框架分析性数据库，有效支持实时数据分析，分布式架构简单，易于维护，支持10PB
夹毛局的程序员·2024-01-28 16:28

2.doris数据类型与分区

用户创建与授权--创建用户createuser'test'identifiedby'test';--创建数据库createdatabasetest_db;--授权用户grantallontest_dbtotest;建表语法CREATE[EXTERNAL]TABLE[IFNOTEXISTS][database.]table_name(column_definition1[,column_defini
夹毛局的程序员·2024-01-28 16:28

3.doris Rollup与索引

RollupROLLUP在多维分析中是“上卷”的意思，即将数据按某种指定的粒度进行进一步聚合基本概念在Doris中，我们将用户通过建表语句创建出来的表称为Base表（BaseTable）。
夹毛局的程序员·2024-01-28 16:28

4.Doris数据导入导出

导入Doris支持多种数据源导入如S3HDFSKafka本地文件Binlog等官方文档导入的原子性保证Doris的每一个导入作业，不论是使用BrokerLoad进行批量导入，还是使用INSERT语句进行单条导入
夹毛局的程序员·2024-01-28 16:27

Doris系列12-数据导入之Broker Load

名词解释：Frontend（FE）：Doris系统的元数据和调度节点。在导入流程中主要负责导入plan生
只是甲·2024-01-28 15:29

【字节跳动】资深后端开发工程师-平台应用服务

职位描述负责商业化基础服务系统能力建设，参与千亿级广告基础数据服务研发和优化，参与广告平台通用组件的设计和实现；负责多样化的商业平台应用服务研发，为客户提供智能、高效的营销能力；负责服务端系统架构设计研发、调优
探小虎·2024-01-28 12:48

Linux 磁盘IO

原文：MySQL调优基础(四)Linux磁盘IO-IT--小哥的个人空间-OSCHINA-中文开源技术交流社区一、IO处理过程磁盘IO经常会成为系统的一个瓶颈，特别是对于运行数据库的系统而言。
祁小彬·2024-01-28 12:51

Netty 参数调优

文章目录一、CONNECT_TIMEOUT_MILLIS二、SO_BACKLOG三、TCP_NODELAY四、SO_SNDBUF&SO_RCVBUF五、ALLOCATOR六、RCVBUF_ALLOCATOR一、CONNECT_TIMEOUT_MILLIS属于SocketChannal的参数用在客户端建立连接时，如果在指定毫秒内无法连接，会抛出timeout异常注意：Netty中不要用成了SO_TI
A.iguodala·2024-01-28 11:27

netty 性能调优

netty性能调优文件句柄一个tcp连接占用一个文件句柄，可调大服务器文件句柄限制，让netty服务端处理更多连接************进程文件句柄查看句柄限制：ulimit-u#centosroot
o_瓜田李下_o·2024-01-28 11:56

前传04 | Netty性能调优

前传04|Netty性能调优一、操作系统参数调试01文件描述符1）最大文件句柄数2）单进程打开的最大句柄数ulimit-n3）并发接入的TCP连接数02TCP/IP相关参数03多网卡队列和软中断二、Netty
天罚神·2024-01-28 11:26

netty性能调优

转载自STEPHEN的博客调优思路关于netty的学习和介绍，可以去github看官方文档，这里良心推荐《netty实战》和《netty权威指南》两本书，前者对于新手更友好，原理和应用都有讲到，多读读会发现很多高性能的优化点
tinysakurac·2024-01-28 11:54

前传05 | Netty安全调优

前传05|Netty安全调优01DDOS攻击01DDOS攻击根据三次握手原理，产生一种对服务器的攻击方式：DDOS攻击。
天罚神·2024-01-28 11:23

一波三折：一次CPU使用率过高故障分析SQL优化解决过程

关注我们获得更多内容作者|罗贵林：云和恩墨技术工程师，具有8年以上的Oracle数据库工作经验，曾任职于大型的国家电信、省级财政、省级公安的维护，性能调优等。
数据和云·2024-01-28 08:15

自动驾驶代客泊车AVP决策规划详细设计

为了打磨巡航规划的能力，算法架构应当设计的更为灵活，可以针对使用场景迁入更为先进有效的算法，同时也可以更好的结合现有成熟的仿真平台进行算法的离线调优；此外考虑到产品的设计需求以及硬件算力的限制，算法性能的优化也是十分重要的课题
电气_空空·2024-01-28 07:35

Doris数据库误删除恢复

如果不小心误删除了表，doris提供了恢复机制，但时间间隔不能超过一天，记得要迅速首先查看当前能恢复的记录有那些可以通过SHOWCATALOGRECYCLEBIN来查询当前可恢复的元信息，也可以在语句后面加
jinqianwang·2024-01-28 05:47

借助arthas 性能调优全过程

使用arthas的trace命令分析方法耗时瓶颈：可以看出bindReloadZoneTimeLimite耗时最久，通过分析Bind底层，将业务粒度进行拆分，加入并发执行再次使用arthas追踪单个方法耗时时间：核心耗时方法，速度优化将近4倍，总方法耗时优化1.5倍
CodingPeppa·2024-01-28 04:44

项目优化之Redis调优

公司项目使用的Redis调优1.最大物理内存2.键名简短(存储key)3.请求超时时间4.数据持久化策略5.优化AOF和RDB6.监控客户端的连接7.限制客户端连接数8.Redis的key过期策略以及内存淘汰机制
一只Black·2024-01-28 01:52

MySQL使用show profile调优

showprofile调优有时候使用explain执行计划发现其实是命中了索引的，但是还是很慢，此时可以使用profile功能，showprofile是mysql提供的可以用来分析当前会话中语句执行的资源消耗情况
拾光师·2024-01-27 21:28

JVM-G1 性能调优思路与实战

现在大多数公司的Java生产版本都是再JDK8，所以本次性能调优主要针对G1来展开GC的主要回收区域就是年轻代(younggen)、老年代(tenuredgen)、持久区（permgen）,在jdk8之后
菠萝-琪琪·2024-01-27 21:53

备战面试日记（2.6） - （JVM.JVM调优）

文章目录JVM-JVM调优JVM参数JVM参数设置方法JVM调优工具JPS、JMAP、JSTACKjconsolejvisualvm使用方式JVM调优方案调优原则调优目的从应用层面来说从虚拟机层面来说调优方案调
舍其小伙伴·2024-01-27 21:23

JVM系列之故障排查与性能调优（重点）

1、故障排查与性能调优1.1、概述1.1.1、生产环境中的问题？生产环境发生了OOM，该如何处理？如何判断是否是内存泄漏导致的？生产环境应该给Java进程分配多少内存？生产环境应该如何选择垃圾收集器？
后端技术那点事·2024-01-27 21:52

JVM性能调优详解（值得收藏）

JVM性能调优详解前面我们学习了整个JVM系列，最终目标的不仅仅是了解JVM的基础知识，也是为了进行JVM性能调优做准备。这篇文章带领大家学习JVM性能调优的知识。
java领域·2024-01-27 21:20

JVM系列-9.性能调优

原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成2023计划中：源码溯源，一探究竟联系方式：nhs19990716，加我进群，大家一起学习，一起进步，一起对抗互联网寒冬文章目录性能调优性能调优解决的问题性能调
爱吃芝士的土豆倪·2024-01-27 21:19

Apache Doris的Rollup和前缀索引

目录1.Aggregate表(Uniq表同理)添加rollup2.Duplicate表添加rollup3.key和前缀索引的关系、查询命中前缀索引的规则3.1key和前缀索引的关系3.2查询命中前缀索引的规则1.Aggregate表(Uniq表同理)添加rollup添加rollupmysql>mysql>altertabletable1addrolluprollup_city(name,city_
Bulut0907·2024-01-27 17:09

多场景下 3-11 倍性能提升，Apache Doris 1.2 新版本性能公开

自ApacheDoris1.1.0版本发布距今已经有数月之久，在这一期间，我们重新思考并确立了社区新版本发布的流程，正式引入了LTS（Long-TermSupport，长周期支持）版本的概念，在1.1.x系列版本中不再引入大的功能Feature、仅提供问题修复和稳定性改进，力求满足更多社区用户在稳定性方面的高要求。值得高兴的是，这一行动已经有了明显的成效，目前1.1.x系列最新版本的稳定性经受了众
SelectDB技术团队·2024-01-27 17:36

文本检索性能提升 40 倍，Apache Doris 倒排索引深度解读

在OLAP领域，ApacheDoris已成为高性能、高并发以及高时效性的代名词。在面向海量数据的复杂查询需求时，除硬件配置、集群规模、网络带宽等因素外，提升性能的核心在于如何最大程度地降低SQL执行时的CPU、内存和IO开销，而这其中数据库索引扮演着至关重要的角色。合理的索引结构设计可以跳过大量不必要的底层数据读取、快速检索定位到所需数据，并进一步提升后续计算的执行效率、降低查询SQL的运行时间和
SelectDB技术团队·2024-01-27 17:35

性能测试准备方案

性能测试目的性能调优开发人员对系统调优后，需要测试人员配合去做性能测试，验证这次优化是否有效果。如果性能指标相比较之前的性能指标更好了，说明系统优化的有效果。
美团程序员·2024-01-27 17:57

粒子群算法pos优化transformer 时间序列预测

对于Transformer模型，使用粒子群优化（ParticleSwarmOptimization,PSO）进行参数调优是一种策略。
mqdlff_python·2024-01-27 16:40

(lvs)高性能Linux服务器构建实战：运维监控、性能调优与集群应用

LVS三种模式：NAT，TUN,DR调度算法：rrwrrlcwlclblclblcrdhshLVS查看哪些IP连接过来：ipvsadm-LncLVS+keepalivedLVS+heartbeatLVS+piranha
SkTj·2024-01-27 15:19

Doris表格数据信息查看

1.查看当前数据库下所有表的信息SHOWTABLESTATUS;2.查看当前数据库表名包含test的数据表信息SHOWTABLESTATUSLIKE“%test%”;
荣~博客·2024-01-27 14:25

JVM调优

JVM调优-VisualVmVisualVm/Jconsule远程连接第一种方式第二种方式：java11开启远程GC连接(jstatd配置开启)如果还连不上考虑防火墙拦截了端口，firewall-cmd
程序员不是狗·2024-01-27 13:48

Java 自带的性能调优神器！！你还没用过吗？

VisualVM是Netbeans的profile子项目，已在JDK6.0update7中自带，能够监控线程，内存情况，查看方法的CPU时间和内存中的对象，已被GC的对象，反向查看分配的堆栈(如100个String对象分别由哪几个对象分配出来的)。在JDK_HOME/bin(默认是C:\ProgramFiles\Java\jdk1.6.0_13\bin)目录下面，有一个jvisualvm.exe文
就要学Java·2024-01-27 12:55

基于springboot和bootstrap的开源运维监控工具

如果做一些调优和加强，可支持5000+节点监控2.CPU监控，内存监控，系
王逅逅_f6c0·2024-01-27 11:57

Flink问题解决及性能调优-【Flink根据不同场景状态后端使用调优】

通过调优使用hashmap状态后端代替rocksdb状态后端，使吞吐量有了质的飞跃（20倍的性能提升），并分析整理。
PONY LEE·2024-01-27 08:21

Doris 与 Clickhouse 对比（一）

1.常用引擎☕️Doris表数据模型duplicatekey场景：适用于数据无需提前聚合的分析业务。⚠️注意点：只指定排序列，相同的行并不会合并。uniquekey场景：适用于有更新需求的业务。
大数据左右手·2024-01-27 08:14

JVM系列-8.GC调优

原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成2023计划中：源码溯源，一探究竟联系方式：nhs19990716，加我进群，大家一起学习，一起进步，一起对抗互联网寒冬文章目录GC调优
爱吃芝士的土豆倪·2024-01-27 08:06

JVM系列-7内存调优

原理如果感觉博主的文章还不错的话，请三连支持一下博主哦博主正在努力完成2023计划中：源码溯源，一探究竟联系方式：nhs19990716，加我进群，大家一起学习，一起进步，一起对抗互联网寒冬文章目录内存调优内存泄漏和内存溢出常见场
爱吃芝士的土豆倪·2024-01-27 08:32

我理解的虚拟电厂

概念虚拟电厂：是一种通过先进信息通信技术和软件系统，实现DG、储能系统、可控负荷、电动汽车等DER的聚合和协调优化，以作为一个特殊电厂参与电力市场和电网运行的电源协调管理系统。
杜占坤·2024-01-27 04:35
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他