JAAV性能调优

Kafka跨集群迁移方案MirrorMaker原理、使用以及性能调优实践

目录序言1.KafkaMirrorMaker基本特性2.新旧ConsumerAPI的使用问题3.负载不均衡原因诊断以及问题解决4.本身网络带宽限制问题5.适当配置单次poll的消息总量和单次poll()的消息大小6.恶劣网络环境下增加超时时间配置序言KakfaMirrorMaker是Kafka官方提供的跨数据中心的流数据同步方案。其实现原理，其实就是通过从SourceCluster消费消息然后将消
小昌昌的博客·2023-06-24 09:21

【MYSQL篇】mysql性能优化总结

前言说到MYSQL性能调优，大部分时候想要实现的目标是让我们的查询更快。一个查询的动作又是由很多个环节组成的，每个环节都会消耗时间，我们要减少查询所消耗的时间，就要从每一个环节入手。
初念初恋·2023-06-23 16:36

mysql日记---sql优化初级

有人会说性能调优是数据库管理员（DBA）的事，然而性能调优跟程序员们也有莫大的关系。程序中嵌入的一行行的SQL语句，如果使用了一些优化小技巧，定能达到事半功倍的效果。
神经电泳实现师·2023-06-23 11:01

内存不够用，那你的内存去哪了？

一、前言近几年开发了一些大型的应用程序，在程序性能调优或者解决一些疑难杂症问题的过程中，遇到最多的还是与内存相关的一些问题。
盈梓的博客小站·2023-06-23 01:38

数仓|Hive性能调优（二）

7、优化SQL处理join数据倾斜(1)空值或无意义值这种情况很常见，比如当事实表是日志类数据时，往往会有一些项没有记录到，我们视情况会将它置为null，或者空字符串、-1等。如果缺失的项很多，在做join时这些空值就会非常集中，拖累进度。因此，若不需要空值数据，就提前写where语句过滤掉。需要保留的话，将空值key用随机方式打散，例如将用户ID为null的记录随机改为负值：selecta.ui
Distantfbc·2023-06-22 08:48

关于 Web 应用的内联 css 和 scss 文件里的 var 关键字用法

为什么网站性能调优准则里都强调要UseinlinefontsandCSSinsteadofloadingthemasynchronously？
·2023-06-22 01:33

pyspark系列9-Spark性能调优概述

一.Spark性能优化概述首先笔者能力优先，使用Spark有一段时间，如下是笔者的工作经验的总结。Spark任务运行图:image.pngSpark的优化思路:一般是从3个层面进行Spark程序的优化:运行环境优化RDD算子优化参数微调二.运行环境优化2.1数据本地性我们知道HDFS的数据文件存储在不同的datanode，一般数据副本数量是3，因为Spark计算的数据量比较大，如果数据不在本节点，
只是甲·2023-06-22 00:11

ClickHouse性能调优之排序和数据类型

每个DBA都关心数据库性能调优，我们知道不同数据类型可以描述不能业务场景，同时也影响数据访问和有效存储。
梦想画家·2023-06-20 21:27

Koordinator v1.1发布：负载感知与干扰检测采集

背景Koordinator旨在为用户提供完整的混部工作负载编排、混部资源调度、混部资源隔离及性能调优解决方案，帮助用户提高延迟敏感服务的运行性能，挖掘空闲节点资源并分配给真正有需要的计算任务，从而提高全局的资源利用效率
·2023-06-20 16:18

【AntDB数据库】AntDB数据库性能调优（二）

网络配置尽管网络堆栈在很大程度上是自我优化的。但是在网络数据包处理过程中，以下方面可能会成为瓶颈并降低性能：网卡硬件缓存：正确观察硬件层面的丢包方法是使用ethtool-S${NIC_DEV_NAME}命令观察drops字段。当出现丢包现象时，主要考虑是硬/软中断的处理速度跟不上网卡接收速度。若接收缓存小于最大限制时，也可尝试增加RX缓存来防止丢包。查询命令为：ethtool-g${NIC_DEV
亚信安慧AntDB数据库·2023-06-20 13:38

【AntDB数据库】AntDB数据库性能调优（一）

操作系统处理器——动态节能技术cpufreq是一个动态调整CPU频率的模块，可支持五种模式。为保证服务性能应选用performance模式，将CPU频率固定工作在其支持的最高运行频率上，不进行动态调节，操作命令为cpupowerfrequency-set--governorperformance。处理器——中断亲和性自动平衡：可通过irqbalance服务实现。手动平衡：确定需要平衡中断的设备，从
亚信安慧AntDB数据库·2023-06-20 13:38

KVM虚拟机IO性能调优

KVM虚拟机IO性能调优我们知道OpenStack中nova组件能够支持很多种虚拟化方式，官方目前主推的KVM，面向KVM虚拟化支持的功能也是最多的，它能够和neutron组件有很好的结合。
·2023-06-19 17:12

Spark-核心常见面试题集锦(RDD、shuffle类型、数据倾斜优化、小文件问题、性能调优、streaming流程、checkpoint机制)

1Spark的任务执行流程第一种standalone模式整体：driver中有sparkcontext，RDDDAG和DAGScheduler和taskscheduler，master是资源管理，worker中executor，executor中有多个task构建一个application环境，driver创建sparkcontextsparkcontext中的taskcheduler连接到集群管
:Concerto·2023-06-19 14:48

JMH实战

引言性能调优一直是工作中很重要的必会技能，如何知晓自己写代码的优劣呢？当然是看代码运行时间，时间越短，说明代码越优。
demon7552003·2023-06-19 07:02

全国大数据与计算智能挑战赛：面向低资源的命名实体识别基线方案，排名13/64，组织单位：国防科技大学系统工程学院（大数据与决策实验室）

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-06-18 23:56

性能测试基础笔试题

1.性能测试应用领域有哪些能力验证：乙方通过性能测试向甲方证明自己所陈述的能力，出具报告瓶颈分析：能力验证过程中发现性能瓶颈，找到性能问题性能调优：针对发现的性能瓶颈和问题做调优容量规划：着眼于未来。
虚幻如影·2023-06-18 17:19

JVM底层原理分析 + 性能调优

基本概念——JVM位置JVM运行在操作系统之上的，与硬件没有直接的交互——体系结构1.类装载器ClassLoader负责加载class文件，class文件在文件开头有特定的文件标示（cafebabe），将class文件字节码内容加载到内存中，并将这些内容转换成方法区中的运行时数据结构并且ClassLoader只负责class文件的加载，至于它是否可以运行，则由ExecutionEngine决定并不
程序少年不秃头·2023-06-18 09:38

使用Filebeat和AWS CloudWatch Logs将EC2上的Tomcat的access_log传送到ELasticsearch中并使用ILM完成日志的自动管理

日志数据配置ILM性能调优配置Filebat的内部队列大小如何验证queue.mem是合理且正确的？配置output部分的worker和bulk_max_size测试结果
JackSparrow414·2023-06-18 04:23

服务日志性能调优，由log引出的巨坑

只有被线上服务问题毒打过的人才明白日志有多重要！谁赞成，谁反对？如果你深有同感，那恭喜你是个社会人了：）日志对程序的重要性不言而喻，轻巧、简单、无需费脑，程序代码中随处可见，帮助我们排查定位一个有一个问题问题。但看似不起眼的日志，却隐藏着各式各样的“坑”，如果使用不当，不仅不能帮助我们，反而会成为服务“杀手”。如果你想学习jmeter性能测试，我这边给你推荐一套视频，这个视频可以说是B站播放全网第
测试猿廖廖·2023-06-18 03:05

Doris开发手记4：倍速性能提升，向量化导入的性能调优实践

正好有Doris社区的小伙伴吐槽向量化的导入性能表现并不是很理想，就借这个机会对之前开发的向量化导入的工作进行了性能调优，取得了不错的优化效果。
LeeHappen·2023-06-18 01:23

JVM基础总结

线程共享堆内存溢出【OutOfMemoryError：Javaheapspace】堆内存诊断五、方法区【MethodArea】线程共享运行时常量池StringTable特性【面试常考】StringTable性能调优直接内存直
Bwy_1004·2023-06-17 23:08

2023中国高校计算机大数据挑战赛：论文学科分类baseline|清华主办

NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法、文本信息抽取、多模态信息抽取、可解释性分析、性能调优、模型压缩算法等专栏详细介绍：NLP专栏简介：数据增强、智能标注、意图识别算法|多分类算法
汀、人工智能·2023-06-17 23:08

ClickHouse性能调优——压缩和编码算法

随着数据库数据越来越多，给数据存储、网络访问造成成本和负担。压缩技术节约存储空间、加速网络访问的常用解决方案，本文主要介绍压缩算法和ClickHouse编码技术。压缩类型ClickHouse协议支持LZ4和ZSTD压缩算法，两者都是基于字典使用校验和的压缩算法，LZ4较快、但压缩率比ZSTD较低。你可以选择合适算法，缺省为LZ4，当不确定选择哪种算法时建议使用LZ4。对于MergeTree引擎表，
梦想画家·2023-06-16 20:13

AntDB数据库性能调优方案介绍

AntDB性能调优CPU适用场景interlAMDARM1.批量运行大数据量查询2.大量数据排序AntDB4.xYYYAntDB5.xYYYAntDB6.xYYY1.并发量大2.小查询多AntDB4.xYYAntDB5
亚信安慧AntDB数据库·2023-06-16 19:34

性能测试流程

性能测试实战一.资源指标分析1.判断CPU是否瓶颈的方法2.判断内存是否瓶颈的方法3.判断磁盘I/O是否瓶颈的方法4.判断网络带宽是否是瓶颈的方法二.系统指标分析三.性能调优四.性能测试案例1.项目背景
IT-小公主·2023-06-16 01:29

飞腾性能调优

NUMA21世纪以来随着科技大步想抢进步，信息时代来临，5G、云计算、物联网等技术蓬勃发展，而这一切都离不开大量数据的交互以及庞大的运算，在这其中，电脑的“心脏”----CPU，起到了扮演着举足轻重的作用，但是功耗和冷却两大限制极大的影响了单核算力的发展，为了满足这些需求，多核架构成为最重要的演进方向，其中ARM在多核和功耗方面一直走在世界的前列。最早的多核处理器多使用SMP（SymmetricM
d1306937299·2023-06-15 22:26

基于jdk1.8的Java服务监控和性能调优

JVM的参数类型X参数非标准参数-Xint:解释执行-Xcomp:第一次使用就编译成本地代码-Xmixed:JVM自己来决定是否编译成本地代码默认使用的是mixedmode用的不多,只需要做了解,用的比较多的是XX参数XX参数非标准化参数相对不稳定主要用来JVM调优和DebugBoolean:格式:-XX:[+-]表示启用或禁用name属性比如:-XX:+UseConcMarkSweepGC,表示
Box_clf·2023-06-15 08:36

kettle配置及性能调优

性能调优在整个工程中是非常重要的，也是非常有必要的。其实性能调优主要分两个方面：一方面是硬件调优，一方面是软件调优。本章主要是介绍Kettle的性能优化及效率提升。
程序猿羊·2023-06-15 02:00

如何实现对 Oracle 的实时数据捕获和性能调优｜Flink CDC 专题

Flink-learning学训平台和FlinkCDC专题课程来啦！为帮助开发者更系统化、更便捷地学习应用Flink，我们搭建了Flink-learning学训平台，为开发者提供丰富的图文、音频、视频、动手实验等多形式课程和学习素材，助力开发者提升自身技术能力。首期FlinkCDC专题正式发布，后续将逐步上线更多精品课程。本期FlinkCDC专题从技术原理、生产应用到动手实践，包含Flink与Mo
·2023-06-14 18:14

Linux性能调优工具

性能观察工具静态性能工具性能压测工具性能调优工具sarperf-tools追踪工具BPF性能工具
bbj1030·2023-06-14 12:39

我眼中的架构师：一个优秀的架构师应该具备什么？

性能调优、Spring，MyBatis，Netty源码分析的朋友可以加我的Java高级架构进阶群：180705916，群里有阿里大牛直播讲解技术，以及Java大型互联网技术的视频免费分享给大家格局“格局
高级java架构师·2023-06-14 02:38

如何分析问题、找到性能瓶颈、掌握性能调优？一文讲懂性能测试

背景当下云计算、大数据盛行的背景下，大并发和大吞吐量的需求已经是摆在企业面前的问题了，其中网络的性能要求尤为关键，除了软件本身需要考虑到性能方面的要求，一些硬件上面的优化也是必不可少的。作为一名测试工作者，对于性能测试的问题肯定不会陌生，但是测试不仅仅是执行和收集数据，更多的应该是分析问题、找到性能瓶颈以及一些优化工作。毕竟在客户现场测试性能的时候，能够通过一些系统层面的调优，提升软件的性能，那对
软件测试小仙女·2023-06-14 00:01

服务日志性能调优，由log引出的巨坑

只有被线上服务问题毒打过的人才明白日志有多重要！谁赞成，谁反对？如果你深有同感，那恭喜你是个社会人了：）日志对程序的重要性不言而喻，轻巧、简单、无需费脑，程序代码中随处可见，帮助我们排查定位一个有一个问题问题。但看似不起眼的日志，却隐藏着各式各样的“坑”，如果使用不当，不仅不能帮助我们，反而会成为服务“杀手”。如果你想学习性能测试，我这边给你推荐一套视频，这个视频可以说是B站播放全网第一的接口测试
测试小鬼·2023-06-13 21:56

直播预告 | 博睿学院：算法平台底座-数据湖应用

本期讲师明秀平博睿数据数智能力中心AI研发工程师业务专长：平台搭建，性能调优，算法设计工作经历：
·2023-06-13 18:32

服务日志性能调优，由log引出一系列的事故

只有被线上服务问题毒打过的人才明白日志有多重要！谁赞成，谁反对？如果你深有同感，那恭喜你是个社会人了：）日志对程序的重要性不言而喻，轻巧、简单、无需费脑，程序代码中随处可见，帮助我们排查定位一个有一个问题问题。但看似不起眼的日志，却隐藏着各式各样的“坑”，如果使用不当，不仅不能帮助我们，反而会成为服务“杀手”。本文主要介绍生产环境日志使用不当导致的“坑”及避坑指北，高并发系统下尤为明显。同时提供一
程序员木江·2023-06-13 15:52

MySQL的索引覆盖和索引下推

在MySQL数据库中，索引对查询的速度有着至关重要的影响，理解索引也是进行数据库性能调优的起点，索引就是为了提高数据查询的效率。
六千江山·2023-06-13 14:58

MySQL 性能调优及生产实战篇终版

优化数据访问查询数据低效原因是否请求了不需要的数据优化执行过程查询缓存查询优化处理语法解析器查询优化器优化器的优化策略优化器的优化类型关联查询排序优化大数据量查询优化优化COUNT查询优化关联查询优化子查询优化LIMIT分页优化union用户自定义变量海量数据解耦优化处理总结前言博文：MySQL性能调优及生产实战篇
vnjohn·2023-06-13 06:54

java面试题/认证答辩 ---中间件

Nginx掌握：掌握ActiveMQ/RabbitMQ/kafka等至少一种消息中间件，redis等nosql，Nginx精通：深入理解消息队列、nosql、nginx的原理和模式综合应用：具备常用中间件的性能调优
Fuly1024·2023-06-13 06:32

高频面试题 ----------JVM调优

JVM性能调优的原则有哪些？什么情况下需要JVM调优？在JVM调优时，你关注哪些指标？JVM常用参数有哪些？JVM常用性能调优工具有哪些？线上排查问题的一般流程是怎么样的？什么情况下，会抛出OOM呢？
Connection Reset·2023-06-13 04:10

hadoop hdfs 性能调优

说明其实hdfs并不适合作为小文件的分布式存储系统.前人埋下的坑....背景一次线上环境的hdfsnamenode进程打满cpu.一直在百分之67百.namenode一直在做fullgc,此时hdfs基本处于不可用状态,此时系统可用内存又不足,而且cpu负载很高.由于这个环境第一次接手维护.这篇文章主要总结下如何做的优化.环境:hadoop版本:Hadoop2.6.0-cdh5.5.0服务器:Ce
oo_思维天空·2023-06-13 04:23

在失败中崛起,我总结出这份《MySQL性能调优笔记》

《MySQL性能调优学习导图》概要说明：本文篇幅有限，故只展示部分内容，《MySQL性能调优学习导图》收集整理不然后添加vx【MXX-0474QAQ】即可免费获取下载方式易，有需要的朋友麻烦帮忙转发一下
Java布道者-小轩·2023-06-13 04:50

软件架构师考试有什么建议，综合知识哪些知识点每年必考

对性能调优、安全设计、容灾备份等方面有一定的实践经验
又可乐·2023-06-13 00:43

Apache Hive函数高阶应用、性能调优

Hive的函数高阶应用explode函数explode属于UDTF函数，表生成函数，输入一行数据输出多行数据。功能：explode()takesinanarray(oramap)asaninputandoutputstheelementsofthearray(map)asseparaterows.--explode接收maparray类型的参数把map或者array的元素输出，一行一个元素。exp
小布先生~噫嘘唏·2023-06-12 20:36

通过 HTTP/2 协议案例学习 Java & Netty 性能调优：工具、技巧与方法论

除易用性以外，Dubbo3Triple在性能调优
·2023-06-12 17:11

阿里2023年版十亿级并发系统设计+java性能优化实战文档

没准备好也别怕，小编给大家准备好了2021年最新版阿里巴巴十亿级并发系统设计+阿里巴巴java性能调优实战两份学习文档，让你面试阿里不再难，希望大家能够喜欢！
程序猿java易·2023-06-12 15:54

阿里内部高并发核心编程笔记：多线程、锁、JMM、JUC、设计模式

前两天看到一个大佬写的博客，提到高阶开发者必须掌握的技能，其中他明确提出了“精通多线程性能调优”。为什么多线程对开发人员如此重要？
写代码的珏秒秒·2023-06-12 15:54

如何合理设计并利用索引

节选自《MySQL性能调优与架构设计》一书。
Tony4Buaa·2023-06-12 13:10

JVM 学习(用 VisualVM监控JVM内存和GC情况)

1.0VisualVM介绍VisualVM是JDK自带的一款全能型性能监控和故障分析工具，包括对CPU使用、JVM堆内存消耗、线程、类加载的实时监控，内存dump文件分析，垃圾回收运行情况的可视化分析等，对故障排查和性能调优很有帮助
wuffy·2023-06-12 12:31

Prometheus监控指标查询性能调优

01背景在《SRE:Google运维解密》一书中作者指出，监控系统需要能够有效的支持白盒监控和黑盒监控。黑盒监控只在某个问题目前正在发生，并且造成了某个现象时才会发出紧急警报。“白盒监控则大量依赖对系统内部信息的检测，如系统日志、抓取提供指标信息的HTTP节点等。白盒监控系统因此可以检测到即将发生的问题及那些重试所掩盖的问题等”。为了完善系统的白盒监控，会员团队基于Prometheus+Grafa
爱奇艺技术产品团队·2023-06-11 11:47

GreenPlum中性能调优之shared_buffers修改

问题背景：刚刚安装完的GreenPlum集群默认shared_buffers为128MB，为了提升系统性能需要修改。shared_buffers：该参数决定了Greenplum数据库在内存中缓存数据的大小。建议将该参数设置为总内存的25%左右。官方文档中建议修改为机器物理内存的1/8-1/4，书籍推荐10-25%。查看当前数据库的shared_buffers(数据库中查询即可)：SHOWshare
清纯男孩·2023-06-10 20:21
上一页 14 15 16 17 18 19 20 21 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他