E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
慢查询调优
火眼金睛破局ES伪
慢查询
| 京东物流技术团队
一、问题现象服务现象服务接口的TP99性能降低ES现象YGC:耗时极其不正常,峰值200+次,耗时7s+FULLGC:不正常,次数为1但是频繁,STW5s
慢查询
:存在
慢查询
5+二解决过程1、去除干扰因素从现象上看应用是由于某种原因导致
京东云开发者
·
2023-12-15 16:34
数据库
elasticsearch
大数据
搜索引擎
给祖传系统做了点 GC
调优
,暂停时间降低了 90%
一、问题描述公司某规则引擎系统,在每次发版启动会手动预热,预热完成当流量切进来之后会偶发的出现一次长达1-2秒的YoungGC(流量并不大,并且LB下的每个节点都会出现该情况)。在这次长暂停之后,每一次的年轻代GC暂停时间又都恢复在20-100ms以内。2秒虽然看起来不算长吧,但规则引擎每次执行也才几毫秒,这谁能忍?而且这玩意一旦超时,出单可能也跟着超时失败!二、问题分析在分析该系统GC日志后发现
京东云开发者
·
2023-12-15 16:03
给祖传系统做了点 GC
调优
,暂停时间降低了 90% | 京东云技术团队
问题描述公司某规则引擎系统,在每次发版启动会手动预热,预热完成当流量切进来之后会偶发的出现一次长达1-2秒的YoungGC(流量并不大,并且LB下的每个节点都会出现该情况)在这次长暂停之后,每一次的年轻代GC暂停时间又都恢复在20-100ms以内2秒虽然看起来不算长吧,但规则引擎每次执行也才几毫秒,这谁能忍?而且这玩意一旦超时,出单可能也跟着超时失败!问题分析在分析该系统GC日志后发现,2s暂停发
京东云开发者
·
2023-12-15 16:33
上手实操
京东云
GC
JVM调优
Java
后端
Hbase性能
调优
client端HTable.setAutoFlush(false)关闭客户端自动刷新HTable.setWriteBufferSize(writeBufferSize)设置HTable客户端的写buffer大小,与上面的参数配合使用。当达到设置的writeBufferSize时,才会触发提交到服务端的请求。(不适合实时读写业务)Put.setWriteToWAL(false)关闭WAL日志客户端向
onwingsofsong
·
2023-12-15 14:51
Oracle开发和应用——基本SQL语句2(SELECT)
6.3.4.select语句select语句,可以说是关系库中最主要、最常用、最复杂的SQL语句,SQL
调优
也主要集中于select相关语句。
lhdz_bj
·
2023-12-15 12:20
oracle
SQL
select
join
order
group
子查询
SQL Server查询计划(Query Plan)——图形查询计划
6.4.查询计划与Oracle等其他关系库类似,SQLServer中,查询计划是进行SQL
调优
的基础,没有拿到SQL语句的查询计划之前,任何人都没办法对其性能方面进行准确的分析和判断,也没办法对相关性能问题进行精准的定位
lhdz_bj
·
2023-12-15 12:20
SQL
Server
SQL性能优化
SQL
SERVER
plan
计划
图形
评估
真实
浅谈ClickHouse性能监控与
调优
ClickHouse性能监控与
调优
ClickHouse是一个高性能的列式数据库管理系统,适用于实时分析和大数据处理。
~奔跑的简默~
·
2023-12-15 12:58
ClickHouse系列
clickhouse
大数据
性能优化
JVM-GC
调优
-字节码篇-01
笔记来源:JVM注意:实在想学习可以看一下,让自己更加了解JVM,看起来可能会枯燥。JVM-概述1、你的问题1.1你被JVM伤害过吗?你是否也遇到过这些问题?运行着的线上系统突然卡死,系统无法访问,甚至直接OOM!想解决线上JVMGC问题,但却无从下手。新项目上线,对各种JVM参数设置一脸茫然,直接默认吧,然后就JJ了每次面试之前都要重新背一遍JVM的一些原理概念性的东西,然而面试官却经常问你在实
渣渣龙_拽得很
·
2023-12-15 11:40
jvm
jvm
SQL进阶理论篇(一):数据库的
调优
文章目录简介数据库
调优
的目标可供选择的维度参考文献简介本节主要分为以下三方面内容:数据库
调优
的目标是什么?如果要进行
调优
,都有哪些维度可以选择?如何思考和分析数据库
调优
?
经年藏殊
·
2023-12-15 09:32
#
SQL基础
数据库
sql
database
Tomcat部署与
调优
目录前瞻什么是tomcat?什么是servlet?什么是JSP?Tomcat功能组件结构Container结构分析Tomcat请求过程Tomcat服务部署1.关闭防火墙,将安装Tomcat所需软件包传到/opt目录下2.安装JDK3.设置JDK环境变量4.安装启动Tomcat5.添加到systemd服务中6.检测是否成功开启tomcat7.优化tomcat启动速度Tomcat虚拟主机配置实验场景实
GnaW1nT
·
2023-12-15 08:00
tomcat
java
(Linux内核源码分析)Linux 内核无线子系统
Linux内核源码分析(内存
调优
/文件系统/进程管理/设备驱动/网络协议栈)1.全局概览在开始探索Linux无线具体细节之前,让我们先来把握一下Linux无线子系统整体结构。
攻城狮百里
·
2023-12-15 08:59
Linux
linux
【Spark精讲】RDD特性之数据本地化
目录首选运行位置数据的本地化级别谁来负责数据本地化数据本地化执行流程
调优
代码中的设置方法首选运行位置上图红框为RDD的特性五:每个RDD的每个分区都有一组首选运行位置,用于标识RDD的这个分区数据最好能够在哪台主机上运行
话数Science
·
2023-12-15 07:58
Spark精讲
Spark
大数据
spark
大数据
AI训练师常用的ChatGPT通用提示词模板
模型
调优
:如何优化模型的性能?模型部署:如何将训练好的模型部署到实际应用中?模型监控与维护:如何监控和维护模型的性能和稳定性?模型更新与升级:如何
BTCKing
·
2023-12-15 06:49
人工智能
chatgpt
深度学习
分页操作中使用LIMIT和OFFSET后出现
慢查询
的原因分析
事情经过最近在做批量数据处理的相关业务,在和下游对接时,发现拉取他们的业务数据刚开始很快,后面会越来越慢,40万数据一个小时都拉不完。经过排查后,发现对方用了很坑的分页查询方式——LIMITOFFSET,导致数据量大的时候查询效率爆低。简单分享下,为什么使用了LIMITOFFSET会导致查询效率变低——主要原因1.数据库扫描:当OFFSET值很大时,数据库引擎需要扫描和跳过OFFSET行之前的数据
花生君
·
2023-12-15 06:33
经验分享
oracle
数据库
mysql
分布式解决方案与实战
分布式多线程性能
调优
使用多线程优化接口//下单业务publicObjectorder(longuserId){longstart=System.currentTimeMillis();//方法的开始时间戳
渔阳节度使
·
2023-12-15 06:07
分布式
探索AIGC未来:CPU源码优化、多GPU编程与中国算力瓶颈与发展
;边缘计算;大模型显存占用;5G;深度学习;A100;H100;A800;H800;L40s;Intel;英伟达;算力近年来,AIGC的技术取得了长足的进步,其中最为重要的技术之一是基于源代码的CPU
调优
高性能服务器
·
2023-12-15 04:30
AIGC
Redis | 第9章 Lua 脚本与排序《Redis设计与实现》
前言参考资料:《Redis设计与实现第二版》;第三部分为独立功能的实现,主要由以下模块组成:发布订阅、事务、Lua脚本、排序、二进制位数组、
慢查询
日志、监视器;本篇将介绍Redis的Lua脚本与排序。
多氯环己烷
·
2023-12-15 04:31
2023五岳杯量子计算挑战赛数学建模思路+代码+模型+论文
目录计算力网络(CPN)是一种新型的信息基础设施,完整论文代码见文末问题描述2.1问题12.2问题22.3问题3问题1的解答过程:问题3的解答过程:决策优化应用场景:人工智能模型超参数
调优
背景信息:研究方法
C灿灿数模
·
2023-12-15 03:52
数码相机
PyTorch 模型训练性能大揭秘:从基础到高级技巧一网打尽!
《PyTorch模型训练性能
调优
宝典》是解决PyTorch训练性能和效率问题的首选宝典。适用对象包括:AI/ML平台工程师、数据平台工程师、后端软件工程师、MLOps工
Python算法实战
·
2023-12-15 02:58
大模型理论与实战
大模型
深度学习
大模型
语言模型
pytorch
LLM
浅谈web性能测试
性能测试,简而言之就是模仿用户对一个系统进行大批量的操作,得出系统各项性能指标和性能瓶颈,并从中发现存在的问题,通过多方协助
调优
的过程。
测试界柠檬
·
2023-12-15 00:17
软件测试
自动化测试
软件测试工程师
压力测试
单元测试
功能测试
程序人生
职场和发展
Gateway全局异常处理及请求响应监控
前言我们在上一篇文章基于压测进行Feign
调优
完成的服务间调用的性能
调优
,此时我们也关注到一个问题,如果我们统一从网关调用服务,但是网关因为某些原因报错或者没有找到服务怎么办呢?
shark-chili
·
2023-12-14 21:07
微服务
微服务
gateway
JVM 命令行监控及诊断工具
(字节跳动)JVM诊断
调优
工具用过哪些?(京东)怎么获取Java程序使用的内存?堆使用的百分比?(国美)几种常用的内存调试工具你知道哪些?(搜狐)JVM诊断
调优
工具用过哪些?
Please Sit Down
·
2023-12-14 20:40
JVM
Java
jvm
java
Ceph Cookbook 中文版
1、ceph介绍、ceph块存储、ceph对象存储、ceph文件系统、用Calamari监控Ceph、操作和管理ceph集群、深入ceph、ceph生产计划和性能
调优
、ceph虚拟存储管理器、ceph扩展
SkTj
·
2023-12-14 20:41
Java性能
调优
实战》笔记(二)JVM优化、设计模式优化
文章目录一、JVM优化1.1即时编译器JIT 类编译加载执行过程: 初始化完成后,类在调用执行过程中,执行引擎会把字节码转为机器码,然后在操作系统中才能执行。在字节码转换为机器码的过程中,虚拟机中还存在着一道编译,那就是即时编译。 最初,虚拟机中的字节码是由解释器(Interpreter)完成编译的,当虚拟机发现某个方法或代码块的运行特别频繁的时候,就会把这些代码认定为“热点代码”。 为了
马小瑄
·
2023-12-14 20:52
【Java面试——JVM和
调优
】
JVM虚拟机和
调优
相关。5.1类加载机制类加载的生命周期?其中类加载的过程包括了加载、验证、准备、解析、初始化五个阶段。
奥耶可乐冰
·
2023-12-14 20:25
面试
java
面试
jvm
Kafka集群
调优
+能力探底
一、前言我们需要对4个规格的kafka能力进行探底,即其可以承载的最大吞吐;4个规格对应的单节点的配置如下:标准版:2C4G铂金版:4C8G专业版:8C16G企业版:16C32G另外,一般来讲,在同配置下,kafka的读性能是要优于写性能的,写操作时,数据要从网卡拷贝至堆内存,然后进行一堆数据校验、解析后,会将数据拷贝至堆外内存,然后再拷贝至操作系统的pagecache,最后操作系统异步刷盘至设备
快乐非自愿
·
2023-12-14 19:44
kafka
linq
分布式
做好APP广告联调测试,不断提升广告变现收益
APP广告联调测试的作用:变现冷启动阶段,帮助制定广告变现策略;广告变现开始后,验证实际效果;帮助分析诊断变现问题原因;
调优
既定运营策略与优化;持续优化变现策略形
AdSet聚合广告平台
·
2023-12-14 19:01
贝叶斯参数
调优
Grouping遗传算法求解带时间窗和异质车队的多车场取送货问题
贝叶斯优化:贝叶斯优化(BayesianOptimization)是一种用于参数
调优
的算法。在元启发式算法中,参数设置对算法的性能有很大影响,而确定最佳参数配置需要大量的目标函数评估,非常耗时。
Zzzzzzz_s
·
2023-12-14 18:09
启发式算法
【Python百宝箱】从平凡到卓越:如何通过评估和
调优
提升机器学习模型质量
提升机器学习模型性能的终极指南:评估和
调优
工具大揭秘前言在机器学习领域,评估和
调优
是提升模型性能的关键步骤。
friklogff
·
2023-12-14 18:22
人工智能
python
开发语言
机器学习
长话短说stacking集成学习算法,保证你能看得懂(2)
第一步,进行初级学习,生成次级学习器的训练集(X_train_new,y_train)和测试集(X_test_new,y_test)(篇幅所限,我们在此假设每个基模型都是经过参数
调优
处理的优良模型,具体如何进行参数优化请参见相关文献
interbigdata
·
2023-12-14 18:44
机器学习
stacking
机器学习
集成学习
Java 线程池的学习总结
线程是稀缺资源,如果无限制的创建,不仅会消耗系统资源,还会降低系统的稳定性,使用线程池可以进行统一的分配,
调优
和监控。二、线程池的创建1、线程池的7个参数:①corePoolSize:核心线程数。
Double丶11
·
2023-12-14 14:53
java
MySQL查看数据库性能常用命令
查看数据库性能常用命令一、查询服务器状态和配置列出MySQL服务器运行各种状态值:mysql>showglobalstatus;查询MySQL服务器配置信息语句:mysql>showvariables;二、
慢查询
梦翼横空
·
2023-12-07 00:19
mysql
服务器
数据库
mysql
记一次校园双选会面试问到的题
创建对象方式线程安全和那些锁stringbuffbuild区别反射原理集合底层存储引擎myisam和innodbB+树,
慢查询
,sql优化数据库三大范式左右内连接分别的效果谈谈boot和spring,常用注解
白日日白
·
2023-12-06 22:04
java
ElasticSearch部署架构和容量规划
一、前言前面介绍了ElasticSearch原理和使用相关的内容,在生产环境如何比较科学的进行容量规划、部署、
调优
、排查问题呢,业界和官方也对相关的问题进行总结,我这边也结合自己的经验对这些使用ElasticSearch
IT巅峰技术
·
2023-12-06 21:23
Spark面试题汇总
问题汇总SparkSQL
调优
:场景是怎样的?怎么发现的?怎么定位的?怎么解决的?达到了一个怎样的效果?引申下还有哪些更好的优化方案?UDF怎么管理的,如何避免重复的UDF的提交?
话数Science
·
2023-12-06 21:04
Spark
大数据
面试
spark
大数据
Tomcat 的工作原理
刚入社会的时候,我还是通过Tomcat手动部署JavaWeb项目,还经常对Tomcat进行性能
调优
。除此之外,还需要自己理清楚各Jar之间的关系,以避免Jar丢失和各版本
公子小白123
·
2023-12-06 20:45
JVM常用
调优
参数
针对Java虚拟机(JVM)的性能
调优
,有一些常见的
调优
参数可以用来提高应用程序的性能和稳定性。
一个搬砖的农民工
·
2023-12-06 17:34
JVM
jvm
count(*)查询性能很差?用这5招轻松优化
前言最近我在公司优化过几个
慢查询
接口的性能,总结了一些心得体会拿出来跟大家一起分享一下,希望对你会有所帮助。我们使用的数据库是Mysql8,使用的存储引擎是Innodb。
Java码农
·
2023-12-06 17:31
社区投稿 | 常见的slave延迟场景分析
作者介绍:杨奇龙,网名“北在南方”,7年DBA老兵,目前任职于杭州有赞科技DBA,主要负责数据库架构设计和运维平台开发工作,擅长数据库性能
调优
、故障诊断。
爱可生开源社区
·
2023-12-06 13:04
线程池原理初探
线程是稀缺资源,如果无限制的创建,不仅会消耗系统资源,还会降低系统的稳定性,使用线程池可以进行统一的分配,
调优
和监控。但是要做到合理的利用线程池,必须对其原理了如指掌。2.线程池的使用
.守心.
·
2023-12-06 12:11
笔记
java
mysql语句性能分析工具——profiling
以往我们已经介绍了一个mysql的分析工具:mysql
慢查询
日志分析工具(pt-query-digest),可以看我的文章:mysql
慢查询
日志分析工具(pt-query-digest)-CSDN博客一
zyjzyjjyzjyz
·
2023-12-06 12:59
mysql
数据库
sql
sql分析工具
性能分析
为什么用了索引,查询还是慢
一个sql语句使用了索引,为什么还是会进入到
慢查询
中?
不减30斤不改名_TC
·
2023-12-06 12:02
为什么要做ERP集成?ERP系统如何与其他业务应用程序集成
ETL集成能够将这些功能模块与其他业务系统(如客户关系管理系统、物流系统、电子商务平台等)进行连接,实现不同系统间的信息共享以及业务流程的协
调优
化
ETLCloud数据集成社区
·
2023-12-06 12:00
etl
ETL
数据集成
erp
ZFS管理手册:第七章池的属性
动机对于ext4和GNU/Linux中的许多文件系统,我们可以通过设置各种flags来对文件系统进行
调优
。比如设置标签、默认挂载选项和其他可调参数。对于ZFS,同样是可以设置的,而且它要复杂得多。
Kyle__Shaw
·
2023-12-06 11:34
zfs
linux
运维
java
elasticsearch 索引数据多了怎么办,如何
调优
,部署?
当Elasticsearch索引的数据量不断增加时,可以考虑以下
调优
和部署措施:增加索引规模:Elasticsearch支持动态增加索引,可以根据数据量的增长情况逐步增加新的索引。
用心去追梦
·
2023-12-06 10:56
elasticsearch
大数据
搜索引擎
2022-05-01 词汇与语句的表达(实验)
计算联合国会议记录词向量:相关代码:编写向量相似性判断逻辑,根据相似性判断结果
调优
工具参数。改变window大小,当win
Luo_淳
·
2023-12-06 10:52
专业学习
自然语言处理
人工智能
机器学习
StackGres 1.6,可私有部署的云原生数据库中间件平台工程
使用精心选择和
调优
的PostgreSQL组件。一个企业级的PostgreSQL栈需要几个其他的生态系统组件和重要的调整。不仅仅是PostgreSQL。它需要连接池、自动故障转移和HA、监
为为少
·
2023-12-06 08:06
云原生
数据库
中间件
数据库学习日常案例20231203-Mysql高级 -- 日志管理篇
Mysql高级--日志篇*日志类型1.mysql的6类日志:2.日志的弊端*
慢查询
日志(slowquerylog)*通用查询日志(generalquerylog)1.作用:2.问题场景:3.查看当前状态
执笔画情ora
·
2023-12-06 05:26
mysql数据库备份与恢复
MYSQL数据库部署
升级
android
adb
日常运维之JVM学习
所以深入了解JVM,并且进行
调优
排查问题。由于时间比较仓促,简单记录一下学习笔记供大家参考,如果不对的地方请指出。
Xu-小安安
·
2023-12-06 05:22
运维相关
MySQL性能分析工具
MYSQL性能分析工具1.SQL执行频率查询查询数据库增删改查的操作次数语法:show[session|global]statuslike'Com_______';2.
慢查询
日志
慢查询
日志就是定位到运行时间过长的
像是天青色
·
2023-12-06 04:49
上一页
21
22
23
24
25
26
27
28
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他