E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
【调优】
Flink问题解决及性能
调优
-【Flink不同并行度引起sink2es报错问题】
最近需求,仅想提高sink2es的qps,所以仅调节了sink2es的并行度,但在调节不同算子并行度时遇到一些问题,找出问题的根本原因解决问题,并分析整理。实例代码--SETtable.exec.state.ttl=86400s;--24hour,默认:0msSETtable.exec.state.ttl=2592000s;--30days,默认:0msCREATETABLEkafka_table
PONY LEE
·
2024-01-26 08:12
Flink问题解决及性能调优
flink
大数据
调优
mybatis saveBatch 25倍性能
调优
mybatissaveBatch25倍性能最近在压测一批接口,发现接口处理速度慢的有点超出预期,感觉很奇怪,后面定位发现是数据库批量保存这块很慢。
JavaNice哥
·
2024-01-26 06:19
mysql
mybatis
tomcat
java
JVM-JVM
调优
文章目录1:JVM参数1标准参数2-X参数3-XX参数4其他参数5查看参数6设置参数的常见方式7实践和单位换算8常用参数含义2:常用命令1jps2jinfo3jstat4jstack5jmap6性能优化3:jvm优化图1:JVM参数1标准参数-version-help-server-cp[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-E3AIgsfB-16531972
苍煜
·
2024-01-25 23:54
JVM
intellij-idea
java
tomcat
【JuiceFS】理解juicefs缓存
文章目录1.简介2.数据一致性3.元数据缓存4.读写缓冲区4.1概念4.2预读和预取4.3写入4.4观测和
调优
5.数据缓存5.1内核页缓存5.2内核回写模式5.3客户端读缓存5.4客户端写缓存5.5缓存位置
Henry Patch
·
2024-01-25 22:25
juiceFS
缓存
分布式
ReactNative进阶(三十六):iPad横屏适配
由此,一场pad横屏全屏展示的APP
调优
工作由此开展。
No Silver Bullet
·
2024-01-25 22:24
#
React
Native
react
native
ipad
react.js
分布式架构知识体系整理
关键词节点,时间,一致性,CAP,ACID,BASE,P2P,机器伸缩,网络变更,负载均衡,限流,鉴权,服务发现,服务编排,降级,熔断,幂等,分库分表,分片分区,自动运维,容错处理,全栈监控,故障恢复,性能
调优
weixin_34304013
·
2024-01-25 16:00
运维
设计模式
数据结构与算法
记一次压测程序时的OOM分析过程
背景:在一个项目
调优
的过程中,丰富了一些组件后,再次对项目进行压测,发现和之前的性能差距甚大,并且每次运行一段时间后,延迟骤增,带宽骤降,查看程序日志,发现了OutOfMemory:javaheapmemory
blissnmx
·
2024-01-25 16:32
JVM
eclipse
jvm
nio
MySql性能
调优
三(explain/desc执行计划)
前言explian/desc可以帮助我们分析sql语句,写出高效sql语句,让mysql查询优化器可以更好的工作。mysql查询优化器会尽可能的使用索引,优化器排除的数据行越多,mysql找到匹配数据行就越快。用法explain/desc+sqlexplainselect*fromtbl_chain_billwherebillid=6explain.pngkeyvaluemeansid1查询序列号
烟雨木子
·
2024-01-25 15:58
mysql
mysql
数据库
30天精通Nodejs--第二十三天:express-性能提升与监控
目录引言性能优化策略中间件优化路由优化数据库操作优化静态文件服务缓存机制服务器配置扩展性配置集群模式负载均衡微服务架构性能监控与
调优
工具内置日志与错误跟踪第三方性能监控工具压测与基准测试结语引言在构建和维护基于
bdawn
·
2024-01-25 15:12
30天精通Nodejs
express
nodejs
性能优化
监控
日志
后端
前端
jvm系列文章
www.ityouknow.com/jvm.html2017-09-30jvm系列(十):JVM演讲PPT分享2017-09-21jvm系列(九):如何优化JavaGC「译」2017-09-19jvm系列(六):Java服务GC参数
调优
案例
4ea0af17fd67
·
2024-01-25 14:44
Koordinator v1.4 正式发布!为用户带来更多的计算负载类型和更灵活的资源管理机制
项目的核心是提供混部工作负载编排、混部资源调度、混部资源隔离和混部性能
调优
的综合解决方案,帮助用户优化容器性能,并提升集群资源使用效率。
阿里云云原生
·
2024-01-25 13:59
阿里云
云原生
Koordinator
一篇文章教你快速学会Kafka参数
调优
实战
附Java/C/C++/机器学习/算法与数据结构/前端/安卓/Python/程序员必读书籍书单大全:书单导航页(点击右侧极客侠栈即可打开个人博客):极客侠栈①【Java】学习之路吐血整理技术书从入门到进阶最全50+本(珍藏版)②【算法数据结构+acm】从入门到进阶吐血整理书单50+本(珍藏版)③【数据库】从入门到进阶必读18本技术书籍网盘吐血整理网盘(珍藏版)④【Web前端】从HTML到JS到AJ
数据结构大师
·
2024-01-25 10:03
JVM篇--JVM
调优
高频面试题
1说一下JVM
调优
的工具?JDK自带了很多监控工具,都位于JDK的bin目录下,其中最常用的是jconsole和jvisualvm这两款视图监控工具。
ayu_programer
·
2024-01-25 10:30
面试
JVM
jvm
LandrayOA内存
调优
/ JAVA内存
调优
/ Tomcat web.xml 超时时间
调优
实战
目录一、背景说明二、LandrayOA/Tomcat内存
调优
2.1\win64\tomcat\conf\web.xml文件
调优
2.2\win64\tomcat\bin\catalina64.bat文件
调优
一
Terry谈企业数字化
·
2024-01-25 07:08
java
更高效的大模型
调优
方法,华盛顿大学推出“代理
调优
”
随着ChatGPT等生成式AI产品朝着多模态发展,基础模型的参数越来越高,想进行权重
调优
需要耗费大量时间和AI算力。
RPA中国
·
2024-01-25 06:14
人工智能
深度学习
【重点问题回顾】攻击面发现揭秘直播
一、云图极速版细节沟通1.云图极速版中的极速体现在哪使用
调优
过的攻击面发现策略,无需用户配置攻击面发现策略,开箱即用仅需录入目标企业名称,即可开始攻击面发现,无需配置其他参数通过社交平台推送告警详情,第一时间知晓风险信息扫描资源动态分配
Peggy·Elizabeth
·
2024-01-25 04:40
网络安全
Flink重点难点:Flink任务综合
调优
(Checkpoint/反压/内存)
CheckPoint
调优
Flink中基于异步轻量级的分布式快照技术提供了Checkpoints容错机制,Checkpoints可以将同一时间点作业/算子的状态数据全局统一快照处理,包括前面提到的算子状态和键值分区状态
程序员的隐秘角落
·
2024-01-25 02:10
土堆学习笔记——P28完整的模型训练套路(二)
注意:在测试时候不
调优
,仅为看效果。
Whalawhala
·
2024-01-24 23:35
学习
笔记
Java JVM垃圾回收 JVM
调优
老年代 新生代
如何判断对象可以回收引用计数法当一个对象被其他对象引用,该对象计数+1,当某个对象不再引用该对象,其计数-1当一个对象没有被其他对象引用时,即计数为0,该对象就可以被回收缺点:循环引用时,两个对象的计数都为1,导致两个对象都无法被释放可达性分析算法Java虚拟机中的垃圾回收器采用可达性分析来探索所有存活的对象扫描堆中的对象,看是否能够沿着GCRoot对象为起点的引用链找到该对象,找不到,表示可以回
VincentHu_
·
2024-01-24 20:09
#
JVM
jvm
java
开发语言
Linux 性能分析笔记:平均负载的理解
文章目录uptime的命令解释uptime平均负载的理解manuptime平均负载的合理值系统负载的趋势案例分析CPU密集型程序IO密集型大量进程学习笔记主要来源:Linux性能优化实战_Linux_性能
调优
小鲸鱼大梦想
·
2024-01-24 18:28
系统运维
linux
笔记
运维
服务器
Spark性能优化指南数据倾斜——高级篇
继基础篇讲解了每个Spark开发人员都必须熟知的开发
调优
与资源
调优
之后,本文作为《Spark性能优化指南》的高级篇,将深入分析数据倾斜
调优
与shuffle
调优
,以解决更加棘手的性能问题。
吃胖点儿
·
2024-01-24 17:15
spark核心技术
【机器学习】机器学习8大调参技巧!
今天给大家一篇关于机器学习调参技巧的文章超参数
调优
是机器学习例程中的基本步骤之一。该方法也称为超参数优化,需要搜索超参数的最佳配置以实现最佳性能。
风度78
·
2024-01-24 16:55
机器学习
人工智能
【JVM专题】JVM从概述到
调优
图文详解,含思维脑图深度剖析!
JVM概述JVM是一种用于计算机设备的规范,它是一个虚构的计算机的软件实现,简单的说,JVM是运行bytecode字节码程序的一个容器。它有一个解释器组件,可以实现JAVA字节码和计算机操作系统之间的通信,java程序只需要在JVM上一次编译,多出运行,因此JAVA具有跨平台性。内存结构方法区(常量池、静态变量、构造函数、类数据)堆(对象、类实例、GC的主要区域)新生区(MinorGC、FullG
前程有光
·
2024-01-24 16:50
Apache Doris (七十): Doris优化
具体可以参考前面每个部分内容,这里大体总结下Doris中的优化相关内容:执行SQL慢可以通过Doris提供的QueryProfile查看SQL执行的统计信息帮助我们了解Doris的执行情况,并有针对性的进行相应Debug与
调优
工作
IT贫道
·
2024-01-24 14:08
大数据OLAP体系技术栈
apache
doris
nginx
调优
简介
(1)开启status模块location/status{stub_statuson;}(2)设置并发worker_processes2;events{worker_connections50000;}(3)设置最大可打开文件数worker_rlimit_nofile65535;另外,注意linux系统最大文件限制数vim/etc/security/limits.confroothardnofil
Borny鼎鼎
·
2024-01-24 11:46
其他
nginx
MySQL修炼手册16:性能
调优
:提升MySQL数据库整体性能
文章目录写在开头1查询性能的优化1查询性能的优化1.1优化查询语句1.1.1避免全表扫描1.1.2合理使用WHERE子句1.1.3使用JOIN时的优化1.1.4子查询的优化1.1.5使用LIMIT优化查询1.1.6存储过程的使用1.1.7UNION和UNIONALL的选择1.1.8使用EXISTS替代IN1.1.9利用索引加速ORDERBY1.1.10使用适当的数据类型和长度1.2使用合适的索引1
theskylife
·
2024-01-24 11:37
数据库
数据库
mysql
sql
XGBoost系列5——XGBoost的集成学习之旅
的梯度提升树特性2.2正则化项的引入2.3学习速度与性能优势2.4与传统集成学习算法的对比3.如何在实际项目中使用XGBoost进行集成3.1数据集特征与评估指标的选择3.2XGBoost模型的选择与
调优
theskylife
·
2024-01-24 11:34
数据分析
数据挖掘
集成学习
机器学习
人工智能
数据挖掘
阿里云PTS如何使用?
阿里云PTS(PerformanceTestingService)是阿里巴巴提供的一款云端性能测试服务,它帮助企业进行大规模、高并发场景下的系统性能评估和
调优
。
云服务商呀
·
2024-01-24 10:12
阿里云
云计算
运维
HBase详细概述
本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据、HBase数据模型、HBase物理存储、HBase系统架构,HBase
调优
、HBaseShell访问等。
a867901084
·
2024-01-24 08:49
大数据
数据库
运维
利用 Mountpoint for Amazon S3 在 Kubernetes 上加速 LLM 的训练
本文通过在EC2g5.2xl实例上完成LLaMA2的
调优
训练,读者可以利用较少的GPU资源学习复现本
亚马逊云开发者
·
2024-01-24 06:25
kubernetes
容器
云原生
Go每日精选(2019-06-14)- 进阶部分
5.redigo的redis.Pool配置参数
调优
凯文不上班
·
2024-01-24 00:39
mysql5.7性能
调优
一千个DBA就有一千种配置方式!大家一定记得不要轻易去看网上,要看只看官网!网上很多博客都是错的,连参数都列错了,5.7很多参数和5.6是完全不一样的。可能你从未看到过这样的一篇集中火力式的把mysql参数列了这么全的文章,很有兴曾参与过超3万并发的18~19年的数轮520、618、双11、双12保卫战。因此这一篇是汇集了最精华和实战的内容把mysql所有的参数列在这边供大家参考。并且以(64cc
周识儒ice
·
2024-01-23 19:05
Java相关的性能
调优
方案
本文介绍了在性能测试过程中Java进程消耗CPU过高的问题排查方法、线程死锁问题排查方法和内存泄露的排查方法Java进程消耗CPU过高的问题排查方法CPU利用率过高,查看JVM中线程占用cpu大小的方法ps–Lfppidtop–ppid-H查看高占用的线程并转化为十六进制的方法printf"%x\n"其中x为线程号然后jstack-l16进制的线程号线程死锁问题排查方法死锁定义线程死锁是指由于两个
测试开发Kevin
·
2024-01-23 19:13
最新| ClickHouse入门、
调优
、实战一条龙全解秘籍
Clickhouse是一个高性能且开源的数据库管理系统,主要用于在线分析处理(OLAP)业务。它采用列式存储结构,可使用SQL语句实时生成数据分析报告,另外它还支持索引,分布式查询以及近似计算等特性,凭借其优异的表现,ClickHouse在各大互联网公司均有广泛地应用。WhyClickHouse首先我们来看一下OLAP场景下的关键特征。1.大多数数据库访问都是读请求。2.数据总是以批量形式写入数据
小晨说数据
·
2024-01-23 15:37
数据库
分布式
大数据
sap
uefi
JVM
调优
何时进行JVM
调优
Heap内存(老年代)持续上涨达到设置的最大内存值;FullGC次数频繁;GC停顿时间过长(超过1秒);应用出现OutOfMemory等内存异常;应用中有使用本地缓存且占用大量内存空间
请不要问我是谁
·
2024-01-23 14:16
Java设计模式-适配器模式(8)
馆长准备了很多学习资料,其中包含java方面,jvm
调优
,spring/springboot/springcloud,微服务,分布式,前端,js书籍资料,视频资料,以及各类常用软件工具,破解工具等资源。
艾利克斯冰
·
2024-01-23 12:22
JAVA软件设计模式(GOF)
java
设计模式
适配器模式
Java设计模式-代理模式(7)
馆长准备了很多学习资料,其中包含java方面,jvm
调优
,spring/springboot/springcloud,微服务,分布式,前端,js书籍资料,视频资料,以及各类常用软件工具,破解工具等资源。
艾利克斯冰
·
2024-01-23 12:52
JAVA软件设计模式(GOF)
java
设计模式
代理模式
JVM实战篇:GC
调优
目录一.GC
调优
的核心指标1.1吞吐量(Throughput)1.2延迟(Latency)1.3内存使用量二.GC
调优
的方法2.1监控工具Jstat工具VisualVm插件Prometheus+Grafana2.2
汤姆&Tom
·
2024-01-23 09:46
JVM
jvm
你还在 Select * 吗?
有人会说性能
调优
是数据库管理员(DBA)的事,然而性能
调优
跟程序员们也有莫大的关系。程序中嵌入的一行行的SQL语句,如果使用了一些优化小技巧,定能达到事半功倍的效果。
良月柒
·
2024-01-23 07:45
头疼!卷积神经网络是什么?CNN结构、训练与优化一文全解
深入分析了背景和重要性、定义与层次介绍、训练与优化,详细分析了其卷积层、激活函数、池化层、归一化层,最后列出其训练与优化的多项关键技术:训练集准备与增强、损失函数、优化器、学习率调整、正则化技巧与模型评估
调优
AI小白龙*
·
2024-01-23 04:48
cnn
人工智能
神经网络
深度学习
机器学习
vscode
二刷Java多线程:线程池详解
一、使用线程池的好处降低资源消耗:通过重复利用已创建的线程降低线程创建和销毁造成的消耗提高响应速度:当任务到达时,任务可以不需要等到线程创建就能立即执行提高线程的可管理性:使用线程池可以统一分配、
调优
和监控二
邋遢的流浪剑客
·
2024-01-23 02:18
线程池实现原理
线程池状态转换
别让你的云端“瘫痪”——教你如何优化云平台性能测试
目录引言目的测试指标系统性能指标资源指标中间件指标数据库指标稳定性指标批量处理指标可扩展性指标可靠性指标性能测试的过程测试计划性能测试项目检测与控制测试分析测试设计测试执行测试完成性能分析性能分析的前提性能分析的流程可能瓶颈点方法
调优
引言你有没有遇到过这样的情况
锦都不二
·
2024-01-22 23:59
软件测试
性能测试
软件测试工程师
服务器
软件测试
软件测试工程师
性能测试
云平台性能测试
大数据平台的硬件规划、网络
调优
、架构设计、节点规划
1.大数据平台硬件选型要对Hadoop大数据平台进行硬件选型,首先需要了解Hadoop的运行架构以及每个角色的功能。在一个典型的Hadoop架构中,通常有5个角色,分别是NameNode、StandbyNameNode、ResourceManager、NodeManager、DataNode以及外围机。其中NameNode负责协调集群上的数据存储,StandbyNameNode属于NameNode
小枫@码
·
2024-01-22 17:18
大数据架构师
大数据
Nginx 实战指南
本实战指南将带你深入了解Nginx的安装、基础配置、高级配置、最佳实践以及性能
调优
。
ivwdcwso
·
2024-01-22 15:04
nginx
再见23你好24
2.今年把GDB和火焰图的东西写了博客,对
调优
调试有一点理解。3.汇编级
调优
没有什么实质上进展,。4.PMP证书考下了。2、期望的事情有的做了一些,但是还不到位。今年知道做什么,就是没有动力。
csdn_dyq111
·
2024-01-22 10:06
年度总结
其他
《机器学习》客户流失判断-python实现
实现读取数据并初步了解导入宏包读取数据查看数据类型检查缺失值描述性统计分析可视化分析用户流失分析特征分析任期年数与客户流失的关系:服务类属性分析特征相关性分析数据预处理类别编码转换划分训练数据与测试数据归一化处理模型建立逻辑回归支持向量机(SVM)K近邻(KNN)XGBoost-贝叶斯搜索超参数
调优
随机森林
汐ya~
·
2024-01-22 09:44
机器学习
python
人工智能
分类
从严治党,真抓实干,夯实细节,着眼长效
一是立足区位优势、坚持问题导向、创新工作方式、凝聚内生动力,
调优
产业结构,培育富民产业,坚持把多样化种植产业作为产业结构调整的主攻方向,以专业合作社为龙头,种植马铃薯6.9万亩,种植玉米3900亩,西红柿
Cooo1
·
2024-01-22 08:42
架构师才需要知道的知识:如何做容量预估和
调优
为了构建高并发、高可用的系统架构,压测、容量预估必不可少,在发现系统瓶颈后,需要有针对性地扩容、优化。结合楼主的经验和知识,本文做一个简单的总结,欢迎探讨。1、QPS保障目标一开始就要明确定义QPS保障目标,以此来推算所需的服务、存储资源。可根据历史同期QPS,或者平时峰值的2到3倍估算。压测目标示例:qps达到多少时,服务的负载正常,如平均响应时间、95分位响应时间、cpu使用率、内存使用率、消
Java爱好者
·
2024-01-22 08:09
【SpringBoot技术专题】「开发实战系列」Undertow web容器的入门实战及
调优
方案精讲
Undertowweb容器的入门实战及
调优
方案精讲Undertowweb容器Undertow介绍官网API给出一句话概述Undertow:官网API总结特点:Lightweight(轻量级)HTTPUpgradeSupport
洛神灬殇
·
2024-01-22 08:50
#
#
spring
boot
前端
后端
03-Flink内存模型
.1.1JVM内存管理的不足1.1.1有效数据密度低存储:对象头、实例数据、对齐填充部分导致JVM中有效信息的存储密度很低1.1.2垃圾回收FullGC会严重影响性能以及和集群中的心跳信息超时,使得无法进行
调优
情深@骚明
·
2024-01-22 08:48
流式计算
flink
上一页
5
6
7
8
9
10
11
12
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他