E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
resin调优
JVM
调优
及垃圾回收GC
一、说一说JVM的内存模型。JVM的运行时内存也叫做JVM堆,从GC的角度可以将JVM分为新生代、老年代和永久代。其中新生代默认占1/3堆内存空间,老年代默认占2/3堆内存空间,永久代占非常少的对内存空间。新生代又分为Eden区、SurvivorFrom区和SurvivorTo区,Eden区默认占8/10新生代空间,SurvivorFrom区和SurvivorTo区默认分别占1/10新生代空间;E
inexaustible
·
2023-11-19 01:14
Java面试及基础概念
jvm
java
开发语言
PS+PO
调优
实战:hotspot参数、
调优
参数
GC
调优
:尽量减少FGC(fullGC)JVM参数:-XX:+UseSerialGC=SerialNew(DefNew)+SerialOld
dandanforgetlove
·
2023-11-19 01:13
jvm调优
jvm
调优
堆
数据结构与算法+JVM
调优
和GC常用算法+数据库高级+复杂sql手写
数据结构双向链表二叉排序树红黑树散列表双向链表:什么是双向链表双向链表是一种数据结构,是由若干个节点构成,每个节点由三部分构成,分别是前驱节点,元素,后继节点,且双向链表中的节点在内存中是游离状态存在的。![在这里插入图片描述](https://img-blog.csdnimg.cn/e3deda4d7f3c4759a9e1ff78ab074e86.png应用:LinkedList双向链表的术语:
只对java深情
·
2023-11-19 00:19
数据结构与算法
java
JVM常用性能
调优
工具详解1
前言工程学科是在不断动手的过程中来细化自己的领域,就像练武功一样,单凭着掌握一身武林绝学是远远不够的,在实战中,如何在多变的环境面前使用合适的招式,怎样出击,应该选择怎样的功法去迎击未知的对手,这往往都是经验之谈,当你踩过了无数的坑,沉淀了无数的线上问题,总结无数的经验,当问题来的时候你能拥有自己独特的见解与方案,你才能所向披靡,战无不胜。当你经验少的时候,要多学会辛苦一下自己,大不了就是比别人多
怎能止步于此
·
2023-11-18 22:20
面试
性能调优
jvm
1024程序员节
JVM
调优
工具命令的使用
JVM
调优
工具命令的使用常用工具命令JSTATJINFOJMAPJHATMATJSTACK可视化GC日志分析工具常用工具命令命令描述jps与linux的ps类似,用来显示本地的java进程,可以查看本地运行着几个
雨夜星空丶月
·
2023-11-18 22:49
学习
jvm
java
linux
SDN实战团技术分享(三十八):DPDK助力NFV与云计算
对于用户来说,它可能是一个出色的包数据处理性能加速软件库;对于开发者来说,它可能是一个实践包处理新想法的创新工场;对于性能
调优
者来说,它可能又是一个绝佳的成果分享平台。
lingshengxiyou
·
2023-11-18 20:32
DPDK
c++
linux
云计算
linux
dpdk
c++
虚拟机
DPDK性能影响因素分析
这些因素并非必然劣化性能,可能因硬件能力、OS版本、各类软硬环境参数配置等的差异产生较大波动,或者存在较大的不稳定性,相关的
调优
方法需要用户结合自身的VNF应用部署在实践中不断完善。
Linux服务器开发
·
2023-11-18 19:22
C++开发
C++后台开发
DPDK
DPDK
vpp
虚拟化
C++开发
后台开发
【Python大数据笔记_day10_Hive
调优
及Hadoop进阶】
hive
调优
hive官方配置url:ConfigurationProperties-ApacheHive-ApacheSoftwareFoundationhive命令和参数配置hive参数配置的意义:开发
LKL1026
·
2023-11-18 19:33
Python大数据学习笔记
大数据
hadoop
hive
笔记
Flink on RocksDB 参数
调优
指南
基于我们长期的状态
调优
经验,通过合理的资源分配,RocksDB方案可以稳定支持上百GB甚至上TB的总状态量;但是众所周知的是,RocksDB的可调参数非常繁琐,有上百个之多,且彼此之间还相互影
pucheung
·
2023-11-18 19:59
数据库
大数据
python
java
redis
8年经验之谈 —— 记一次接口压力测试与性能
调优
!
经验总结1.如果总的CPU占用率偏高,且基本都被业务线程占用时,CPU占用率过高的原因跟JVM参数大小没有直接关系,而跟具体的业务逻辑有关。2.当设置JVM堆内存偏小时,GC频繁会导致业务线程停顿增多,TPS下降,最后CPU占用率也低了;3.当设置JVM堆内存偏大时,GC次数下降,TPS上升,CPU占用率立刻上升。4.Dom4J这个xml解析工具性能很强大,但在处理节点和层级都较多的xml文本时,
MJH827
·
2023-11-17 16:36
自动化测试
压力测试
jmeter
测试工具
功能测试
自动化
大数据毕设选题 - 机器学习餐厅销量预测(大数据 python)
1模型简介1.2ARIMA模型介绍2模型识别3模型检验3.1半稳性检验3.2白噪声检验(纯随机性检验)4Python实战4.1导入工具及数据4.2原始序列的检验4.3一阶差分序列的检验4.4定阶(参数
调优
caxiou
·
2023-11-17 15:57
大数据
毕业设计
python
大数据
餐厅销量预测
实时数仓入门训练营:Hologres性能
调优
实践
简介:《实时数仓入门训练营》由阿里云研究员王峰、阿里云资深技术专家金晓军、阿里云高级产品专家刘一鸣等实时计算Flink版和Hologres的多名技术/产品一线专家齐上阵,合力搭建此次训练营的课程体系,精心打磨课程内容,直击当下同学们所遇到的痛点问题。由浅入深全方位解析实时数仓的架构、场景、以及实操应用,7门精品课程帮助你5天时间从小白成长为大牛!视频链接:https://developer.ali
阿里云云栖号
·
2023-11-17 14:11
云栖号技术分享
Hologres
存储
Hologres性能
调优
查看执行计划explain仅仅生成执行计划、sql没有执行explainanalyzesql会执行,并收集实际运行中的一些信息性能优化手段表结构、表数据变动后执行analyzetable执行计划中没有让小表hashjoin,说明表的统计信息有误,大表、小表都执行analyze设置distribution_key,distribution_key决定数据存储在哪个shardMotionnode不合适
欧皇西西
·
2023-11-17 14:09
大数据
阿里云
odps
进一步观察扩散模型中的参数有效调整
受自然语言处理最新进展的推动,我们通过插入小型可学习模块adapters(称为适配器)来研究大型扩散模型中的参数高效
调优
。
nocol.
·
2023-11-17 12:49
计算机视觉
程序员必备利器—Java程序性能分析工具Java VisualVM(Visual GC)
——Java程序性能分析工具JavaVisualVM(VisualGC)VisualVM是一款免费的\集成了多个JDK命令行工具的可视化工具,它能为您提供强大的分析能力,对Java应用程序做性能分析和
调优
zhisheng_blog
·
2023-11-17 11:38
java
jvm
java
jvm
程序员
性能
可视化工具
Spark~~Spark性能
调优
文章目录第1章Spark性能
调优
1.1常规性能
调优
1.1.1常规性能
调优
一:最优资源配置1.1.2常规性能
调优
二:RDD优化1.1.3常规性能
调优
三:并行度调节1.1.4常规性能
调优
四:广播大变量1.1.5
几窗花鸢
·
2023-11-17 10:41
Spark
spark
大数据
分布式
极客时间Spark性能
调优
实战-学习笔记(1)
通用性能
调优
(一)一、应用开发三原则原则一:使用spark自身的
调优
机制充分利用Spark为我们提供的“性能红利”,如钨丝计划、AQE、SQLfunctions等等。钨丝计划的优势?
我不认识CBW
·
2023-11-17 10:40
spark
big
data
大数据
Spark
调优
| Spark性能优化实战手册
《Spark性能优化:开发
调优
篇》《Spark性能优化:资源
调优
篇》《Spark性能优化:数据倾斜
调优
篇》《Spark性能优化:shuffle
调优
篇》Spark性能优化:开发
调优
篇在大数据计算领域,Spark
大数据技术架构
·
2023-11-17 10:39
大数据
hadoop
spark
java
面试
Spark 性能
调优
1常规性能
调优
1.1常规性能
调优
一:最优资源配置Spark性能
调优
的第一步,就是为任务分配更多的资源,在一定范围内,增加资源的分配与性能的提升是成正比的,实现了最优的资源配置后,在此基础上再考虑进行后面论述的性能
调优
策略
高个子男孩
·
2023-11-17 10:09
Spark
spark
大数据
scala
Spark 性能
调优
总结
分配更多资源写完了一个复杂的spark作业之后,进行性能
调优
的时候,首先第一步,我觉得,就是要来调节最优的资源配置;在这个基础之上,如果说你的spark作业,能够分配的资源达到了你的能力范围的顶端之后,
星空下的那个人影
·
2023-11-17 10:09
大数据面试
spark
Spark性能优化四 内存
文章目录(一)性能优化分析内容怎么被消耗的如何预估程序会消耗多少内存呢(二)性能优化方案1)高性能序列化类库2)持久化或者checkpoint3)JVM垃圾回收
调优
4)提高并行度5)数据本地化(一)性能优化分析一个计算任务的执行主要依赖于
小崔的技术博客
·
2023-11-17 10:38
大数据学习
spark
性能优化
java
[Spark]二Spark性能
调优
|Spark任务监控|程序
调优
|资源
调优
二.spark性能
调优
1.Spark任务监控对Spark性能的
调优
离不开对任务的监控,只有在运行过程中,通过监控手段发现问题,才能迅速定位问题所在。
胖胖学编程
·
2023-11-17 10:37
spark
spark
大数据
分布式
1024程序员节
spark-
调优
-性能
调优
&内存管理
前置主要涉及6个参数,从3个方面:executor、core、内存的大小,并行度,内存管理进行
调优
优化的方案资源分配num-executors:spark使用多少个executorsexecutor-cores
zdkdchao
·
2023-11-17 10:36
spark
spark
big
data
大数据
spark性能
调优
(二):内存
Memory一、spark内存简介二、堆内内存or堆外内存?三、如何用好RDDCache?四、OOM怎么办?一、spark内存简介spark2.0后,基本上spark内存的管理就已经自动化了,内存出现问题基本上是一些数据问题。比如数据倾斜spark.executor.memory是绝对值,指定了executor进程的JVMHeap总大小spark.memory.fraction是比例值,标记spa
我爱夜来香A
·
2023-11-17 10:05
Spark
spark
jvm
大数据
Spark 优化 (一) --------- Spark 性能
调优
目录一、常规性能
调优
1.最优资源配置2.RDD优化3.并行度调节4.广播大变量5.Kryo序列化6.调节本地化等待时长二、算子
调优
1.mapPartitions2.foreachPartition优化数据库操作
在森林中麋了鹿
·
2023-11-17 10:34
Spark
spark
大数据
分布式
Scala | Spark性能优化 | 资源
调优
| 代码
调优
| 数据本地化 | 内存
调优
| Spark Shuffle
调优
| 数据倾斜 | Spark故障解决
文章目录一、资源
调优
二、并行度
调优
三、代码
调优
1.避免创建重复的RDD2.对多次使用的RDD进行持久化3.持久化算子:4.尽量避免使用shuffle类的算子5.使用map-side预聚合的shuffle
幼稚的人呐
·
2023-11-17 10:04
Spark
spark
scala
性能优化
spark性能
调优
| 内存优化
目录我们先了解一下有哪些内存温馨提示RDD示范(spark版本2.1.1)RDD进行优化Df和Ds进行示范我们先了解一下有哪些内存1.storage内存存储数据,缓存可预估2.shuffle内存计算joingroupby不可预估spark1.6之前静态管理的,spark1.6之后变成动态管理默认0.5温馨提示在公司尽量不要写rdd(性能不好)RDD示范(spark版本2.1.1)我们转成rdd去跑
Knight_AL
·
2023-11-17 10:00
Spark优化
spark
大数据
分布式
ActiveMQ中Producer特性详解
前言从本文中你可以得到如下几个问题的解答:1)设定消息的时间戳有什么作用2)消息的timeToLive与过期原理3)Producer同步、异步发送消息,以及
调优
4)消息priority与顺序,以及其中的误解
涛濤
·
2023-11-17 09:54
ActiveMQ
activemq
深入理解
producer
Kafka Producer通过参数
调优
提高数据发送速度
1.前言最近项目现场发生了日志文件积压的情况,日志文件的大概处理流程是:读取日志文件->进行结构化->发送到kafka以一个7.57M的日志文件为例(约58400条日志信息),程序需要16.8s才能将其处理完,也就是说平均每秒只能处理约3500条数据,经过验证,其中瓶颈在数据发送到Kafka这一步。这个根据经验,明显肯定是没有达到Kafka的瓶颈的,应该是自己producer程序有问题,于是去Ka
Daphnis_z
·
2023-11-17 09:23
大数据
大数据
kafka
Python大数据之linux学习总结——day09_hive
调优
hive
调优
hive官方配置url:https://cwiki.apache.org/confluence/display/Hive/Configuration+Propertieshive命令和参数配置
笨小孩124
·
2023-11-17 09:46
hive
学习总结
大数据
python
linux
【Python大数据笔记_day09_hive函数和
调优
】
hive函数函数分类标准[重点]原生分类标准:内置函数和用户定义函数(UDF,UDAF,UDTF)分类标准扩大化:本来,UDF、UDAF、UDTF这3个标准是针对用户自定义函数分类的;但是,现在可以将这个分类标准扩大到hive中所有的函数,包括内置函数和自定义函数;目前hive三大标准UDF:(User-Defined-Function)普通函数:特点是一进一出(输入一行数据输出一行数据)
LKL1026
·
2023-11-17 06:13
Python大数据学习笔记
大数据
笔记
hive
MySQL 查询分析和
调优
利器Optimizer Trace
庖丁解牛-图解查询分析和
调优
利器OptimizerTrace查询分析和
调优
背景在数据库的使用过程,我们经常会碰到SQL突然变慢,是由于下面导致的问题:选择错误的索引选择错误的连接顺序范围查询使用了不同的快速优化策略子查询选择的执行方式变化半连接选择的策略方式变化如何使用分析工具
lixora
·
2023-11-17 06:37
MySQL-Concept
-Tahiti
mysql
数据库
【寒武纪(9)】MLU架构
文章目录TP1架构TP2架构TP31⾯向不同MLU架构的CambriconBANG编程最佳实践1.1Device级异构
调优
指南1.2Cluster级并⾏
调优
指南1.3Core级并⾏
调优
指南2MTP编程
调优
Hali_Botebie
·
2023-11-17 06:59
架构
性能测试
调优
JVM
调优
(三)之JMeter使用
本文章向大家介绍JVM
调优
(三)之JMeter使用,主要包括JVM
调优
(三)之JMeter使用使用实例、应用技巧、基本知识点总结和需要注意事项,具有一定的参考价值,需要的朋友可以参考一下。
传说三哥
·
2023-11-17 06:45
Jmeter高级性能测试实战
jvm
jmeter
java
性能测试
Ray 分布式简单教程(1)
在RayCore上有几个库,用于解决机器学习中的问题:Tune:可伸缩的超参数
调优
RLlib:工业级强化学习RayTrain:分布式深度学习Datasets:分布式数据加载和计算(beta)以
求则得之,舍则失之
·
2023-11-17 06:06
分布式
分布式
深度学习模型量化(低精度推理)大总结
通过这篇文章你可以学习到以下内容:1)量化算法介绍及其特点分析,让你知其然并知其所以然;2)Pytorch量化实战,让你不再纸上谈兵;3)模型精度及性能的
调优
经验分享,让你面对问题不再束手无策;4)完整的量
洪流之源
·
2023-11-17 06:35
模型量化
深度学习
JVM面试与
调优
教程(1)-JVM的体系结构
【订阅专栏合集,作者所有付费文章都能看】本专栏系统地讲解JVM面试、JVM
调优
相关知识。包括但不限于JVM的结构、垃圾回收机制及垃圾回收器、JVM
调优
实战技术和工具使用。
m0_67393157
·
2023-11-17 04:46
java
java
后端
“解剖“JVM之GC
调优
目录前言一、JDK工具类1.Jmap2.Jstack3.Jinfo4.Jstat二、JVM运行情况预估总结前言前面所说的JVM垃圾收集其实最终也是为了解决GC的,那么GC又是如何
调优
的呢?
阿涛在coding
·
2023-11-16 21:30
JVM
java
jvm
JVM-05.JVM
调优
工具及
调优
方法
思维导图:点击查看思维导图.前言:阅读此文章前,需要了解的知识链接:JVM-03.对象创建与内存分配.链接:JVM-04.垃圾回收机制看着一篇就够了.1.jps工具作用:查看当前系统中有哪些JAVA进程2.jmap工具来查看内存信息,实例个数以及占用内存大小文件较长,可以输出为对应的文件,也可以直接查看num:序号instances:实例数量bytes:占用空间大小classname:类名称,[C
Coding Machine
·
2023-11-16 21:30
性能调优
JVM
jvm
java
jar
jvm
调优
#Jvm系列9个在江湖中要练就绝世武功必须内外兼备,精妙的招式和深厚的内功,武功的基础是内功。对于武功低(就像江南七怪)的人,招式更重要,因为他们不能靠内功直接去伤人,只能靠招式,利刃上优势来取胜了,但是练到高手之后,内功就更主要了。一个内功低的人招式在奇妙也打不过一个内功高的人。比如,你剑法再厉害,一剑刺过来,别人一掌打断你的剑,你还怎么使剑法,你一掌打到一个武功高的人身上,那人没什么事,却把你
奔跑你个Run
·
2023-11-16 21:30
JVM知识点总览
jvm总体梳理jvm体系总体分四大块:类的加载机制jvm内存结构GC算法垃圾回收GC分析命令
调优
当然这些知识点在之前的文章中都有详细的介绍,这里只做主干的梳理这里画了一个思维导图,将所有的知识点进行了陈列
Java程序员-张凯
·
2023-11-16 20:53
java虚拟机
jvm
java虚拟机
jvm
大模型在数据分析场景下的能力评测|进阶篇
如何
调优
大模型,来更好地做数据计算和洞察分析?如何降低整体成本,同时保障分析体验?
Kyligence
·
2023-11-16 12:42
数据分析
人工智能
大数据
思特威24校招-电路/算法/集成电路/ic/pm等-上海深圳
offer题解|#对顾客ID和日期排序#selectcust_id,order_numfromOrdersorderbycust_id,order_datedesc;树根互联一面jvm回收算法g1jvm
调优
2301_79125642
·
2023-11-16 12:31
java
java开发校招面试,面试真题解析
阿里系的lazada一面现场(50min)①sync的底层实现,锁优化,和lock的对⽐等②jvm参数
调优
详细过程,到为什么这么设置,好处,⼀些gc场景,如何去分析gc⽇志③redis数据结构,使⽤场景
最新Java面经
·
2023-11-16 11:20
程序员
java
面试
经验分享
前端微服务qiankun基础使用
什么是微前端Techniques,strategiesandrecipesforbuildingamodernwebappwithmultipleteamsthatcanshipfeatu
resin
dependently
duansamve
·
2023-11-16 11:19
qiankun
vue.js
前端
JVM GC
调优
命令看这一篇就够了
JVMGC
调优
命令看这一篇就够了2023-11-1123:27·IT果果日记jstat可用于统计内存分配速率、GC次数,GC耗时jstat常用命令格式jstat-gc例如:jstat-gc6100010
qq_21305943
·
2023-11-16 09:03
jvm
linux
运维
性能测试知多少---性能分析与
调优
的原理
最近一直纠结性能分析与
调优
如何下手,先从硬件开始,还是先从代码或数据库。
测试小鬼
·
2023-11-16 08:01
测试工具
经验分享
postman
自动化测试
软件测试
JVM命令行工具和JVM
调优
实战
一、JVM命令行工具1.JPS(JVMProcessStatusTool)概述:虚拟机进程工具。命令格式:jps[option][hostid],例:jps-l主要选项:-q只输出LVMID,省略主类的名称-m输出虚拟机进程启动时传递给主类main()函数的参数-l输出主类的全名,如果进程执行的是jar包,输出jar路径-v输出虚拟机进程启动时JVM参数2.jmap概述:Java内存映像工具命令格
秋忆侬sonny
·
2023-11-16 04:31
JVM
jvm
java
开发语言
JVM GC
调优
命令看这一篇就够了
jstat可用于统计内存分配速率、GC次数,GC耗时jstat常用命令格式jstat-gc例如:jstat-gc6100010,统计pid=6的进程,每秒统计1次,统计10次。参数含义:S0C:年轻代中第一个Survivor区的容量,单位为KB。S1C:年轻代中第二个Survivor区的容量,单位为KB。S0U:年轻代中第一个Survivor区已使用大小,单位为KB。S1U:年轻代中第二个Surv
IT果果日记
·
2023-11-16 03:51
jvm
jstack
jmap
gc
jinfo
jstat
Chapter 8 Optimization
调优
Chapter8Optimization
调优
8.1OptimizationOverview优化概述8.2OptimizingSQLStatements[+/-]优化SQL语句8.3OptimizationandIndexes
scan724
·
2023-11-16 02:21
上一页
27
28
29
30
31
32
33
34
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他