E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
系统监控调优
LoadRunner性能测试
可参考:LoadRunner下载及安装破解性能测试分析与性能
调优
诊断–史上最全的服务器性能分析监控
调优
篇https://www.cnblogs.com/laoqing/p/11629941.html虫师
高级点工
·
2023-11-14 19:16
性能测试+adb
monkey+稳定性测试
压力测试
实时数仓-Flink使用总结
具备一站式开发运维管理平台,支持作业开发、数据调试、运行与监控、自动
调优
、智能诊断等全生命周期能力。本期将对Flink的使用进行总结。
高阳很捷迅
·
2023-11-14 18:42
IT管理
数据分析
flink
大数据
实时数仓
MySql
调优
centos->mysql->my.cnf配置修改#注:增加和减少bufferpool的大小都是以大块的方式,块的大小由参数innodb_buffer_pool_chunk_size决定,默认为128M。#Innodb_buffer_pool_size的大小可以自行设定,但必须是innodb_buffer_pool_chunk_size乘以innodb_buffer_pool_instances的
爱你是我最好的张扬
·
2023-11-14 17:20
mysql
数据库
oracle中sql
调优
方法,Oracle SQL 高手必知的
调优
方法 <四>
续31、避免改变索引列的类型当比较不同数据类型的数据时,ORACLE自动对列进行简单的类型转换.假设EMPNO是一个数值类型的索引列.SELECT*FROMempWHEREempno='123'实际上,经过ORACLE类型转换,语句转化为:SELECT*FROMempWHEREempno=to_number('123')幸运的是,类型转换没有发生在索引列上,索引的用途没有被改变.现在,假设EMP_
Gamer42
·
2023-11-14 13:35
oracle中sql调优方法
JVM基本知识
编译为ClassFile(.class字节码文件),再到达类加载器ClassLoader.栈Stack、本地方法栈、程序计数器里面不可能有垃圾,有垃圾的话,程序就会报错了.方法区属于特殊的堆,所谓的JVM
调优
就是在调堆和方
童鞋♬
·
2023-11-14 10:37
JVM
java
开发语言
后端
1.jvm基本知识
java和jvm的关系为什么学jvm怎么学习为什么jvm
调优
?
流月up
·
2023-11-14 10:57
jvm
jvm
基本知识
20个 Linux 服务器性能
调优
技巧
Linux是一种开源操作系统,它支持各种硬件平台,Linux服务器全球知名,它和Windows之间最主要的差异在于,Linux服务器默认情况下一般不提供GUI(图形用户界面),而是命令行界面,它的主要目的是高效处理非交互式进程,响应时间并不是那么重要,相反,能够长时间处理高负载才是最关键的。Linux高可用服务器集群解决方案让IT系统管理员可以从容应对许多常见的硬件和软件故障,允许多台计算机一起工
佩哥说Java
·
2023-11-14 09:19
服务器
linux
运维
Linux 的性能
调优
的思路
转自:Linux云计算架构Linux操作系统是一个开源产品,也是一个开源软件的实践和应用平台,在这个平台下有无数的开源软件支撑,我们常见的apache、tomcat、mysql等。开源软件的最大理念是自由、开放,那么Linux作为一个开源平台,最终要实现的是通过这些开源软件的支持,以最低廉的成本,达到应用最优的性能。因此,谈到性能问题,主要实现的是Linux操作系统和应用程序的最佳结合。01性能问
开源Linux
·
2023-11-14 09:17
linux
运维
服务器
linux
调优
工具,Linux性能
调优
工具
原标题:Linux性能
调优
工具在实际开发中,我们有时候会收到一些Linux服务的监控报警,比如CPU飙高,内存飙高等,这个时候,我们会登录到服务器上进行排查。
牛耿
·
2023-11-14 09:47
linux调优工具
Linux操作系统硬件性能
调优
测试
Linux操作系统硬件性能
调优
测试1.CPU性能测试2.内存性能测试3.磁盘性能测试3.1.dd工具3.2.fio工具3.3.iostat工具4.存储性能测试5.网卡性能测试5.1.sar工具5.2.脚本工具
降世神童
·
2023-11-14 09:17
linux
服务器
运维
linux java 性能_Linux系统性能
调优
之性能分析
性能
调优
的第一步是性能分析,下面从性能分析着手进行一些介绍,尤其对Linux性能分析工具vmstat的用法和实践进行详细介绍。
微小蓝
·
2023-11-14 09:17
linux
java
性能
Linux系统
调优
文章目录系统硬件资源1.CPU2.内存3.磁盘I/O性能4.网络宽带操作系统相关资源1.系统安装优化2.内核参数优化3.文件系统优化应用程序软件资源一linux服务器性能查看1.1cpu性能查看1、查看物理cpu个数:2、查看每个物理cpu中的core个数:3、逻辑cpu的个数:1.2内存查看1、查看内存使用情况:1.3硬盘查看1、查看硬盘及分区信息:2、查看文件系统的磁盘空间占用情况:43、查看
YJ Thoreau
·
2023-11-14 09:14
Linux系统管理
linux
运维
数据库
linux性能
调优
总结
做运维这几年也一直在搞性能
调优
,写这个文章也算是对工作的总结。讲
调优
第一步是,要讲为什么要
调优
?也就是系统分析,分析还需要有指标,做好性能监控的情况下,看到确实需要
调优
才能进行。
Yonself
·
2023-11-14 09:42
linux
运维
调优
linux性能
调优
Linux性能工具把观察到的性能问题跟系统原理关联起来,特别是把系统从应用程序、库函数、系统调用、再到内核和硬件等不同的层级贯穿起来。这些问题或场景。1·流量高峰期,服务器CPU使用率过高报警,登录Linux上去top完,进一步定位,是系统CPU资源太少,或者程序并发部分有问题。\2.系统没有跑吃内存的程序,free命令之后,发现系统没有内存了,哪里占用了内存。\3.收到Zabbix告警发现某台存
Richardlygo
·
2023-11-14 09:40
linux
Linux—JVM等性能
调优
监控
介绍 在linux上跑程序时,常常遇到程序卡顿,内存消耗大,这时候,我们需要使用free查看内存使用情况及top内存消耗排行,当然,我们还可以继续使用一些其他的JVM监控命令如jstat等命令进行java程序的性能评估。free命令free命令介绍 free命令是显示系统内存的使用情况,一般包括了物理内存、交换内存以及内核缓冲区内存。free命令使用[linux@001]$free--help
java领域
·
2023-11-14 09:40
linux
服务器
unix
java
运维
Linux 性能
调优
之硬件资源监控
写在前面考试整理相关笔记博文内容涉及Linux硬件资源监控常见的命名介绍,涉及硬件基本信息查看查看硬件错误信息查看虚拟环境和云环境资源理解不足小伙伴帮忙指正对每个人而言,真正的职责只有一个:找到自我。然后在心中坚守其一生,全心全意,永不停息。所有其它的路都是不完整的,是人的逃避方式,是对大众理想的懦弱回归,是随波逐流,是对内心的恐惧——赫尔曼·黑塞《德米安》系统出现问题,或者存在异常的日志信息,某
山河已无恙
·
2023-11-14 09:38
Linux
性能调优
linux
运维
服务器
数据库01-慢查询优化
MySQL优化MySQL优化是数据库管理和应用性能
调优
的一个重要方面。以下是一些常规性的MySQL优化经验和适用场景:索引优化:确保表的字段上有适当的索引,以加速查询。
Elaine202391
·
2023-11-14 08:09
面试攻略
数据库
SSH全能终端工具mobaXterm(远程工具)使用教程
mobaXterm使用教程目录引言mobaXterm概述安装与配置下载mobaXterm安装过程基础设置SSH连接创建SSH会话SSH命令行操作文件传输高级特性多标签和分屏宏和自动化脚本插件和扩展问题排查连接问题性能
调优
总结参考资料
Dontla
·
2023-11-14 07:59
linux
ubuntu
ssh
运维
大数据-Spark
调优
(二)
大数据-Spark
调优
(二)尽量避免使用shuffle类算子shuffle描述spark中的shuffle涉及到数据要进行大量的网络传输,下游阶段的task任务需要通过网络拉取上阶段task的输出数据,
海恋北斗星
·
2023-11-14 06:18
大数据
spark
大数据之Spark
调优
:Explain 查看执行计划
目录Explain查看执行计划准备测试用表和数据基本语法执行计划处理流程案例实操代码Explain查看执行计划Spark3.0大版本发布,SparkSQL的优化占比将近50%。SparkSQL取代SparkCore,成为新一代的引擎内核,所有其他子框架如Mllib、Streaming和Graph,都可以共享SparkSQL的性能优化,都能从Spark社区对于SparkSQL的投入中受益。要优化Sp
浊酒南街
·
2023-11-14 06:17
Spark调优
大数据
spark
分布式
Spark性能
调优
案例-优化spark估计表大小失败 和 小表关联 走 broadcast join
背景A任务中关联一张表,该表经过过滤和去重,数据量小于10MB,实际任务耗时较长。B任务关联一张小表,实际任务耗时较长排查思路A任务排查查看sparkUIsql界面:问题1:发现并没有走广播join观察此处join,对于76条数据的表,估计的大小超过10M,实际76条数据大小小于spark.sql.autoBroadcastJoinThreshold的值,导致这个问题的原因在对于broadcast
fir_dameng
·
2023-11-14 06:46
Spark
broadcast
join
Spark
sql
参数调优
小表估计失败
Spark性能
调优
案例-多表join优化,减少shuffle
背景A任务在凌晨1点到3点,平均耗时1h,且是核心公共任务,急需优化。整体逻辑示意图://从tableA读取一次数据,放到临时表t1DROPTABLEIFEXISTStemp.tmp_xx_$date_1;CREATETABLEIFNOTEXISTStemp.tmp_xxx_$date_1asselectxxxfromtableAwherexxxx;//从临时表t1读取和转换数据,得临时表t2DR
fir_dameng
·
2023-11-14 06:45
Spark
spark
sql
Spark3.0
多表join优化
消除shuffle
逻辑优化
JVM
调优
案例分析
1、大内存硬件上的程序部署策略这是笔者很久之前处理过的一个案例,但今天仍然具有代表性。一个15万PV/日左右的在线文档类型网站最近更换了硬件系统,服务器的硬件为四路志强处理器、16GB物理内存,操作系统为64位CentOS5.4,Resin作为Web服务器。整个服务器暂时没有部署别的应用,所有硬件资源都可以提供给这访问量并不算太大的文档网站使用。软件版本选用的是64位的JDK5,管理员启用了一个虚
一直不懂
·
2023-11-14 06:44
深入理解Java虚拟机
jvm
Spark 算子
调优
使用mapPartition提升map类操作的性能数据量不是特别大的时候,都可以用这种MapPartitions系列操作,性能还是非常不错的,是有提升的。mapToPair----->mapPartitionsToPairreturnactionRDD.mapToPair(newPairFunction(){@OverridepublicTuple2call(Rowrow)throwsExcept
星空下的那个人影
·
2023-11-14 06:14
大数据面试
spark
Spark
调优
Spark
调优
一、Spark资源参数
调优
二、开发
调优
**
调优
思路:**优先使用参数
调优
,如果参数
调优
不能满足我们的业务场景,这里就要涉及到代码
调优
一、Spark资源参数
调优
•num-executors:
栗子呀!
·
2023-11-14 06:13
大数据Spark专栏
大数据
spark
hadoop
Spark性能
调优
总结
目录1:spark为什么需要
调优
2.
调优
的本质3.什么是RDD从薯片加工了解rddRDD的特征和属性4.关于内存计算什么是内存计算:什么是DAGstage的划分stage中的内存计算是怎么样的5.
调优
之数据不动代码动
只会写demo的程序猿
·
2023-11-14 06:43
spark
spark
调优
-开发
调优
开发
调优
方式:(1)避免重复的RDD(2)尽可能多的复用一个RDD(3)对多次使用的RDD进行持久化(4)尽量避免使用shuffle类的算子(5)使用map-side预聚合的shuffle操作(combine
qichangjian
·
2023-11-14 06:12
大数据学习
hive on spark
调优
学习笔记
1集群环境概述1.1集群配置概述:所用集群由5台节点构成,其中2台为master节点,用于部署HDFS的NameNode,Yarn的ResourceManager等角色,另外3台为worker节点,用于部署HDFS的DataNode、Yarn的NodeManager等角色。Master节点配置为16核CPU、64G内存。Workder节点配置为32核CPU、128G内存。1.2集群规划概述:2ya
一只友
·
2023-11-14 06:39
hive
spark
学习
大数据开发-Spark
调优
常用手段
Spark
调优
spark
调优
常见手段,在生产中常常会遇到各种各样的问题,有事前原因,有事中原因,也有不规范原因,spark
调优
总结下来可以从下面几个点来
调优
。
Hoult-吴邪
·
2023-11-14 06:39
Spark性能
调优
案例
在实际工作中,性能
调优
是必不可少的,虽然业务千种百样,实际落地的解决方案可能也不尽相同,但归根结底,
调优
的最终目的是使得内存、CPU、IO均衡而没有瓶颈。
大数据男
·
2023-11-14 06:08
hadoop异常
java
spark
big
data
大数据
Spark SQL
调优
案例:单字段NOT IN子查询优化
背景有如下的数据查询场景。表结构createtableorder(order_idlong,customer_idlong)partitionedby(datestring);要查询当天有订单,但是前一天没有订单的用户在当天的订单记录。数据分析的同事编写的最初版本的SQL如下select*fromorderwheredate='2021-07-17'andcustomer_idnotin(sele
hammertank
·
2023-11-14 06:38
spark
【技术难点】hive on spark
调优
本文主要是想讲hiveonspark在运行于yarn模式的情况下如何
调优
。下文举例讲解的yarn节点机器配置,假设有32核,120GB内存。
无精疯
·
2023-11-14 06:05
spark
大数据
java
hadoop
分布式
spark
调优
案例分享
做了一个Spark
调优
案例的分享最近在整理了Spark相关的
调优
案例,并做了以下分享:spark
调优
案例,注意是MacKeynote
鸿乃江边鸟
·
2023-11-14 06:01
spark
分布式
spark
大数据
分布式
Redhat Linux v8.2 实时内核环境配置及参数
调优
BC-LinuxV8.2实时内核环境配置及参数
调优
-------物理机&虚拟机一、前言本文档包含有关RedhatLinuxforRealTime的基本安装和调试信息。
沉浮简
·
2023-11-14 03:14
linux
服务器
运维
高级运维学习(十四)Zabbix监控(一)
,知道调整什么找出系统的瓶颈在什么地方2监控的资源类别(1)公开数据Web、FTP、SSH、数据库等应用服务TCP或UDP端口(2)私有数据CPU、内存、磁盘、网卡流量等使用信息用户、进程等运行信息3
系统监控
命令
久 一
·
2023-11-14 03:20
Linux
高级运维学习
运维
学习
zabbix
linux
服务器
高级运维学习(十六)Prometheus 监控
Prometheus概述Prometheus是一个开源
系统监控
和警报工具包,最初由SoundCloud构建。也是一款监控软件,也是一个时序数据库。
久 一
·
2023-11-14 03:19
Linux
高级运维学习
运维
学习
prometheus
linux
自动化
postgresql数据库优化
目录概要优化方法硬件知识CPU及服务器体系结构内存硬盘文件系统及I/O
调优
文件系统的崩溃恢复Ext2文件系统Ext3文件系统Ext4文件系统XFS文件系统BarriersI/OI/O
调优
的方法SSD的Trim
necessary653
·
2023-11-13 22:28
数据库
MySQL索引及
调优
篇
第06章_索引的数据结构1.为什么使用索引索引是存储引擎用于快速找到数据记录的一种数据结构,就好比一本教科书的目录部分,通过目录中找到对应文章的页码,便可快速定位到需要的文章。MySQL中也是一样的道理,进行数据查找时,首先查看查询条件是否命中某条索引,符合则通过索引查找相关数据,如果不符合则需要全表扫描,即需要一条一条地查找记录,直到找到与条件符合的记录。[外链图片转存失败,源站可能有防盗链机制
t624027645
·
2023-11-13 22:27
sql
mysql
MySQL性能瓶颈以及优化
原链接:https://www.toutiao.com/a6725727372672238094/原来这样
调优
可以攻破MySQL性能瓶颈来一杯82年的Java2019-08-1619:37:13一、前言
eleven_4u
·
2023-11-13 22:44
数据库
mysql
Linux内核分析(十三)--内存管理之I/O交换与性能
调优
2.2、匿名页(Anonymouspage)------>2.3、读写方式------>2.4、常驻内存三、页面回收------>3.1、LRU算法------>3.2、嵌入式系统的zRAM四、内存性能
调优
文艺小少年
·
2023-11-13 21:44
CPU性能分析与操作系统的构建
linux
java
运维
【Java开发】之 JDK 自带的 JVM 性能
调优
监控工具
一、简介JDK本身自带了许多JVM
调优
监控工具,可以帮助我们查看Java应用程序的进程、线程、内存栈等信息。这些工具命令包括jps、jstack、jmap、jhat等等。
王廷云的博客
·
2023-11-13 17:03
Java
java
jvm
Oracle数据库
调优
实战:优化SQL查询的黄金法则!
下面将介绍Oracle数据库
调优
的黄金法则,帮助您提高SQL查询的性能和效率。一、分析SQL执行计划SQL执行计划是优化SQL查询的第一步。
胖头鱼不吃鱼-
·
2023-11-13 16:45
数据库
oracle
sql
银行数据中心机房动力环境监控系统设计与优化
安科瑞电气股份有限公司上海嘉定201801摘要:结合银行数据中心建设项目,设计银行数据中心机房动力环境监控系统,分析银行数据中心机房监控对象、搭建
系统监控
架构,给出监控实现方法,*后针对运行一段时间出现的问题
Acrel_China
·
2023-11-13 13:32
自动化
运维
服务器
JVM关键指标监控(
调优
)
JVM99%情况下不需要
调优
使用性能更好的垃圾回收器核心指标针对单台服务器而言:jvm.gc.time:每分钟GC耗时在1s以内500ms以内最佳jvm.gc.meantime:每次YGC耗时在100ms
牛壹壹
·
2023-11-13 13:22
jvm
SpringBoot日志全方位超详细手把手教程,零基础可学习 日志如何配置及SLF4J的使用......
3、日志的用途3.1、定位和发现问题3.2、
系统监控
3.3、数据采集3
dream_ready_Java
·
2023-11-13 12:37
java
开发语言
spring
spring
boot
log4j
SLF4J
logback
上手SQL语句
调优
必须了解的内容——Explain
在做性能测试时,资深的性能测试工程师,都会帮助研发同学优化sql语句,听起来很高深,但是具体操作是比较容易的,使用expain命令就可以了!本文我会用最简单有效的方式带大家掌握expain的使用方法!Explain概述explain即执行计划,使用explain关键字可以模拟优化器执行sql查询语句,从而知道MySQL是如何处理sql语句。explain主要用于分析查询语句或表结构的性能瓶颈。使用
测试开发Kevin
·
2023-11-13 12:35
性能测试
测试基础知识
测试开发
数据库
sql
oracle之执行计划
oracle之执行计划sql
调优
就是通过各种手段和方法是优化器选择最佳执行计划,以最小的资源消耗获取到想要的数据。
MrChang@
·
2023-11-13 11:32
oracle
学习笔记
oracle
oracle
数据库
Oracle获取执行计划的6种方法
执行计划描述了SQL引擎为执行SQL语句进行的操作,分析SQL语句相关的性能问题或仅仅质疑查询优化器的决定时,必须知道执行计划;所以执行计划常用语SQL
调优
。二、怎么获取执行计划?
使不得呀
·
2023-11-13 11:29
oracle
oracle
执行计划
plan
autotrace
statistics
10046
awrsqrpt
Spark 资源
调优
1资源规划1.1资源设定考虑1、总体原则以单台服务器128G内存,32线程为例。先设定单个Executor核数,根据Yarn配置得出每个节点最多的Executor数量,每个节点的yarn内存/每个节点数量=单个节点的数量总的executor数=单节点数量*节点数。2、具体提交参数1)executor-cores每个executor的最大核数。根据经验实践,设定在3~6之间比较合理。2)num-ex
shangjg3
·
2023-11-13 08:41
Spark
大数据
spark
如何在 Azure 中使用自动机器学习进行模型训练
自动机器学习(AutomatedMachineLearning,简称为AutoML)是一种通过自动化流程来简化模型训练和
调优
的技术。
嵌入式杂谈
·
2023-11-13 05:12
azure
机器学习
microsoft
上一页
30
31
32
33
34
35
36
37
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他