E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
调优
mysql-Optimization Overview-数据库
调优
Databaseperformancedependsonseveralfactorsatthedatabaselevel,suchastables,queries,andconfigurationsettings.ThesesoftwareconstructsresultinCPUandI/Ooperationsatthehardwarelevel,whichyoumustminimizeandm
jimiStephen
·
2023-11-16 02:16
mysql
数据库
ORACLE
调优
深入理解AWR报告
一堆历史性能数据,放在sysaux表空间上,AWR和sysaux都是10g出现的,是oracle
调优
的关键特性。
normaluser006
·
2023-11-16 01:35
Oracle
oracle
开源服务专题之------sshd服务安装管理及配置文件理解和安全
调优
本专题我将讨论一下开源服务,随着开源社区的日趋丰富,开源软件、开源服务,已经成为人类的一种公共资源,发展势头可谓一日千里,所以不可不知。SSHD服务,在我们的linux服务器上经常用到,很重要,涉及到服务器的安全,对这个服务的安全配置要高度重视。本文将从以下三个方面进行阐述开源服务及ssh服务。一、学习开源服务的步骤和方法二、SSHD服务安装、配置、使用三、设置安全的SSHD服务一、学习开源服务的
afxwd68402
·
2023-11-15 23:01
运维
开发工具
shell
【寒武纪(7)】MLU的cntoolkit:Cambricon-BANG架构和使用分析,MLU并行计算的硬件抽象、编程模型以及
调优
思路
文章目录硬件抽象1存储1.1.1存储层次访存一致计算模型1Core核内同步和并行2核间并行和同步编程模型1、Kernel计算规模任务类型执行示例性能
调优
性能
调优
实践参考cambriconBANG架构是基础的
Hali_Botebie
·
2023-11-15 23:39
并行计算
Mybatis Plus SaveBatch
调优
25倍性能
最近在压测一批接口,发现接口处理速度慢的有点超出预期,感觉很奇怪,后面定位发现是数据库批量保存这块很慢。这个项目用的是mybatis-plus,批量保存直接用的是mybatis-plus提供的saveBatch。我点进去看了下源码,感觉有点不太对劲:我继续追踪了下,从这个代码来看,确实是for循环一条一条执行了sqlSession.insert,下面的consumer执行的就是上面的sqlSess
伴川
·
2023-11-15 22:37
mybatis
安全
redis
java
分布式
MySQL
调优
的几种方式
MySQL
调优
有许多方式,以下是几种常用的方式:优化查询语句:通过使用合适的索引、优化查询语句的写法、避免全表扫描等方式来提升查询性能。
wzxue1984
·
2023-11-15 22:02
mysql
数据库
JVM 三大性能
调优
参数
JVM的性能
调优
是Java应用程序优化的重要部分,其中三大性能
调优
参数为:jvm三大性能
调优
参数1.堆内存大小(-Xmx和-Xms参数):堆内存是Java应用程序中最重要的内存区域,存储对象实例和数组等数据
wzxue1984
·
2023-11-15 22:01
jvm
考Oracle ocm 19c 版本的前提是需要有Oracle 19c ocp证书
例如:Oracle有各种成熟的性能诊断
调优
工具、Oracle的分区表和分区索引功能更成熟等。即使在去O的大环境下,去O之前需要懂O,才是更正确的选择。什么是Oracle19cOCMOracle
杭州云贝数据
·
2023-11-15 19:14
oracle
数据库
ocp
回顾丨2021数据库大咖讲坛(第6期)视频&PPT&互动问答
大会邀请来自中信建投证券股份有限公司、云和恩墨、PingCAP、Greenplum的技术专家,就Oracle中新增字段的点点滴滴、数据库性能提升之SQL优化、TiDB优化器原理介绍及
调优
实践案例分享、Greenplum
数据和云
·
2023-11-15 18:26
数据库
大数据
编程语言
人工智能
java
HBase原理 | HBase Compaction介绍与参数
调优
我们知道,数据达到HBase服务端会写WAL-写Memstore,然后定期或满足一定条件时刷写磁盘生成一个HFile文件,随着时间推移生成的HFile会越来越多,将会影响HBase查询性能,同时会对HDFS造成一定影响。因此HBase会定期执行Compaction操作以合并减少HFile数量。1.两种合并HBase中Compaction分为两种。MinorCompaction称为小合并,主要是选取
create17
·
2023-11-15 17:13
java
python
大数据
hbase
mysql
车间部署MES管理系统后有哪些变化
随着智能制造技术的飞速发展,工厂车间正经历着一场由数字化管理和智能化协
调优
化驱动的变革。这场变革的核心便是MES管理系统。
深蓝易网
·
2023-11-15 13:53
数字工厂
大数据
人工智能
运维
制造
系统架构
如何正确规划 JVM 性能
调优
JVM性能
调优
涉及到很多方面的权衡,其中某一方面可能会极大地影响整体性能。因此,需要综合考虑所有可能的影响。理解并遵循一些基本原则和理论将使性能
调优
变得更加容易。
wouderw
·
2023-11-15 07:20
jvm
论文浅尝 | 大语言模型综述
其次是适应性
调优
开放知识图谱
·
2023-11-15 06:16
语言模型
人工智能
自然语言处理
Cesium+Three.js体验:优化BIM模型展示效果
前面我们介绍了5个Cesium和Three.js结合的方案(《Cesium和Three.js结合的5个方案》),其中深度融合方案实现难度大,今天我们通过一次BIM模型展示效果
调优
过程,来窥探一下这个方案的具体优势
三维网格
·
2023-11-15 04:15
Cesium
Three.js
javascript
前端
开发语言
Android中高级进阶开发面试题冲刺合集(四)
:Android中高级进阶开发面试题冲刺合集(一)第二篇面试题在这:Android中高级进阶开发面试题冲刺合集(二)第三篇面试题在这:Android中高级进阶开发面试题冲刺合集(三)Android性能
调优
相
代码与思维
·
2023-11-15 01:22
android
面试
职场和发展
java
Framework
数据库方面的面试技巧,如何从建表方面展示自己能力
优化是个大话题,可以从索引,建表和SQL
调优
(SQLTuning)方面入手,这个我们来分析下建表时需要注意的优化点。我一般会问候选人,“你有没有
weixin_34390996
·
2023-11-15 00:14
数据库
面试
测试
(五)比赛中的CV算法(下5)检测网络
调优
(2)CV中的注意力机制
——NeoZng[
[email protected]
]如果觉得笔者写得还不错,给个关注点个赞吧!全网最强的CV注意力机制总结注意力机制最早被使用在机器翻译(或自然语言处理)上中的Encoder-Decoder模型上,让网络在处理不同部分语句时能够聚焦到特定的已经编码的语义向量或输入上。若想要理解上述注意力机制的来源,请学习和NLP和RNN相关的知识:吴恩达深度学习-序列模型,这是因为在计算机视觉
HNU跃鹿战队
·
2023-11-15 00:06
深度学习
计算机视觉
卷积神经网络
目标检测
机器学习
8年经验之谈 —— 记一次接口压力测试与性能
调优
!
经验总结1.如果总的CPU占用率偏高,且基本都被业务线程占用时,CPU占用率过高的原因跟JVM参数大小没有直接关系,而跟具体的业务逻辑有关。2.当设置JVM堆内存偏小时,GC频繁会导致业务线程停顿增多,TPS下降,最后CPU占用率也低了;3.当设置JVM堆内存偏大时,GC次数下降,TPS上升,CPU占用率立刻上升。4.Dom4J这个xml解析工具性能很强大,但在处理节点和层级都较多的xml文本时,
自动化测试老司机
·
2023-11-14 20:02
自动化测试
软件测试
安全测试
压力测试
python
单元测试
测试工具
自动化测试
性能测试
LoadRunner性能测试
可参考:LoadRunner下载及安装破解性能测试分析与性能
调优
诊断–史上最全的服务器性能分析监控
调优
篇https://www.cnblogs.com/laoqing/p/11629941.html虫师
高级点工
·
2023-11-14 19:16
性能测试+adb
monkey+稳定性测试
压力测试
实时数仓-Flink使用总结
具备一站式开发运维管理平台,支持作业开发、数据调试、运行与监控、自动
调优
、智能诊断等全生命周期能力。本期将对Flink的使用进行总结。
高阳很捷迅
·
2023-11-14 18:42
IT管理
数据分析
flink
大数据
实时数仓
MySql
调优
centos->mysql->my.cnf配置修改#注:增加和减少bufferpool的大小都是以大块的方式,块的大小由参数innodb_buffer_pool_chunk_size决定,默认为128M。#Innodb_buffer_pool_size的大小可以自行设定,但必须是innodb_buffer_pool_chunk_size乘以innodb_buffer_pool_instances的
爱你是我最好的张扬
·
2023-11-14 17:20
mysql
数据库
oracle中sql
调优
方法,Oracle SQL 高手必知的
调优
方法 <四>
续31、避免改变索引列的类型当比较不同数据类型的数据时,ORACLE自动对列进行简单的类型转换.假设EMPNO是一个数值类型的索引列.SELECT*FROMempWHEREempno='123'实际上,经过ORACLE类型转换,语句转化为:SELECT*FROMempWHEREempno=to_number('123')幸运的是,类型转换没有发生在索引列上,索引的用途没有被改变.现在,假设EMP_
Gamer42
·
2023-11-14 13:35
oracle中sql调优方法
JVM基本知识
编译为ClassFile(.class字节码文件),再到达类加载器ClassLoader.栈Stack、本地方法栈、程序计数器里面不可能有垃圾,有垃圾的话,程序就会报错了.方法区属于特殊的堆,所谓的JVM
调优
就是在调堆和方
童鞋♬
·
2023-11-14 10:37
JVM
java
开发语言
后端
1.jvm基本知识
java和jvm的关系为什么学jvm怎么学习为什么jvm
调优
?
流月up
·
2023-11-14 10:57
jvm
jvm
基本知识
20个 Linux 服务器性能
调优
技巧
Linux是一种开源操作系统,它支持各种硬件平台,Linux服务器全球知名,它和Windows之间最主要的差异在于,Linux服务器默认情况下一般不提供GUI(图形用户界面),而是命令行界面,它的主要目的是高效处理非交互式进程,响应时间并不是那么重要,相反,能够长时间处理高负载才是最关键的。Linux高可用服务器集群解决方案让IT系统管理员可以从容应对许多常见的硬件和软件故障,允许多台计算机一起工
佩哥说Java
·
2023-11-14 09:19
服务器
linux
运维
Linux 的性能
调优
的思路
转自:Linux云计算架构Linux操作系统是一个开源产品,也是一个开源软件的实践和应用平台,在这个平台下有无数的开源软件支撑,我们常见的apache、tomcat、mysql等。开源软件的最大理念是自由、开放,那么Linux作为一个开源平台,最终要实现的是通过这些开源软件的支持,以最低廉的成本,达到应用最优的性能。因此,谈到性能问题,主要实现的是Linux操作系统和应用程序的最佳结合。01性能问
开源Linux
·
2023-11-14 09:17
linux
运维
服务器
linux
调优
工具,Linux性能
调优
工具
原标题:Linux性能
调优
工具在实际开发中,我们有时候会收到一些Linux服务的监控报警,比如CPU飙高,内存飙高等,这个时候,我们会登录到服务器上进行排查。
牛耿
·
2023-11-14 09:47
linux调优工具
Linux操作系统硬件性能
调优
测试
Linux操作系统硬件性能
调优
测试1.CPU性能测试2.内存性能测试3.磁盘性能测试3.1.dd工具3.2.fio工具3.3.iostat工具4.存储性能测试5.网卡性能测试5.1.sar工具5.2.脚本工具
降世神童
·
2023-11-14 09:17
linux
服务器
运维
linux java 性能_Linux系统性能
调优
之性能分析
性能
调优
的第一步是性能分析,下面从性能分析着手进行一些介绍,尤其对Linux性能分析工具vmstat的用法和实践进行详细介绍。
微小蓝
·
2023-11-14 09:17
linux
java
性能
Linux系统
调优
文章目录系统硬件资源1.CPU2.内存3.磁盘I/O性能4.网络宽带操作系统相关资源1.系统安装优化2.内核参数优化3.文件系统优化应用程序软件资源一linux服务器性能查看1.1cpu性能查看1、查看物理cpu个数:2、查看每个物理cpu中的core个数:3、逻辑cpu的个数:1.2内存查看1、查看内存使用情况:1.3硬盘查看1、查看硬盘及分区信息:2、查看文件系统的磁盘空间占用情况:43、查看
YJ Thoreau
·
2023-11-14 09:14
Linux系统管理
linux
运维
数据库
linux性能
调优
总结
做运维这几年也一直在搞性能
调优
,写这个文章也算是对工作的总结。讲
调优
第一步是,要讲为什么要
调优
?也就是系统分析,分析还需要有指标,做好性能监控的情况下,看到确实需要
调优
才能进行。
Yonself
·
2023-11-14 09:42
linux
运维
调优
linux性能
调优
Linux性能工具把观察到的性能问题跟系统原理关联起来,特别是把系统从应用程序、库函数、系统调用、再到内核和硬件等不同的层级贯穿起来。这些问题或场景。1·流量高峰期,服务器CPU使用率过高报警,登录Linux上去top完,进一步定位,是系统CPU资源太少,或者程序并发部分有问题。\2.系统没有跑吃内存的程序,free命令之后,发现系统没有内存了,哪里占用了内存。\3.收到Zabbix告警发现某台存
Richardlygo
·
2023-11-14 09:40
linux
Linux—JVM等性能
调优
监控
介绍 在linux上跑程序时,常常遇到程序卡顿,内存消耗大,这时候,我们需要使用free查看内存使用情况及top内存消耗排行,当然,我们还可以继续使用一些其他的JVM监控命令如jstat等命令进行java程序的性能评估。free命令free命令介绍 free命令是显示系统内存的使用情况,一般包括了物理内存、交换内存以及内核缓冲区内存。free命令使用[linux@001]$free--help
java领域
·
2023-11-14 09:40
linux
服务器
unix
java
运维
Linux 性能
调优
之硬件资源监控
写在前面考试整理相关笔记博文内容涉及Linux硬件资源监控常见的命名介绍,涉及硬件基本信息查看查看硬件错误信息查看虚拟环境和云环境资源理解不足小伙伴帮忙指正对每个人而言,真正的职责只有一个:找到自我。然后在心中坚守其一生,全心全意,永不停息。所有其它的路都是不完整的,是人的逃避方式,是对大众理想的懦弱回归,是随波逐流,是对内心的恐惧——赫尔曼·黑塞《德米安》系统出现问题,或者存在异常的日志信息,某
山河已无恙
·
2023-11-14 09:38
Linux
性能调优
linux
运维
服务器
数据库01-慢查询优化
MySQL优化MySQL优化是数据库管理和应用性能
调优
的一个重要方面。以下是一些常规性的MySQL优化经验和适用场景:索引优化:确保表的字段上有适当的索引,以加速查询。
Elaine202391
·
2023-11-14 08:09
面试攻略
数据库
SSH全能终端工具mobaXterm(远程工具)使用教程
mobaXterm使用教程目录引言mobaXterm概述安装与配置下载mobaXterm安装过程基础设置SSH连接创建SSH会话SSH命令行操作文件传输高级特性多标签和分屏宏和自动化脚本插件和扩展问题排查连接问题性能
调优
总结参考资料
Dontla
·
2023-11-14 07:59
linux
ubuntu
ssh
运维
大数据-Spark
调优
(二)
大数据-Spark
调优
(二)尽量避免使用shuffle类算子shuffle描述spark中的shuffle涉及到数据要进行大量的网络传输,下游阶段的task任务需要通过网络拉取上阶段task的输出数据,
海恋北斗星
·
2023-11-14 06:18
大数据
spark
大数据之Spark
调优
:Explain 查看执行计划
目录Explain查看执行计划准备测试用表和数据基本语法执行计划处理流程案例实操代码Explain查看执行计划Spark3.0大版本发布,SparkSQL的优化占比将近50%。SparkSQL取代SparkCore,成为新一代的引擎内核,所有其他子框架如Mllib、Streaming和Graph,都可以共享SparkSQL的性能优化,都能从Spark社区对于SparkSQL的投入中受益。要优化Sp
浊酒南街
·
2023-11-14 06:17
Spark调优
大数据
spark
分布式
Spark性能
调优
案例-优化spark估计表大小失败 和 小表关联 走 broadcast join
背景A任务中关联一张表,该表经过过滤和去重,数据量小于10MB,实际任务耗时较长。B任务关联一张小表,实际任务耗时较长排查思路A任务排查查看sparkUIsql界面:问题1:发现并没有走广播join观察此处join,对于76条数据的表,估计的大小超过10M,实际76条数据大小小于spark.sql.autoBroadcastJoinThreshold的值,导致这个问题的原因在对于broadcast
fir_dameng
·
2023-11-14 06:46
Spark
broadcast
join
Spark
sql
参数调优
小表估计失败
Spark性能
调优
案例-多表join优化,减少shuffle
背景A任务在凌晨1点到3点,平均耗时1h,且是核心公共任务,急需优化。整体逻辑示意图://从tableA读取一次数据,放到临时表t1DROPTABLEIFEXISTStemp.tmp_xx_$date_1;CREATETABLEIFNOTEXISTStemp.tmp_xxx_$date_1asselectxxxfromtableAwherexxxx;//从临时表t1读取和转换数据,得临时表t2DR
fir_dameng
·
2023-11-14 06:45
Spark
spark
sql
Spark3.0
多表join优化
消除shuffle
逻辑优化
JVM
调优
案例分析
1、大内存硬件上的程序部署策略这是笔者很久之前处理过的一个案例,但今天仍然具有代表性。一个15万PV/日左右的在线文档类型网站最近更换了硬件系统,服务器的硬件为四路志强处理器、16GB物理内存,操作系统为64位CentOS5.4,Resin作为Web服务器。整个服务器暂时没有部署别的应用,所有硬件资源都可以提供给这访问量并不算太大的文档网站使用。软件版本选用的是64位的JDK5,管理员启用了一个虚
一直不懂
·
2023-11-14 06:44
深入理解Java虚拟机
jvm
Spark 算子
调优
使用mapPartition提升map类操作的性能数据量不是特别大的时候,都可以用这种MapPartitions系列操作,性能还是非常不错的,是有提升的。mapToPair----->mapPartitionsToPairreturnactionRDD.mapToPair(newPairFunction(){@OverridepublicTuple2call(Rowrow)throwsExcept
星空下的那个人影
·
2023-11-14 06:14
大数据面试
spark
Spark
调优
Spark
调优
一、Spark资源参数
调优
二、开发
调优
**
调优
思路:**优先使用参数
调优
,如果参数
调优
不能满足我们的业务场景,这里就要涉及到代码
调优
一、Spark资源参数
调优
•num-executors:
栗子呀!
·
2023-11-14 06:13
大数据Spark专栏
大数据
spark
hadoop
Spark性能
调优
总结
目录1:spark为什么需要
调优
2.
调优
的本质3.什么是RDD从薯片加工了解rddRDD的特征和属性4.关于内存计算什么是内存计算:什么是DAGstage的划分stage中的内存计算是怎么样的5.
调优
之数据不动代码动
只会写demo的程序猿
·
2023-11-14 06:43
spark
spark
调优
-开发
调优
开发
调优
方式:(1)避免重复的RDD(2)尽可能多的复用一个RDD(3)对多次使用的RDD进行持久化(4)尽量避免使用shuffle类的算子(5)使用map-side预聚合的shuffle操作(combine
qichangjian
·
2023-11-14 06:12
大数据学习
hive on spark
调优
学习笔记
1集群环境概述1.1集群配置概述:所用集群由5台节点构成,其中2台为master节点,用于部署HDFS的NameNode,Yarn的ResourceManager等角色,另外3台为worker节点,用于部署HDFS的DataNode、Yarn的NodeManager等角色。Master节点配置为16核CPU、64G内存。Workder节点配置为32核CPU、128G内存。1.2集群规划概述:2ya
一只友
·
2023-11-14 06:39
hive
spark
学习
大数据开发-Spark
调优
常用手段
Spark
调优
spark
调优
常见手段,在生产中常常会遇到各种各样的问题,有事前原因,有事中原因,也有不规范原因,spark
调优
总结下来可以从下面几个点来
调优
。
Hoult-吴邪
·
2023-11-14 06:39
Spark性能
调优
案例
在实际工作中,性能
调优
是必不可少的,虽然业务千种百样,实际落地的解决方案可能也不尽相同,但归根结底,
调优
的最终目的是使得内存、CPU、IO均衡而没有瓶颈。
大数据男
·
2023-11-14 06:08
hadoop异常
java
spark
big
data
大数据
Spark SQL
调优
案例:单字段NOT IN子查询优化
背景有如下的数据查询场景。表结构createtableorder(order_idlong,customer_idlong)partitionedby(datestring);要查询当天有订单,但是前一天没有订单的用户在当天的订单记录。数据分析的同事编写的最初版本的SQL如下select*fromorderwheredate='2021-07-17'andcustomer_idnotin(sele
hammertank
·
2023-11-14 06:38
spark
【技术难点】hive on spark
调优
本文主要是想讲hiveonspark在运行于yarn模式的情况下如何
调优
。下文举例讲解的yarn节点机器配置,假设有32核,120GB内存。
无精疯
·
2023-11-14 06:05
spark
大数据
java
hadoop
分布式
上一页
26
27
28
29
30
31
32
33
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他