E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
CLOB调优
Spring Cloud zuul扩展能力设计和心得
前言实际上SpringCloud已经废弃zuul了,改用gateway,但是webflux的技术并没在实际项目大规模普及,还有很多servletNIO的应用,所以zuul还是很有必要改造的,实测zuul
调优
fenglllle
·
2023-10-06 15:06
架构设计
Spring
Cloud
线程池技术
spring
cloud
java
spring
JVM--线上系统jvm参数配置实战
上一篇文章最后留了一道思考题,线上系统怎么进行JVM参数配置及
调优
?
zheng45
·
2023-10-06 14:14
JVM
jvm
JVM详解-基础篇
java程序->java字节码文件->JVM->操作系统->硬件系统如图2.JVM的体系结构注意:栈,本地方法栈,程序计数器中没有垃圾回收.JVM
调优
说的就是调方法区
浦东第一高手
·
2023-10-06 14:11
JVM
JMM
java
java
JVM
调优
-JVM
调优
实践一
从jvm的
调优
原理,垃圾查找算法,垃圾回收算法,再到jvm
调优
工具,
调优
参数等。需要掌握的jvm知识,已经是循序渐进,一步一步的深入学习。那在掌握这些内容的时候,是不是有种想去实践的冲动呢?
ikt4435
·
2023-10-06 14:40
Java
编程
程序员
jvm
java
算法
jvm系列(7):jvm
调优
-工具篇
对于大型JAVA应用程序来说,再精细的测试也难以堵住所有的漏洞,即便我们在测试阶段进行了大量卓有成效的工作,很多问题还是会在生产环境下暴露出来,并且很难在测试环境中进行重现。JVM能够记录下问题发生时系统的部分运行状态,并将其存储在堆转储(HeapDump)文件中,从而为我们分析和诊断问题提供了重要的依据。其中VisualVM和MAT是dump文件的分析利器。jdk自带的工具jconsoleJco
大神,快来碗里
·
2023-10-06 14:40
JAVA
jvm系列
JAVA基础知识
jvm调优-工具篇
linux配置
调优
进程
调优
,浅谈linux性能
调优
之十七:进程绑定与中断绑定
1.使用taskset设置CPU亲和性taskset搜索并设定运行进程的CPU亲和性(根据进程ID)。它还可用于启动给定CPU亲和性的进程,这样就可将指定的进程与指定的CPU或者一组CPU捆绑CPU亲和性使用位掩码表示。最低位对应第一个逻辑CPU,且最高位对应最后一个逻辑CPU。这些掩码通常是十六进制,因此0x00000001代表处理器1,0x00000003代表处理器3。要设定运行进程的CPU亲
逆流而上的小船
·
2023-10-06 14:12
linux配置调优进程调优
了解Docker 依赖的linux内核技术
深入理解SR-IOV和IO虚拟化一文了解Linux上TCP的几个内核参数
调优
一文剖析Linux内核中内存管理分析linux启动内核源码一文剖析Linux内核中内存管理NamespaceCgroupUnionFSdocker
Linux加油站
·
2023-10-06 13:54
linux
docker
网络
互联网Java工程师面试题·Elasticsearch 篇·第一弹
目录1、elasticsearch了解多少,说说你们公司es的集群架构,索引数据大小,分片有多少,以及一些
调优
手段。
时光の尘
·
2023-10-06 08:20
千题千解·Java面试宝典
java
elasticsearch
开发语言
大数据
服务器
Spring — 三级缓存和 循环依赖
面试题—并发基础、【同步&互斥】、JUC&并发容器、【线程池】、异步编程、【Lambda表达式】、方法引用、Stream流3.Java面试题—JVM基础、【内存管理】、【垃圾回收】&垃圾收集器、JVM
调优
页川叶川
·
2023-10-06 05:58
NoteBook笔记本
spring
java
原理
JVM Optimization Learning(四)
目录一、
调优
1、基础概念2、什么是
调优
?
杀神lwz
·
2023-10-06 03:32
JVM学习
jvm
git提交代码实际操作
1.仓库的代码2.克隆代码下存在的分支git
clob
ehttps://gitee.com/sadsadasad/big-event-11.git3.查看当下存在的分支gitbranch-a在很多情况下,
如果决定要走又何必挽留
·
2023-10-06 01:51
git
redis持久化与
调优
目录一、Redis高可用:1.持久化:2.主从复制:3.哨兵:4.Cluster集群:二、Redis持久化:1.持久化功能:2.Redis的两种持久化:2.1RDB持久化:2.2AOF持久化:三、RDB持久化:1.触发条件:1.1手动触发:1.2自动触发:1.3其他自动触发机制:2.执行流程:3.启动加载RDB文件:四、AOF持久化:1.开启AOF:2.执行流程:2.1命令追加(append):2
我不道啊;
·
2023-10-06 00:25
redis
数据库
缓存
数据库:mysql数据库日志、备份与恢复
目录一、mysql日志1、日志类型2、事务日志性能优化3、开启慢查询日志4、开启通用日志5、开启刷新二进制日志6、mysql的双“1”
调优
二、数据库备份与恢复1、备份类型2、mysqldump工具的备份与恢复
阿杰。159
·
2023-10-05 19:36
数据库
服务器
sql
mysql
技术分享 | MySQL 编写脚本时避免烦人的警告
擅长MySQL、PostgreSQL、MongoDB等开源数据库相关的备份恢复、SQL
调优
、监控运维、高可用架构设计等。
爱可生开源社区
·
2023-10-05 18:53
深情忧伤曲
调优
美的白桦林
哈尔滨的外滩湿地公园面积太大,几天前来过一次,查看景观图才知,原来只游了一个角落。经过昨天秋雨的洗礼,今天上午天气格外晴好,哈尔滨特有的湛蓝的天空不挂一丝云彩。疫情也关不住,人们纷纷赶来外滩,这里倒成了“聚集”之处,一点都不比平时人流少。哈尔滨是典型的四季分明的城市,过了中秋节,气温明显下降,秋雨绵绵,秋意已浓。就拿外滩公园来说吧,最明显的季节变化便是色彩的不同,原本碧绿的树木,现在黄的黄红的红,
佛晓星辉
·
2023-10-05 17:30
23年云计算全国职业技能大赛-私有云
私有云任务1私有云服务搭建[5分]1.1.1基础环境配置[0.2分]1.1.2Yum源配置[0.2分]1.1.3配置无秘钥ssh[0.2分]1.1.4基础安装[0.2分]1.1.5数据库安装与
调优
[0.5
huhy~
·
2023-10-05 16:58
私有云(openstack)
云计算
Java进阶(持续更新中...)-2020-12-08
TTL的缓存管理12.15基于Spring的Cache的自定义缓存管理,指定cacheManager、cacheResolver配置,多级缓存嵌套12.16长时高并发压测95%Line不达标问题定位及性能
调优
qq_40239245
·
2023-10-05 13:52
java
spring
【Kafka专题】Kafka日志索引详解以及生产常见问题分析与总结
加速读取log消息日志1.2文件清理机制1.3Kafka的文件高效读写机制1.3.1Kafka的文件结构1.3.2顺序写磁盘1.3.3零拷贝1.4合理配置刷盘频率1.5客户端消费进度管理二、Kafka生产
调优
实践
验证码有毒
·
2023-10-05 13:47
tuling学院学习笔记
kafka
分布式
大语言模型(LLMs)综述调研
->当模型参数超过一定规模时,大模型不仅取得了显著性能提升,并表现出了一些小规模语言模型不具备的特殊能力(emergentabilities)LLM->显著规模的PLMLLM的四个阶段:预训练、
调优
、使用
nanobobo
·
2023-10-05 12:29
nlp
语言模型
人工智能
自然语言处理
程序员的说话之道
这是一种四两拨千斤的能力,面面俱到,以达到资源的最优化配置,而掌握资源的是人,人心的运转就像系统的运行一样,时时刻刻会出现不确定因素,需要不断地维护,排错、
调优
,其奥秘全在于捭阖之间。
全栈媛
·
2023-10-05 10:33
GridSearchCV 工具介绍
目录1、定义2、工作流程3、示例代码4、总结1、定义GridSearchCV是一个用于超参数
调优
的工具,它在给定的参数网格中执行交叉验证,以确定最佳的参数组合。
我有明珠一颗
·
2023-10-05 10:05
sklearn
机器学习
Python精修
GridSearchCV
sklearn
scikit-learn
机器学习
参数调优
python
深入理解CMS GC
深入理解CMSGC背景网上关于cmsgc介绍和
调优
的文章比较多,但大多没有经过验证。
landon30
·
2023-10-05 02:12
kafka知识与理解
文章目录背景为什么需要kafka,mysql行不行常识生产者流程zookeeper与kafkakafkabroker的增加和删除broker故障broker重要参数
调优
副本位置分配消费者消费者offset
rookie19_HUST
·
2023-10-04 23:13
大数据
开发
kafka
分布式
Tomcat性能优化到底如何做?
优化对于Tomcat的优化,主要是从2个方面入手:一是Tomcat自身的配置,另一个是Tomcat所运行的jvm虚拟机的
调优
。硬件资源服务器所能提供CPU、内存、硬盘的性能对处理能力有决定性影响。
Java小白锅
·
2023-10-04 18:10
SQL
调优
#插入数据页合并#orderby优化视频教程:34.进阶-SQL优化-orderby优化_哔哩哔哩_bilibili在创建索引的时候,如果没有设置顺序,是会默认升序的;但phone想要倒序,则需要额外的排序根据需要,创建联合索引时分别设置对应的顺序#groupby优化#limit优化#count优化#update优化在执行update语句的时候需要规避的问题:在执行update语句的时候,我们一定
其然乐衣
·
2023-10-04 18:10
interview
数据库
SQL调优
MySQL
JVM篇---第一篇
知识点汇总二、知识点详解:三、说说类加载与卸载一、知识点汇总JVM是Java运行基础,面试时一定会遇到JVM的有关问题,内容相对集中,但对只是深度要求较高.其中内存模型,类加载机制,GC是重点方面.性能
调优
部分更偏向应用
数据大魔王
·
2023-10-04 14:59
jvm
SpringBoot 可以同时处理多少请求
另外,SpringBoot还提供了一些配置参数,可以对Web服务器进行
调优
,以提高其并发处理能力。
Evan Wang
·
2023-10-04 06:45
Spring
Boot
spring
boot
tomcat
后端
【转】Java工程师成长之路
内存分配策略、垃圾收集器(G1)、GC算法、GC参数、对象存活的判定JVM参数及
调优
Java对象模型。oop-kl
java搬运工
·
2023-10-04 05:02
其它
Java
java成长
技能
提升
高级
嵌入式Linux应用开发-驱动大全-第一章同步与互斥①
Linux应用开发-驱动大全-第一章同步与互斥①第一章同步与互斥①1.1内联汇编1.1.1C语言实现加法1.1.2使用汇编函数实现加法1.1.3内联汇编语法1.1.4编写内联汇编实现加法1.1.5early
clob
ber
华为奋斗者精神
·
2023-10-04 05:27
Linux
ARM
MCU
MCU
C51
linux
运维
服务器
c++
c语言
java sql 参数缺省_spark SQL 参数
调优
1spark.sql.codegen默认值为false,当它设置为true时,SparkSQL会把每条查询的语句在运行时编译为java的二进制代码。这有什么作用呢?它可以提高大型查询的性能,但是如果进行小规模的查询的时候反而会变慢,就是说直接用查询反而比将它编译成为java的二进制代码快。所以在优化这个选项的时候要视情况而定。2spark.sql.inMemoryColumnStorage.com
weixin_39754616
·
2023-10-03 21:16
java
sql
参数缺省
Oracle高级
1.性能
调优
与优化 数据库性能是关键。了解如何使用Oracle性能
调优
工具,如AWR(自动工作负载存储库)和ADDM(自动数据库诊断监视器),以识别和解决性
程序员学姐
·
2023-10-03 20:21
数据库知识
oracle
数据库
Java 高效大文件 读取 和 写入(一亿行)
(还可以参数
调优
)思想利用nio高效写文件,先写入20个小文件,最后合并,每个小文件开一个线程。代码:publicstaticvoidmain(String[]a
最是那一低头的温柔
·
2023-10-03 19:32
JavaSE
综合
java
p2p
开发语言
MySQL进阶_查询优化和索引优化
数据准备1.2全值匹配我最爱1.3最佳左前缀法则第一节、索引失效案例可以从以下维度对数据库进行优化:索引失效、没有充分利用到索引–索引建立关联查询太多JOIN(设计缺陷或不得已的需求)–SQL优化服务器
调优
及各个参数设置
珍珠是蚌的眼泪
·
2023-10-03 11:50
MySQL
mysql
数据库
java
intellij-idea
数据结构
tomcat性能
调优
一.解决tomcat扫描jar包错误vimcatalina.properties找到相应配置在后面加,*tomcat.util.scan.StandardJarScanFilter.jarsToSkip=\,*tomcat.util.scan.StandardJarScanFilter.jarsToScan=\,*二.解决一系列tomcat部署问题createamemoryleak.错误rm-rf
小小的小帅
·
2023-10-03 07:14
java性能优化(JVM
调优
+Tomcat
调优
+数据库
调优
+代码优化)
程序计数器堆虚拟机栈本地方法栈类似Java虚拟机栈,与Java虚拟机区别在于:服务对象,即Java虚拟机栈为执行Java方法服务;本地方法栈为执行Native方法服务方法区其内部包含一个运行时常量池,具体介绍如下
调优
工具
A尘埃
·
2023-10-03 07:15
java
性能优化
jvm
ES大数据量性能优化
调优
方案
#01.选择合理的硬件配置:尽可能使用SSD使用SSD通常比机械硬盘查询速度快5~10倍,写入性能提升不明显。对于文档检索类查询性能要求较高的场景,建议考虑SSD作为存储,同时按照1:10的比例配置内存和硬盘。对于日志分析类查询并发要求较低的场景,可以考虑采用机械硬盘作为存储,同时按照1:50的比例配置内存和硬盘。单节点存储数据建议在2TB以内,不要超过5TB,以避免系统不稳定。#02.给JVM配
风南子
·
2023-10-03 06:11
线程池
使用线程池可以很直观的控制最大线程数,对线程进行统一的监控,也方便了
调优
工作。1.2jdk提供的常
木木不哭_8be4
·
2023-10-03 05:32
2019-03-13-Spark官方
调优
文档翻译
Spark
调优
由于大部分Spark计算都是在内存中完成的,所以Spark程序的瓶颈可能由集群中任意一种资源导致,如:CPU、网络带宽、或者内存等。
红魔豆
·
2023-10-03 05:49
一文成为MySQL
调优
老鸟
一文成为MySQL
调优
老鸟一定位性能低的SQL1查看是否开启了慢查询日志showvariableslike'slow_query_log';默认是OFF,不开启,可以手动开启2开启慢查询日志setglobalslow_query_log
NIIMP
·
2023-10-03 05:41
面试题
mysql
mysql
数据库
Spark SQL 与 Hive 的小文件
调优
文章目录小文件危害表的缓存shuffle分区数调整SparkSQL客户端设置合并Hive客户端处理小文件合并动态分区
调优
小文件归档小文件危害小文件会造成nn处理压力变大,大大降低了读取性能,整个HDFS
月亮给我抄代码
·
2023-10-03 03:51
spark
hive
sql
大数据
Spark3.0核心
调优
参数小总结
点击上方蓝色字体,选择“设为星标”回复”面试“获取更多惊喜本文已经加入「大数据成神之路PDF版」中提供下载。你可以关注公众号,后台回复:「PDF」即可获取。更多PDF下载可以参考:《重磅,大数据成神之路PDF可以分类下载啦!》Spark重点难点系列:《【Spark重点难点01】你从未深入理解的RDD和关键角色》《【Spark重点难点02】你以为的Shuffle和真正的Shuffle》《【Spark
王知无(import_bigdata)
·
2023-10-03 03:21
大数据
spark
python
java
数据分析
spark-sql
调优
技巧
sparkSQL概述sparkSQL的前世今生==Shark是专门针对于spark的构建大规模数据仓库系统的一个框架==Shark与Hive兼容、同时也依赖于Spark版本Hivesql底层把sql解析成了mapreduce程序,Shark是把sql语句解析成了Spark任务随着性能优化的上限,以及集成SQL的一些复杂的分析功能,发现Hive的MapReduce思想限制了Shark的发展。最后Da
柱子z
·
2023-10-03 03:21
spark-sql
大数据
hadoop
spark
Spark性能
调优
--资源参数
调优
、算子
调优
、Shuffle参数
调优
、Spark 数据倾斜
调优
一、资源参数
调优
了解完了Spark作业运行的基本原理之后,对资源相关的参数就容易理解了。
四月天03
·
2023-10-03 03:20
Spark
spark
big
data
scala
Spark 任务如何
调优
spark性能
调优
a.分配更多资源——第一步要做的比如增加executor个数(num_executor)、增加executor的cpu核数(executor_cores)、增加executor的内存量
星空下的那个人影
·
2023-10-03 03:50
大数据面试
spark
spark
spark 任务
调优
参数及问题整理
1.数据倾斜:最简单的做法:在sql中使用随机数distributebyrand()在sql末尾加select*fromaleftjoinbona.xx=b.xxdistributebyrand()在进行的join中如果关联字段出现大量的null值的时候,也会出现数据倾斜,这种情况,最好过掉null值,再关联。2.spark.dynamicAllocation.enabled=true开启动态资源
小小小小小小小小小小码农
·
2023-10-03 03:50
大数据
spark
spark SQL 参数
调优
1.spark.sql.codegen默认值为false,当它设置为true时,SparkSQL会把每条查询的语句在运行时编译为java的二进制代码。这有什么作用呢?它可以提高大型查询的性能,但是如果进行小规模的查询的时候反而会变慢,就是说直接用查询反而比将它编译成为java的二进制代码快。所以在优化这个选项的时候要视情况而定。2spark.sql.inMemoryColumnStorage.co
爱学习的小肥猪
·
2023-10-03 03:20
spark
Spark on Yarn资源
调优
前言Spark是专为大规模数据处理而设计的快速通用的计算引擎,具有速度快、支持多语言、移植性高的特点。而移植性高的体现就在于Spark的部署方式有多种模式,如:本地local、Standalone、ApacheMesos、HadoopYARN、EC2、Mesos、K8S等等。背景一般公司的大数据项目基础设施都是建立在hdfs之上,所以在大部分的公司里,Spark都是跑在Yarn之上,yarn作为一
chimchim66
·
2023-10-03 02:50
Hadoop
spark
big
data
hadoop
Spark
调优
— 资源
调优
&参数
调优
spark-submit参数具体如下:spark-submit\--queue${1}\#指定资源队列,否则默认default--masteryarn--deploy-mode${2}\#clientorcluster:选择客户端模式或者集群模式提交:决定driver是在本地还是集群内节点:cluster模式能够降低本地压力,发挥集群服务器优势--num-executors${3}\#启动的exe
daoxu_hjl
·
2023-10-03 02:50
Spark
Spark性能
调优
文章目录一、概述二、资源参数
调优
1参数
调优
①num-executors②executor-memory③executor-core④driver-memory⑤Spark.default.parallelism⑥Spark.storage.memoryFraction⑦Spark.Shuffle.memoryFraction
爱小可爱的IT白
·
2023-10-03 02:49
spark
大数据
分布式
用户画像5:开发性能及作业调度
本章主要总结开发性能
调优
及作业调度相关的产品知识,性能
调优
主要是减少性能消耗和提高ETL作业时间,常见的
调优
就会数据倾斜
调优
、合并小文件、缓存中间数据、开发中间表等方式。
一只森林鹿Luluzeng
·
2023-10-03 02:49
上一页
46
47
48
49
50
51
52
53
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他