E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
jvm-调优
Spark性能优化指南数据倾斜——高级篇
继基础篇讲解了每个Spark开发人员都必须熟知的开发
调优
与资源
调优
之后,本文作为《Spark性能优化指南》的高级篇,将深入分析数据倾斜
调优
与shuffle
调优
,以解决更加棘手的性能问题。
吃胖点儿
·
2024-01-24 17:15
spark核心技术
【机器学习】机器学习8大调参技巧!
今天给大家一篇关于机器学习调参技巧的文章超参数
调优
是机器学习例程中的基本步骤之一。该方法也称为超参数优化,需要搜索超参数的最佳配置以实现最佳性能。
风度78
·
2024-01-24 16:55
机器学习
人工智能
【JVM专题】JVM从概述到
调优
图文详解,含思维脑图深度剖析!
JVM概述JVM是一种用于计算机设备的规范,它是一个虚构的计算机的软件实现,简单的说,JVM是运行bytecode字节码程序的一个容器。它有一个解释器组件,可以实现JAVA字节码和计算机操作系统之间的通信,java程序只需要在JVM上一次编译,多出运行,因此JAVA具有跨平台性。内存结构方法区(常量池、静态变量、构造函数、类数据)堆(对象、类实例、GC的主要区域)新生区(MinorGC、FullG
前程有光
·
2024-01-24 16:50
Apache Doris (七十): Doris优化
具体可以参考前面每个部分内容,这里大体总结下Doris中的优化相关内容:执行SQL慢可以通过Doris提供的QueryProfile查看SQL执行的统计信息帮助我们了解Doris的执行情况,并有针对性的进行相应Debug与
调优
工作
IT贫道
·
2024-01-24 14:08
大数据OLAP体系技术栈
apache
doris
nginx
调优
简介
(1)开启status模块location/status{stub_statuson;}(2)设置并发worker_processes2;events{worker_connections50000;}(3)设置最大可打开文件数worker_rlimit_nofile65535;另外,注意linux系统最大文件限制数vim/etc/security/limits.confroothardnofil
Borny鼎鼎
·
2024-01-24 11:46
其他
nginx
MySQL修炼手册16:性能
调优
:提升MySQL数据库整体性能
文章目录写在开头1查询性能的优化1查询性能的优化1.1优化查询语句1.1.1避免全表扫描1.1.2合理使用WHERE子句1.1.3使用JOIN时的优化1.1.4子查询的优化1.1.5使用LIMIT优化查询1.1.6存储过程的使用1.1.7UNION和UNIONALL的选择1.1.8使用EXISTS替代IN1.1.9利用索引加速ORDERBY1.1.10使用适当的数据类型和长度1.2使用合适的索引1
theskylife
·
2024-01-24 11:37
数据库
数据库
mysql
sql
XGBoost系列5——XGBoost的集成学习之旅
的梯度提升树特性2.2正则化项的引入2.3学习速度与性能优势2.4与传统集成学习算法的对比3.如何在实际项目中使用XGBoost进行集成3.1数据集特征与评估指标的选择3.2XGBoost模型的选择与
调优
theskylife
·
2024-01-24 11:34
数据分析
数据挖掘
集成学习
机器学习
人工智能
数据挖掘
阿里云PTS如何使用?
阿里云PTS(PerformanceTestingService)是阿里巴巴提供的一款云端性能测试服务,它帮助企业进行大规模、高并发场景下的系统性能评估和
调优
。
云服务商呀
·
2024-01-24 10:12
阿里云
云计算
运维
HBase详细概述
本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据、HBase数据模型、HBase物理存储、HBase系统架构,HBase
调优
、HBaseShell访问等。
a867901084
·
2024-01-24 08:49
大数据
数据库
运维
利用 Mountpoint for Amazon S3 在 Kubernetes 上加速 LLM 的训练
本文通过在EC2g5.2xl实例上完成LLaMA2的
调优
训练,读者可以利用较少的GPU资源学习复现本
亚马逊云开发者
·
2024-01-24 06:25
kubernetes
容器
云原生
Go每日精选(2019-06-14)- 进阶部分
5.redigo的redis.Pool配置参数
调优
凯文不上班
·
2024-01-24 00:39
mysql5.7性能
调优
一千个DBA就有一千种配置方式!大家一定记得不要轻易去看网上,要看只看官网!网上很多博客都是错的,连参数都列错了,5.7很多参数和5.6是完全不一样的。可能你从未看到过这样的一篇集中火力式的把mysql参数列了这么全的文章,很有兴曾参与过超3万并发的18~19年的数轮520、618、双11、双12保卫战。因此这一篇是汇集了最精华和实战的内容把mysql所有的参数列在这边供大家参考。并且以(64cc
周识儒ice
·
2024-01-23 19:05
Java相关的性能
调优
方案
本文介绍了在性能测试过程中Java进程消耗CPU过高的问题排查方法、线程死锁问题排查方法和内存泄露的排查方法Java进程消耗CPU过高的问题排查方法CPU利用率过高,查看JVM中线程占用cpu大小的方法ps–Lfppidtop–ppid-H查看高占用的线程并转化为十六进制的方法printf"%x\n"其中x为线程号然后jstack-l16进制的线程号线程死锁问题排查方法死锁定义线程死锁是指由于两个
测试开发Kevin
·
2024-01-23 19:13
最新| ClickHouse入门、
调优
、实战一条龙全解秘籍
Clickhouse是一个高性能且开源的数据库管理系统,主要用于在线分析处理(OLAP)业务。它采用列式存储结构,可使用SQL语句实时生成数据分析报告,另外它还支持索引,分布式查询以及近似计算等特性,凭借其优异的表现,ClickHouse在各大互联网公司均有广泛地应用。WhyClickHouse首先我们来看一下OLAP场景下的关键特征。1.大多数数据库访问都是读请求。2.数据总是以批量形式写入数据
小晨说数据
·
2024-01-23 15:37
数据库
分布式
大数据
sap
uefi
JVM
调优
何时进行JVM
调优
Heap内存(老年代)持续上涨达到设置的最大内存值;FullGC次数频繁;GC停顿时间过长(超过1秒);应用出现OutOfMemory等内存异常;应用中有使用本地缓存且占用大量内存空间
请不要问我是谁
·
2024-01-23 14:16
Java设计模式-适配器模式(8)
馆长准备了很多学习资料,其中包含java方面,jvm
调优
,spring/springboot/springcloud,微服务,分布式,前端,js书籍资料,视频资料,以及各类常用软件工具,破解工具等资源。
艾利克斯冰
·
2024-01-23 12:22
JAVA软件设计模式(GOF)
java
设计模式
适配器模式
Java设计模式-代理模式(7)
馆长准备了很多学习资料,其中包含java方面,jvm
调优
,spring/springboot/springcloud,微服务,分布式,前端,js书籍资料,视频资料,以及各类常用软件工具,破解工具等资源。
艾利克斯冰
·
2024-01-23 12:52
JAVA软件设计模式(GOF)
java
设计模式
代理模式
JVM实战篇:GC
调优
目录一.GC
调优
的核心指标1.1吞吐量(Throughput)1.2延迟(Latency)1.3内存使用量二.GC
调优
的方法2.1监控工具Jstat工具VisualVm插件Prometheus+Grafana2.2
汤姆&Tom
·
2024-01-23 09:46
JVM
jvm
你还在 Select * 吗?
有人会说性能
调优
是数据库管理员(DBA)的事,然而性能
调优
跟程序员们也有莫大的关系。程序中嵌入的一行行的SQL语句,如果使用了一些优化小技巧,定能达到事半功倍的效果。
良月柒
·
2024-01-23 07:45
头疼!卷积神经网络是什么?CNN结构、训练与优化一文全解
深入分析了背景和重要性、定义与层次介绍、训练与优化,详细分析了其卷积层、激活函数、池化层、归一化层,最后列出其训练与优化的多项关键技术:训练集准备与增强、损失函数、优化器、学习率调整、正则化技巧与模型评估
调优
AI小白龙*
·
2024-01-23 04:48
cnn
人工智能
神经网络
深度学习
机器学习
vscode
二刷Java多线程:线程池详解
一、使用线程池的好处降低资源消耗:通过重复利用已创建的线程降低线程创建和销毁造成的消耗提高响应速度:当任务到达时,任务可以不需要等到线程创建就能立即执行提高线程的可管理性:使用线程池可以统一分配、
调优
和监控二
邋遢的流浪剑客
·
2024-01-23 02:18
线程池实现原理
线程池状态转换
别让你的云端“瘫痪”——教你如何优化云平台性能测试
目录引言目的测试指标系统性能指标资源指标中间件指标数据库指标稳定性指标批量处理指标可扩展性指标可靠性指标性能测试的过程测试计划性能测试项目检测与控制测试分析测试设计测试执行测试完成性能分析性能分析的前提性能分析的流程可能瓶颈点方法
调优
引言你有没有遇到过这样的情况
锦都不二
·
2024-01-22 23:59
软件测试
性能测试
软件测试工程师
服务器
软件测试
软件测试工程师
性能测试
云平台性能测试
大数据平台的硬件规划、网络
调优
、架构设计、节点规划
1.大数据平台硬件选型要对Hadoop大数据平台进行硬件选型,首先需要了解Hadoop的运行架构以及每个角色的功能。在一个典型的Hadoop架构中,通常有5个角色,分别是NameNode、StandbyNameNode、ResourceManager、NodeManager、DataNode以及外围机。其中NameNode负责协调集群上的数据存储,StandbyNameNode属于NameNode
小枫@码
·
2024-01-22 17:18
大数据架构师
大数据
Nginx 实战指南
本实战指南将带你深入了解Nginx的安装、基础配置、高级配置、最佳实践以及性能
调优
。
ivwdcwso
·
2024-01-22 15:04
nginx
再见23你好24
2.今年把GDB和火焰图的东西写了博客,对
调优
调试有一点理解。3.汇编级
调优
没有什么实质上进展,。4.PMP证书考下了。2、期望的事情有的做了一些,但是还不到位。今年知道做什么,就是没有动力。
csdn_dyq111
·
2024-01-22 10:06
年度总结
其他
《机器学习》客户流失判断-python实现
实现读取数据并初步了解导入宏包读取数据查看数据类型检查缺失值描述性统计分析可视化分析用户流失分析特征分析任期年数与客户流失的关系:服务类属性分析特征相关性分析数据预处理类别编码转换划分训练数据与测试数据归一化处理模型建立逻辑回归支持向量机(SVM)K近邻(KNN)XGBoost-贝叶斯搜索超参数
调优
随机森林
汐ya~
·
2024-01-22 09:44
机器学习
python
人工智能
分类
JVM-
垃圾回收算法-引用计数法-可达性分析-标记清除-复制算法-标记整理与分代收集
JVM-
垃圾回收算法-引用计数法-可达性分析-标记清除-复制算法-标记整理与分代收集1、对象存活算法引用计数法简介:判断对象是否存活算法,讲解对象垃圾回收对象是否回收判断引用计数法存在的特点分析-优缺点
孤独冰刃
·
2024-01-22 09:36
jvm
jvm
算法
从严治党,真抓实干,夯实细节,着眼长效
一是立足区位优势、坚持问题导向、创新工作方式、凝聚内生动力,
调优
产业结构,培育富民产业,坚持把多样化种植产业作为产业结构调整的主攻方向,以专业合作社为龙头,种植马铃薯6.9万亩,种植玉米3900亩,西红柿
Cooo1
·
2024-01-22 08:42
架构师才需要知道的知识:如何做容量预估和
调优
为了构建高并发、高可用的系统架构,压测、容量预估必不可少,在发现系统瓶颈后,需要有针对性地扩容、优化。结合楼主的经验和知识,本文做一个简单的总结,欢迎探讨。1、QPS保障目标一开始就要明确定义QPS保障目标,以此来推算所需的服务、存储资源。可根据历史同期QPS,或者平时峰值的2到3倍估算。压测目标示例:qps达到多少时,服务的负载正常,如平均响应时间、95分位响应时间、cpu使用率、内存使用率、消
Java爱好者
·
2024-01-22 08:09
【SpringBoot技术专题】「开发实战系列」Undertow web容器的入门实战及
调优
方案精讲
Undertowweb容器的入门实战及
调优
方案精讲Undertowweb容器Undertow介绍官网API给出一句话概述Undertow:官网API总结特点:Lightweight(轻量级)HTTPUpgradeSupport
洛神灬殇
·
2024-01-22 08:50
#
#
spring
boot
前端
后端
03-Flink内存模型
.1.1JVM内存管理的不足1.1.1有效数据密度低存储:对象头、实例数据、对齐填充部分导致JVM中有效信息的存储密度很低1.1.2垃圾回收FullGC会严重影响性能以及和集群中的心跳信息超时,使得无法进行
调优
情深@骚明
·
2024-01-22 08:48
流式计算
flink
Flink TaskManager 内存管理机制介绍与
调优
总结
作者:董伟柯,腾讯CSIG高级工程师概要Flink的新版内存管理机制,要追溯到2020年初发布的Flink1.10版本。当时Flink社区为了实现三大目标:流和批模式下内存管理的统一,即同一套内存配置既可用于流作业也可用于批作业管控好RocksDB等外部组件的内存,避免在容器环境下用量不受控导致被KILL消除不同部署模式下配置参数的歧义,消除cut-off等参数语义模糊的问题提出了两个设计提案FL
腾讯云大数据
·
2024-01-22 08:09
flink
jvm
java
innodb status解读
showengineinnodbstatus输出中,显示除了大量的内部信息,它输出就是一个单独的字符串,没有行和列,内容分为很多小段,每一段对应innodb存储引擎不同部分的信息,其中有一些信息对于innodb
调优
的时候
mysia
·
2024-01-22 03:47
mysql
调优
show profile工具
1.showProfile是什么showProfile:是mysql提供用来分析当前回话中语句执行消耗资源的情况,可以用来SQL
调优
。
喜羊羊love红太狼
·
2024-01-22 01:06
mysql
个性化风控!消费贷客群分群模型应用实践
这三个方面在任何场景的模型中都是至关重要的,无论是针对ABC卡、策略
调优
、拒绝回捞、动支模型、营销响应模型还是流失模型等等,只要涉及到建模,都需要依赖于这三个模块。
风控小兵突击
·
2024-01-21 18:02
智能风控
大数据
人工智能
金融
自动化
机器学习
python
玩转Mysql 八 (MySQ优化入门篇)
前言:一个高性能,稳定的数据库集群并不是指的某一特性优化,就能保证系统的的稳定,需要从网络、硬件资源、操作系统、操作系统参数设置、数据库选型,执行SQL效率几个方面进行整体
调优
。
董乐,快乐的乐!
·
2024-01-21 16:49
mysql
数据库
XGBoost在时间序列分析中的高级应用
在时间序列问题中的应用场景2.1金融数据预测2.2销售预测2.3能源消耗预测2.4网络流量分析2.5医疗时间序列分析3.实际应用场景3.1一个简单的例子3.2广告领域的demo4.时间序列预测中的XGBoost参数
调优
theskylife
·
2024-01-21 15:51
数据分析
数据挖掘
人工智能
机器学习
数据挖掘
python
回归
XGBoost系列3——XGBoost在多分类问题中的应用
1.4多分类问题的应用场景2.XGBoost中的多分类支持2.1分类原理2.2Softmax损失函数2.3One-vs-All与One-vs-One2.4多分类性能优势2.5超参数
调优
2.6特征重要性分析
theskylife
·
2024-01-21 15:50
数据分析
数据挖掘
分类
数据挖掘
人工智能
python
机器学习
常用监控指标及
调优
步骤
诊断性能问题,需要清楚监控的关键指标,以此辅助试验诊断,最后验证推测。常用监控的关键指标通常情况下,性能测试监控指标主要分为:资源指标和系统指标。资源指标:CPU使用率:指单位时间内进程使用cpu时间的百分比,这是对一个时间段内CPU使用状况的统计,通过这个指标可以看出在某一个时间段内CPU被占用的情况,如果被占用时间很高,那么就需要考虑CPU是否已经处于超负荷运作,长期超负荷运作对于机器本身来说
HuiTest
·
2024-01-21 14:30
性能
性能
测试
指标
调优
java进阶-jvm精讲及实战
深入了解jvm及实战1.引言2.jvm概念理解1.引言jvm是深入了解java底层逻辑的必备知识储备,在中大型开发团队里,中高级工程师必须要了解和掌握,也是中高级工程师面试必考题,在实战中用于程序性能
调优
蒋增奎
·
2024-01-21 12:16
j2se高级特性
java
jvm
开发语言
100 springboot项目优化和jvm
调优
https://blog.csdn.net/huangjinjin520/article/details/103231775项目
调优
作为一名工程师,项目
调优
这事,是必须得熟练掌握的事情。
滔滔逐浪
·
2024-01-21 12:54
【转载】《软件性能测试、分析与
调优
实践之路》学习
这是一本理论和实践相结合的同时面向研发和测试岗的关于性能分析诊断
调优
实践的图书,比起其他的很多性能测试的图书,本书中内容更侧重于介绍如何去发现性能问题、分析诊断性能问题以及对发现的性能问题进行
调优
。
来自火星的我哈哈
·
2024-01-21 09:51
架构师之路:一个Java架构师需要掌握的知识技能,带思维导图
架构师=前端工程师+后端程序员+系统分析师+关键技术解决+各种技术搭配+设计模式+部署
调优
+其他,可见架构师是多面手,在项目当中起到连接管理与项目成员的重要角色。
Java黎先生
·
2024-01-21 06:50
soar-php 2.0 - SQL 语句优化器和重写器的 PHP 扩展包、 方便 SQL 语句
调优
soar-php是一个基于小米公司开源的soar开发的PHP扩展包,方便框架中SQL语句
调优
。
guanguans
·
2024-01-21 03:51
mysql explain ref const_MySQL EXPLAIN 详解
这条命令并没有提供任何调整建议,但它能够提供重要的信息帮助你做出
调优
决策。
网件NETGEAR
·
2024-01-21 02:34
mysql
explain
ref
const
一文了解java多线程(超详细+干货满满)
2.提高响应速度,当任务到达时,任务可以不需要等到线程创建就能立即执行3.提高线程的可管理性,线程是稀缺资源,如果无限制的创建,不仅会消耗系统资源,还会降低系统的稳定性,使用线程池可以进行统一的分配,
调优
和监控线程池的真正实现类是
GeekInk小火龙
·
2024-01-20 21:26
java
Java设计模式详解
谢谢馆长准备了很多学习资料,其中包含java方面,jvm
调优
艾利克斯冰
·
2024-01-20 14:25
java
设计模式
Hive性能
调优
(二)——一文搞懂HiveSQL执行计划
测试的数据请看上一篇博客,数据行数500万。目录一.简单SQL的执行计划二.带普通函数SQL的执行计划三.带聚合函数SQL的执行计划四.带窗口函数SQL的执行计划五.表连接的SQL的执行计划一.简单SQL的执行计划explainselects_age,s_scorefromstudent_tb_seqwheres_age=20;+----------------------------------
程研板
·
2024-01-20 13:19
#
Hive
hadoop
hive
大数据
mapreduce
强力收藏!一文说全HiveConf类(Hive3.1.2版本)
一文说全HiveConf类(Hive3.1.2版本)作者:Eeeddieee工作中大部分时间都用到了Hive,虽然对Hive的架构、运行原理、
调优
方式有一定了解,但是很多都是在前人总结的基础上进行学习,
Eeeddieee
·
2024-01-20 13:17
Hive
hadoop
hive
大数据
Hive
调优
一文打尽
一、
调优
概述Hive作为大数据领域常用的数据仓库组件,在平时设计和查询时要特别注意效率。
跟着大数据和AI去旅行
·
2024-01-20 13:16
大数据企业级实战
hive
上一页
7
8
9
10
11
12
13
14
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他