参数调优

JVM性能优化--JVM参数配置，使用JMeter简单测试配合说明参数调优

一、JVM参数配置1、常见参数配置-XX:PrintGC每次触发GC的时候打印相关日志-XX:UseSerialGC串行回收-XX:PrintGCDetails更详细的GC日志-Xms堆初始值-Xmx堆最大可用值-Xmn新生代堆最大可用值-XX:SurvivorRatio用来设置新生代中eden空间和from/to空间的比例.-XX:NewRatio配置新生代与老年代占比1:2含以-XX:Surv
蜗牛!Destiny·2019-12-16 11:52

JVM性能优化--JVM参数配置，使用JMeter简单测试配合说明参数调优

一、JVM参数配置1、常见参数配置-XX:+PrintGC每次触发GC的时候打印相关日志-XX:+UseSerialGC串行回收-XX:+PrintGCDetails更详细的GC日志-Xms堆初始值-Xmx堆最大可用值-Xmn新生代堆最大可用值-XX:SurvivorRatio用来设置新生代中eden空间和from/to空间的比例.-XX:NewRatio配置新生代与老年代占比1:2含以-XX:S
codeobj·2019-12-16 11:00

Centos6.X内核参数调优/etc/sysctl.conf

参考文章https://www.cnblogs.com/123cn/p/5757439.html具体内容注意：具体的参数注释请查看参考文章net.ipv4.ip_forward=0net.ipv4.conf.default.rp_filter=1net.ipv4.conf.default.accept_source_route=0kernel.sysrq=0kernel.core_uses_pid
wfwf1990·2019-12-12 07:44

单机Nginx性能优化

静态文件的缓存优化了网页加载，超时机制会让Client与Server的响应不会长时间阻塞，GZIP压缩提升IO效率、减少我们发送的数据量，限流来预防DOS攻击，TCP参数调优提升传输效率。
JacksonY·2019-12-12 05:32

Hive参数调优

调优Hive提供三种可以改变环境变量的方法，分别是：（1）修改${HIVE_HOME}/conf/hive-site.xml配置文件；所有的默认配置都在${HIVE_HOME}/conf/hive-default.xml文件中，如果需要对默认的配置进行修改，可以创建一个hive-site.xml文件，放在${HIVE_HOME}/conf目录下。里面可以对一些配置进行个性化设定。这里做的配置都全局
kris12·2019-12-09 18:00

DBMSs 参数调优读书笔记

文章标题AutomaticDatabaseManagementSystemTuningThroughLarge-scaleMachineLearning作者-DanaVanAken,CMU,Pittsburgh,PA,USA-AndrewPavlo,CMU,Pittsburgh,PA,USA-GeoffreyJ.Gordon,CMU,Pittsburgh,PA,USA-BohanZhang,Pek
716b139b0689·2019-12-06 11:35

Tomcat调优

1.动静分离2.server.xml中连接器的设置调优参数bio、nio和apr3.catalina.bat中JVM参数调优Nginx采用异步非阻塞处理模型（epoll)，在占用内存极低的情况下，默认配置就可支持
只猿·2019-12-04 20:36

Spark性能优化

对多次使用的RDD进行持久化4）尽量避免使用shuffle类算子5）使用map-side预聚合的shuffle操作6）使用高性能的算子7）广播大变量8）使用Kryo优化序列化性能9）优化数据结构10）资源参数调优
JoshWill·2019-11-29 19:00

真正让你明白Hive参数调优系列1：控制map个数与性能调优参数

本系列几章系统地介绍了开发中Hive常见的用户配置属性（有时称为参数，变量或选项），并说明了哪些版本引入了哪些属性，常见有哪些属性的使用，哪些属性可以进行Hive调优，以及如何使用的问题。以及日常Hive开发中如何进行性能调优。1.Hive有哪些参数，如何查看这些参数Hive自带的配置属性列表封装在HiveConfJava类中，因此请参阅该HiveConf.java文件以获取Hive版本中可用的配
涤生手记·2019-11-07 15:41

真正让你明白Hive参数调优系列2：如何控制reduce个数与参数调优

相比map个数的控制复杂性，reduce个数的设定要相对简单多了，reduce的个数一般最后决定了输出文件的个数，二者相等，如果想多输出文件的个数（这样文件变小，但有可能程序变慢），那么可以人为增加reduce个数。如果想减少文件个数，也可以手动较少reduce个数(同样可能程序变慢）。但实际开发中，reduce的个数一般通过程序自动推定，而不人为干涉，因为人为控制的话，如果使用不当很容易造成结果
涤生手记·2019-11-07 15:05

硬菜点播台 | MySQL阿里实践经典案例之参数调优最佳实践

硬菜点播台|MySQL阿里实践经典案例之参数调优最佳实践最近，不少RDS用户在后台咨询，如何调优RDSMySQL的参数。长假天儿，学习天儿。
meng_philip123·2019-11-06 15:36

CentOS7.X安装部署mysql5.7主从环境

192.168.8.129hostname：master从库IP：192.168.8.130hostname：slave涉及主从都需要执行的地方，文中只写主库的操作指使，从库请自觉执行相同的命令目录：1、环境准备与清理2、参数调优
love8度幸福·2019-11-05 22:28

使用sklearn自带的贝叶斯分类器进行文本分类和参数调优

Part1:本篇内容简介在前一篇文章完全手写，自给自足完成贝叶斯文本分类中，我们使用首先假设在文档中出现的单词彼此独立，利用贝叶斯定理，完成了一个简单的文本分类器的编写，在真实数据的测试上，显示了良好的效果。其实要是了解sklearn的人都应该知道，这个python的机器学习库，实现了我们常用的大部分机器学习算法，免除了我们重复造轮子的痛苦。我们使用和上一篇博客同样的数据，使用sklearn自带的
YoghurtIce·2019-10-31 07:47

AutoML入门概述

强化学习训练2.1.3并行和异步更新加速训练2.1.4Skip-connect的生成2.1.5RNN控制器结点架构2.2NASNetSearchSpace3.总结传统的计算学习方式包括特征提取，模型设计以及参数调优三大部分
非典型废言·2019-10-27 15:53

Linux系统重要参数调优

当前会话生效ulimit-u->查看当前最大进程数ulimit-n->查看当前最大文件数ulimit-uxxx->修改当前最大进程数为xxxulimit-nxxx->修改当前最大文件数为xxx永久生效1.vi/etc/security/limits.conf，添加如下的行softnoproc11000hardnoproc11000softnofile4100hardnofile4100说明：代表针
asdwqx·2019-10-17 14:52

Linux系统重要参数调优

当前会话生效ulimit-u->查看当前最大进程数ulimit-n->查看当前最大文件数ulimit-uxxx->修改当前最大进程数为xxxulimit-nxxx->修改当前最大文件数为xxx永久生效1.vi/etc/security/limits.conf，添加如下的行softnoproc11000hardnoproc11000softnofile4100hardnofile4100说明：代表针
asdwqx·2019-10-17 14:47

4-3 模型保存、参数调优

文章目录DNN模型代码TensorBoard查看流程图查看scalar变量DNN模型代码#完成图形图像的加载(分辨率和尺寸相同)fromtensorflow.examples.tutorials.mnistimportinput_dataimporttensorflowastf#通过函数下载或者加载本地的图片资源，建议设置one_hot=Truemnist=input_data.read_data
lsqzedu·2019-10-14 21:57

linux系统参数调优

linux系统调优包括两个文件，一个是limits.conf文件，一个是sysctl.conf文件，这两个文件分别在/etc/secriuty/limits.conf和/etc/sysctl.conf下，具体修改内容如下：vi/etc/security/limits.conf*softnproc11000#限制最多打开的软件数*hardnproc11000#限制打开软件的最多进程数*softnof
沐枫哥哥·2019-10-10 00:00

Spark（十一）Spark 学习: spark 原理简述与 shuffle 过程介绍

1.1Hadoop和Spark的关系2Spark系统架构2.1Spark运行原理3RDD初识4.Shuffle和Stage5.性能优化5.1缓存机制和cache的意义5.2Shuffle的优化5.3资源参数调优
犀牛_Scott·2019-10-02 09:23

Java线程池基础

目录：一、线程池概述二、线程池参数三、线程池的执行过程四、线程池的主要实现五、线程池的使用六、线程池的正确关闭方式七、线程池参数调优一、线程池概述1、线程池类目前线程池类一般有两个，一个来自于Spring
峰的季节·2019-09-26 11:00

mysql 5.7.19 二进制最新安装

首先从官网下载ziparchive版本http://dev.mysql.com/downloads/mysql/MySQLv5.7.19官方正式版(32/64位安装版与zip解压版)一、优化部分1.操作系统参数调优
·2019-09-24 14:27

【AI算法推荐】：tensorflow2.0建模教程系列产品

前四节人们用编码演译了：系列产品1：怎样用tf2.0开展自定层互联网的布置（add.weight）系列产品2：怎样用tf2.0开展自定实体模型的布置（Model）系列产品3：怎样用tf2.0保持loss涵数和主要参数调优
hu131525·2019-09-21 20:54

Redis 数据库详解及参数调优

Redis群集配置实例：一、关系型数据库与非关系型数据库的区别：Redis数据库是一个非关系型数据库，和oracle、mysql、sqlserver等关系型数据库不是同一类型。NoSQL是非关系型数据库的总称，主流的NoSQL数据库有redis、MongBD等。NoSQL的存储方式、存储结构以及使用的场景都是完全不同的。NoSQL数据库凭借着其非关系型、分布式、开源和横向扩展等优势，被认为是下一代
张九冫·2019-09-20 18:50

CentOS7.5生产环境MySQL5.7.27数据库RPM包部署

生产搭建环境：操作系统：CentOS7.5内存大小：16GB硬盘：500G目录：1、环境准备与清理2、参数调优3、安装部署1、系统初始化1.1.1.关闭selinux#sed-i's/SELINUX=enforcing
love8度幸福·2019-09-18 00:11

php+php-fom+nginx配置参数调优详解

四、nginx配置参数调优1、nginx中的一
铁柱同学·2019-09-17 22:13

Eureka参数调优

1、常见问题1、为什么服务下线了，EurekaServer接口返回的信息还会存在？2、为什么服务上线了，EurekaClient不能及时获取到？3、为什么偶尔会有如下提示：EMERGENCY!EUREKAMAYBEINCORRECTLYCLAIMINGINSTANCESAREUPWHENTHEY'RENOT.RENEWALSARELESSERTHANTHRESHOLDANDHENCETHEINST
KingJames、·2019-09-16 11:00

连接池你用对了吗?一次Unexpected end of stream异常的排查

更加了解TCP协议Redis与客户端关闭连接的机制基于ApacheCommon连接池的参数调优Linux网络抓包情况简介近期迁移了部分应用到K8s中，业务开发人员反馈说，会发现频繁出现:redis.clients.jedis.exceptions.JedisConnectionException
KAnts·2019-09-16 09:00

使用mysql 自带的mysqlslap （mysql仿真客户端）做“简单”的mysql性能测试、压力测试

mysql进行参数调优，到底什么才是比较优的。mysqlslap是一个诊断程序，旨在模拟MySQL服务器的客户端负载并报告每个阶段的时间。它就像多个客户端正在访问服务器一样。
ET最终珍藏版·2019-09-15 03:40

mysql配置文件构成以及具体的配置demo

关于mysql的配置参数相关，可以参考上一篇文章：mysql配置参数调优(8GB内存和64GB内存)二、mysql配置文件位置大家应该都知道，一般我们配置的my.cnf都会放在/etc下面，但是新安装
铁柱同学·2019-09-14 23:38

mysql配置参数调优(8GB内存和64GB内存)

文章目录一、前言二、查看服务器的CPU和内存1、查看CPU的个数2、查看服务器的内存3、数据库版本三、64GB内存的mysql配置参数四、本机8GB内存的mysql配置参数1、查看数据库版本2、具体的配置参数五、总结1、数据库偏向于写操作2、数据库偏向于读操作3、补充一、前言我们新搭建一个LNMP环境之后该如何设置配置文件来达到最佳性能呢？众所周知，mysql的默认配置参数性能是比较底下的，如果我
铁柱同学·2019-09-11 23:00

卷积神经网络 - 卷积核越小越好吗？

原文链接：https://blog.csdn.net/kuangtun9713/article/details/79475457深度学习工程师50%的时间都是在进行参数调优，那么，卷积神经网络中卷积核越小越好吗
kim_mechane·2019-09-10 15:19

【Spark】模型选择和调优

文章目录1.模型选择(亦称超参数调优)2.交叉验证3.训练集-验证集划分1.模型选择(亦称超参数调优)ML中的一项重要任务是模型选择，或使用数据来查找给定任务的最佳模型或参数。这也称为调整。
buracag_mc·2019-09-10 14:46

开源sk-dist，超参数调优仅需3.4秒，sk-learn训练速度提升100倍

在一台没有并行化的单机上进行超参数调优，需要7.2分钟，而在一百多个核心的Spark群集上用它进行超参数调优，只需要3.4秒，把训练sk-learn的速度提升了100倍。
AI科技大本营·2019-09-08 21:28

开源sk-dist，超参数调优仅需3.4秒，sk-learn训练速度提升100倍

在一台没有并行化的单机上进行超参数调优，需要7.2分钟，而在一百多个核心的Spark群集上用它进行超参数调优，只需要3.4秒，把训练sk-learn的速度提升了100倍。
AI科技大本营·2019-09-08 21:28

勤劳的开发者绝对不会使用华为云AI开发平台ModelArts的自动学习功能！！！啊，真香！

而对于大多数业务开发者来说，更是不具备AI算法的开发和参数调优能力。这导致大多数企业都不具备AI开发能力。华为云AI开发平台ModelArts通过机器学习的方式帮助不具备算法开发能力的业务开发者实现算
kongblack·2019-09-05 11:11

hyperparameter_hunter 超参数优化模块实践

在机器学习、深度学习的很多任务中必不可少我们要接触到模型参数调优的工作，这里有很多参数调优的方法，比如最常用最好理解的网格调参，简单带来的就是时间消耗和计算量的增加，今天给大家推荐一款非常不错的超参数优化模块
Together_CZ·2019-09-03 19:35

hive调优

hive调优参数调优1、map阶段数据压缩sethive.exec.compress.intermediate=truesetmapred.map.output.compression.codec=org.apache.hadoop.io.compress.SnappyCodecsetmapred.map.output.compression.codec
不穿格子衫的徍爺·2019-09-01 15:00

老技术新谈，Java应用监控利器JMX（3）

上期我们深入的聊了聊JMX，把JMX的架构了解了七七八八，最后通过代码实战，解决系列疑问，实现远程动态修改应用参数，让线上服务升级、参数调优等系列问题不再难。
一猿小讲·2019-08-28 00:31

java面试之JVM参数调优详解

一、首先让Jvm中有一个线程，我们此刻用的一个sleep二、在terminal中输入jps-l查看运行程序的端口号为30284三、查看XX参数是否开启jinfo-flag(jinfo-flags默认开启的所有参数配置，类似于模糊查询）（—XX:-所以他为没开启）四、开启XX参数五、重新启动程序（端口28852）六、查看XX参数第二种类型：-XX:Key=VALUE这个命令也是盘点家底的命令，只是只
AReallyMan·2019-08-22 22:06

hive常见参数调优

常见参数调优1、分区2、分桶3、groupby数据倾斜优化1、分区开启动态分区sethive.exec.dynamic.partition=turn;设置严格模式sethive.exec.dynamic.partition.mode
李攀_·2019-08-22 17:18

Kafka 参数调优实战

原文链接：https://mp.weixin.qq.com/s/awBlZ8v7ksfOlK1JpQ-sUA1、背景引入：很多同学看不懂kafka参数今天给大家聊一个很有意思的话题，大家知道很多公司都会基于Kafka作为MQ来开发一些复杂的大型系统。而在使用Kafka的客户端编写代码与服务器交互的时候，是需要对客户端设置很多的参数的。所以我就见过很多年轻的同学，可能刚刚加入团队，对Kafka这个技
小马的学习笔记·2019-08-15 18:39

代码详解：一文掌握神经网络超参数调优

全文共7002字，预计学习时长14分钟或更长神经网络在通信行业和研究中的使用十分常见，但令人遗憾的是，大部分应用都未能产出足以运行其他算法的高性能网络。应用数学家在开发新型优化算法时，喜欢进行功能测试，有时也被称为人造景观。人造景观有助于从以下方面比较各算法的性能：·收敛（算出答案的速度）·精准度（与正确答案的接近程度）·稳健性（是否所有功能表现优良，或仅一小部分如此）·综合表现（如概念复杂度）浏
读芯术·2019-08-12 12:00

数据竞赛专题 | 数据探索-从数据中发现隐藏价值

DataFountain和Datawhale联合邀请了数据挖掘，CV，NLP领域多位竞赛大咖，将从赛题理解、数据探索、数据预处理、特征工程、模型建立与参数调优、模型融合六个方面完整解析数据竞赛知识体系，
Datawhale·2019-08-08 09:00

数据竞赛专题 | 数据探索-从数据中发现隐藏价值

DataFountain和Datawhale联合邀请了数据挖掘，CV，NLP领域多位竞赛大咖，将从赛题理解、数据探索、数据预处理、特征工程、模型建立与参数调优、模型融合六个方面完整解析数据竞赛知识体系，
Datawhale·2019-08-08 09:00

09.6-参数调优初步.md

Copyright©MicrosoftCorporation.Allrightsreserved.适用于License版权许可9.6超参数优化的初步认识超参数优化（HyperparameterOptimization）主要存在两方面的困难：超参数优化是一个组合优化问题，无法像一般参数那样通过梯度下降方法来优化，也没有一种通用有效的优化方法。评估一组超参数配置（Configuration）的时间代价非
昵称4·2019-07-29 07:46

数据竞赛专题 | 从赛题理解到竞赛入门基础

DataFountain和Datawhale联合邀请了数据挖掘，CV，NLP领域多位竞赛大咖，将从赛题理解、数据探索、数据预处理、特征工程、模型建立与参数调优、模型融合六个方面完整解析数据竞赛知识体系，
Datawhale·2019-07-28 12:07

数据竞赛专题 | 从赛题理解到竞赛入门基础

DataFountain和Datawhale联合邀请了数据挖掘，CV，NLP领域多位竞赛大咖，将从赛题理解、数据探索、数据预处理、特征工程、模型建立与参数调优、模型融合六个方面完整解析数据竞赛知识体系，
Datawhale·2019-07-28 12:07

从0到1构建数据科学竞赛知识体系，有夕，鱼佬，茂霖等竞赛大咖将特邀分享...

DataFountain和Datawhale联合邀请了数据挖掘，CV，NLP领域多位竞赛大咖，将从赛题理解、数据探索、数据预处理、特征工程、模型建立与参数调优、模型融合六个方面完整解析数据竞赛知识体系，
Datawhale·2019-07-24 21:10

[tcp] WEB服务,Linux下的内核参数调优

前言:web类应用一般会部署像nginx、tomcat、php等应用程序，使用默认的内核参数设置满足大部分场景，如果优化内核参数，也可以释放不少服务器性能，尤其是在高并发下一.SYN状态的内核参数调优大量
青菜·2019-07-24 00:00

为本地IDE运行设置JVM启动参数调优

本次通过VisulVm进行线程的堆区观察，关于在应用运行时，所占用内存发生OOM切换到JDK的bin目录下，调查堆是否发生OOMconsole:java-XX:+PrintCommandLineFlags-versionOutputconsole.PNG这里显示堆的最大值大小为MaxHeapSize，这里的MaxHeapSize可能和VisulVm中堆的最大值有所偏差,这是因为虚拟机的内存对齐，我
语落心生·2019-07-23 14:42
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他