参数调优

Sklearn-GridSearchCV网格搜索

它其实是一种贪心算法：拿当前对模型影响最大的参数调优，直到最优化；再拿下一个影响最大的参数调优，如此下去，直到所有的参数调整完毕。这个方法的缺点就是可能会
Cherzhoucheer·2017-02-10 14:45

mysql性能优化-配置参数优化

my.cnf中的配置参数调优取决于业务，负载或硬件，在慢内存和快磁盘、高并发和写密集型负载情况下，都需要特殊的调整。
csdn_泪无痕·2017-02-07 08:33

Linux文件系统性能优化

总的来说，主要可以从三个方面来做工作：1、Disk相关参数调优2、文件系统
jbaowei2000·2017-01-16 15:51

ZooKeeper参数调优

zookeeper的默认配置文件为zookeeper/conf/zoo_sample.cfg，需要将其修改为zoo.cfg。其中各配置项的含义，解释如下：1.tickTime：Client-Server通信心跳时间Zookeeper服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个tickTime时间就会发送一个心跳。tickTime以毫秒为单位。tickTime=20002.initL
yzy121403725·2016-12-21 14:41

Spark Shuffle原理、Shuffle操作问题解决和参数调优

摘要：1shuffle原理1.1mapreduce的shuffle原理1.1.1maptask端操作1.1.2reducetask端操作1.2spark现在的SortShuffleManager2Shuffle操作问题解决2.1数据倾斜原理2.2数据倾斜问题发现与解决2.3数据倾斜解决方案3sparkRDD中的shuffle算子3.1去重3.2聚合3.3排序3.4重分区3.5集合操作和表操作4sp
chenjieit619·2016-12-01 14:48

spark submit参数调优

在开发完Spark作业之后，就该为作业配置合适的资源了。Spark的资源参数，基本都可以在spark-submit命令中作为参数设置。很多Spark初学者，通常不知道该设置哪些必要的参数，以及如何设置这些参数，最后就只能胡乱设置，甚至压根儿不设置。资源参数设置的不合理，可能会导致没有充分利用集群资源，作业运行会极其缓慢；或者设置的资源过大，队列没有足够的资源来提供，进而导致各种异常。总之，无论是哪
chenjieit619·2016-12-01 14:23

MapReduce性能优化

shuffle过程参数调优Map端的调优属性io.sort.mbint100排序Map输出是所使用内存缓冲区的大小，以MB为单位io.sort.record.percentfloat0.05用作存储Map
Bloo_m·2016-11-30 22:14

Java GC参数调优

对于正常环境的服务来说-server-Xms24G-Xmx24G-XX:PermSize=512m-XX:+UseG1GC-XX:MaxGCPauseMillis=200-XX:ParallelGCThreads=20-XX:ConcGCThreads=5-XX:InitiatingHeapOccupancyPercent=70对于备份服务器-server-Xms4G-Xmx4G-XX:PermS
jiewuyou·2016-11-17 18:42

JAVA应用JVM原理及参数调优笔记

JVM是按照运行时数据的存储结构来划分内存结构的，JVM在运行Java程序时，将它们划分成几种不同格式的数据，分别存储在不同的区域，这些数据统一称为运行时数据，运行时数据包括Java程序本身的数据信息和JVM运行Java需要的额外的数据信息,如下图所示1JMMJava内存结构Java的主内存和私有内存什么是线程安全?你的预料结果和实际结果一样一个主内存，3个线程，分别是三个私有栈，分别读主内存的变
坤少_jkson·2016-11-06 21:37

Spark 学习: spark 原理简述与 shuffle 过程介绍

等语言的调用接口.Spark学习简述总结引言1Hadoop和Spark的关系Spark系统架构1spark运行原理RDD初识shuffle和stage性能优化1缓存机制和cache的意义2shuffle的优化3资源参数调优
databatman·2016-11-03 17:40

Spark 学习: spark 原理简述与 shuffle 过程介绍

等语言的调用接口.Spark学习简述总结引言1Hadoop和Spark的关系Spark系统架构1spark运行原理RDD初识shuffle和stage性能优化1缓存机制和cache的意义2shuffle的优化3资源参数调优
databatman·2016-11-03 17:00

apache2三种模式及参数调优

问题来源如果访问量比较小，其实什么配置都没问题。在一些特殊场景下，例如促销活动，访问量会比较集中。峰值差不多能达到每秒1000到2000次的访问，而且还在继续增长中。我们一直判断是数据库卡死的问题，后来发现，原来了服务器挂了。进一步定位，发现是apache接收了太多了请求，起了无数进程，内存用爆，机器卡死了。如何配置apache，最大程度的发挥系统性能呢？apache2三种模式从2.0开始，apa
无名大盗·2016-10-23 20:31

Hive优化--文件格式

在进行Hive参数调优和SQL调优之前，要进行相应的规划设计，包括：Hive表使用高效的文件格式，Hive表文件
CristianT·2016-10-20 23:47

Oracle内存参数调优技术详解

前言近来公司技术,研发都在问我关于内存参数如何设置可以优化oracle的性能,所以抽时间整理了这篇文档,以做参考.目的希望通过整理此文档,使大家对oracle内存结构有一个全面的了解,并在实际的工作中灵活应用,使oracle的内存性能达到最优配置，提升应用程序反应速度，并进行合理的内存使用.内容实例结构oracle实例=内存结构+进程结构oracle实例启动的过程，其实就是oracle内存参数设置
linxidwx·2016-09-27 13:04

机器学习系列(12)_XGBoost参数调优完全指南（附Python代码）

原文地址：CompleteGuidetoParameterTuninginXGBoostbyAarshayJain原文翻译与校对：@MOLLY&&寒小阳([email protected])时间：2016年9月。出处：http://blog.csdn.net/han_xiaoyang/article/details/52665396声明：版权所有，转载请联系作者并注明出1.简介如果你
yaoqiang2011·2016-09-25 23:00

Linux文件系统性能优化

总的来说，主要可以从三个方面来做工作：1、Disk相关参数调优2、文件系统
Tenderrain·2016-09-01 18:22

mr项目优化总结

---------------------------------mr运行参数调优MapReduce任务参数调优Hadoop优化第一篇:HDFS/MapReduceMapReduce相关参数MapReduce
csdncjh·2016-08-25 10:14

Keras/Python深度学习中的网格搜索超参数调优（附源码）

原文：HowtoGridSearchHyperparametersforDeepLearningModelsinPythonWithKeras作者：JasonBrownlee翻译：刘崇鑫责编：周建丁（[email protected]）超参数优化是深度学习中的重要组成部分。其原因在于，神经网络是公认的难以配置，而又有很多参数需要设置。最重要的是，个别模型的训练非常缓慢。在这篇文章中，你会了解到如何使用
周建丁·2016-08-16 06:41

GlusterFS性能调优说明

概述GlusterFS性能调优基本思路主要包括三个部分，分别是硬件调优、操作系统调优和GlusterFS自身参数调优。
党志强·2016-08-15 20:22

linux题目 （四）

CPU核数、服务器产商（2）某个服务的编译安装，启用或禁用的一些选项（3）服务的配置文件，参数的设置恰到何处（4）一些工具，比如memcached、keepalived以及一些负载均衡手段（5）系统的内核参数调优
古奇宝宝·2016-08-02 22:44

应对高并发笔记

1、动静分离部署nginx+tomcat2、应用集群，负载均衡--F5/Array/LVS/Nginx/TOMCAT3、分布式缓存Memcached+Redis4、应用本地缓存Ehcache5、JVM参数调优
王一洋·2016-07-26 19:31

Tomcat面试题目

1.JVM参数调优：-Xms表示JVM初始化堆的大小，-Xmx表示JVM堆的最大值。这两个值的大小一般根据需要进行设置。
t0404·2016-07-12 22:52

php.ini参数调优

php.ini参数调优目录1.打开php的安全模式12.用户组安全13.关闭危险函数14.关闭php版本信息在http头中的泄漏15.关闭注册全局变量16.打开magic_quotes_gpc来防止SQl
gongxiaoyi·2016-07-11 16:24

hive参数调优汇总

参考：http://blog.csdn.net/beckham008/article/details/23741151?utm_source=tuicool&utm_medium=referral1.设置合理solt数mapred.tasktracker.map.tasks.maximum每个tasktracker可同时运行的最大maptask数，默认值2。mapred.tasktracker.r
寒郊無留影·2016-07-04 10:35

rocketmq集群部署实战-双master-双slave-同步双写-异步刷盘（7台机器）

二、集群部署图（四NameServer、双Mastere双Slave、同步双写、异步刷盘）：三、对centos7操作系统参数调优：执行下述shell脚本：#!
weixin_33694172·2016-06-20 20:00

随机森林（原理/样例实现/参数调优）

决策树1.决策树与随机森林都属于机器学习中监督学习的范畴，主要用于分类问题。决策树算法有这几种：ID3、C4.5、CART，基于决策树的算法有bagging、随机森林、GBDT等。决策树是一种利用树形结构进行决策的算法，对于样本数据根据已知条件或叫特征进行分叉，最终建立一棵树，树的叶子结节标识最终决策。新来的数据便可以根据这棵树进行判断。随机森林是一种通过多棵决策树进行优化决策的算法。2.案例：图
y0367·2016-05-25 21:00

Java服务GC参数调优案例

本文介绍了一次生产环境的JVMGC相关参数的调优过程，通过参数的调整避免了GC卡顿对JAVA服务成功率的影响背景以及遇到的问题我们的JavaHTTP服务属于OLTP类型，对成功率和响应时间的要求比较高，在生产环境中出现偶现的成功率突然下降然后又自动恢复的情况，如图所示：JVM和GC相关的参数如下：-Xmx22528m-Xms22528m-XX:NewRatio=2-XX:+UseConcMarkS
channingbj·2016-05-22 00:00

在Kaggle手写数字数据集上使用Spark MLlib的RandomForest进行手写数字识别

昨天我使用SparkMLlib的朴素贝叶斯进行手写数字识别，准确率在0.83左右，今天使用了RandomForest来训练模型，并进行了参数调优。
LXYTSOS·2016-05-12 20:43

在Kaggle手写数字数据集上使用Spark MLlib的RandomForest进行手写数字识别

昨天我使用SparkMLlib的朴素贝叶斯进行手写数字识别，准确率在0.83左右，今天使用了RandomForest来训练模型，并进行了参数调优。
LXYTSOS·2016-05-12 20:00

在Kaggle手写数字数据集上使用Spark MLlib的RandomForest进行手写数字识别

昨天我使用SparkMLlib的朴素贝叶斯进行手写数字识别，准确率在0.83左右，今天使用了RandomForest来训练模型，并进行了参数调优。
LXYTSOS·2016-05-12 20:00

tomcat内存设置及jvm参数调优

设置tomcat的内存1、修改start.bat中的call"%EXECUTABLE%"start%CMD_LINE_ARGS%为call"%EXECUTABLE%"run%CMD_LINE_ARGS% 2、catalina.bat首行加入setJAVA_OPTS=-server-Xms512m-Xmx512m-XX:NewSize=64m-XX:MaxNewSize=512m-XX:PermSi
zmx729618·2016-05-12 16:00

Ceph性能优化 之 配置参数调优

该文同时发表在盛大游戏G云微信公众号，粘贴于此，方便各位查阅Ceph，相信很多IT朋友都听过。因为搭上了Openstack的顺风车，Ceph火了，而且越来越火。然而要用好Ceph却也不是件易事，在QQ群里就经常听到有初学者抱怨Ceph性能太烂，不好用。事实果真如此吗！如果你采用Ceph的默认配置来运行你的Ceph集群，性能自然不能如人意。俗话说，玉不琢,不成器；Ceph也有它的脾性，经过良好配置优
lzw06061139·2016-05-05 09:00

使用四种框架分别实现百万websocket常连接的服务器

目录[−]服务器的参数调优TCP/IP参数配置最大文件描述符应用运行时调优OutOfMemoryKiller客户端的参数调优服务器测试Netty服务器Spray服务器Undertownode.js参考文档事实上
LANGZI7758521·2016-05-03 19:00

Spark资源参数调优参数

调优概述在开发完Spark作业之后，就该为作业配置合适的资源了。Spark的资源参数，基本都可以在spark-submit命令中作为参数设置。很多Spark初学者，通常不知道该设置哪些必要的参数，以及如何设置这些参数，最后就只能胡乱设置，甚至压根儿不设置。资源参数设置的不合理，可能会导致没有充分利用集群资源，作业运行会极其缓慢；或者设置的资源过大，队列没有足够的资源来提供，进而导致各种异常。总之，
levy_cui·2016-05-03 18:00

linux服务器一键优化脚本

服务器一键优化脚本，高亮显示内容：关闭selinux、时间同步设置、永久静态路由天添加、常用软件安装高并发参数调优：文件句柄数调优、防火墙表空间调优测试环境：centos6#/bin/bashecho"
曹之进·2016-05-03 10:40

Spark性能优化：JVM参数调优

关于JVM垃圾回收种类MinorGC从年轻代空间（包括Eden和Survivor区域）回收内存被称为MinorGC。这一定义既清晰又易于理解。但是，当发生MinorGC事件的时候，有一些有趣的地方需要注意到：当JVM无法为一个新的对象分配空间时会触发MinorGC，比如当Eden区满了。所以分配率越高，越频繁执行MinorGC。内存池被填满的时候，其中的内容全部会被复制，指针会从0开始跟踪空闲内存
kwu_ganymede·2016-05-02 23:00

Hadoop2.7实战v1.0之Linux参数调优

Hadoop2.7实战v1.0之Linux参数调优1.增大文件描述符nofile（查看当前的lsof|wc-l）和用户最大进程nproca>.调整Linux的最大文件打开数。
li_xiqing·2016-05-02 08:28

机器学习调参-模型选择

本文主要介绍机器学习模型中超级参数(hyperparameter)的调优问题（下文简称为调参问题），主要的方法有手动调优、网格搜索、随机搜索以及基于贝叶斯的参数调优方法。
奋斗啊哈·2016-04-26 16:20

移动端图片格式调研（转）

在这篇文章里我会分析一下目前主流和新兴的几种图片格式的特点、性能分析、参数调优，以及相关开源库的选择。
傻傻小萝卜·2016-04-22 14:34

Linux & Nginx 性能参数调优

主要针对linux文件句柄以及网卡参数调优修改linux最大文件句柄数执行ulimit-a查看openfiles 参数修改linux系统参数。
iamH·2016-04-01 02:00

linux中tcp连接内核参数调优somaxconn

修改参数：永久生效：vim/etc/sysctl.confnet.core.somaxconn=32768sysctl-p立即生效：sysctl-w net.core.somaxconn=32768sysctl-a显示所有内核参数看其解析：对于一个TCP连接，Server与Client需要通过三次握手来建立网络连接.当三次握手成功后,我们可以看到端口的状态由LISTEN转变为ESTABLISHED
jalyzjs·2016-03-25 17:52

JVM参数调优

堆内存大小-Xmx3550m：设置JVM最大堆内存为3550M。 -Xms3550m：设置JVM初始堆内存为3550M。此值可以设置与-Xmx相同，以避免每次垃圾回收完成后JVM重新分配内存。 常量区-XX:PermSize=256M：设置持久代初始值为256M。-XX:MaxPermSize=512M：设置持久代最大值为512M。 直接内存大小-XX:MaxDirectMemorySize：默认
zf0512305·2016-03-14 17:00

JVM参数调优

-server-Xms22g-Xmx22g-Xmn12g-XX:PermSize=512m-XX:MaxPermSize=1600m -XX:+UseConcMarkSweepGC-XX:+UseCMSCompactAtFullCollection-XX:CMSInitiatingOccupancyFraction=80-XX:+CMSParallelRemarkEnabled-XX:SoftR
jis117·2016-03-04 08:39

mysql 参数调优

我们在安装完mysql之后一定要对其进行调优，如果配置文件没有搞好的话，mysql可能会占用很大一部分内存，同时会使得服务器的性能大大下降，那么我们该如何进行调优，调优的常见选项与方法又是什么呢，我们一起来看看。笔者在这里参考了网上的一篇mysql5.6版本的配置文件/etc/my.cnf的模板，详细的配置内容可以参考笔者另一篇博文，在此不加赘述，我们一起来看看调优时注意的选项:1)key_buf
liliangchun·2016-03-02 18:46

mysql 参数调优

我们在安装完mysql之后一定要对其进行调优，如果配置文件没有搞好的话，mysql可能会占用很大一部分内存，同时会使得服务器的性能大大下降，那么我们该如何进行调优，调优的常见选项与方法又是什么呢，我们一起来看看。笔者在这里参考了网上的一篇mysql5.6版本的配置文件/etc/my.cnf的模板，详细的配置内容可以参考笔者另一篇博文，在此不加赘述，我们一起来看看调优时注意的选项:1)key_buf
liliangchun·2016-03-02 18:46

老李分享：Oracle数据库内存参数调优技术

老李分享：Oracle数据库内存参数调优技术  poptest是国内唯一一家培养测试开发工程师的培训机构，以学员能胜任自动化测试，性能测试，测试工具开发等工作为目标。
北京茑萝00·2016-02-25 16:37

MYSQL参数调优指南

一、Join调优:1、read_rnd_buffer_size用于MRR中ROWID的排序，该值越大，随机fecth内表数据的IO就越少参考文档：MySQLJoin算法与调优白皮书（三）：http://f.dataguru.cn/article-7339-1.html2、join_buffer_size用于BNLJ连接的缓存，该值越大，join的次数越少参考文档：Mysqljoin的实现原理及优化
DBABruce·2016-02-23 11:35

JVM性能参数调优实践，不会执行Full GC，网站无停滞

原文链接：http://bbs.csdn.net/topics/310110257JVM基础：可以学习《编写高质量写代码》建议137：调整JVM参数以提升性能一节JVM参数调优是个很头痛的问题，设置的不好
kuyuyingzi·2016-02-20 16:00

JVM参数调优八大技巧

这里和大家分享一下JVM参数调优的八条经验，JVM参数调优，这是很头疼的问题，设置的不好，JVM不断执行FullGC，导致整个系统变得很慢，网站停滞时间能达到10秒以上，相信通过本文的学习你对JVM参数调优有新的认识
importdate·2016-01-31 19:00

redis 笔记(二)

本文主要介绍了设置访问密码、主从配置、设置数据和日志目录、以及参数调优等方面。
damon188·2016-01-25 12:46
上一页 24 25 26 27 28 29 30 31 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他