参数调优--maxThre

大数据开发基础之HDFS参数调优步骤分享

1.NameNode数据目录dfs.name.dir,dfs.namenode.name.dir指定一个本地文件系统路径，决定NN在何处存放fsimage和editlog文件。可以通过逗号分隔指定多个路径.目前我们的产线环境只配大数据培训置了一个目录，并存放在了做了RAID1或RAID5的磁盘上。2.DataNode数据目录dfs.data.dir,dfs.datanode.data.dir指定D
·2021-11-04 11:14

使用 Tensorflow 2 进行自定义对象检测的一般方法

要使用Tensorflow对象检测API训练自定义对象检测模型，你需要执行以下步骤：下载Tensorflow对象检测API获取数据为ODAPI准备数据超参数调优训练模型保存模型测试模型安装你可以使用PythonPackageInstaller
woshicver·2021-10-18 21:00

面试官问我MySQL调优，我真的是

候选者：而对于MySQL内部的参数调优，由专业的DBA来搞。面试官：扯了这么多，你就是想表达你不会MySQL参数调优，对吧候选者：草，被发现了。
·2021-10-12 08:48

跟着土哥走就对了（万字长文+参数调优）

关注微信公众号：3分钟秒懂大数据跟着土哥走，教你秒懂大数据前言大家好，我是土哥。自从写Flink系列文章，收到了太多读者的私信，希望我不断更新完善Flink专栏，为此，土哥还专门创建了一个文档，用来记录粉丝和读者在使用Flink组件时遇到的典型问题。由于Flink在大数据流计算中占据非常重要的位置，毫不夸张的说，已经被所有一二线互联网大厂所使用，并且Flink组件在Apache社区持续占据热榜前五
在IT中穿梭旅行·2021-10-09 10:37

神经网络和深度学习 - Chapter7 超参数调优

超参数调优：GridSearchvs随机搜索神经网络中参数主要包括：学习率、优化器、batchsize等；常采用的超参数选择的方法有：GridSearch方法和随机搜索的方法，更建议使用随机搜索的方法，
nlpming·2021-09-29 16:26

实用工具 | PostgreSQL 数据库压力测试工具 pgbench 使用示例

测试环境：CentOS5.7inVMWare8.0PG：9.1.2数据库参数：max_connection=100其他默认注意：本文只为说明pgbench的使用方法，因此，并未对数据库参数调优。
·2021-09-25 14:30

java开发技术之tomcat的参数调优

java培训一般最常做的更改，就是修改服务器的端口，也就是server.xml里的Connector部分。典型如下图所示：其实，大部分优化，也是在Connector标签之内，从端口、并发到线程，都可以在这里配置。一.3个参数搞定并发配置作为一个能承接高并发互联网请求的Web容器，首当其冲的当然是海量请求的冲击。幸运的是Tomcat支持NIO，我们可以通过调整线程数和并发配置，让它表现出最佳的性能。
·2021-09-23 18:06

SpringBoot JVM参数调优方式

目录SpringBootJVM参数调优各种参数SpringBootjar包启动设置JVM参数配置初始化堆和最大堆的大小SpringBootJVM参数调优各种参数参数名称含义默认值说明-Xms初始堆大小物理内存的
·2021-09-07 14:35

百度AI达人创造营|第一课、拍案叫绝的创意

百度AI达人创造营课程设计课程内容第一课让人拍案叫绝的创意都是如何诞生的第二课数据集的获取途径和数据处理的技巧第三课深度学习模型训练和关键参数调优详解第四课教你5种简单高效的部署与推理方法（一）第五课教你
熊良·2021-07-27 23:34

linux内核参数优化

api调用流程.jpg二、内核参数调优1、ubuntu16.04参考：https://blog.csdn.net/qq_32360995/article/details/90739043https://
eb5d4b7eb830·2021-07-27 13:51

Datawhale集成学习学习笔记——机器学习基础

机器学习基础机器学习的三大主要任务使用sklearn构建完整的机器学习项目流程基本的回归模型基本的分类模型偏差与方差理论超参数调优机器学习的三大主要任务机器学习的一个重要的目标就是利用数学模型来理解数据
zhangkaihua88·2021-07-13 18:07

mysql 参数调优（9）之优化filesort sort_buffer_size、innodb_sort_buffer_size

SHOWVARIABLESLIKE'%sort_buffer_size%'SHOWVARIABLESLIKE'%innodb_sort_buffer_size%'SHOWVARIABLESLIKE'%read_rnd_buffer_size%'SHOWVARIABLESLIKE'%max_length_for_sort_data%'SHOWVARIABLESLIKE'%max_sort_lengt
尹楷楷·2021-07-10 19:55

G1参数调优个人记录

G1内存划分G1看起来和CMS比较类似，但是实现上有很大的不同。传统分代GC将整体内存分为几个大的区域，比如Eden,S0,S1,Tenured等。而G1将内存区域分为了n个不连续的，大小相同的Region,Region具体的大小为1到32M,根据总的内存大小而定，目标是数量不超过2048个。如下图所示：G1调优参数-XX:+UseG1GC：使用G1回收器。-XX:G1HeapRegionSize
千里风雪·2021-06-29 14:11

Spark ML Tuning：模型选择和超参调优

比如内置的交叉验证和其他工具能够方便用户对算法和Pipeline的超参数调优。
shohokuooo·2021-06-26 22:35

【Spark系列】spark-submit提交参数调优

参数调优建议：每个S
木亦汐·2021-06-25 23:19

Weka的使用

他们的精力，集中在特征提取，算法选择和参数调优上。那么，一个可以方便地提供这些功能的工具，便是十分必要的了。而weka，便是数据挖掘工具中的佼佼者。
hiekay·2021-06-25 04:12

解决SpringBoot 链接mysql 时出现 0秒后返回数据报错（mysql参数调优，win服务器tcp调优）错误笔记记录

在项目部署之后，每次在第二天早上就出现tomcat种SpringBoot项目链接不上数据库0秒后返回数据的错误。重启服务器后就能连上了。（老折磨人了，每天白天上课都要看着服务器，希望别死......）历经磨难终于解决了/(ㄒoㄒ)/~~第一种情况网络链接问题，比如断网，内外网的情况。第二种情况也是网上回答最多的情况在保证能ping同不是网络问题之后。可能会是mysql会将连接池中好久没用的连接断开
DvilWz·2021-06-23 00:49

Java性能调优

一、Tomcat服务器1、Jvm参数调优Tomcat的启动参数位于tomcat的安装目录\bin目录下，如果你是Linux操作系统就是catalina.sh文件，如果你是Windows操作系统那么你需要改动的就是
丰极·2021-06-21 13:51

JVM架构和GC垃圾回收机制详解

原文JVM架构图分析下图：参考网络+书籍，如有侵权请见谅（想了解Hadoop内存溢出请看：Hadoop内存溢出(OOM)分类、参数调优化）JVM被分为三个主要的子系统（1）类加载器子系统（2）运行时数据区
麦子星星·2021-06-21 12:14

JVM架构和GC垃圾回收机制

JVM架构和GC垃圾回收机制详解JVM架构图分析下图：参考网络+书籍，如有侵权请见谅（想了解Hadoop内存溢出请看：Hadoop内存溢出(OOM)分类、参数调优化）类加载器将类对象加载到堆中，而方法区存放类的版本
coding乐猿·2021-06-21 00:57

spark submit脚本指定传递给main方法的参数

为了方便调试，经常需要向main方法传递参数，但是目前很多博文介绍的大多都是关于spark-submit参数调优方面的。那么如何在sparksubmit脚本中向m
alexlee666·2021-06-20 00:28

第四章 如何进行参数选择

本章主要会介绍策略开发过程中的参数调优问题。正如策略开发之前需要先明确交易逻辑和利润来源一样。在进行策略调优的时候，我们也需要先对参数进行适当的选择。
逝去的亮光·2021-06-19 20:05

ElasticSearch 性能优化摸索

引言JVM参数设置一、JVM参数调优ElasticSearch默认安装后设置的内存是1GB，对于任何一个现实业务来说，这个设置都太小了。
OzanShareing·2021-06-12 19:43

2019-04-10自研软件显示盘面

今日盘中首次出现奇异的资金变化毛刺，可能需要进行参数调优了。2.【期货分时】再次大幅震荡，由于中小创缩量，期货的提前指向意义明显，收盘时接近平衡状态。预期明日变盘。3.K线
资本是个球·2021-06-10 02:20

Python sklearn 模型参数调优

1、网格搜索法-GridSearchCV#导入需要的函数库fromsklearn.ensembleimportRandomForestClassifierfromsklearnimportdatasetsfromsklearn.model_selectionimportGridSearchCV#加载iris数据集iris=datasets.load_iris()iris_feature=iris[
克里斯托弗的梦想·2021-06-09 23:10

kaggle之Titanic的score提升

kaggle的经典入门题：titanic存活率预测记录几个阶段问题1、花里胡哨一堆操作，准确率没什么体现很多notebook写的很好，缺失值处理、特征提取、算法选型、超参数调优、...
巴拉巴拉_9515·2021-06-08 06:22

scikit_learn学习笔记十二——GridSearch，网格搜索

它其实是一种贪心算法：拿当前对模型影响最大的参数调优，直到最优化；再拿下一个影响最大的参数调优，如此下去，直到所有的参数调整完毕。
深思海数_willschang·2021-06-04 04:03

吴恩达深度学习 C2_W1

在这一部分，我们将继续去学习如何有效运作神经网络，内容包括超参数调优，数据处理和算法优化等一系列保证神经网络正确且快速运作的方法。在建立一个神
酉鬼2333·2021-05-30 07:47

（十五）集成学习（下）——蒸汽量预测

参考：DataWhale教程链接集成学习（上）所有Task：（一）集成学习上——机器学习三大任务（二）集成学习上——回归模型（三）集成学习上——偏差与方差（四）集成学习上——回归模型评估与超参数调优（五
ArriettyYun·2021-05-23 20:33

Python学习笔记-3群18组-杜杜狼-2017.8.8

Lesson12sklearnsklearn全名Scikit-learn,是基于Python的机器学习模块，数据结构基于numpy和pandas,使用sklearn进行机器学习编程一般分为三步：数据准备与预处理模型选择与训练模型选择与参数调优文档向量化使用
渡笃狼·2021-05-16 05:00

Linux 系统内核参数调优

通过调试系统内核参数使系统性能最大化如：最大并发数（ab–n10000–c100http://localhost:8080/index.html)sysctl-a查看所有系统变量-n：打印值时不打印关键字；-e：忽略未知关键字错误；-N：仅打印名称；-w：当改变sysctl设置时使用此项；-p：从配置文件“/etc/sysctl.conf”加载内核参数设置；-a：打印当前所有可用的内核参数变量和值
InnocenceYWQ·2021-05-16 03:59

（十三）集成学习（下）——Stacking

参考：DataWhale教程链接集成学习（上）所有Task：（一）集成学习上——机器学习三大任务（二）集成学习上——回归模型（三）集成学习上——偏差与方差（四）集成学习上——回归模型评估与超参数调优（五
ArriettyYun·2021-05-13 23:09

sklearn-GridSearchCV,CV调节超参使用方法

它其实是一种贪心算法：拿当前对模型影响最大的参数调优，直到最优化；再拿下一个影响最大的参数调优，如此下去，直到所有的参数调整
学识渊博小公主·2021-05-04 14:26

机器学习ML-策略1-Machine Learning-Strategy 1

算法，数据，参数调优，还是该如何下手？
rawliu_刘莹·2021-05-02 14:12

Spring Cloud 学习(4) --- Eureka(三) 集群、Region Zone、Http Basic

在了解了Euerka的RESTAPI、核心类、核心操作、参数调优等概念之后，在实际的项目中来验证这些概念。
laiyy0728·2021-05-01 21:44

模型评估和超参数调优

模型评估和超参数调优fromIPython.displayimportImage%matplotlibinline1.通过管道Pipeline简化工作流程在正式建立模型之前，一般会经理很多步骤的数据预处理
AIHUBEI·2021-04-30 21:33

看MySQL的参数调优及数据库锁实践有这一篇足够了

史上最强MySQL参数调优及数据库锁实践1.应用优化1.2减少对MySQL的访问1.2.1避免对数据进行重复检索1.2.2增加cache层1.3负载均衡1.3.1利用MySQL复制分流查询1.3.2采用分布式数据架构
小小一技术驿站·2021-04-30 17:43

《大数据处理实践探索》 ---- 使用spark MLlib进行机器学习（3超参数调优）

在本节中，我们将重点使用基于树的模型作为超参数调优过程的示例，但同样的概念也适用于其他模型。一旦我们建立了用
shiter·2021-04-26 23:04

Nginx学习6 - Nginx性能参数调优

Nginx是一个多进程单线程的应用。它有很多配置参数可以根据实际情况进行调优，来进一步增大并发性能。调优参数一：worker_processesworker_processes表示worker线程的数量，每个worker进程都是单线程的进程，它们会调用各个模块以实现多种多样的功能。如果这些模块确认不会出现阻塞式的调用，那么，有多少CPU内核就应该配置多少个进程；反之，如果有可能出现阻塞式调用，那么
Tian_Peng·2021-04-19 09:04

NGINX快速入门（06）Nginx性能参数调优

Nginx是一个多进程单线程的应用。它有很多配置参数可以根据实际情况进行调优，来进一步增大并发性能。调优参数一：worker_processesworker_processes表示worker线程的数量，每个worker进程都是单线程的进程，它们会调用各个模块以实现多种多样的功能。如果这些模块确认不会出现阻塞式的调用，那么，有多少CPU内核就应该配置多少个进程；反之，如果有可能出现阻塞式调用，那么
郭艺宾·2021-04-19 01:14

NGINX学习笔记（三）----NGINX性能参数调优

Nginx是一个多进程单线程的应用。它有很多配置参数可以根据实际情况进行调优，来进一步增大并发性能。调优参数一：worker_processesworker_processes表示worker线程的数量，每个worker进程都是单线程的进程，它们会调用各个模块以实现多种多样的功能。如果这些模块确认不会出现阻塞式的调用，那么，有多少CPU内核就应该配置多少个进程；反之，如果有可能出现阻塞式调用，那么
奋斗小周·2021-04-18 18:51

五十六、HBase的优化

关注专栏《破茧成蝶——大数据篇》，查看更多相关的内容~目录一、HBase的高可用二、预分区2.1使用命令行添加预分区2.2使用JavaAPI添加预分区2.2.1代码实现2.2.2测试三、RowKey设计四、参数调优一
象在舞·2021-04-08 15:12

Spark参数调优

Spark参数调优参考spark官方文档：http://spark.apache.org/docs/...Shuffle相关Shuffle操作大概是对Spark性能影响最大的步骤之一（因为可能涉及到排序
·2021-03-22 19:03

Spark参数调优

Spark参数调优参考spark官方文档：http://spark.apache.org/docs/...Shuffle相关Shuffle操作大概是对Spark性能影响最大的步骤之一（因为可能涉及到排序
·2021-03-17 15:28

跟着Datawhale学习集成学习

代码实现3.模型优化3.1偏差与方差理论（Variance-BiasTradeoff）3.2特征筛选3.2.1根据指标去进行特征筛选3.2.2根据LASSO进行特征筛选3.3利用交叉验证进行模型评价3.4参数调优
hello_JeremyWang·2021-03-15 16:31

JVM参数调优与垃圾回收机制（第十一天）

一、Java虚拟机原理所谓虚拟机，就是一台虚拟的机器。他是一款软件，用来执行一系列虚拟计算指令，大体上虚拟机可以分为系统虚拟机和程序虚拟机，大名鼎鼎的VisualBox、Vmare就属于系统虚拟机，他们完全是对物理计算的仿真，提供了一个可以运行完整操作系统的软件平台。程序虚拟机典型代码就是Java虚拟机，它专门为执行单个计算程序而计算，在Java虚拟机中执行的指令我们成为Java自己码指令。无论是
hzhang94·2021-03-10 13:12

python股票量化交易（10）---使用机器学习算法预测股票涨跌

目录前言随机森林算法搭建股票预测模型预测下一天的股票涨跌参数调优绘制预测与实际涨跌对比图前言前面9篇博文对量化交易的各种图形绘制以及计算公式已经讲解的比较清楚了。
李元静·2021-02-01 18:41

谈谈高可用之压测与预案

一般可通过全链路压测手段找到系统的瓶颈，然后针对性地进行系统调优，如JVM调优，SQL调优，线程池参数调优等。
·2021-01-31 15:10

mysql 参数调优(1)之内存缓冲池innodb_buffer_pool_size

内存的大小是最能直接反映数据库的性能。InnoDB存储引擎既缓存数据，又缓存索引，并且将它们缓存于一个很大的缓冲池中，即InnoDBBufferPool。因此，内存的大小直接影响了数据库的性能性能测试。Percona公司的CTOVadin对此做了一次测试，以此反映内存的重要性，结果如下图所示：image.png在上述测试中，数据和索引总大小为18GB，然后将缓冲池的大小分别设为2GB、4GB、6G
尹楷楷·2021-01-26 17:46

MySQL查询截取的深入分析

一、查询优化1，mysql的调优大纲慢查询的开启并捕获explain+慢SQL分析showprofile查询SQL在Mysql服务器里面的执行细节和生命周期情况SQL数据库服务器的参数调优2，小表驱动大表
·2021-01-20 12:40
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他