tuning

Spark优化官方指导（Tuning Spark翻译）

因为大多数的Spark计算是在内存中进行的，所以Spark应用的瓶颈在于集群的硬件资源：CPU、网络带宽或者内存。在大多数情况下，如果内存够用，网络带宽就会成为应用性能的瓶颈，但在有些时候，你仍然需要去做一些调整，比如用序列化的形式去存储RDD，以减少内存的使用。这篇指导将覆盖两个主题：数据的序列化（数据的序列化方式是好的网络性能以及减少内存使用的关键）和内存调整。我们也会讨论几个小的主题。Dat
长风几厘米·2021-06-10 07:29

pytorch finetuning 自己的图片进行训练操作

一、pytorchfinetuning自己的图片进行训练这种读取图片的方式用的是torch自带的ImageFolder，读取的文件夹必须在一个大的子文件下，按类别归好类。就像我现在要区分三个类别。
·2021-06-05 12:58

JVM调优之基础知识

大多数内容都是来源网络，整理成思维导图的模式，方便理解记忆.PDF下载地址:https://pan.baidu.com/s/1o8EZqrwJVMTUNING之基础知
龙白一梦·2021-05-09 02:01

BERT模型

BERT框架BERT有两部分：pre-training和fine-tuning。
张虾米试错·2021-04-25 15:15

IO调度器(译)

原文链接：ImprovingLinuxSystemPerformancewithI/OSchedulerTuning什么是IO调度器？磁盘的访问速度，一直都是计算机的瓶颈。
AlstonWilliams·2021-04-22 04:07

Equal concern errors 误差重要度

当计算动作规划时，DMCplus动作规划使用了一组名为EaualConcernErrors(ECEs)的tuning参数来权衡CV的相对重要性。
橡果·2021-04-20 20:55

2020-12-13降临节: 宣布大喜的好消息（路加福音2:1-20）Advent: Announcing Good News of Great Joy

.jpg5.jpgStevenLee李司提反Luke2:1–20路加福音2:1-20[9:30am]Iwanttoespeciallygreetthosewatchingonline,andthosetuninginwithusforthefirsttime.ThankyouforjoiningusaswestudyGod
羊皮卷的味道·2021-04-19 08:39

Spark数据倾斜问题解决以及造成的spark OOM问题

参考资料https://tech.meituan.com/2016/05/12/spark-tuning-pro.htmlhttps://blog.csdn.net/yisun123456/article
早点起床晒太阳·2021-04-14 22:15

yolov5启用数据增强、tensorboard可视化及cutout马赛克增强

启用数据增强1.data目录下，有两个hyp的文件：data/hyp.scratch.yaml和data/hyp.finetune.yaml具体内容如下：#HyperparametersforVOCfine-tuning
小俊俊的博客·2021-03-12 09:29

【转载】Spark调优（数据序列化和内存调优）

翻译自Spark官网文档：https://spark.apache.org/docs/2.1.0/tuning.html前言由于大多数Spark计算的内存使用特性，集群中的任何资源都可能成为Spark计算程序中的瓶颈
大数据技术进阶·2021-03-11 17:37

Spark Performance

SparkPerformanceMemoryTuningMemoryManagementModelhttps://0x0fff.com/spark-architecture/spark-mem.pngProgramming
踏雪寻梅4149·2021-03-11 08:55

PyTorch的BERT微调

转译自：https://mccormickml.com/2019/07/22/BERT-fine-tuning/#21-download--extracthttps://colab.research.google.com
泥人冷风·2021-03-10 19:10

LInux 基本指标查询

参考redhat文档https://access.redhat.com/documentation/zh-cn/red_hat_enterprise_linux/7/html/performance_tuning_guide
·2021-03-09 22:00

NATURE:组蛋白变体在调节染色质组织和功能中的作用

文献的题目是：Therolesofhistonevariantsinfine-tuningchromatinorganizationandfunction。
生信start_site·2021-02-15 23:30

【论文阅读】DeiT | Training data-efficient image transformers & distillation through attention

现有的基于Transformer的分类模型ViT需要在海量数据上（JFT-300M，3亿张图片）进行预训练，再在ImageNet数据集上进行fune-tuning，才能达到与CNN方法相当的性能，这需要非常大量的计算资源
一的千分之一·2021-01-30 18:50

Pytorch学习笔记

1Autograd过程解析2Finetuning模型微调为什么要微调？
StriveQueen·2021-01-22 14:26

Oracle 自动收集任务-统计信息、SQL Tuning

--查看自动收集任务状态SELECTCLIENT_NAME,STATUSFROMDBA_AUTOTASK_CLIENT;SELECTCLIENT_NAME,STATUSFROMDBA_AUTOTASK_CLIENTWHERECLIENT_NAME='autooptimizerstatscollection';--关闭信息自动收集autooptimizerstatscollectionBEGINDB
特立独行·2021-01-09 12:44

新书上市 | 《Java性能优化实践》，众多业内大佬推荐阅读

没有捷径可走的Java性能优化多年来，用Google搜索Javaperformancetuning，出现的三篇最热门文章之一是于1997年到1998年左右发表的文章，这篇文章在Google搜索引擎出现早期就被纳入其索引中
turingbooks·2021-01-07 16:00

Oracle 自动收集任务-统计信息、SQL Tuning

--查看自动收集任务状态SELECTCLIENT_NAME,STATUSFROMDBA_AUTOTASK_CLIENT;SELECTCLIENT_NAME,STATUSFROMDBA_AUTOTASK_CLIENTWHERECLIENT_NAME='autooptimizerstatscollection';--关闭信息自动收集autooptimizerstatscollectionBEGINDB
特立独行·2021-01-07 12:30

PyTorch + Ray Tune 调参

参考了PyTorch官方文档和RayTune官方文档1、HYPERPARAMETERTUNINGWITHRAYTUNE2、HowtouseTunewithPyTorch以PyTorch中的CIFAR10
烟雨风渡·2021-01-01 15:27

BERT模型的结构，特点和实践

BERT模型介绍，特点，资源一、背景介绍二、BERT与语言模型1.feature-based2.fine-tuning3.BERT的语言模型三、BERT整体概览1.BERT框架2.BERT模型结构2.1
dream6104·2020-12-27 20:02

bert预训练模型解读_论文解读:BERT模型及fine-tuning

在上周BERT这篇论文[5]放出来引起了NLP领域很大的反响，很多人认为是改变了游戏规则的工作，该模型采用BERT+fine-tuning的方法，在11项NLPtasks中取得了state-of-the-art
weixin_39796363·2020-12-24 05:01

pytorch--fine-tuning的使用

%matplotlibinlineimporttorch,os,torchvisionimporttorch.nnasnnimporttorch.nn.functionalasFimportpandasaspdimportnumpyasnpimportmatplotlib.pyplotaspltfromtorch.utils.dataimportDataLoader,Datasetfromtorc
shelley__huang·2020-12-23 10:07

JVM默认堆内存大小

那么当我们不设置时默认是多少呢堆内存这里直接贴上官网jdk1.8的链接https://docs.oracle.com/javase/8/docs/technotes/guides/vm/gctuning
CRUD的W·2020-12-18 21:35

AI学习笔记（十一）CNN之图像识别(上）

AI学习笔记之CNN之图像识别(上）图像识别图像识别简介模式识别图像识别的过程图像识别的应用分类与检测VGGResnet迁移学习&inception卷积神经网络迁移学习fine-tuningfine-tuning
Lee森·2020-12-11 21:38

安装MySQL后，需要调整的10个性能配置项

作者：StephaneCombaudon原文：https://www.percona.com/blog/2014/01/28/10-mysql-performance-tuning-settings-after-installation
kunjian·2020-12-10 14:36

安装MySQL后，需要调整的10个性能配置项

作者：StephaneCombaudon原文：https://www.percona.com/blog/2014/01/28/10-mysql-performance-tuning-settings-after-installation
kunjian·2020-12-10 14:21

PyQt5 “PyTuning“调试软件从0开发总结

PyQt5"PyTuning"调试软件从0开发总结北航3系大四要调小车在赛道上跑，小车单片机用的K60，老师提供的代码里还有串口收发的库，就想着用蓝牙模块再开发上位机调试软件进行远程调试，正好借此机会学习了一番
Apokli·2020-11-21 16:06

BERT模型原理的详细介绍

BERT模型1.1模型结构1.2输入表示1.3预训练任务1.3.1Task1:MaskedLanguageModel1.3.2Task2：NextSentencePrediction1.4微调(fine-tuning
可大侠·2020-11-15 21:03

论文阅读--《K-Adapter: Infusing Knowledge into Pre-Trained Models with Adapters》

关键词：预训练模型，knowledge-EnhancedPLM,1.背景及问题描述通过大数据量训练得到的预训练语言模型，比如BERT、GPT、XLNet等，再对于特定的任务做fine-tuning，或者通过多任务的方式来个更新模型的全部权重
ColdCoder·2020-11-11 16:28

PytorchRuntimeError:CUDA out of memory.Tried to allocate 120.00 MiB (GPU 0； 22.38 GiB total capacity

+，python=3.6，1个GPU当对预训练的bert模型进行fine-tuning，模型训练的batchsize设置为256时，报错。
凝眸伏笔·2020-11-06 22:58

在pytorch中使用ray.tune进行超参数搜索

文章没啥含金量，是直接copy指导上的https://pytorch.org/tutorials/beginner/hyperparameter_tuning_tutorial.html代码如下：fromfunctoolsimportpartialimportnumpyasnpimportosimporttorchimporttorch.nnasnnimporttorch.nn.functiona
喝粥也会胖的唐僧·2020-10-13 18:54

Managing Performance: SQL Tuning

系统管理Lesson19.ManagingPerformance:SQLTuning1.Oracle优化程序所能完成的工作有哪些？19-42.优化程序统计信息收集的方式有哪几种？
喝醉酒的小白·2020-10-09 19:15

微信开发系列之七 - 使用Redis存储微信聊天记录

developmentQ&Aserviceusingnodejsofthisseries,wehavedevelopedakindofQ&AserviceinWechatwhichleveragesafreeTuningRestfulservicesothatyoucouldchatwiththisservice
JerryWang_汪子熙·2020-10-09 12:58

Spark 模型选择和调参

Spark-MLTuning官方文档：https://spark.apache.org/docs/2.2.0/ml-tuning.html这一章节主要讲述如何通过使用MLlib的工具来调试模型算法和pipeline
HoLoong·2020-09-28 10:00

基于FairMOT训练的多人脸跟踪（Multi-face tracking）速度和精度都非常好

此博客记录本人开发人脸跟踪的全过程，包括数据准备，模型修改，训练调参fine-tuning，模型转换onnx，部署等代码已开源：FaceM
songlixiangaibin·2020-09-20 14:13

AWR - Automatic Workload Repository

theparameterstatistics_levelshouldbesettoTYPICAL(thedefault)orALL.TheOracledatabaseusesAWRforproblemdetectionandanalysisaswellasforself-tuning.Anumb
tech2011·2020-09-17 15:58

WIN8、WIN7访问Windows Server 2003服务器的数据库速度很慢、远程速度很慢的解决方法

在控制台执行以下命令即可解决：netshinterfacetcpsetglobalautotuninglevel=disabled
LisenYang·2020-09-17 14:59

Spark2 Model selection and tuning 模型选择与调优

Modelselection模型选择ML中的一个重要任务是模型选择，或使用数据为给定任务找到最佳的模型或参数。这也称为调优。可以对诸如Logistic回归的单独Estimators进行调整，或者对包括多个算法，特征和其他步骤的整个Pipeline进行调整。用户可以一次调整整个Pipeline，而不必单独调整Pipeline中的每个元素。MLlib支持使用CrossValidator和TrainVa
weixin_34128534·2020-09-17 13:00

win7、win8客户端 连接win2003上的sqlserver2005 速度超慢

解决办法：开始运行，执行netshinterfacetcpsetglobalrss=disabledautotuninglevel=disabled。关闭TCP/IP协议的自动调谐功能。
anaijiao0225·2020-09-17 11:41

Altium Designer--如何走蛇形线

建议事先将布线走完成，再进行蛇形线修改1、Route–InteractiveLengthTuning/或者快捷键U+R，使鼠标变为十字架2、点击需要走蛇形线的网络，按Tab键，调出设置窗口主要有两个选项
辉_1014·2020-09-17 04:13

pcb设计特殊布线的画法与技巧！

AD布蛇形线方法Tool里选Interactivelengthtuning要先布好线再改成蛇形,这里用的是布线时直接走蛇形:先P->T布线,再Shift+A切换成蛇形走线按Tab可设置属性,类型了选用圆弧
当我足够好·2020-09-17 03:38

What is the maximum amount of memory any single process on Windows can address? Is this different than the maximum virtual memor

Thereseemstobealotofconfusionintheindustryaboutwhat'scommonlycalledtheWindows“4GBmemorylimit.”Whentalkingaboutperformancetuningandserversizing
tantj·2020-09-17 01:04

MySQL 数据库性能优化(转)

转载自：isky000.com/database/mysql-performance-tuning-sqlSQL优化优化目标减少IO次数IO永远是数据库最容易瓶颈的地方，这是由数据库的职责所决定的，大部分数据库操作中超过
iteye_15783·2020-09-16 15:58

论文阅读: Universal Language Model Fine-tuning for Text Classification

论文链接:https://arxiv.org/pdf/1801.06146.pd官方代码与数据:http://nlp.fast.ai/category/classification.html
浮生物语QAQ·2020-09-16 11:39

解决win7网速慢的问题

apps.hi.baidu.com/share/detail/31320625开始--运行--cmd回车-在该工作窗口的DOS提示符下，输入字符串命令“netshinttcpsetglobalautotuninglevel
weixin_34365635·2020-09-16 08:48

机器学习20：Transfer learning 迁移学习

一、概述1、从数据角度，分四种情形（如图），每种情形下可以采取的处理方法如下2、Fine-tuningSourcedata数据量大，而Targetdata数据量小。
勤睿·2020-09-16 01:38

[李宏毅-机器学习]迁移学习 transfer learning

ModelFine-tuningMulti-tasklearningdomain-adversarivaltrainingzero-shotlearning网络的输出是种类的特征，然后对这些特征进行embedding
炼丹师·2020-09-16 01:08

image classfication

introtoimageclassficationdata-drivenapproachpipelineNearestNeighborClassifierk-NearestNeighborClassifierValidationsetsforHyperparametertuningProsandConsofNearestNeighborclassifierintrotoimageclassfica
qq_35085277·2020-09-15 20:59

Image Classification

IntrotoImageClassificationdata-drivenapproachpipelineNearestNeighborClassifierk-NearestNeighborValidationsetsCross-validationhyperparametertuningProsConsofNearestNeighborIntrotoImageClassification
qq_35085277·2020-09-15 19:18
上一页 25 26 27 28 29 30 31 32 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他