Batch_size

加载pytorch DataLoader生成的数据集时出现AttributeError: Can‘t pickle local object ‘create_torchvision_dataset_w

报错如图：解决方法：将num_workers=2,改成num_workers=0dataloader=torch.utils.data.DataLoader(train_dataset,batch_size
佳hong·2023-07-30 12:14

使用torchsummary包实现网络结构可视化

pipinstalltorchsummarytorchsummary:能够查看模型的输入和输出的形状，可以更加清楚地输出模型的结构下面是torchsummary的结构:torchsummary.summary(model,input_size,batch_size
梦在黎明破晓时啊·2023-07-30 11:04

python 读文件并处理成DataFrame

bin/python#-*-coding:UTF-8-*-frompyhiveimporthiveimportpandasaspddefget_batch_data_from_hive(sql_str,batch_size
MusicDancing·2023-07-29 14:58

【深度学习】RNN学习笔记

对于RNN网络，需要一次性读取多个句子，那么涉及到batch_size，这里第二个表达就是：batch,单词，单词的表达方式RNN原理 这里生成一个5x100的向量，对于每一个单词我们都使用100个特征进行表示
MoonpieXia·2023-07-26 15:41

2.DNN - BGD

importnumpyasnp#输入规格#X-R(batch_size,nx),Y-R(batch_size,1)W-R(1,nx)b—R(1,1)deflayer(X,W,b):#in:X-R(batch_size
抠脚大汉QAQ·2023-07-26 08:56

RuntimeError: DataLoader worker is killed by signal: Killed.报错解决

pidxxxxx)iskilledbysignal:Killed.这个报错和DataLoader有关，定位到训练脚本中的代码：train_data_loader=DataLoader(train_dataset,batch_size
AI 菌·2023-07-25 10:24

Pytorch堆叠多个损失造成内存爆炸

言归正传，笔者用的设备是3T的硬盘，跑的程序batch_size=1024，共划分了2000个batch，每跑一个batch内存占用率就会升高，0.5%左右，无奈之下只能一句一句debug，
爱晒太阳的胖子·2023-07-25 09:00

【目标检测】epoch、、batch、、batch_size理解

batch_size的大小影响模型的优化程度和速度。同时其直接影响到GPU内存
搬砖组摸鱼组员·2023-07-24 20:36

CNN复习

个人的对于CNN总结的一些知识点对于每一个卷积层来说，其out_channel就是卷积核的个数：对每个输入的图片（就是每一个（C,H,W）的矩阵，一共有batch_size个），卷积核从第0到第in_channel
鱼鱼9901·2023-07-24 15:50

AlexNET

pipinstalltorchsummary输入：为模型、输入尺寸、批数量、设备输出：模型的参数信息fromtorchsummaryimportsummarydefsummary(model,input_size,batch_size
雁瑜彭·2023-07-21 09:37

RuntimeError: Unable to find a valid cuDNN algorithm to run convolution

cudnn安装完后，运行程序显示报错RuntimeError:UnabletofindavalidcuDNNalgorithmtorunconvolution在把cudnn几个版本装了卸，卸了装之后，尝试把batch_size
zeolite·2023-07-20 17:51

MVSNet、PatchMatchNet中的 eval.sh文件超参数解释

eavl.sh文件，可以看到文件设置了数据集路径，及超参数设置（超参数，也可以不写，会使用默认参数）上图中各参数意思如下：执行文件pythoneval.py；数据集加载方方式使用dtu_yao_eval；batch_size
R-G-B·2023-07-20 00:07

[PyTorch] RNN, LSTM, GRU中输入输出维度

本文中的RNN泛指LSTM，GRU等等CNN和RNN中batch_size的默认位置是不同的。
Sophia$·2023-07-19 22:03

【动手深度学习v2】with torch.no_grad()用法

在sgd的实现代码中，使用到了withtorch.no_grad()：defsgd(params,lr,batch_size):#@save"""小批量随机梯度下降"""withtorch.no_grad
岁余十二.·2023-07-19 10:34

【NLP】多头注意力概念（02）

展望未来，每个张量的seq_length形状将通过其各自的张量来识别，以确保清晰度、Q_length、K_length或V_length：Q的形状为（batch_size、n_heads、Q_length
无水先生·2023-07-18 10:41

python-numpy-ValueError: The truth value of an array with more than one element is ambiguous.

于是我用了下面的代码进行测试：其中train_dataset的第1维长度为2，分别是包括了batch_size个图片的特征和对应的labels；而图片特征对应的ndarray的shape是(16,224,224,4
键盘即钢琴·2023-07-17 13:15

PyTorch中的torch.nn.Linear函数解析

nn.Linear()：用于设置网络中的全连接层，需要注意的是全连接层的输入与输出都是二维张量一般形状为[batch_size,size]，不同于卷积层
dong_uper·2023-07-17 06:12

分割模型nnUNet学习日记（三）：nnUNet参数batch_size和patch_size的修改方式

在nnUNet中，batch_size和patchsize会在预处理时自动默认设置好，具体可以查看“nnUNet_preprocessed”文件夹的.pkl文件：如图是nnUNetPlansv2.1_plans
Joker 007·2023-07-16 23:38

yolov5训练时参数workers与batch-size的常见问题

workers与batch-size的常见问题一、workers二、batch-size很多新手在使用yolov5训练模型的时候会出现爆内存和爆显存问题，一般就是由于worker和batch_size参数设置过大有关
慕溪同学·2023-07-15 18:45

深度学习——优化器Optimizer

importtorchimporttorch.utils.dataasDataimporttorch.nn.functionalasFimportmatplotlib.pyplotasplt#torch.manual_seed(1)#reproducible"""超参数"""#学习率LR=0.01#批大小BATCH_SIZE
时代&信念·2023-07-14 19:04

深度学习——批数据训练

代码与详细注释：BATCH_SIZE=5，shuffle=Trueimporttorchimporttorch.utils.dataasData#添加随机种子以使结果可复现torch.manual_seed
时代&信念·2023-07-14 08:13

RNN介绍

时间序列的表示[seq_len,batch_size,vec]seq_len表示一个句子通常有多少个单词或者一个序列有多少个时间段，batch_size表示同时多个样本，vec表示单词的编码长度请问rnn
一壶浊酒..·2023-07-14 00:13

pytorch多分类问题 CrossEntropyLoss()函数的输入size/shape不一致问题

实现一个多分类任务的时候，许多多分类任务在训练过程中都会有如下的代码：criterion=nn.CrossEntropyLoss()loss=criterion(output,target)#output.size:[batch_size
绿毛虫训练师·2023-07-13 20:14

轻松配置深度学习模型 ?

训练模块可能需要诸如batch_size或num_epochs之类的参数或学习率调度程序的参数。同样，数据预处理模块可能需要train_test_split或图像增强参数。
·2023-06-23 13:40

轻松配置深度学习模型 ?

训练模块可能需要诸如batch_size或num_epochs之类的参数或学习率调度程序的参数。同样，数据预处理模块可能需要train_test_split或图像增强参数。
冷冻工厂·2023-06-23 09:11

pytorch训练模型pth导出为onnx ，再简化onnx模型

else"cpu")model=torch.load("/home/shangzaixing/code/LaneNet-PyTorch-RNN/pytorch-crnn.pth")#pytorch模型加载batch_size
图 (TU商兴)·2023-06-22 10:57

【Batch_size 与 梯度 之间的关系】

chatGPT回答梯度更新与批大小（batchsize）之间有密切的关系。批大小是指在训练过程中一次迭代所使用的样本数量。在深度学习中，梯度下降是一种常用的优化算法，用于更新模型参数以最小化损失函数。梯度是损失函数对于模型参数的偏导数，它表示了参数变化对于损失函数的影响方向和程度。在每一次梯度更新中，模型的参数会根据梯度的信息进行调整。批大小对梯度更新有以下影响：计算效率：较大的批大小可以利用并行
风等雨归期·2023-06-22 02:48

解决 git 推送大仓库失败问题

#AdjustthefollowingvariablesasnecessaryREMOTE=originBRANCH=$(gitrev-parse--abbrev-refHEAD)BATCH_SIZE=
远方的飞猪·2023-06-22 01:29

使用Keras的记录

1.model对象有个fit方法，fit方法里的参数是这样的：fit(x=None,y=None,batch_size=None,epochs=1,verbose=1,callbacks=None,validation_split
Lifelrving·2023-06-20 19:50

pytorch笔记：RNN

TORCH.NNrnn可以处理变长序列，是因为其每个时刻的参数是共享的rnn每算出一个时刻都可以输出，适合流式输出，但串行计算比较慢，无法获取太长的历史信息RNN初始隐状态不提供默认是0，输出包括两部分：所有时刻的输出(batch_size
_森罗万象·2023-06-20 12:00

PyTorch的nn.Linear（）全连接层

PyTorch的nn.Linear（）是用于设置网络中的全连接层的，需要注意的是全连接层的输入与输出都是二维张量，一般形状为[batch_size,size]，不同于卷积层要求输入输出是四维张量。
于储·2023-06-16 12:47

PaddleDetection配置文件注释

1、YOLOv4architecture:YOLOv4use_gpu:truemax_iters:140000#可以理解为训练总次数，即迭代次数，一共喂网络多少次batch_size的数据log_iter
牙否·2023-06-15 01:50

解决Indexerror: dimension out of range (expected to be in range of [-1, 0], but got 1)

问题描述在复现代码时，把batch_size调整为1，结果softmax报以下错误：#SuperSketchNetworklinksaRNNandCNNtogetherwithanattentionlayerinthelastlayer.classSSN
北京地铁1号线·2023-06-14 22:50

图像之场景分类 实验研究

如下图所示:然后再看一下要用到的一些组件，如下图所示:最后一起看下模型的训练流程:最后一起看下训练的结果日志，如下图所示，可以看到testAcc=93.86%，此处用的是双卡2080Ti，比单卡来说，训练的batch_size
·2023-06-14 19:34

yolov5 6.1 关于 tensorrt 加速的使用以及问题说明

Tensorrt8.4.1.5版本上使用export.py导出失败的问题3.2把模型文件由best.pt更换成加速后的best.engine后，执行推理时标注的类别名不正确的问题3.3导出加速模型和使用加速模型推理时batch_size
Jerry.yl·2023-06-14 07:39

日攻一卒 --- batch_size 和 准确率的关系

批量大小（batch_size）会影响神经网络的训练过程和准确率。以下是一些关于批量大小如何影响训练的要点：计算资源：较大的批量大小需要更多的内存。因此，在选择批量大小时，需要考虑可用的计算资源。
balabalabiubuibiu·2023-06-14 02:44

batch_size对精确度和损失的影响

1问题在深度学习的学习过程中，模型性能对batchsize虽然没有学习率那么敏感，但是在进一步提升模型性能时，batch_size就会成为一个非常关键的参数。
算法与编程之美·2023-06-14 02:40

目标检测常用名词

目标i检测的一些专业名词内容anchorboxboundingboxgroundturthIoUnms（非极大值抑制）mAPRPN前景和背景PR曲线epoch，batch_size，iteration,
芋儿烧鸡·2023-06-14 01:38

yolov5 6.1 关于 tensorrt 加速的使用以及问题说明

Tensorrt8.4.1.5版本上使用export.py导出失败的问题3.2把模型文件由best.pt更换成加速后的best.engine后，执行推理时标注的类别名不正确的问题3.3导出加速模型和使用加速模型推理时batch_size
Jerry.yl·2023-06-13 16:58

如何解决“RuntimeError: CUDA Out of memory”问题

当遇到这个问题时，你可以尝试一下这些建议，按代码更改的顺序递增：减少“batch_size”降低精度按照错误说的做清除缓存修改模型/训练在这些选项中，如果你使用的是预训练模型，则最容易和最有可能解决问题的选项是第一个
三更两点·2023-06-13 12:31

yolov7训练爆错问题解决

训练时遇到：Namespace(augment=False,batch_size=2,conf_thres=0.001,data='data/Aquarium_Combined_v3.yaml',device
老李小同志·2023-06-12 22:05

pytorch 速度问题测试

训练代码没有改动，但是pytorch的速度却突然增加了4倍不止，后面我发现这个速度的问题在于dataloader的创建方式上如果采用myloader=DataLoader(dataset=myset,batch_size
我的心永远是冰冰哒·2023-06-10 00:16

深度学习中的一些概念

batch_size、epoch、iteration是深度学习中常见的几个超参数：（1）batchsize：每批数据量的大小。
krismia·2023-06-09 11:16

PyTorch 深度学习 || 专题六：PyTorch 数据的准备

importtorchimporttorch.utils.dataasData#准备建模数据x=torch.unsqueeze(torch.linspace(-1,1,500),dim=1)#生成列向量y=x.pow(3)#y=x^3#设置超参数batch_size
Mr_LeeCZ·2023-06-07 10:07

Pytorch 深度强化学习模型训练速度慢

一、起初开始在训练参数batch_size=200,graph_size=40,epoch_size=100000,训练速度一个epoch要4h，人麻了…二、经过网上查找资料后，对batch_size和训练数据
Xxwl.·2023-04-21 17:26

【TensorRT】execute_async VS execute_async_v2

execute_async(self:tensorrt.tensorrt.IExecutionContext,batch_size:int=1,bindings:List[int],stream_handle
昌山小屋·2023-04-21 06:21

torchCRF的简单使用

案例简介模型输入:seq:[batch_size,len_seq,num_tags]seq_tag:[batch_size,len_seq]模型输出:likehood:tensor()案例代码importtorchfromTorchCRFimportCRFfromtorch.utils.dataimportTensorDataset
小黑无敌·2023-04-20 22:52

pytorch自定义交叉熵损失函数

2维测试交叉熵代码：注意：output维度是[batch_size,所分类预测值，样本数]label维度是[batch_size,样本数]output=torch.randn(3,3,5,requires_grad
AI视觉网奇·2023-04-19 22:34

Tensorflow中tf.flags的作用及使用方法

tf.flags.FLAGStf.flags.DEFINE_string('buckets','oss://{OSSBucket}/','训练图片所在文件夹')tf.flags.DEFINE_string('batch_size
tan197·2023-04-19 22:38

cifar-10数据集+ResNet50

比赛链接：CIFAR-10-ObjectRecognitioninImages|Kaggle1.预设置处理创建各类超参数，其中如果是在Kaggle上训练的话batch_size是可以达到4096的。
__LazyCat__·2023-04-19 18:41
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他