optim

TEB算法流程

我们要知道ROS官方给出的teb_local_planner包中，其实是包含了两种TEB规划器的，一个名为optim
陈_呵呵·2022-12-09 14:00

ROS2 Galactic teb_local_planner

costmap_converter_msgscostmap_converterteb_msgsteb_local_plannerteb_local_planner编译遇到std::shared_ptr的问题解决方法，将optim
howtoloveyou·2022-12-09 10:08

lr_scheduler.StepLR调整学习率机制

StepLR调整学习率机制有的时候需要我们通过一定机制来调整学习率，这个时候可以借助于torch.optim.lrschedulertorch.optim.lr_schedulertorch.optim.lrscheduler
big_matster·2022-12-09 07:30

【李宏毅HW3】

torch.backends.cudnn.benchmark五、transforms六、nn.Conv2d七、MaxPool2d八、BatchNorm2d输入参数：九、torch.nn.Linear十、torch.optim.Adam
Raphael9900·2022-12-08 12:14

CNN CIFAR-10 pytorch实现

本文方法基于Pytorch实现，因此调用pytorch处理图像分类全家桶torch.nn、torch.optim、torchvisionimportnumpyasnpimporttorchimporttorch.nnasnnimporttorchvisionfromtorchvisionimportda
FallFlower*·2022-12-08 02:34

Pytorch系列入门5----神经网络核心torch.nn工具箱介绍

torch.nn几大模块1.nn.Module__init()__方法forward()方法nn.Parameter()方法2.nn.functional库3.nn.Sequential()方法4.nn.optim
CV_Today·2022-12-07 13:21

PyTorch使用F.cross_entropy报错Assertion `t ＞= 0 && t ＜ n_classes` failed问题记录

函数时，偶尔会报错ClassNLLCriterion···Assertion`t>=0&&t=0&&t=0&&t=0&&t=0&&tmodel=train_model(model,criterion,optim_scheduler_ft
TracelessLe·2022-12-06 23:35

PyTorch入门——实现MNIST分类

importtorchfrommatplotlibimportpyplotaspltfromtorchimportnn,optim#fromtorch.autogradimportVariablefromtorch.utils.dataimportDataLoaderfromtorchvisionimportdatasets
CynicalRat·2022-12-05 11:30

【pytorch】torch.optim

文章目录步骤为每个参数单独设置选项进行单次优化BaseClass算法学习率调整torch.optim是一个实现了各种优化算法的库。步骤构建一个optimizer对象。
陌上骑驴Yiping_Chen·2022-12-04 23:32

PyTorch中文教程 | (6) torch.nn是什么？

Pytorch提供了torch.nn、torch.optim、Dataset和DataLoader这些设计优雅的模块和类以帮助使用者创建和训练神经网络。
CoreJT·2022-12-04 22:45

pytorch使用笔记|torch.optim模块简介（内含optimizer和lr_schedular）

torch.optim是一个用于实现优化算法的包，支持常见的优化算法。本文介绍一下这个包下面的一些常见内容，如optimizer和lr_scheduler的构造和使用。
yanghaoplus·2022-12-03 04:57

PyTorch 学习日记（2）——优化器

1、优化器Optim优化器用通俗的话来说就是一种算法，是一种计算导数的算法。各种优化器的目的和发明它们的初衷其实就是能让用户选择一种适合自己场景的优化器。
Mr_Chen2020·2022-12-03 02:42

pytorch loss.backward() 报错RuntimeError: select(): index 0 out of range for tensor of size [0, 1]解决方法

(3,3,32,norm='bn').apply(weights_init)D=MS_Discriminator(input_nc=6).apply(weights_init)optimizer_G=optim.Adam
qq_45475106·2022-12-02 23:21

深度学习学习记录-优化器的学习率的更新

1.Torch优化器的学习率更新建立一个简单的模型importtorchmodel=torch.nn.Conv2d(3,3,1)optim=torch.optim
七月的和弦·2022-12-02 17:16

Pytorch中optimizer类初始化传入参数分析（分析源码）

今天在跟随沐神的课看见了以前没见过SGD参数传入方式（才学没多久，见识浅陋）：trainer=torch.optim.SGD([{'params':params_1x},{'params':net.fc.parameters
小廖磨洋工·2022-12-02 06:27

【Pytorch】学习笔记（训练代码框架）

是包含data和grad两个部分的，data放的是真实的数据，而grad中保存的是计算产生的梯度用于反向传播更新参数使用由loss.backward()所计算的梯度会产生累计，所以在每次参数更新后需要设置optim.zero_grad
Chaossll·2022-12-02 05:40

pytorch中state_dict的理解

PyTorch中，state_dict是一个Python字典对象（在这个有序字典中，key是各层参数名，value是各层参数），包含模型的可学习参数(即权重和偏差，以及bn层的的参数）优化器对象(torch.optim
iddd·2022-12-02 02:39

matlab 牛顿法 最优化,matlab最优化牛顿法

最优化算法与MATLAB的GlobalOptimizationToolbox机动目录上页下页......牛顿法lsqcurvefit\\toolbox\\optim\\private\\snls.m\\
weixin_39868034·2022-12-01 23:27

pytorch：model.zero_grad()和optimizer.zero_grad()、net.parameters()、requires_grad

当optimizer=optim.Optimizer(net.parameters())时，二者等效。其中Optimizer可以是Adam、SGD等优化器。
开心邮递员·2022-12-01 15:50

torch.optim 中的优化器

首先我们需要知道的是：优化器的作用是什么捏？？它是一个实现各种优化算法的包。大部分常用的方法都已经支持，接口也足够通用，以后也可以轻松集成更复杂的方法。优化器主要是在模型训练阶段对模型可学习参数进行更新,常用优化器有SGD，RMSprop，Adam等。优化器初始化时传入传入模型的可学习参数，以及其他超参数如lr，momentum等。在训练过程中先调用optimizer.zero_grad()清空梯
在西湖雾雨中起舞·2022-12-01 14:05

关于requires_grad和优化器optim中parameters的记录

而optim中的parameters是定义要对那些层进行参数优化一般在迁移学习的代码过程中我们会先把加载的模型所有层定义成requires_grad=False，再将模型编辑成我们需要的样子，例如将全连接层的输出定义成我们要的输出
immc1979·2022-12-01 14:33

机器学习-最小二乘拟合

0.前言解决非线性问题的方法：最小二乘算法：https://www.mathworks.com/help/optim/ug/least-squares-model-fitting-algorithms.html
RS&Hydrology·2022-12-01 10:45

Pytorch：optim.zero_grad()、pred=model(input)、loss=criterion(pred,tgt)、loss.backward()、optim.step()的作用

optimizer.zero_grad()；loss.backward()；optimizer.step()model=MyModel()criterion=nn.CrossEntropyLoss()optimizer=torch.optim.SGD
u013250861·2022-12-01 08:42

Pytorch学习笔记【8】---经典MNIST

【8】---经典MNIST1.网络结构2.代码3.API分析torch.utils.data.DataLoader()torch.nn.init.kaiming_normal_()optimizer=optim.SGD
AndSonder·2022-11-30 17:55

PyTorch torch.optim.lr_scheduler 学习率调整

PyTorchtorch.optim.lr_scheduler学习率调整LambdaLR；StepLR；MultiStepLR；ExponentialLR
郭庆汝·2022-11-30 15:17

PyTorch——torch.autograd和Variable，torch.nn，torch.optim

目录神经网络自动梯度6.2.1torch.autograd和Variable模型搭建和参数优化6.3.1PyTorch之torch.nn6.3.2PyTorch之torch.optim神经网络一个典型的神经网络的训练过程大致分为以下几个步骤
行走的笔记·2022-11-29 17:54

pytorch人工神经网络基础：线性回归神经网络(nn.Module+nn.Sequential+nn.Linear+nn.init+optim.SGD)

线性回归是人工神经网络的基础，线性回归属于有监督的学习，即根据有标签（已知结果的数据）拟合线性方程权重，然后根据拟合的方程预测未知数据。通常步骤为：准备数据：获取有标签的数据（有结果的数据）。建立模型：根据线性方程设计模型。配置模型：确定损失函数、优化方法、初始化参数。训练模型：根据有标签的数据进行回归学习。测试：根据训练好的（回归结果）线性方程模型计算，评估模型是否准确。神经网络算法的1准备工作
hustlei·2022-11-29 11:29

pytorch优化器: optim.SGD && optimizer.zero_grad()

在pytorch中提供了torch.optim方法优化我们的神经网络，torch.optim是实现各种优化算法的包。最常用的方法都已经支持，接口很常规，所以以后也可以很容易地集成更复杂的方法。
ZwaterZ·2022-11-29 10:09

pytorch基础（四）：使用optim优化函数

文章目录前言一、问题描述二、官方文档代码三、optimizer的工作原理总结前言  本系列主要是对pytorch基础知识学习的一个记录，尽量保持博客的更新进度和自己的学习进度。本人也处于学习阶段，博客中涉及到的知识可能存在某些问题，希望大家批评指正。另外，本博客中的有些内容基于吴恩达老师深度学习课程，我会尽量说明一下，但不敢保证全面。一、问题描述  此次需要构建的神经网络其实和前几次相同，为了能更
麻衣带我去上学·2022-11-29 01:50

Pytorch Optimizer类使用小技巧总结

子类内固定features层参数forpinself.features.parameters():p.requires_grad=False2.将参与训练的层参数传入Optimizer：param_to_optim
潜行隐耀·2022-11-29 01:17

model.load_state_dict(state_dict)报错出现参数与模型不匹配

加载后继续训练或者使用训练好的预训练模型继续训练就需要用到预训练的命令和代码，成为微调问题描述输入命令行如下pythonmain.py--feature_size32--batch_size1--logdirunetr_test--optim_lr1e
ElaineLiu0307·2022-11-28 21:47

深度学习09——多分类问题

.手写数字识别实战2.1导入库2.1.1torchvision库2.1.2torch.utils.data2.1.3torch.nn与torch.nn.functional的区别2.1.4torch.optim2.2
Top Secret·2022-11-28 07:01

pytorch学习笔记

四个重要的包torch.Torchtorch.autogradtorch.nntorch.optim一、tensor转化到gpu上运算：默认情况下不允许跨GPU操作，除了copy_()和其他具有类似复制功能的方法
phily123·2022-11-27 21:29

PyTorch学习笔记（二）——torch.nn解析

PyTorch提供了方便漂亮的类和模块，来帮助我们创建和训练神经网络，例如torch.nn,torch.optim等。
Candyerer·2022-11-27 17:20

flax.optim 引入错误

flax在0.6.0删除了optim包，需要下载0.5.3版本详情见：https://github.com/google/flax/commit/cda7a4c85bbce744e412ab82e298ddf76d4770d2pipinstallflax
威尔士矮脚狗·2022-11-27 13:25

pytorch手动加入正则

1.Pytorch自带的加正则化方法Pytorch的优化器都自带正则化，比如optimizer=optim.Adam(model.parameters(),lr=learning_rate,weight_decay
YANG_0_0_YANG·2022-11-27 09:01

【深度学习】计算机视觉（六）——pytorch（下）

nn.MaxPool2d非线性激活：nn.ReLu线性层：nn.Linearnn.Sequential损失函数：nn.L1Lossnn.MSELossnn.CrossEntropyLosstorch.optim
RK_Dangerous·2022-11-27 06:10

【PyTorch】PyTorch中的model.zero_grad()和optimizer.zero_grad()使用

在训练Pytorch的时候，我们会使用model.zero_grad()optimizer.zero_grad()首先，这两种方式都是把模型中参数的梯度设为0当optimizer=optim.Optimizer
Xhfei1224·2022-11-27 06:00

Pytorch实现LeNet网络

DataLoader  from torchvision.datasets import MNIST  from torchvision import transforms  from torch import optim
九是否非随机的称呼·2022-11-27 06:28

PyTorch学习笔记(七) ---- 小试牛刀

2.2PyTorch：张量3.自动求导3.1PyTorch：张量和自动求导3.2PyTorch：定义新的自动求导函数3.3TensorFlow：静态图4.nn模块4.1PyTorch：nn4.2PyTorch：optim4.3PyTorch
john_bh·2022-11-27 04:59

李宏毅2021《机器学习/深度学习》——学习笔记（3）

DNNTrainingProcedure上图所示是Pytorch中训练DNN的概述，首先是DefineNeuralNetwork、LossFunction、Optimizer，这三步用到了torch.nn和torch.optim
dotJunz·2022-11-27 02:34

【学习率】torch.optim.lr_scheduler学习率10种调整方法整理

学习率调整在网络中的位置以及当前学习率查看方法importtorchimporttorch.nnasnnimporttorch.optimoptimizer=torch.optim.SGD(model.parameters
风巽·剑染春水·2022-11-26 01:04

pytorch之常用函数整理

pytorch之常用函数整理一、图像预处理函数1.1torchvision.datasets.ImageFolder()函数二、参数优化函数2.1torch.optim.lr_scheduler.StepLR
西西先生666·2022-11-25 15:13

torch.optim.Adam(parameters, lr)什么含义

torch.optim.Adam是什么意思呢这个算法来自https://arxiv.org/abs/1412.6980以下黄色字体来自该文章的摘要Adam，一种基于低阶矩的自适应估计的随机目标函数一阶梯度优化算法
有梦想的鱼·2022-11-25 05:40

深度学习与PyTroch(三）

文章目录神经网络各层输出的可视化原始图片第一层卷积BatchNormReLU循环神经网络损失函数模型优化器optim学习率神经网络各层输出的可视化ResNet-18，数字代表的是网络的深度，也就是说ResNet18
飞天小福蝶·2022-11-25 03:20

pytorch训练过程中出现nan的排查思路

在optim.step()之前裁剪梯度。
风吹草地现牛羊的马·2022-11-24 22:29

【pytorch】余弦退火算法解读

1.1CosineAnnealingWarmRestarts1.1.1官方解释先放官网截图1.1.2测试1.第一次测试1.代码importtorchimporttorch.nnasnnfromtorch.optim.lr_schedulerimportCosineAnnealing
胡侃有料·2022-11-24 19:16

pytorch Cosine Annealing LR

CosineAnnealingLRtorch.optim.lr_scheduler.CosineAnnealingLR(optimizer,T_max,eta_min=0,last_epoch=-1)这个学习率策略就是说
康康同学97·2022-11-24 19:13

CosineAnnealingLR

记录一下CosineAnnealingLR调整学习率这种策略：importtorchimporttorch.nnasnnfromtorch.optim.lr_schedulerimportCosineAnnealingLRimportitertoolsimportmatplotlib.pyplotaspltinitial_lr
查无此人☞·2022-11-24 19:08

torch.optim.lr_scheduler.CosineAnnealingWarmRestarts、OneCycleLR定义与使用

CosineAnnealingWarmRestarts（带预热的余弦退火）学习率方法定义torch.optim.lr_scheduler.CosineAnnealingWarmRestarts(optimizer
there2belief·2022-11-24 19:37
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他