grad

pytorch 前向传播与反向传播代码+ fp16

optim.zero_grad():将模型的梯度参数设置为0，即清空之前计算的梯度值，在训练模型过程中，每次模型反向传播完成后，梯度都会累加到之前的梯度值上，如果不清空，这些过时的梯度将会影响下一次迭代的结果
junjian Li·2023-06-21 14:08

inverting grad和deep grad

在计算机视觉中，"invertinggrad"（反向梯度）和"deepgrad"（深度梯度）是两种不同的方法或技术。InvertGrad（反向梯度）：InvertGrad是一种解释性方法，用于理解神经网络在图像分类任务中的决策过程。它通过将网络的梯度反向传播到输入图像上，来可视化图像中对于特定类别预测最具影响力的区域。通过可视化梯度信息，可以识别网络在分类决策中关注的图像区域，从而帮助分析和解释网
不当菜鸡的程序媛·2023-06-21 09:02

为什么说 Gradle 是 Android 进阶绕不去的坎 —— Gradle 系列(1)

可见，要成为Android高级工程师Grad
彭旭锐·2023-06-21 09:31

CloFormer实战：使用CloFormer实现图像分类任务（一）

文章目录摘要安装包安装efficientnet_pytorch安装timm安装grad-cam数据增强Cutout和MixupEMA项目结构计算mean和std生成数据集摘要论文翻译：https://blog.csdn.net
AI浩·2023-06-21 07:17

如何使用grad-cam对ViT的输出进行可视化（附代码）

使用grad-cam对ViT的输出进行可视化[TOC]前言VisionTransformer(ViT)作为现在CV中的主流backbone，它可以在图像分类任务上达到与卷积神经网络(CNN)相媲美甚至超越的性能
·2023-06-21 02:35

张量的is_leaf参数和required_grad参数

1：required_grad=True表明要对这个张量求导，也就是求取这个张量的梯度grad2：is_leaf=True表示这个张量是叶子节点，此时，对其求导，他的导数会被保留，而对于is_leaf=
xx_xjm·2023-06-20 19:43

Cannot use @TaskAction annotation on method TransformTask.transform()

becauseinterfaceorg.gradle.api.tasks.incremental.IncrementalTaskInputsisnotavalidparametertoanactionmethod.解决办法：将gradle版本改为7.3.3下载地址：Grad
为毛呀·2023-06-19 16:55

用python写出内点法优化算法的代码

下面是一个内点法优化算法的简单实现：importnumpyasnpdefinterior_point(obj,grad_obj,hess_obj,constraints,x0,rho=0.5,sigma
爆燃·火星·2023-06-19 11:03

css字体图标颜色渐变---linear-gradient

webkit-background-clip:text;-webkit-text-fill-color:transparent;}}以下实例演示了从头部开始的线性渐变，从红色开始，转为黄色，再到蓝色:#grad
真的想不出名儿·2023-06-18 20:08

【解决报错】YOLOv5 Grad CAM报错：keyerror:cv3

问题描述YOLOv5添加注意力机制后GradCAM报错：keyerror:cv3原因分析：增加注意力机制后，模型层数变化，打印出来，看一下在哪一层进行更改。原始网络层：原始网络层：添加注意力机制后,网络层改变解决方案：default='model_23_cv3_act'改为：default='model_24_cv3_act',
九磅十五便士丶·2023-06-17 15:23

【MMDetection】ERROR:The testing results of the whole dataset is empty

swinTransformer，显示错误：ERROR:Thetestingresultsofthewholedatasetisempty与此同时，各项评价指标如AP,AR结果趋于零，F1值变成-1，loss与grad_norm
there2belief·2023-06-17 14:07

shopee TechOps Engineer: SRE - App SRE (Fresh Grad)

四次挥手里的close-wait和time-wait怎么减少close-wait的数量？参考：被动方什么情况下FIN包会发送失败?JavaMinaclose_waitissuehttp500502504nginx上一串日志数据如下：2019090910:10:105002019090910:10:185022019090910:11:01500…用bash命令统计每分钟内500的次数，并排序lin
qq_23204557·2023-06-17 07:02

torch.tensor和torch.nn.Parameter

torch.nn.Parameter()https://blog.csdn.net/qq_43391414/article/details/120484239pytorchVariable与Tensor合并后requires_grad
樱木之·2023-06-17 07:57

with torch.no_grad()解答

x.1withtorch.no_grad()简述及例子torch.no_grad()是PyTorch中的一个上下文管理器（contextmanager），用于指定在其内部的代码块中不进行梯度计算。
樱木之·2023-06-17 06:53

pytorch 权重weight 与 梯度grad 可视化

查看特定layer的权重以及相应的梯度信息打印模型观察到model下面有module的key，module下面有features的key，features下面有(0)的key，这样就可以直接打印出weight了在pdbdebug界面输入pmodel.module.features[0].weight，就可以看到weight，输入pmodel.module.features[0].weight.gr
rainbow_lucky0106·2023-06-15 18:26

VanillaNet实战：使用VanillaNet实现图像分类

文章目录摘要安装包安装timm安装grad-cam数据增强Cutout和MixupEMA项目结构计算mean和std生成数据集摘要论文翻译：https://blog.csdn.net/m0_47867638
AI浩·2023-06-15 07:08

神经网络训练 policy gradient 算法时 梯度消失问题

再训练算法时发现梯度输出为none试了好几次从源头找原因最后得出的loss一定要是grad_fn=sumbackward类似的类型不然他没有梯度再次记录
大白爱吃胡萝卜·2023-06-15 07:21

pytorch | 记录一次register_hook不起作用以及为什么

0.问题描述register_hook用于给某个tensor注册hooks，这个函数需要传入一个钩子函数，而且钩子函数的input是loss.backward（）执行后的grad（不能获取weight值
Rilkean heart·2023-06-15 07:50

pytorch | loss不收敛或者训练中梯度grad为None的问题

0.个人觉得有用的参考原因定位：https://blog.csdn.net/weixin_44231148/article/details/107240840Pytorch中自定义网络参数，存在梯度但不进行更新-漱石的文章-知乎https://zhuanlan.zhihu.com/p/92729376https://zhuanlan.zhihu.com/p/508458545介绍hooks:htt
Rilkean heart·2023-06-15 07:17

News Review On A Grad Student in A USA University

Thisisanewsregardingalawsuitofracialdiscrimination.TheAfricanAmericanJeremywassuspendedandbannedfromcampusduetohisallegedlysexualharassmentandstalkingtoafemaleclassmate.Hisaseriesofbehaviorsmadethewom
两只鱼蝎子·2023-06-13 20:15

反向传播时sigmoid函数的梯度计算实现

:defforward(self,input):self.out=1/(1+math.exp(-input))returnself.outdefbackward(self,doutput):self.grad
zhengudaoer·2023-06-13 19:56

劝学：Android 14 Framework 引入了哪些“新”技术栈

编译系统：Bazel使用范围进一步扩大说到编译，对于独立应用而言，大家接触最多的应该是build.grad
码中之牛·2023-06-13 17:16

【LVGL】设置对象样式 - 渐变背景色

LVGL提供设置对象渐变背景色的功能，渐变色是由color1渐变为color2，而color1是对象的backgroundcolor，而color2则是通过lv_style_set_bg_grad_color
永远的魔术1号·2023-06-13 13:55

【JAR包打包为EXE】javafx/java项目（适用jdk1.8）通过Gradle插件打包为exe，包含jre，客户机无需安装JDK（含代码）

本文描述了如何通过grad
kamjin1996·2023-06-13 07:48

pytorch学习笔记（十四）——LOSS及其梯度

MSE求导：=∑[−()]²∇/∇=2∑[−()]∗(∇()/∇)∇()/∇这部分取决于网络结构，如y=wx+b的结构形式利用pytorch自动求导GradientAPItorch.autograd.grad
weixin_46753186·2023-06-12 04:26

Pytorch查看tensor是否有梯度（值）以及开启梯度

文章目录一.requires_grad属性：查看是否记录梯度二.requires_grad_()函数：调用函数设置记录梯度与否三.requires_grad属性参数，创建tensor时设置是否记录梯度四
cv_lhp·2023-06-12 04:45

【深度学习】损失函数系列 (一) 平方损失函数、交叉熵损失函数 (含label_smoothing、ignore_index等内容)

：Pytorch实现：fromtorch.nnimportMSELossloss=nn.MSELoss(reduction="none")input=torch.randn(3,5,requires_grad
卖报的大地主·2023-06-10 19:57

【自制框架，第二步_01】

x):ifnp.isscalar(x):returnnp.array(x)returnxclassVariable:def__init__(self,data):self.data=dataself.grad
奋斗的小乌龟·2023-06-10 15:34

torch.nn.Embedding

CLASStorch.nn.Embedding(num_embeddings,embedding_dim,padding_idx=None,max_norm=None,norm_type=2.0,scale_grad_by_freq
长命百岁️·2023-06-10 04:31

pytorch 测量模型运行时间，GPU时间和CPU时间，model.eval()介绍

文章目录1.测量时间的方式2.model.eval(),model.train(),torch.no_grad()方法介绍2.1model.train()和model.eval()2.2model.eval
tony365·2023-06-10 00:11

了解Gradle：轻松构建优秀的Java和Android应用程序

在Android应用程序开发中，Grad
程序猿会指北·2023-06-09 06:01

关于deeplabv3的输出维度与类别预测的对应关系

前面的代码省略了model.eval()#进入验证模式withtorch.no_grad():#initmodelimg_height,img_width=img.shape[-2:]print("img_height
Jerry-hao·2023-06-08 22:54

CAM, Grad-CAM, Grad-CAM++可视化CNN方式的代码实现和对比

理解CNN的方法主要有类激活图(ClassActivationMaps,CAM)、梯度加权类激活图(GradientWeightedClassActivationMapping,Grad-CA
deephub·2023-06-08 15:38

Gradio的web界面演示与交互机器学习模型，分享应用《3》

130540360Gradio的web界面演示与交互机器学习模型，主要特征《2》https://blog.csdn.net/weixin_41896770/article/details/130556692前面2篇文章将Grad
寅恪光潜·2023-06-08 14:17

CAM, Grad-CAM, Grad-CAM++可视化CNN方式的代码实现和对比

理解CNN的方法主要有类激活图(ClassActivationMaps,CAM)、梯度加权类激活图(GradientWeightedClassActivationMapping,Grad-CA
·2023-06-08 10:21

pytorch中torch.FloatTensor的用法

注意，求梯度只针对于浮点型tensor，整型tensor不能求梯度requires_grad只针对浮点型tensor
frank_haha·2023-06-07 06:58

torch.empty的作用：返回一个未初始化的Tensor

在官网查到torch.empty()的初始格式是empty(*size,*,out=None,dtype=None,layout=torch.strided,device=None,requires_grad
AI阅读和图谱·2023-04-21 15:41

pytorch自定义交叉熵损失函数

维测试交叉熵代码：注意：output维度是[batch_size,所分类预测值，样本数]label维度是[batch_size,样本数]output=torch.randn(3,3,5,requires_grad
AI视觉网奇·2023-04-19 22:34

自训练densenet的grad_cam可视化

使用torch自带的densenet，没有经过训练的grad_camimportjsonimportosimportnumpyasnpimporttorchfromPILimportImageimportmatplotlib.pyplotaspltfromtorchvisionimportmodelsfromtorchvisionimporttransforms
栗子甜酒·2023-04-19 22:29

AI：简易的自动求微分算法

文章目录一、自动求微分1.1变量1.2函数1.3数值微分求法1.4反向传播算法1.5实现自动反向传播1.6使用循环方式代替递归方式完成自动反向传播1.7简化调用函数的方式1.8省略编写`y.grad=np.array
算法技术博客·2023-04-19 18:34

Grad-CAM的详细介绍和Pytorch代码实现

Grad-CAM(Gradient-weightedClassActivationMapping)是一种可视化深度神经网络中哪些部分对于预测结果贡献最大的技术。
deephub·2023-04-19 12:24

Grad-CAM的详细介绍和Pytorch代码实现

Grad-CAM(Gradient-weightedClassActivationMapping)是一种可视化深度神经网络中哪些部分对于预测结果贡献最大的技术。
·2023-04-19 11:38

requires_grad，grad_fn，grad的含义及使用

requires_grad:如果需要为张量计算梯度，则为True，否则为False。
失之毫厘，差之千里·2023-04-19 01:23

Amazon New Grad 2021 OA1 Debug

AmazonNewGrad2021OA1DebugcheckPairSumExistsremoveConsecutiveVowelsreverseAlphabetCharsOnlycalculateSumOfNumbersInStringcountTripletSumPermutationscompareProductcountRotations20min7道debug题CodeDebugging
HanhahnaH·2023-04-17 18:32

Amazon New Grad 2021 OA2 Coding and Workstyles Assessments

AmazonNewGrad2021OA1CodingandWorkstylesAssessmentsCodingGreatestCommonDivisorofnNumbersFillTheTruckHighestProfit1629.SlowestKey1.TwoSum874.WalkingRobotSimulationcountPrimeStringsklengthdistinctcharsub
HanhahnaH·2023-04-17 18:32

【Pytorch】AutoGrad个人理解

torch.autograd需要对现有代码进行最少的更改——声明需要计算梯度的Tensor的属性requires_grad=True。截至目前，PyTorch
友人小A·2023-04-17 17:26

Pytorch搭建神经网络的小案例

推荐学习b站视频torch.Tensor()默认是torch.FloatTensor()的简称，创建的为float32位的数据类型；torch.LongTensor是64位整型optimizer.zero_grad
Chen的博客·2023-04-17 17:04

Python-两层神经网络的类

目录图形解释代码实现内容解释高数两个常用函数mini-batch版交叉熵误差梯度后记图形解释画图软件不太常用代码实现importnumpyasnpdefnumerical_gradient(f,x):h=1e-4#生成与x形状相同的数组grad
一半的一半，·2023-04-16 05:10

pytorch冻结模型的权重，不反向传播

ｐｙｔｏｒｃｈ冻结模型权重，不进行梯度反向传播在PyTorch中冻结模型权重，不进行梯度反向传播，可以通过以下几个步骤实现：将模型的所有参数设置为不需要梯度更新，即设置requires_grad属性为False
andrew P·2023-04-15 14:22

使用pytorch进行张量计算、自动求导和神经网络构建功能

如何使用torch.add(),torch.sub(),torch.mul(),torch.div()等函数或者运算符来实现张量与numpy数组之间的互相转换和共享内存机制自动求导什么是计算图，如何使用.grad_fn
·2023-04-14 22:33
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他