梯度磁场

【深度学习】

梯度消失和梯度爆炸（解释意思，分析产生原因）在反向传播过程中需要对激活函数进行求导，如果导数大于1，那么随着网络层数的增加梯度更新将会朝着指数爆炸的方式增加这就是梯度爆炸。
feifeikon·2024-09-04 00:34

深度学习基础之循环神经网络

长短期记忆网络（LSTM）与门控循环单元（GRU）在解决梯度消失和爆炸问题上的具体差异和优势是什么？
Ctrl+CV九段手·2024-09-04 00:02

【论文笔记】Multi-Task Learning as a Bargaining Game

Abstract本文将多任务学习中的梯度组合步骤视为一种讨价还价式博弈(bargaininggame)，通过游戏，各个任务协商出共识梯度更新方向。
xhyu61·2024-09-03 09:26

深度学习(一)

梯度消失问题:当输入值很大或很小时，梯度接近于0，导致训练过程中梯度更新变得缓慢。
小泽爱刷题·2024-09-03 06:39

天雨虽宽，不润无根之草；佛法虽广，不度无缘之人

一个信念你的人，你会发现他/她，对你说的话会接受很快，很容易听进去，你讲一遍，他/她就懂了，进步非常快，你们的磁场会无限接近，同时他/她也会获得你的度化。一个不信念你的人，
宇阳道人·2024-09-03 02:06

这项来自中国的AI研究介绍了1位全量化训练（FQT）：增强了全量化训练（FQT）的能力至1位

全量化训练（FQT）可以通过将激活、权重和梯度转换为低精度格式来加速深度神经网络的训练。量化过程使得计算速度更快，且内存利用率更低，从而使训练过程更加高效。
量子位AI·2024-09-02 22:16

新的征程即将起航

2018年5月1日星期二环境是风水和磁场干扰而成的能量场风为通透水为流动磁场为频率本质都是某种频率所以世间一切都是频率作用的结果至此醒悟人是环境的产物持续沐浴在什么场你就会被场的能量加持最终你身上凸显出来的气质就是你的气场气场是你过往经历的综合呈现唯有经历别人没经历过的经历别人不敢经历的
实干日志·2024-09-02 13:57

继电器的工作原理

当线圈通电时，会产生磁场，使铁芯磁化，从而吸引衔铁，使触点闭合或断开，实现对被控电路的控制。当线圈断电时，磁场消失，衔铁在弹簧的作用下恢复原位，触点也随之恢复到原来的状态。
海阔天空_2013·2024-09-02 09:05

深度学习中的梯度消失和梯度爆炸问题

在深度学习领域，随着模型层数的增加，我们常常会遇到两个棘手的问题：梯度消失（VanishingGradients）和梯度爆炸（ExplodingGradients）。
码上飞扬·2024-09-01 23:57

梯度下降法

梯度下降法，最通俗易懂的解释。
小丹丹的梦想后花园·2024-09-01 14:19

基于Python的机器学习系列（18）：梯度提升分类（Gradient Boosting Classification）

简介梯度提升（GradientBoosting）是一种集成学习方法，通过逐步添加新的预测器来改进模型。在回归问题中，我们使用梯度来最小化残差。
会飞的Anthony·2024-09-01 12:50

深度学习速通系列:梯度消失vs梯度爆炸

梯度消失和梯度爆炸是深度学习中训练深层神经网络时常见的两个问题，它们影响网络的训练过程和性能。
Ven%·2024-08-31 23:31

Datawhale X 李宏毅苹果书 AI夏令营 进阶 Task2-自适应学习率+分类

.自适应学习率1.1AdaGrad1.2RMSProp1.3Adam1.4学习率调度1.5优化策略的总结2.分类2.1分类与回归的关系2.2带有softmax的分类2.3分类损失1.自适应学习率传统的梯度下降方法在优化过程中常常面临学习率设置不当的问题
沙雕是沙雕是沙雕·2024-08-31 22:57

水晶手链戴哪只手，投射性吸纳性水晶佩戴禁忌

投射性水晶可以放出能量吸引一些磁场。吸纳性水晶可以吸纳凝聚一些能量。另外根据左进右出的原则，比如要招财可以把黄水晶戴在左手上，要辟邪排浊气的话可以把黑曜石戴右手上。妮妮给大家介绍一下投射性水晶和吸纳
Estelle语歆·2024-08-31 18:48

人生，当选择与正能量的人在一起

人与人之间有着能量的磁场，和正能量的人交往，能被他的积极向上所感染，心情也会变得阳光开朗，对生活充满信心。与负能量的人交往，整天萦绕在耳边的是唉声叹气、抱怨不休，不自觉地变得消极、颓废，便越
直着蓝·2024-08-31 11:20

基于Python的机器学习系列（17）：梯度提升回归（Gradient Boosting Regression）

简介梯度提升（GradientBoosting）是一种强大的集成学习方法，类似于AdaBoost，但与其不同的是，梯度提升通过在每一步添加新的预测器来减少前一步预测器的残差。
会飞的Anthony·2024-08-31 09:02

【ShuQiHere】从零开始实现逻辑回归：深入理解反向传播与梯度下降

本文将带你从零开始一步步实现逻辑回归，并深入探讨背后的核心算法——反向传播与梯度下降。逻辑回归的数学基础逻辑回归的目标是找到一个逻辑函数，能够将输入特征映射到一个(0,1)之
ShuQiHere·2024-08-31 02:37

梯度下降算法（Gradient Descent Algorithm）

目录一、梯度下降算法简述二、不同函数梯度下降算法表示1、一元函数2、二元函数3、任意多元函数三、梯度计算四、常见的梯度下降法1、批量梯度下降算法（BatchGradientDescent）2、随机梯度下降算法
海棠未语·2024-08-30 16:35

Halcon滤波器sobel_amp算子

前者用于计算边缘的梯度，后者除了能表示梯度外，还能表示边缘的方向，本文主要介绍sobel_amp算子。下面以一个简单的例子说明
看海听风心情棒·2024-08-30 11:31

Datawhale X 李宏毅苹果书AI夏令营深度学习详解进阶Task02

目录一、自适应学习率二、学习率调度三、优化总结四、分类五、问题与解答本文了解到梯度下降是深度学习中最为基础的优化算法，其核心思想是沿着损失函数的梯度方向更新模型参数，以最小化损失值。
z are·2024-08-30 08:14

【MRI基础】视场FOV基本概念

FOV由成像矩阵的大小和MRI扫描仪梯度线圈的物理尺寸决定。矩阵大小指的是图像中的像素数。FOV和矩阵尺寸之间的关系可以用
医学信号图像玩家·2024-08-30 08:09

Python实现分水岭图像分割算法

目录Python实现分水岭图像分割算法的详细博客一、引言二、分水岭算法的原理三、Python实现分水岭算法四、算法步骤解析1.图像预处理2.计算梯度图像3.阈值分割4.距离变换与标记操作5.分水岭变换五
闲人编程·2024-08-29 16:29

【技术博客】生成式对抗网络模型综述

判别器所作的其实就是一个二分类任务，我们可以计算他的损失并进行反向传播求出梯度，从而
MomodelAI·2024-08-29 13:23

L1正则和L2正则

Hands-OnMachineLearning)上对L1_norm和L2_norm的解释:左上图是L1_norm.背景是损失函数的等高线(圆形),前景是L1_penalty的等高线(菱形),这两个组成了最终的目标函数.在梯度下降的过程中
wangke·2024-08-29 10:19

践行派-365日更（11）

的小日子VianntoViann薇安老师是大咖，真的非常非常有智慧，能够撞名已经觉得是一种缘份，线下交流还很愉悦，真的只能感概，缘份是一种很玄的东西，大千宇宙真的是一个奥妙的能量场，做好自己，创造一个正向的磁场
viann_HK·2024-08-29 08:49

EMGU.CV入门（十四、图像轮廓）

一、轮廓1.1边缘和轮廓的区别边缘：离散的，断开的轮廓：整体的，连续的边缘检测主要是通过一些手段检测数字图像中明暗变化剧烈（即梯度变化比较大）像素点，偏向于图像中像素点的变化。
LyRics1996·2024-08-28 19:30

【ShuQiHere】SGD vs BGD：搞清楚它们的区别和适用场景

在众多优化算法中，梯度下降法是一种最为常见且有效的手段。
ShuQiHere·2024-08-28 13:20

【学习笔记】第三章深度学习基础——Datawhale X李宏毅苹果书 AI夏令营

局部极小值与鞍点梯度为0的点我们统称为临界点，包括局部极小值、鞍点等局部极小值和鞍点的梯度都为0，那如何判断呢？先请出我们损失函数：L(θ)，θ是模型中的参数的取值，是一个向量。
MoyiTech·2024-08-28 11:38

反向传播算法：深度神经网络学习的核心机制

反向传播算法的基本概念反向传播算法结合了梯度下降优化和链式法则，通过计算损失函数关于网络参数的梯度来更新网络权重。1.损失函数
2402_85758936·2024-08-28 08:22

骨子里瞧不起你的人才会有这样的表现，遇到就离他远点

第一种，磁场跟你相反，让你感觉不舒服的人。有些人你不喜欢人家也就算了，还瞧不起人家，说话尖酸刻薄，还想方设法虐待人家。要懂得离这种小人远一点，别中了他的圈套。天外有天，人外有人，你凭什么瞧不起人家。
喜欢孤独的小女人·2024-08-27 23:55

【机器学习】梯度下降算法

梯度下降算法这篇博客更加详细，以下只是我个人的理解梯度下降算法原理讲解——机器学习-CSDN博客梯度下降算法是一种优化算法，通过梯度下降找到函数最小值时的自变量值。
de-feedback·2024-08-27 18:50

神经网络深度学习梯度下降算法优化

【神经网络与深度学习】以最通俗易懂的角度解读[梯度下降法及其优化算法]，这一篇就足够（很全很详细）_梯度下降在神经网络中的作用及概念-CSDN博客https://blog.51cto.com/u_15162069
海棠如醉·2024-08-27 15:00

局部极小值与鞍点 Datawhale X 李宏毅苹果书 AI夏令营

当参数对损失微分为零的时候，梯度下降就不能再更新参数了，训练就停下来了，损失不再下降了，此时梯度接近于0。我们把梯度为零的点统称为临界点（criticalpoint）。
千740·2024-08-27 09:23

24.8.24学习心得

x.grad.zero_()y=x.sum()y.backward()x.gradtensor([1.,1.,1.,1.])因为y是x中所有元素的总和，所以x的每个元素对y的贡献都是相等的，因此每个元素的梯度都是
kkkkk021106·2024-08-27 05:00

OpenCV中的轮廓检测cv2.findContours()

文章目录前言一、查找轮廓二、绘制轮廓轮廓面积轮廓周长前言轮廓提取的前提，将背景置为黑色，目标为白色（利用二值化或Canny）边缘检测，例如Canny等，利用梯度变化，记录图像中的边缘像素点，返回和源图片一样尺寸和类型的边缘图
Limiiiing·2024-08-27 05:58

人工神经网络通过调整,神经网络怎么调参数

现在一般求解权值和阈值，都是采用梯度下降之类的搜索算法（梯度下降法、牛顿法、列文伯格-马跨特法、狗腿法等等），这些算法会先初始化一个解，在这个解的基础上，确定一个搜索方向和一个移动步长（各种法算确定方向和步长的方法不同
小浣熊的技术·2024-08-27 04:20

深度学习多GPU训练原理

每个GPU根据自己所分到的数据，计算本地梯度所有GPU的本地梯度相加（这里的梯度只是模型参数的梯度，不包括中间变量的梯度），得到总的梯度。
浦东新村轱天乐·2024-08-25 22:31

LSTM--概念、作用、原理、优缺点以及简单的示例代码

RNN在处理长序列时，由于梯度消失或梯度爆炸问题，难以捕捉到长期依赖关系，而LSTM通过引入“记忆单元”（memorycell）和“门控机制”（gatin
Ambition_LAO·2024-08-25 21:28

基于单片机的金属探测器设计与实现-嵌入式毕业设计

本文设计的金属探测是根据电磁感应原理制成的，将一金属置于变化的磁场当中时，根据电磁感应原理就会在金属内部产生涡流，涡流产生的磁场反过来又影响原
启初科技·2024-08-25 20:20

机器学习——逻辑回归

目录一、逻辑回归1.1、模型原理1.2、损失函数二、实例2.1、定义sigmoid函数2.2、数据集2.3、梯度上升算法2.4、预测函数2.5、绘画函数三、代码运行结果：四、总结优点：缺点：一、逻辑回归逻辑回归是一种广义的线性回归分析模型
wsdswzj·2024-08-25 17:06

机器学习最优化方法之梯度下降

1、梯度下降出现的必然性利用最小二乘法求解线性回归的参数时，求解的过程中会涉及到矩阵求逆的步骤。随着维度的增多，矩阵求逆的代价会越来越大，而且有些矩阵没有逆矩阵，这个时候就需要用近似矩阵，影响精度。
whemy·2024-08-25 17:45

深度学习（十一）：YOLOv9之最新的目标检测器解读

物体检测技术的飞跃发展1.1YOLOv9简介1.2YOLOv9的核心创新1.2.1信息瓶颈:神经网络在抽取相关性时的理论边界1.2.2可逆函数:保留完整的信息流1.2.3对轻型模型的影响：解决信息丢失1.2.4可编程梯度信息
从零开始的奋豆·2024-08-25 13:39

粒子群优化算法和强化算法的优缺点对比，以表格方式进行展示。详细解释

以下是它们的优缺点对比，以表格的形式展示：特性粒子群优化算法（PSO）强化学习算法（RL）算法类型优化算法学习算法主要用途全局优化问题，寻找最优解学习和决策问题，优化策略以最大化长期奖励计算复杂度较低，通常不需要梯度信息
资源存储库·2024-08-25 09:44

matlab实现梯度下降优化算法

梯度下降（GradientDescent）是一种常用的优化算法，用于寻找函数的局部最小值。在机器学习领域，它常被用来优化模型的参数，比如线性回归、逻辑回归以及神经网络等模型的权重和偏置。
孺子牛 for world·2024-08-25 09:13

爱的磁场

2.10班一直被一种浓浓的爱包围，这几天爱的传递迅速蔓延。别的班级还没行动的时候，我们已率先完成元旦板块的布置，得力于大爱的家长们和两位李老师的洞察力。图片发自App遗憾的是我没参与其中，因为年末的缘故，总结、报告写个不停。心里小小的愧疚，特别是可宝回来后的一句:妈妈你怎么不去布置？让我愧疚增加。妈妈下次一定一定再忙也要过去。看到昨晚李老师的及作业要求，还有孩子们的日记，我内心的感动无法言语。自己
可爱的宝·2024-08-24 17:34

数学基础 -- 梯度下降算法

梯度下降算法梯度下降算法（GradientDescent）是一种优化算法，主要用于寻找函数的局部最小值或全局最小值。它广泛应用于机器学习、深度学习以及统计学中，用于最小化损失函数或误差函数。
sz66cm·2024-08-24 15:25

晨起碎碎念

人与人之间有着能量的磁场，和正能量的人交往，能被他的积极向上所感染，心情也会变得阳光开朗，对生活充满信心。所以选择与正能量的人在一起，真的很重要。
高崖小秦·2024-08-24 14:47

Python(PyTorch)物理变化可微分神经算法

要点使用受控物理变换序列实现可训练分层物理计算|多模机械振荡、非线性电子振荡器和光学二次谐波生成神经算法验证|训练输入数据，物理系统变换产生输出和可微分数字模型估计损失的梯度|多模振荡对输入数据进行可控卷积
亚图跨际·2024-08-24 07:35

pytorch深度学习基础 7（简单的的线性训练，SGD与Adam优化器）

接下来小编来讲一下一些优化器在线性问题中的简单使用使用，torch模块中有一个叫optim的子模块，我们可以在其中找到实现不同优化算法的类SGD随机梯度下降基本概念定义：随机梯度下降（SGD）是一种梯度下降形式
不是浮云笙·2024-08-24 05:49

pytorch中的zero_grad()执行时机

在反向传播(backward())前执行即可zero_grad()用以清除优化器的梯度对张量执行backward(),以计算累积梯度执行optimizer.step(),优化器使用梯度更新参数当优化器更新完成
TomcatLikeYou·2024-08-24 05:16
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他