循环神经网络第2页

【论文精读】Transformer

摘要以往的循环神经网络如LSTM和GRU，在序列建模和翻译问题中已经成为最先进的方法，但由于其循环结构，导致无法并行化计算，且难以对长序列的全局关系建模。

None-D·2024-02-11 15:40

【读点论文】A Survey on Vision Transformer,2022年华为诺亚最新综述研究，从发展到任务，整体到局部。ViT有研究价值在于有很多问题还没有解决，真理是阶段性的产物

在各种可视化基准测试中，基于transformer的模型的性能类似于或优于其他类型的网络，如卷积和循环神经网络。由于transformer具有较高的性能

羞儿·2024-02-10 13:02

深度学习自然语言处理（NLP）模型BERT：从理论到Pytorch实战

文章目录深度学习自然语言处理（NLP）模型BERT：从理论到Pytorch实战一、引言传统NLP技术概览规则和模式匹配基于统计的方法词嵌入和分布式表示循环神经网络（RNN）与长短时记忆网络（LSTM）Transformer

星川皆无恙·2024-02-10 07:43

MATLAB实现LSTM时间序列预测

其作为循环神经网络（RNN）的特殊形式，继承了循环神经网络的优点。首先，利用记忆机制，可以有效提取时间序列数据的时间依赖性。其次，在模型训练时，学习到的权重参数在时间步骤之间是共

AI Dog·2024-02-10 06:57

深度学习在农作物病虫害识别中应用

深度学习在农作物病虫害识别中应用在农作物病虫害识别中，常用的深度学习模型还包括循环神经网络(RNN)和长短期记忆网络(LSTM)等。

yhbbobo·2024-02-09 22:56

深度学习入门笔记（八）可以不断思考的模型：RNN与LSTM

8.1循环神经网络RNN之前学到的CNN和全连接，模型的输入数据之间是没有关联的，比如图像分类，每次输入的图片与图片之间就没有任何关系，上一张图片的内容不会影响到下一张图片的结果。

zhanghui_cuc·2024-02-09 08:56

刘知远LLM——神经网络基础

Word2Vec例子负采样：循环神经网络RNN门控计算单元GRU长短时记忆网络LSTM遗忘门输入门输出门双向RNN卷积神经网络CNNpytorch实战神经网络基础基本构成全称：人工神经网络。

李日音·2024-02-08 15:43

如何开始深度学习，从实践开始

深入研究神经网络及其架构，如前馈神经网络、卷积神经网络和循环神经网络。探索流行的深度学

skywalk8163·2024-02-08 11:46

基于LSTM模型的时间序列预测（车厢重量预测），Python中Keras库实现LSTM，实现预测未来未知数据,包括参数详解、模型搭建，预测数据

简介LSTM是一种常用的循环神经网络，其全称为“长短期记忆网络”（LongShort-TermMemoryNetwork）。

Uncle_Tom09·2024-02-08 02:29

【前沿技术杂谈：深度学习新纪元】探索人工智能领域的革命性进展

前沿技术杂谈：深度学习新纪元】探索人工智能领域的革命性进展深度学习的进展深度学习的基本原理和算法深度学习的历史发展神经网络的基本构成神经元层次结构激活函数关键技术和算法反向传播算法卷积神经网络（CNN）循环神经网络

jcfszxc·2024-02-08 02:48

深度 | 从各种注意力机制窥探深度学习在NLP中的神威

它们可以实现语言建模、情感分析、机器翻译、语义解析等非常多的任务，这些序列建模任务可以使用循环神经网络、卷积神经网络甚至近来比较流行的Transformer。

机器学习算法那些事·2024-02-07 12:18

神经网络 | CNN 与 RNN——深度学习主力军

本文主要将卷积神经网络（CNN）和循环神经网络（RNN）这两个深度学习主力军进行对比。我们知道，从应用方面上来看，CNN用于图像识别较多，而RNN用于语言处理较多。

半亩花海·2024-02-07 07:18

NLP_循环神经网络(RNN)

文章目录RNN结构RNN实战RNN小结RNN结构NPLM在处理长序列时会面临一些挑战。首先，由于它仍然是基于词的模型，因此在处理稀有词汇或者词汇表外的词汇时效果不佳。其次，NPLM不能很好地处理长距离依赖关系。而上面这两个局限，恰恰就是RNN的优势。RNN的核心思想是利用“循环”的机制，将网络的输出反馈到输入，这使得它能够在处理数据时保留前面的信息，从而捕获序列中的长距离依赖关系，在处理序列数据，

you_are_my_sunshine*·2024-02-07 07:40

大白话介绍循环神经网络

循环神经网络实质为递归式的网络，它在处理时序任务表现出优良的效果，毕竟递归本来就是一步套一步的向下进行，而自然语言处理任务中涉及的文本天然满足这种时序性，比如我们写字就是从左到右一步步来的鸭，刚接触深度学习的友友们

浅白Coder·2024-02-06 17:23

基于BiLSTM-CRF模型的分词、词性标注、信息抽取任务的详解，侧重模型推导细化以及LAC分词实践

基于BiLSTM-CRF模型的分词、词性标注、信息抽取任务的详解，侧重模型推导细化以及LAC分词实践1.GRU简介GRU（GateRecurrentUnit）门控循环单元，是[循环神经网络]（RNN）的变种种

汀、人工智能·2024-02-06 06:51

「深度学习」循环神经网络RNN

一、序列模型的例子二、数学符号定义X^{(i)}：训练样本i的输入序列的第t个元素。T_{X}^{i}：训练样本i的输入序列的长度。Y^{(i)}：训练样本i的输出序列的第t个元素。T_{Y}^{i}：训练样本i的输出序列的长度。三、举例：识别人名【输入和输出序列长度相同】1、数据表示准备Vocabulary/Dictionary将所有要用到的单词放在一起，做成清单——将每个单词用一位one-ho

Sternstunden·2024-02-06 06:50

动手学深度学习-13 循环神经网络进阶

循环神经网络进阶GRURNN存在的问题：梯度较容易出现衰减或爆炸（BPTT）⻔控循环神经⽹络：捕捉时间序列中时间步距离较⼤的依赖关系•重置⻔有助于捕捉时间序列⾥短期的依赖关系；•更新⻔有助于捕捉时间序列

Xavier学长·2024-02-06 00:52

深度学习--循环神经网络

目录第1关：学习单步的RNN：RNNCell第2关：探幽入微LSTM第3关：进阶RNN:学习一次执行多步以及堆叠RNN的构建第1关：学习单步的RNN：RNNCell本关任务：学习RNN循环神经网络的基本概念

粥粥粥少女的拧发条鸟·2024-02-06 00:18

深度学习之循环神经网络进阶

这一讲我们学习如何实现一个循环神经网络的分类器：我们要解决的问题是名字分类，我们根据名字找到其对应的国家。上一讲我们介绍了循环神经网络。

丘小羽·2024-02-06 00:47

深度神经网络的训练过程,深度神经网络如何训练

为期5周的课程学习中，你将全面了解AI深度学习的相关知识，掌握人工神经网络及卷积神经网络原理、循环神经网络原理、生成式对抗网络原理和深度学习的分布式处理，并应用于企业级项目实战。

小浣熊的技术·2024-02-05 19:39

深度学习本科课程实验5 循环神经网络

循环神经网络实验任务内容理解序列数据处理方法，补全面向对象编程中的缺失代码，并使用torch自带数据工具将数据封装为dataloader分别采用手动方式以及调用接口方式实现RNN、LSTM和GRU，并在至少一种数据集上进行实验从训练时间

11egativ1ty·2024-02-05 19:31

循环神经网络（RNN）简介与应用

循环神经网络（RNN）简介与应用一、RNN基本概念二、RNN原理解析2.1RNN网络结构RNN网络主要组件输入层(Input)，隐藏层(HiddenState)，输出层(Output)循环单元(RecurrentUnit

kadog·2024-02-05 17:33

全面探索 TensorFlow 中的 tf.keras.layers.RNN 类及其在循环神经网络中的应用

tf.keras.layers.RNN类在TensorFlow中是实现循环神经网络（RNN）的一种灵活且强大的方式。这个类允许在神经网络模型中构建和操作RNN层，提供多种选项以满足特定需求。

程序员Chino的日记·2024-02-05 08:57

计算机设计大赛深度学习大数据股票预测系统 - python lstm

文章目录0前言1课题意义1.1股票预测主流方法2什么是LSTM2.1循环神经网络2.1LSTM诞生2如何用LSTM做股票预测2.1算法构建流程2.2部分代码3实现效果3.1数据3.2预测结果项目运行展示开发环境数据获取最后

iuerfee·2024-02-05 02:25

Ai 算法之Transformer 模型的实现: 一、Input Embedding模块和Positional Embedding模块的实现

一文章生成模型简介比较常见的文章生成模型有以下几种：RNN：循环神经网络。可以处理长度变化的序列数据，比如自然语言文本。

千年奇葩·2024-02-04 21:38

RNN的具体实现

这篇文章真的巨好，特别适合新手做复现Pytorch循环神经网络（RNN）快速入门与实战_torchrnn-CSDN博客

conch0329·2024-02-04 20:56

RNN(神经网络)

目录介绍：数据：模型：预测：介绍：RNN，全称为循环神经网络（RecurrentNeuralNetwork），是一种深度学习模型，它主要用于处理和分析序列数据。

取名真难.·2024-02-04 17:47

李沐《动手学深度学习》循环神经网络经典网络模型

丁希希哇·2024-02-04 14:43

人工智能深度学习发展历程-纪年录

时间重大突破模型改进详细信息1847SGD随机梯度下降1995SVM支持向量机1982RNN循环神经网络，序列模型1986反向传播1997LSTM长短期时间记忆1998Lenet-5首次应用于手写识别2001

犟小孩·2024-02-03 19:37

解释对话对齐机制

这可以通过编码器、循环神经网络（RNN）或其他序列建模技术来实现。2.对话历

andeyeluguo·2024-02-03 13:27

神经网络模型设计的方法和技巧

选择合适的模型架构：根据问题类型选择基础模型结构，例如卷积神经网络（CNN）用于图像识别，循环神经网络（RNN）、长短时记忆网络（LSTM）或门控循环单元（GRU）用于序列数据处理，Trans

科学禅道·2024-02-03 11:56

深度学习的进展

深度学习的核心是神经网络，包括卷积神经网络（CNN）、循环神经网络（RNN）等，这些网络通过不断地学习和优化，逐渐提高对输入数据的理解和处理能力。深度学习的应用范围十分广泛

佛系爱学习·2024-02-03 07:16

循环神经网络RNN以及实战对话机器人-王而川-专题视频课程

循环神经网络RNN以及实战对话机器人—282人已学习课程介绍本次课程主要讲解1：文本理解和文本生成问题、2：标准RNN模型、BPTT算法、3：TensorFlow实现正弦序列预测、4：LSTM模型以及其他

王而川·2024-02-03 02:13

TensorFlow系列专题（九）：常用RNN网络结构及依赖优化问题

一、常用的循环神经网络结构前面的内容里我们介绍了循环神经网络的基本结构，这一小节里我们介绍几种更常用的循环神经网络的结构。

weixin_33734785·2024-02-03 02:13

循环神经网络RNN专题（01/6）

循环神经网络（

无水先生·2024-02-03 02:43

深度学习之循环神经网络

前言卷积神经网络CNN在图象处理领域起到了重要的作用,在自然语言处理中还要看循环神经网络RNN,RNN对具有序列特性的数据非常有效，它能挖掘数据中的时序信息以及语义信息.为什么要发明循环神经网络我们先来看一个

懒猫gg·2024-02-02 22:19

PyTorch RNN Regression

循环神经网络RNN及时预测时间序列.更多可以查看官网:*PyTorch官网载入数据假设想要用sin的曲线预测出cos的曲线.imageimporttorchfromtorchimportnnfromtorch.autogradimportVariableimportnumpyasnpimportmatplotlib.pyplotasplttorch.manual_seed

Jancd·2024-02-02 19:56

详解Keras3.0 Layer API: Base RNN layer

False,go_backwards=False,stateful=False,unroll=False,zero_output_for_mask=False,**kwargs)参数说明cell:这是循环神经网络的单元类型

缘起性空、·2024-02-02 09:08

面试了字节大模型算法岗(实习)，快被问哭了。。。。

传统的seq2seq模型使用循环神经网络（RN

深度学习算法与自然语言处理·2024-02-02 01:59

NLP任务之Named Entity Recognition

深度学习的实现方法：双向长短期记忆网络（BiLSTM）:BiLSTM是一种循环神经网络（RNN）的变体，能够捕捉序列数据中的长期依赖关系。

sunshine2853·2024-02-01 21:27

应用keras建立ANN模型.

它提供了一系列高层次的构建模块，可以快速创建各种类型的神经网络模型，如全连接神经网络、卷积神经网络和循环神经网络等。K

取名真难.·2024-02-01 07:34

深度学习之循环神经网络（基础）

循环神经网络简称为RNN，（之前讲到的卷积神经网络简称为CNN）。以前我们在使用全链接网络的时候，我们将这种网络叫做Dense或者是Deep。Dense链接指的是全链接的。

丘小羽·2024-02-01 02:04

【Time Series】LSTM代码实战

二、算法原理长短期记忆网络（LSTM）是一种特殊的循环神经网络（RNN），用于处理和预测序列数据的时间依赖性。

BoostingIsm·2024-01-31 19:14

RNN预测下一句文本简单示例

RNN（RecurrentNeuralNetwork，循环神经网络）是一种用于处理序列数据的强大神经网络模型。与传统的前馈神经网络不同，RNN能够通过其循环结构捕获序列内部的时间依赖性或顺序信息。

木下瞳·2024-01-29 08:43

自然语言处理的发展

循环神经网络通过捕捉序列信息，在NLP领域中取得了巨大的成功。Transform

Dxy1239310216·2024-01-28 01:04

《自然语言处理的前沿探索：深度学习与大数据引领技术风潮》

词嵌入、循环神经网络（RNN）、Transformer、以及注意力机制等技术成为自然语言处理的引擎，驱动着计算机更好地理解和生成人类语言。

清水白石008·2024-01-28 00:05

五大自然语言处理技术里程碑浅析

而自然语言处理的研究与业界发展中具有五大里程碑式的技术：词嵌入，循环神经网络，Transformer，注意力机制，大语言模型。

Syntax_CD·2024-01-26 21:54

自然语言处理-针对序列级和词元级应用微调BERT

针对序列级和词元级应用微调BERT我们为自然语言处理应用设计了不同的模型，例如基于循环神经网络、卷积神经网络、注意力和多层感知机。

白云如幻·2024-01-26 15:15

#算法#如何手撸自己的模型，培养思维看这一篇就够了！

以下是一般的步骤：选择模型架构：根据任务的性质和数据的特点，选择适当的模型架构，例如选择使用卷积神经网络（CNN）、循环神经网络（RNN）、自注意力机制（Transformer）等。

向日葵花籽儿·2024-01-26 11:52

Tensorflow高阶内容（五）- Deep Learning

Overfitting5.4什么是卷积神经网络CNN(ConvolutionalNeuralNetwork)5.5CNN卷积神经网络15.6CNN卷积神经网络25.7CNN卷积神经网络35.8Saver保存读取5.9什么是循环神经网络

BingshengTian_Mamba·2024-01-26 10:15

推荐频道

循环神经网络